目前的美团存在哪些问题外卖问题

来源：蜘蛛抓取(WebSpider) 时间：2019-01-12 21:35 标签： 目前的美团存在哪些问题

我现在在下载目前的美团存在哪些问题外卖的数据但是出现了三个问题。
一个是餐馆的地址总是变我第一级刚把餐馆的网址列表拿到，第二级就显示我无权访问该网頁
第二个问题是，网页在使用DS打数机抓取时就显示页面不存在但是我用同样的网址拷贝到浏览器中就可以显示，这是不是意味着目前嘚美团存在哪些问题发现我在下数据进行了反爬？
第三个问题是我将网址设置为下级线索，但是当运行上一级线索 时应该自动运行下級线索吧现在却没有自动运行，我是在哪里出错了吗

1、网址变化的情况是目标网站的设置，爬虫这边解决不了的你说的无权访问该網页应该不是网址在变，而是跟第二个问题一样的情况
3、设置了层级采集，两级规则是要分开手工运行的不是自动连贯的。
4、需要更換代理IP了找那种高匿或者独享的。

登录后参与交流、获取后续更新提醒

我要回帖

更多关于 目前的美团存在哪些问题 的文章

 

随机推荐