为什么本地Python爬虫就可以一直对某个网站进行爬取,但是部署到宝塔上面就会对访问的频率限制? 我来答 2个回答 #热议# 普通体检能查出癌症吗? 百度网友67c9442 2019-12-29 · TA获得超过3635个赞 知道大有可为答主 回答量:1.2万 采纳率:0% 帮助的人:328万 我也去答题访问个人页 关注 展开全部 本地的发送可以一直对某个网站进行发取,但是部署的话就不行的话,我觉得这个的话就需要你调节一下对象啊 已赞过 已踩过< 你对这个回答的评价是? 评论 收起 YY澳洲店铺 2019-12-31 知道答主 回答量:14 采纳率:100% 帮助的人:3.5万 我也去答题访问个人页 关注 展开全部 是不是爬的太快了,sleep一下,加点randint的参数放入到sleep里面,实在不行就先爬取一部分代理IP,使用代理IP继续爬虫 已赞过 已踩过< 你对这个回答的评价是? 评论 收起 推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询 其他类似问题 2019-12-16 爬虫同一路径在windows就可以获取到数据,但是部署到宝塔上面就会返回一些假的数据? 2020-11-19 Python爬虫如何避免爬取网站访问过于频繁 1 2017-09-01 python爬虫被当做黑客攻击是怎么回事呢 6 2018-08-13 python爬虫遇到有等待响应的网站怎么爬取 1 2018-04-10 Python scrapy爬虫以scrapyd部署到服务器上运行,现在想做一个定时爬取任务该怎样做,scrapyd不支持。 2019-03-12 python爬虫这样子为什么一直爬的是相同的东西,应该怎么爬取其他td标签下的内容? 1 2020-08-14 用Python爬取大众点评时被反爬ip被封怎么办,他总叫我滑动验证但滑动了也没有用。。。求大佬帮忙。。。 1 2017-04-10 写个python 爬虫怎么爬取一个网页上面发现的url链接 8 更多类似问题 > 为你推荐: