为什么本地Python爬虫就可以一直对某个网站进行爬取,但是部署到宝塔上面就会对访问的频率限制?

 我来答
百度网友67c9442
2019-12-29 · TA获得超过3635个赞
知道大有可为答主
回答量:1.2万
采纳率:0%
帮助的人:328万
展开全部
本地的发送可以一直对某个网站进行发取,但是部署的话就不行的话,我觉得这个的话就需要你调节一下对象啊
YY澳洲店铺
2019-12-31
知道答主
回答量:14
采纳率:100%
帮助的人:3.5万
展开全部
是不是爬的太快了,sleep一下,加点randint的参数放入到sleep里面,实在不行就先爬取一部分代理IP,使用代理IP继续爬虫
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式