python 爬虫如何设置爬取一定时间停止

一个网站,假设有1W个页面,每次爬取1个小时,暂停60秒,再接着爬,这种逻辑怎么写?... 一个网站,假设有1W个页面,每次爬取1个小时,暂停60秒,再接着爬,这种逻辑怎么写? 展开
 我来答
职业人和培训师
2018-01-19 · TA获得超过1399个赞
知道小有建树答主
回答量:428
采纳率:90%
帮助的人:111万
展开全部
from time import sleep

n = 0
while n <= 100:
    print(n)  # 动作
    sleep(60)  # 暂停60秒
    n = n + 1
ferjae
2018-04-14
知道答主
回答量:2
采纳率:0%
帮助的人:1881
展开全部
time模块可以获取当前时间,用两个时间段的差值,如果为60秒就停一下,应该可以实现。
import time
start=time.time()
while 1:
end=time.tim()
value=round(start-end)
#这个函数可以把浮点数化为指定数字,括号内第二个参数可以指定精确到小数点后几位
if value%60==0:
time.sleep(1)#暂停一秒
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
收起 1条折叠回答
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式