scrapy redis中在爬取分页网站怎么重启爬虫之后在下一页继续爬
展开全部
你可以使用scrapy， python的爬虫框架，或者如果你只是抓取比较简单的页面，可以使用requests这个python库，功能也足够用了。 如果解决了您的问题请采纳！ 如果未解决请继续追问
本回答由提问者推荐
已赞过
已踩过<
评论
收起
你对这个回答的评价是？
展开全部
item1 = Item()
yield item1
item2 = Item()
yield item2
req = Request(url='页链接', callback=self.parse)
yield req
yield item1
item2 = Item()
yield item2
req = Request(url='页链接', callback=self.parse)
yield req
已赞过
已踩过<
评论
收起
你对这个回答的评价是？
推荐律师服务：
若未解决您的问题，请您详细描述您的问题，通过百度律临进行免费专业咨询
