用scrapy爬虫结合什么第三方解析js动态加载网页比较好
1个回答
展开全部
用scrapy爬虫结合什么第三方解析js动态加载网页比较好
爬虫跟踪下一页的方法是自己模拟点击下一页连接，然后发出新的请求。请看：
item1 = Item()
yield item1
item2 = Item()
yield item2
req = Request(url='下一页的链接', callback=self.parse)
yield req
爬虫跟踪下一页的方法是自己模拟点击下一页连接，然后发出新的请求。请看：
item1 = Item()
yield item1
item2 = Item()
yield item2
req = Request(url='下一页的链接', callback=self.parse)
yield req
本回答由网友推荐
已赞过
已踩过<
评论
收起
你对这个回答的评价是？
推荐律师服务：
若未解决您的问题，请您详细描述您的问题，通过百度律临进行免费专业咨询
