如何用scrapy获取div标签下<p>标签中的所有内容
如图。用scrapy获取div标签下<p>标签中的所有的文章正文内容(图片除外),使用xpath。item['content']=sel.xpath('//div[@cl...
如图。用scrapy获取div标签下<p>标签中的所有的文章正文内容(图片除外),使用xpath。 item['content']=sel.xpath('//div[@class="document"]//p//text()').extract()这样只能获取到div下第一个<p></p>中的内容,即“春节回家过年,用什么....朋友亲人分享照片”,不能获取所有的正文在此求教了
展开
1个回答
展开全部
xpath 如果返回的是多个元素的话,比如你这里就是多个<p> 那就要用到循环
content=""
for selector in sel.xpath('//div[@class="document"]//p'):
content=content+ selector.xpath("/text()").extract()
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询