Python 爬虫为什么只爬取到一个html页中的部分内容

 我来答
旧落黎s
2016-12-07 · 超过30用户采纳过TA的回答
知道答主
回答量:91
采纳率:0%
帮助的人:39.9万
展开全部
有些js加载的内容只要当你的电脑屏幕或者鼠标滑到某个位置时,才会动态加载内容,这些内容不会在源码里体现,而python爬虫只是爬源码而已,如果想满足你的需求,可以试试phantomjs模拟浏览器,祝你成功。

二营长SEO
55120187
2016-11-24 · TA获得超过181个赞
知道小有建树答主
回答量:212
采纳率:0%
帮助的人:142万
展开全部
可能是生成动态页面了,所以只能爬到一部分。
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
徐晓龙老婆
2016-11-24 · TA获得超过553个赞
知道小有建树答主
回答量:614
采纳率:53%
帮助的人:141万
展开全部
说明这个网页里面有js
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
数阔八爪鱼采集器丨RPA机器人
2021-07-28 · 前往八爪鱼RPA应用市场,免费获取机器人
数阔八爪鱼采集器丨RPA机器人
向TA提问
展开全部
考虑下是不是timeout,wait设置长一点试试;还有考虑下数据是不是ajax请求的,是的话还要模拟js
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
收起 1条折叠回答
收起 更多回答(2)
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式