python爬虫必知必会的几个工具包

 我来答
潇凉七41
2021-09-23 · 超过16用户采纳过TA的回答
知道答主
回答量:57
采纳率:0%
帮助的人:3.7万
展开全部
基础阶段必须掌握的也是最重要的一个模块叫做requests,是python爬虫功能最强大的发起请求获取数据的模块,包含头信息,cookie以及代理等功能。然后是bs4和xpath模块对爬取的数据进行分析提取,最好掌握一些类似于mongodb数据库持久化存储。最好在掌握一个爬虫框架scrapy,对于爬取大型网站有着很大的帮助,希望可以帮到你
470563152
2018-06-08 · TA获得超过391个赞
知道小有建树答主
回答量:242
采纳率:96%
帮助的人:140万
展开全部
爬虫需要掌握Python基础,re正则模块,Beatifulsoup,pyquery,xpath,selenium,scrapy等一些知识点,能爬取任何网站,包括某宝,某东。一手资料有偿低价给你。
本回答被网友采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式