Python为什么叫爬虫?

 我来答
爱尚琵琶cp
科技发烧友

2021-11-19 · 有一些普通的科技小锦囊
知道小有建树答主
回答量:1886
采纳率:74%
帮助的人:60.4万
展开全部
爬虫一般是指网络资源的抓取,因为python的脚本特性,python易于配置,对字符的处理也非常灵活,加上python有丰富的网络抓取模块,所以两者经常联系在一起。 简单的用python自己的urllib库也可以;用python写一个搜索引擎,而搜索引擎就是一个复杂的爬虫。从这里你就了解了什么是Python爬虫,是基于Python编程而创造出来的一种网络资源的抓取方式,Python并不是爬虫。
Python为什么适合些爬虫?
1)抓取网页本身的接口
相比与其他静态编程语言,如java,c#,C++,python抓取网页文档的接口更简洁;相比其他动态脚本语言,如perl,shell,python的urllib2包提供了较为完整的访问网页文档的API。(当然ruby也是很好的选择)
此外,抓取网页有时候需要模拟浏览器的行为,很多网站对于生硬的爬虫抓取都是封杀的。这是我们需要模拟user agent的行为构造合适的请求,譬如模拟用户登陆、模拟session/cookie的存储和设置。在python里都有非常优秀的第三方包帮你搞定,如Requests,mechanize
2)网页抓取后的处理
抓取的网页通常需要处理,比如过滤html标签,提取文本等。python的beautifulsoap提供了简洁的文档处理功能,能用极短的代码完成大部分文档的处理。
其实以上功能很多语言和工具都能做,但是用python能够干得最快,最干净。Life is short, u need python.
yudai5518
2021-11-18 · 知道合伙人数码行家
yudai5518
知道合伙人数码行家
采纳数:11526 获赞数:47134
本人在通讯服务行业从事多年,对该行业较为了解。

向TA提问 私信TA
展开全部
爬虫一般是指网络资源的抓取,因为python的脚本特性,python易于配置,对字符的处理也非常灵活,加上python有丰富的网络抓取模块,所以两者经常联系在一起。
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
chxii
2021-11-18 · TA获得超过2846个赞
知道小有建树答主
回答量:2328
采纳率:45%
帮助的人:212万
展开全部
Python是大蟒蛇的释义

Python自带的urllib库,第三方的requests库和Scrappy框架让开发爬虫变得非常容易。

很多人以为Python就是爬虫,爬虫就是Python。其实,虽然两者的发音有点接近,但是它们并不是同一样东西。
本回答被网友采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
rdwerf
2021-11-19 · TA获得超过691个赞
知道小有建树答主
回答量:6236
采纳率:0%
帮助的人:584万
展开全部
Python不叫爬虫,谁告诉你Python叫爬虫的,爬虫是爬虫,Python是Python,爬虫可以用Python写,也可以用别的语言写。Python可以实现爬虫,也可以实现其它功能。
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
帐号已注销
2021-11-19 · 超过21用户采纳过TA的回答
知道答主
回答量:183
采纳率:60%
帮助的人:14.5万
展开全部
没有这个说法,只是广告效果打的比较好,为了卖课而把python和爬虫强行关联起来,如果真的要做爬虫,用一起工具可能会更简单一些。比如八爪鱼,后羿,webscraper,迷你派采集器等,至少不需要学那么多东西。
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
收起 更多回答(6)
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式