为什么有些网站要防范网络爬虫

 我来答
zhuojie15
2011-09-26 · TA获得超过369个赞
知道小有建树答主
回答量:468
采纳率:0%
帮助的人:334万
展开全部
我给你分析下吧,因为坦茄有的网站仔核本身资源占用大,而且内容比较原创,不希望被搜索引擎抓取到,因为有时候蜘蛛可以把服务器抓死!还有就是违法的内容,也不喜欢被蜘念信掘蛛抓取,因为那样很容易被抓!
qq1075102502
2011-09-23
知道答主
回答量:19
采纳率:0%
帮助的人:16万
展开全部
不想被指橘搜索引擎收录呗,如你和你唯卜团爱人把你家宝宝的成长日记写下来,让宝宝长大看
一样的,没必要给别人弊握看....
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式