怎么设置百度蜘蛛不抓取首页的部分内容。比如说,我不需要抓取首页上的最新动态里的内容?

怎么在代码里设置,谢谢。... 怎么在代码里设置,谢谢。 展开
 我来答
OAngs
推荐于2017-11-28 · TA获得超过678个赞
知道小有建树答主
回答量:554
采纳率:66%
帮助的人:364万
展开全部
如何禁止百度搜索引擎抓取网站内容
1、编辑robots.txt文件,设计标记为:
User-agent: Baiduspider
Disallow: /

2、在网站首页代码<head>与</head>之间,加入<meta name="Baiduspider" content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。

3、联系百度管理人员,信箱地址为:webmaster@baidu.com,用网站联系人信箱发电邮,如实说明删除网页快照的情况,经百度核实后,网页停止收录抓取。

4、登陆百度自己的“百度快照”帖吧和“百度投诉”帖吧,发个帖子,表明删除网页收录网站快照的原因,当百度管理人员,看到会给予处理。

如何禁止Google搜索引擎收录抓取网站内容
1、编辑robots.txt文件,设计标记为:
User-agent: googlebot
Disallow: /

2、在网站首页代码<head>与</head>之间,加入<meta name="googlebot" content="noarchive">即可禁止google搜索引擎抓取网站并显示网页快照。
追问
不是不让Baiduspider不抓某个页面,而是,不让它抓首页页面上的一个板块……不知道我表述清楚了没有。
追答
.... 那应该没办法吧... 好像不能指定不允许百度抓取某一个标签。
甚坠Au
2013-05-08 · TA获得超过126个赞
知道答主
回答量:296
采纳率:0%
帮助的人:85.4万
展开全部
您尝试分析下到底是什么,为什么不看百度网站捕捉到,因为内容质量,还是因为外链
追问
情况是这样的,我网站首页上的一个板块,这相板块里的内容,我只想呈现出来给用户看,不需要要Baiduspider来爬取它。这样的效果。
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式