seo求禁止百度收录根目录里的一个文件夹的代码
5个回答
2015-10-22 · 知道合伙人互联网行家
关注
展开全部
在做SEO网站优化的时候,如果不想让搜索引擎的蜘蛛抓取收录站内的某个文件夹内容,可以在robots文件中书写相关规范。
例如,不想让搜索引擎收录根目录里的一个文件夹yang,那么相关robots文件的写法如下:
User-agent: *
Disallow: /yang
把这段协议放在txt文件夹中,重命名为robots.txt,然后上传到网站根目录即可!
展开全部
用ftp工具登录服务器,找到根目录下robots.txt
User-agent:baiduspider
Disallow: /yang/
User-agent:baiduspider
Disallow: /yang/
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
User-agent: *
Disallow: /yang/
----------------------------
补充说明:你是针对百度还是所有搜索引擎?上面是针对所有搜索引擎禁止抓取yang目录。
如果只针对百度,那么就把User-agent: *改为User-agent:baiduspider。
另外据说360搜索违反robots协议,不知真假,如果yang目录有敏感内容,建议删掉。
Disallow: /yang/
----------------------------
补充说明:你是针对百度还是所有搜索引擎?上面是针对所有搜索引擎禁止抓取yang目录。
如果只针对百度,那么就把User-agent: *改为User-agent:baiduspider。
另外据说360搜索违反robots协议,不知真假,如果yang目录有敏感内容,建议删掉。
本回答被提问者和网友采纳
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
User-agent: *
Disallow: /yang/
Disallow: /yang/
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
User-agent:baiduspider
Disallow: /yang/
Disallow: /yang/
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询