Question

Robots文件，阻止抓取的下面文件，作用是什么？说的详细一些。

User-agent: *
Disallow: /plus/ad_js.php
Disallow: /plus/advancedsearch.php
Disallow: /plus/car.php
Disallow: /plus/carbuyaction.php
Disallow: /plus/shops_buyaction.php
Disallow: /plus/erraddsave.php
Disallow: /plus/posttocar.php
Disallow: /plus/disdls.php
Disallow: /plus/feedback_js.php
Disallow: /plus/mytag_js.php
Disallow: /plus/rss.php
Disallow: /plus/search.php
Disallow: /plus/recommend.php
Disallow: /plus/stow.php
Disallow: /plus/count.php
Disallow: /include
Disallow: /templets
这些文件的作用是什么

Answer 1

这写文件都是一些系统的程序文件，没有排名价值，禁止抓取一个为了减少蜘蛛的抓取压力，二个防止网站的核心文件被索引泄露。最主要就这2个方面！