请教z-blogPHP的robots.txt文件的写法
最近做了个博客,据说robots.txt文件可以引导搜索引擎蜘蛛抓取,有些问题请教:1、发表的文章内容是存放在哪个文件夹?在网上查找了相关资料,有人说是在zb_users...
最近做了个博客,据说robots.txt文件可以引导搜索引擎蜘蛛抓取,有些问题请教:
1、发表的文章内容是存放在哪个文件夹?在网上查找了相关资料,有人说是在zb_users/data里面,可看到很多前辈的robots里面却是禁止抓取Disallow:/zb_users/data,所以有疑问
2、也看到有人回复说把主目录的两个文件夹封了就好了,即是Disallow:/zb_system/和Disallow:/zb_users/,那是否意味着这是把整个站都屏蔽了抓取了呢?当然在根目录下面还有1个文件夹logreport和三个文件feed.php、index.php、search.php
3、是否有Z-blogPHP的robots.txt参考写法?
以上请高手指点!因为问的问题较多,目前仅剩20的财富值了!多谢! 展开
1、发表的文章内容是存放在哪个文件夹?在网上查找了相关资料,有人说是在zb_users/data里面,可看到很多前辈的robots里面却是禁止抓取Disallow:/zb_users/data,所以有疑问
2、也看到有人回复说把主目录的两个文件夹封了就好了,即是Disallow:/zb_system/和Disallow:/zb_users/,那是否意味着这是把整个站都屏蔽了抓取了呢?当然在根目录下面还有1个文件夹logreport和三个文件feed.php、index.php、search.php
3、是否有Z-blogPHP的robots.txt参考写法?
以上请高手指点!因为问的问题较多,目前仅剩20的财富值了!多谢! 展开
1个回答
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询