Question

robots.txt文件我自己编写了，也上传到网站根目录了，但为什么访问却出现404页面？

Answer 1

404 not found
未找到该网页，说明此网页已经在服务器被删除或被改名。在安全助手里添加黑名单，把这个网站的网址输入进去。不让他弹出。
404是对NOT FOUND这种错误情况的一个编码，HTTP协议的错误信息在不同软件、不同的语言描述可能不同，但是其代码是统一的，以便浏览器能够正确识别和处理。