[导读]：蜘蛛访问返回404状态码的页面排名第一的一直是robots文本，如图，大家有遇到过这样的情况吗？除了检查服务器，其他还需要做什么措施？ 你做一个Robots.txt 文件，然后通过HT...
蜘蛛访问返回404状态码的页面排名第一的一直是robots文本，如图，大家有遇到过这样的情况吗？除了检查服务器，其他还需要做什么措施？
你做一个Robots.txt 文件，然后通过HTTP状态码检查下，这个文件返回值是200.
###目录有这个Robots文件 应该出现404啊 复制链接进去看一下是不是路径错了
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/29039.html
