[导读]:Googlebot 无法访问您的网站 在过去 24 小时内,Googlebot 在尝试访问您的 robots.txt 时遇到了 37 个错误。为确保不会抓取该文件中列出的任何网页,我们推迟了抓取操作。您网站的...
Googlebot 无法访问您的网站
在过去 24 小时内,Googlebot 在尝试访问您的 robots.txt 时遇到了 37 个错误。为确保不会抓取该文件中列出的任何网页,我们推迟了抓取操作。您网站的 robots.txt 总体错误率为 94.9%。
~~~~~~~~~~~~~上面是Google 邮件的内容,下面是robots~~~~~~~~~~~~~~~~~~~~
User-agent: *
Disallow: /admin
Disallow: /protected
Disallow: /editor
Disallow: /editarea
Disallow: /express/list*
Disallow: /.js $
Disallow: /.css $
Disallow: /tag_id
Disallow: /search.html?*
Disallow: /shai/index.html?*
我用工具测试了,但是不知道哪里有错误。
你用谷歌的Robots工具再检查一下看出现什么情况.
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/20149.html