首页 > 问答 > 站长平台无法检测到robots.txt

站长平台无法检测到robots.txt

[导读]:求解,百度站长平台检测更新robots.txt为什么显示:百度暂时无法连接您的服务器,请确保您网站的服务器工作正常。确认robots.txt是正常的,而且同一个服务器我还有十来个网站...

求解,百度站长平台检测更新robots.txt为什么显示:百度暂时无法连接您的服务器,请确保您网站的服务器工作正常。确认robots.txt是正常的,而且同一个服务器我还有十来个网站,3个是没有问题的,其他的都没法检测到。防火墙也不可能漏掉那三个啊?谁有办法解决这个问题的,一直困扰很久了。

第一,区域解析出了问题,导致搜素引擎排除的地区蜘蛛没有抓取到。
这种多检测几次。
第二种,服务器根本就不稳定,由于防止的网站众多,线程有限,导致搜素引擎无法链接到服务器。
第三种,剩余网站里面有程序对百度搜素引擎进行了判断,禁止百度搜素引擎访问和链接这几个网站。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/40030.html