首页 > 问答 > 关于IIS静态化后蜘蛛抓取与快照吐出的问题。求解答。

关于IIS静态化后蜘蛛抓取与快照吐出的问题。求解答。

[导读]:首页,IIS主机静态化后首页和分类页URL的带index.html 和不带 index.html的形式同时存在,分类页面也是同样的情况。而且,百度蜘蛛每次抓取的都是带 index.html的链接。 可是,百度吐...

首页,IIS主机静态化后首页和分类页URL的带index.html 和不带 index.html的形式同时存在,分类页面也是同样的情况。而且,百度蜘蛛每次抓取的都是带 index.html的链接。
可是,百度吐出来的快照都是不带 index.html 的,为什么?

当我建一个站内站的时候。当蜘蛛访问不带 index.html 的目录站的时候会自动 301 重定向到 带 index.html 的域名。而我的各种链接,都是没带 index.html 的。

我并没有做 301 啊,而且浏览器打开也不会301跳,http状态码也是200,可是蜘蛛每次就301到带 index.html 的,再抓取。

这到底什么情况,我要如何应对?

1、有的程序里面有自动设置301定向到 带的 功能
2、在服务器里面IIS有默认首页设置这个选项( 等等) 。例如访问某一域名 , 它默认的就是访问 无论你加不加
3、服务器默认页面问题

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/26912.html