首页 > 问答 > 网站有被收录 但网站内页没发现蜘蛛痕迹,怎回事?

网站有被收录 但网站内页没发现蜘蛛痕迹,怎回事?

[导读]:最近,网站被百度,谷歌及360都有收录网站。但是百度收录一直不好。谷歌和360收录还算正常,通过查看查看网站日志发现:所有蜘蛛只是抓取了网站首页和robots文件,以及一些...

最近,网站被百度,谷歌及360都有收录网站。但是百度收录一直不好。谷歌和360收录还算正常,通过查看查看网站日志发现:所有蜘蛛只是抓取了网站首页和robots文件,以及一些js文件。
如图:



在准备回答问题的时候,看来下夫唯老师的回答,也看到了你发出了网站,打开你网站看来下Robots,感觉没问题。但是当打开你首页的时候是代码调用错误。你网站应该是用.net 做的。直接打开首页就是错误页面。这也可能就是你上面提到的问题最关键的地方了。

###

先删掉Robots.txt
提交去发外链
首页的开头加上网站Sitemap的链接
只抓首页,不抓内页,说明你的首页与内页的链接设置的不好,也可能是你的板块问题。

###

我看了下Robots,里面写的太乱太复杂,那么多的Disallow,小心误伤,如果Disallow的那些对你的网站运营没有问题,可以暂时先不禁止

###

你的Robots.txt检验下,应该没不小心屏蔽了内页吧。
然后在百度站长平台那边提交下Sitemap,列下内页在里面。
然后在站外,给内页做一些引蜘蛛下。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/20989.html