主页有很多重复页面,怎么在程序上解决?
[导读]:我网站是ASP程序做的,但现在发现百度收录了几个跟主页一样的伪静态页面。 比如我网站地址是:www.abc.net,下面这些页面也是主页的地址:后缀随便改都能访问到主页。 www....
我网站是ASP程序做的,但现在发现百度收录了几个跟主页一样的伪静态页面。
比如我网站地址是:www.abc.net,下面这些页面也是主页的地址:后缀随便改都能访问到主页。
www.abc.net/?thread-32-2.html
www.abc.net/?thread-94-2.html
www.abc.net/?list-3.html
www.abc.net/?list-41-1.html
现在百度收录了我这个网站很多这样的网址,不知道为什么会收录,问下大家怎么解决
@@www.jaguar-compressor.net@@
上面Robots写法不对的,不能那样写。
1、让程序员从程序上修正这个问题,主要解决办法。
2、对于已经被收录的重复URL,可以百度逐渐找出,并一一针对性屏蔽一下,写法如:
User-agent: *
Disallow: /?Disallow: /?Disallow: /?Disallow: /?Disallow: /?Disallow: /?Disallow /?Disallow: /?
从robotx屏蔽你说的这些只是治标的方法,当然现在已经收录这么多了,所以还是需要用robotx来屏蔽掉的,不过要治本还是得从程序上来下手
###Robots里禁止抓取相关url,另外修改一下源代碼,避免重新生成這樣的頁面。
###里禁止抓取相关url,2.快照投诉说明删除原因,3.首页内容做中等规模更新,产生的新快照就和重复页面区别开来,4,观察其它页面是否有同类问题,解决方法同上。
###Robots.txt 里禁止带“?”的URL。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/30787.html