我们公司的网站很奇怪，产品页面收录的很好，但是新闻页面一个都没有收录，这是为什么呢
收录了160条左右，但是全部是产品的，没有一条新闻，
你网站的Robots.txt中你的资讯栏目做了禁止爬取。所以你的新闻频道是不会被搜索引擎蜘蛛爬取的。你屏蔽了zixun这个目录。虽然你的网站调用的是，但是你的内容却还在zixun这个目录中，当然不会被搜索引擎收录了。解决方法，把Disallow: /zixun/删除就ok了，删除之后，可能需要半个月左右的时间，才能被索引。
以下是你网站的robots.txt文件内容：
User-agent: *
Disallow: /admin/
Disallow: /Edit/
Disallow: /eWebEditor/
Disallow: /JS/
Disallow: /En/js/
Disallow: /css/
Disallow: /css/Disallow: /css/Disallow: /PublicFiles/Disallow: /js/Disallow: /js/Disallow: /js/Disallow: /js/thickbox_Disallow: /js/Disallow: /js/Disallow: /PublicFiles/js/login_Disallow: /PublicFiles/js/Disallow: /js/Disallow: /js/Disallow: /js/Disallow: /Disallow: /cgi-bin/
Disallow: /en/css/Disallow: /en/css/Disallow: /en/PublicFiles/Disallow: /en/js/Disallow: /en/js/Disallow: /en/js/Disallow: /en/js/Disallow: /en/js/thickbox_Disallow: /en/js/Disallow: /en/PublicFiles/js/login_Disallow: /en/PublicFiles/js/Disallow: /en/js/Disallow: /en/js/Disallow: /en/js/Disallow: /zixun/
楼上正解！建议将新闻栏目目录名称修改，如果修改Robots.txt的话，百度反映很慢！
###产品需求比新闻需求高
新闻量多质底互联网大量反复转载
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/18952.html
