刚刚到新公司，接手公司网站，网站现在的问题 一个框架规划不行，网站栏目页关键词全部给浪费了！准备先治标 再治本，治标是弄文章聚合，然后弄网站栏目页排名！首页改版，增加内页入口！批量手工发布问答！治本就是网站改版！现在网站有个很严重的问题，就是网站每天发布的原创内容蜘蛛完全不爬行，首页有入口！但是蜘蛛完全不爬行！有木有！查看日志百度蜘蛛爬行的都是去年的发布的文章！求大牛一起探讨！@@www.fornow.cn@@

你新添加的文章都在哪些地方展现了？首页有，还有哪些页面?
并不是在首页添加了入口，就能抓取，问题在于你首页每日抓取的频次？

你可以通过日志软件查看下，百度每日抓取最多的页面是哪些，然后在这些页面上展现新发布的文章。

看了下你的思路，确实不错，但这么大的改版，对网站近期会有影响的，长远角度上来讲确实不错，但有些地方还是欠妥，建议不要着急改版，再继续收集问题，把所有问题整合在一起后，再统一改版。

另外，就我了解，现在栏目页获取排名的几率不如之前了。现在排名好的页面一般为专题页面和资源整合的内页。

看了一下贵站，其实蜘蛛爬取不用刻意的去看，而是你的方向和做法需要改善下，首先三个亟待解决的问题：

第一、修补网站漏洞

第二、增加网站相关性外链

第三、更新的文章，请不要复制黏贴，原创的文章要有附加值。

首页要查出是哪方面的问题，如果是技术上的，那你要看Robots.txt是不是屏蔽了蜘蛛的抓取，或者是服务器阻止了蜘蛛的抓取。

如果不是以上原因，你用以下方法：

用百度站长工具