http://www.aikailian.com/[?] 我这网站很长时间没有收录了,不知道哪里出了问题,并且蜘蛛抓取频次很少,要怎么提高抓取频次和索引量呢,有哪位大神能帮看看吗
文章质量高起来 外链发起来 多交换些高质量的友链
###正常情况下,新站的外链数量决定了蜘蛛的爬取频率,而文章质量决定了索引数量。
###发文章,发外链,要坚持,有规律的更新
###1、URL静态化;层级不多,内容不多用静态生成页面即可;
2、404页面可做下,后期修改URL,自然会产生404页面;
3、标题规划,你要是官网,首页表明即可,不必在内页都出现官网二字;
4、收录问题,只要没Robots屏蔽蜘蛛来爬,影响因素就是提交、内容质量、整站页面权重的分配;
5、你的资讯标题规划:资讯标题+栏目标题+首页标题,这种不友好,建议标题格式:资讯标题或资讯标题+品牌词;
收录问题:信任度+页面质量+提交、提交、提交
提高质量吧
###提高网站内容质量 然后做些外链引蜘蛛来爬
###正常更新文章就行,然后做百度站的主动推送,剩下的就随缘吧
###多更新内容,然后买点友情还上,每天提交站长平台推送
###一、查看百度蜘蛛是否抓取页面的方法
这就要查看它的日记文件,一般是以log为后缀。百度蜘蛛是百度用于抓取网页的程序叫,我们查看网站被百度抓取的情况主要是分析,网站日志里百度蜘蛛Baiduspider的活跃性:抓取频率,返回的 H T T P 状态码。
查看日志的方式:
通过 F T P ,在网站根目录找到一个日志文件,文件名一般包含log,下载解压里面的记事本,这即是网站的日志,记录了网站被访问和操作的情况。
因为各个服务器和主机的情况不同,不同的主机日志功能记录的内容不同,有的甚至没有日志功能。
分析:
GET /bbs/ 代表,抓取/bbs/ 这个页面。
200 代表成功抓取。
8450 代表抓取了8450个字节。
如果你的日志里格式不是如此,则代表日志格式设置不同。
很多日志里可以看到 200 0 0和200 0 64 则都代表正常抓取。
抓取频率是通过查看每日的日志里百度蜘蛛抓取次数来获知。抓取频率并没有一个规范的时间表或频率数字,我们一般通过多日的日志对比来判断。当然,我们希望百度蜘蛛每日抓取的次数越多越好。
二、百度蜘蛛不抓取页面的解决方法
1.网站及页面权重。
这个肯定是首要的了,权重高、资格老、有权威的网站蜘蛛是肯定特殊对待的,这样的网站抓取的频率非常高,而且大家知道搜索引擎蜘蛛为了保证高效,对于网站不是所有页面都会抓取的,而网站权重越高被爬行的深度也会比较高,相应能被抓取的页面也会变多,这样能被收录的页面也会变多。
2.网站的更新频率。
蜘蛛每次爬行都会把页面数据存储起来。如果第二次爬行发现页面与第一次收录的完全一样,说明页面没有更新,蜘蛛也就没有必要经常抓取了。页面内容经常更新,蜘蛛就会更加频繁的访问页面,但是蜘蛛不是你一个人的,不可能就在这蹲着等你更新,所以我们要主动向蜘蛛示好,有规律的进行文章更新,这样蜘蛛就会根据你的规律有效的过来抓取,不仅让你的更新文章能更快的抓取到,而且也不会造成蜘蛛经常性的白跑一趟。
3.文章的原创性。
优质的原创内容对于百度蜘蛛的诱惑力是非常巨大的,蜘蛛存在的目的就是寻找新东西,所以网站更新的文章不要采集、也不要每天都是转载,我们需要给蜘蛛真正有价值的原创内容,蜘蛛能得到喜欢的,自然会对你的网站产生好感,经常性的过来觅食。
4.内链建设。梦魇教程网
蜘蛛的爬行是跟着链接走的,所以内链的合理优化可以要蜘蛛抓取到更多的页面,促进网站的收录。内链建设过程中要给用户合理推荐,除了在文章中增加锚文本之外,可以设置相关推荐,热门文章,更多喜欢之类的栏目,这是很多网站都在利用的,可以让蜘蛛抓取更大范围的页面。
5.首页推荐。
首页是蜘蛛来访次数最多的页面,也是网站权重最高的页面,可以在首页设置更新版块,这样不仅能让首页更新起来,促进蜘蛛的来访频率,而且可以促进更新页的抓取收录。同理在栏目页也可以进行此操作。
6.检查死链,设置404页面
搜索引擎蜘蛛是通过链接来爬行搜索,如果太多链接无法到达,不但收录页面数量会减少,而且你的网站在搜索引擎中的权重会大大降低。蜘蛛在遇见死链就像进了死胡同,又得折返重新来过,大大降低蜘蛛在网站的抓取效率,所以一定要定期排查网站的死链,向搜索引擎提交,同时要做好网站的404页面,告诉搜索引擎错误页面。
7.检查Robots文件
很多网站有意无意的直接在robots文件屏蔽了百度或网站部分页面,却整天在找原因为什么蜘蛛不来抓取我的页面,这能怪百度吗?你都不让别人进门了,百度是怎么收录你的网页?所以有必要时常去检查一下网站robots文件是否正常。
8.建设网站地图。
搜索引擎蜘蛛非常喜欢网站地图,网站地图是一个网站所有链接的容器。很多网站的链接层次比较深,蜘蛛很难抓取到,网站地图可以方便搜索引擎蜘蛛抓取网站页面,通过抓取网站页面,清晰了解网站的架构,所以建设一个网站地图不仅提高抓取率还能获得蜘蛛好感。
继续努力
###外链太少了,建议到分类目录导航类的网站提交下,一般快速审核都是5到20左右一个,有套餐,200左右的套餐就能买到些不错的外链了
###1.你的网站的整体标题都有问题,建议参考百度的标题规范
2.网站的链接是动态链接,建议统一改成静态链接或者伪静态
3.定时更新高质量的内容
4.做好外链,友链
5.做好百度链接提交等工作
###继续做内容,发外链吧
### 修改成伪静态或者静态
规律更新,法外链
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/127612.html