在我们的论坛上经常会碰到站长们抱怨蜘蛛抓取返回码老是304状态,且抓取的次数越来越少的问题。
搜索引擎为了自身的用户体验,会想尽办法来提高检索调用率、准确性、新鲜度,这将导致引擎不得不把主要的精力放在拥有优质内容源的网站上。惟其如此,搜索结果的质量才能更加符合搜索者的体验。
由此我们联想到:搜索引擎爬虫会更加青睐内容源更新频繁的网站。通过特定时间内对网站抓取返回的状态码来调节对该网站的抓取频繁。若网站在一定时间内一直处于[304:没有变化]的状态,那么引擎爬虫可能会降低对网站的抓取次数。相反,若网站变化的频率非常之快,每次抓取都能获取新版本,那么日积月累,爬虫的回访率也会提高。
对此,你有什么思路来解决?
本文将通过微信平台推送。
304状态码出现过多会造成以下问题
1、网站快照停止
2、收录减少
3、权重下降
那么如何减少304返回码呢?
据我所知,首先内容更新方面要迎合百度蜘蛛,分析日志,把蜘蛛到访的时间记录下来,可以大致得出蜘蛛到访的频率,然后以此为依据,更新文章:一定是原创+转载,不能纯采集。转载也需要最新最好的优质资源。让蜘蛛这个点过来能有吃的。从而返回更多200正常码。
其次呢,最好增加个互动版块,现在大网站基本已经都做了这方面,比如评论、留言等,大网站更新起来变化可能会很小,但是有了这些互动,用户会在上面发些内容,网站会有很多新的东西。如seowhy,就会把最新回复以及问题放在重要位置。
学习了
###学习下
###无论是抓取少还是304,这都是一种现象,并不是问题的原因,假设网站返回的都是200,就能达到提升排名带来流量的目的么?相比之下更应该思考产生304的原因是什么?改304对网站目标能够有什么样的效果?不能忽视整体的目标而强调过程的细节,为了200而去解决304。
304如何产生
服务器为了提高网站访问速度,对之前访问的部分页面制定缓存机制,当客户端在此对这些页面进行请求,服务器会根据缓存内容判断页面与之前是否相同,若相同便直接返回304,此时客户端调用缓存内容,不必进行二次下载,可以说304从某种角度起到了减少服务器带宽并提高蜘蛛爬行效率的作用。
304产生原因
个人只能想到2点:
1.页面更新周期长或不更新
2.纯静态页面或强制生成静态html
304处理思路
1.先对产生304页面进行细分,到底是哪类页面返回了304?这些页面是否应该返回304?
2.这些页面生成的方式是怎样的?是否有更新机制?更新机制是否符合蜘蛛对网站的抓取频率?
3.页面更新区域的位置是否合理?是否位于该页面主要内容的承载区域?
304就是说明,已经get请求了,但是服务器那边没有更新文件,这个是跟服务器有关系了。太多的304,蜘蛛就不会经常来你网站的,影响了排名,
分两个方面走:
一:调整网站的结构,有的一块更新频率太低了,那么就调用一个热门的模块,内链更紧密,一般一个页面占网站信息的30%内容。
二:可能是服务器缓存的问题也是有关系的,IIS服务器的话就在 IIS 配置管理工具里面设置。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/82970.html