目前网站收录为一万7,收录的页面大部分都是之前的页面,每天编辑更新的页面很少被收录,我应该通过什么方式来提高网站的收录呢,查看了网络日志蜘蛛都是爬取了一些错误的目录与页面,有价值的内页很少爬取,网站站内有一些问题,但是不至于收录情况那么反常。
附截图:
由于蜘蛛在一个网站的停留时间是有限的,你得思考如何引导蜘蛛去爬你想要收录,或者比较有价值的页面。
比如:
1. Robots屏蔽错误页面。
2. 全站Nofollow掉不需要排名收录的页面。
3. 给不需要多次爬取的页面只留一个入口,其他入口的进入该页面的连接全部nofollow掉。
4. 给需要收录的页面提供多入口,提高被搜索引擎发现的机会。比如在首页和列表页加入一个:随机推荐,或者其他人正在看之类的模块,动态显示内容,每次刷新变动。
......
总之就是通过一些标签和robots引导蜘蛛,具体的还得根据的网站的实际情况,思考相应的对策。
前提:你的goods-id有多少呢?
1、收录是否充分?
如果有2万个商品详情页,下架了5000个,那么只有1万5千个,这个时候如果详情页+列表页+文章页,能达到1万7千,可以说收录的也很充分了。建议通过收录批量查询工具统计一下各种页面的收录情况。
2、如何有更多的收录
这个可以通过各种维度进行聚合,目前网站貌似主要是通过品类给商品分类,还可以通过品牌、系列、价格、颜色、用途、场合等各个维度进行聚合,甚至还可以通过条件组合的形式进行聚合。
另外,引导蜘蛛爬取。一方面,为内页提供多个入口;另一方面,解决目前的错误页面问题。
3、如何解决错误页面问题
错误页面一方面浪费蜘蛛的很多时间,另一方面也让蜘蛛对网站有较差的评价。因此,可以通过查看日志,找到那些错误的页面URL,通过站长工具提交给百度;另一方面,如果可以的话,用Robots禁止蜘蛛爬行错误页面。
看九藏天下网可以给你点启发,今年我们的目标是收录100万页面,在没有大量采集,发文章的情况下,通过聚合,从6万的页面量,直线提升到200万收录量,后由于蜘蛛爬行太频繁(百度蜘蛛每秒上百次请求)导致服务器缓慢,最后禁止了百度对六级以下页面抓取,现在收录量稳定在70万页面左右。
###
做好内部,尽量提供内部的收录量
###搜索聚合,找出一些经常会搜索的词语,然后把搜索结果弄一个收录入口,找出一万个这样的词,就有可能多一万个收录。
###我的才几千 也在头疼这件事呢!
###上面贪狼都实际在扯淡。 我给你点实际性的建议,因为我做过独立电商平台。要说增加收录方法实际很多,相信你也懂,但是质量不高。
电商平台提高收录稳定最好方法就是做内部优化, 这是最好的方法。 内部优化怎么做,做新闻,做评论。
最重要的是做商品的扩展度。
觉得有用可以新浪微博 @肖半仙V 也可以百度搜索我博客看看
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/18518.html