首页 > 问答 > 分析网站IIS日志,没有发现蜘蛛爬行某个页面,但是这个页面被

分析网站IIS日志,没有发现蜘蛛爬行某个页面,但是这个页面被

[导读]:分析网站IIS日志,没有发现蜘蛛爬行某个页面,但是这个页面被收录了,是为什么?另外,百度蜘蛛就是不抓取某栏目该怎么办?希望大神门解答一下。 无一例外收录的都是蜘...

分析网站IIS日志,没有发现蜘蛛爬行某个页面,但是这个页面被收录了,是为什么?另外,百度蜘蛛就是不抓取某栏目该怎么办?希望大神门解答一下。

无一例外收录的都是蜘蛛抓取过的,可以把锚文本指向栏目

###

我想,收录了,一定是被爬取过。所以,得从日志的记录以及分析的过程找原因。
一直不被收录的某一个栏目,可以取栏目以及栏目内的文章,在百度站长平台里的抓取诊断那边多抓取几次。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/80623.html