[导读]:我用光年软件拆分,选择的是baiduspider这个条件,但是拆分出来的IP我查询了一下貌似不是百度蜘蛛的IP,求大神解答,多谢了~ 网站日志可以用来查看有多少404,查看网站是否存...
我用光年软件拆分,选择的是baiduspider这个条件,但是拆分出来的IP我查询了一下貌似不是百度蜘蛛的IP,求大神解答,多谢了~
网站日志可以用来查看有多少404,查看网站是否存在问题。不要拿来查看蜘蛛爬行了那个目录,这个没有意义。
因为所有的日志只是根据网上公布的蜘蛛IP做的网站日志,并不是蜘蛛的真正IP。所以看日志的时候要告诉自己,看日志不是看蜘蛛爬行了哪些目录,而是看哪些页面是404,是否存在大问题。
网站日志是蜘蛛访问你网站的记录,记录访问的页面和访问状态。
###可能是站长工具的伪蜘蛛。。。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/31507.html