[导读]:如上题主截图,所有的IP地址应该都是百度spadier。 百度蜘蛛真假确定步骤如下: cmd nslookup 空格输入ip 如果返回看到 baidu 的字样 说明是真的 如果不是 说明是假的 题主可以试一...
如上题主截图,所有的IP地址应该都是百度spadier。
百度蜘蛛真假确定步骤如下:
cmd
nslookup 空格输入ip
如果返回看到 baidu 的字样 说明是真的 如果不是 说明是假的
题主可以试一下金花日志分析工具和光年日志分析工具,应该都能正常的显示蜘蛛名称。
我发了现象:蜘蛛爬行浪费在爬行JS文件,建议你把这些js类,404状态码的,304状态码的这些文件设置屏蔽抓取,引导蜘蛛去爬行一些内容文章页面吧。
既然百度蜘蛛来爬行就不能让白来一趟,避免久而久之,蜘蛛就不来了!(采用拟人的比喻)
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/23258.html