GET / HTTP/1.1&a
[导读]:网站日志里有很多的这样的抓取,没有了首页的200码的抓取!! 123.125.71.112 - - [03/May/2014:03:27:16 +0800] "GET / HTTP/1.1" - 499 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/searc...
网站日志里有很多的这样的抓取,没有了首页的200码的抓取!!
123.125.71.112 - - [03/May/2014:03:27:16 +0800] "GET / HTTP/1.1" - 499 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"
请教下,这一句是什么意思?? 499是什么? 怎么也没有啥返回码?
请高手指点下~ 感谢!
499 是比较罕见的状态码。
应该是百度蜘蛛访问超时,主动断掉与服务器的连接。
检查下服务器有无异常。
499 应该是页面大小吧
###楼上正解,不再多做解释,多看看日志文件,就明白了。 。
###你这个是百度的低权重蜘蛛,如果出现大量这个蜘蛛ip,要小心被删收录,甚至降权。
###是百度真实蜘蛛IP
![](https://www.vm7.com/uploads/allimg/200303/18e61e917bbd70763f1e9be4dd14e7cd.jpg)
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/24367.html