首页 > 问答 > 为什么百度蜘蛛会爬取不存在的页面

为什么百度蜘蛛会爬取不存在的页面

[导读]:查看百度log日志,发现返回几个蜘蛛404状态码,而我检查了下那些页面,根本就不存在。 我的页面一般是这样的:/news_show.asp?id=173 但返回的几个404却是这样的: /news_show.asp%3F...

查看百度log日志,发现返回几个蜘蛛404状态码,而我检查了下那些页面,根本就不存在。

我的页面一般是这样的:/news_show.asp?id=173
但返回的几个404却是这样的:
/news_show.asp%3Fid=67
/news_show.asp%3Fid=41&soft=3
/news_show.asp%3Fid=563

这是什么页面,不懂程序啊,是不是程序程序上的问题。另外,网站是asp的。帮看看着是什么原因。

这些页面之前存在过,蜘蛛爬过并索引写进数据库,现在是回访。
原因可能:
1、可能以前这个域名建过站,现在改版了,这些是改版前存在的页面。
2、原页面文章被删除了。
解决方法:
1、Site看看是否存在这样的页面,如果存在,百度站长工具提交死链删除掉,这种方法比较快。
2、既然返回404了,蜘蛛在一段时间内就不会爬,也会慢慢删除掉这些索引。
时间会解决问题的。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/30593.html