首页 > 问答 > 蜘蛛抓了网站本身不存在的文件,该怎么办?

蜘蛛抓了网站本身不存在的文件,该怎么办?

[导读]:今天看了日志(网站用的dede),发现百度抓了很多不存在的目录,我在ftp找了找,发现并没有这些东西。 而且这些东西,抓取返回的也都是404。见下图: 还是robot解决吧 ### 是...

今天看了日志(网站用的dede),发现百度抓了很多不存在的目录,我在ftp找了找,发现并没有这些东西。

而且这些东西,抓取返回的也都是404。见下图:



还是robot解决吧

###

是不是你这个域名之前用过了,我曾经也遇到过这种情况,提交以下死链吧

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/31354.html