首页 > 问答 > 百度蜘蛛总抓取之前网站的内容链接,robots屏蔽也没用,怎么回

百度蜘蛛总抓取之前网站的内容链接,robots屏蔽也没用,怎么回

[导读]:蜘蛛老是抓取之前网站内容的链接,robots屏蔽也没用,可是之前网站我已经都删除了啊? 有些是模拟 百度蜘蛛 ### 反馈一下试试看 ### 反馈提交一下就行了,并且Robots文件传上去...

蜘蛛老是抓取之前网站内容的链接,robots屏蔽也没用,可是之前网站我已经都删除了啊?

有些是模拟百度蜘蛛

###

反馈一下试试看

###

反馈提交一下就行了,并且Robots文件传上去并不会立式生效。有7-14天的周期(依稀记得是),并且生效以后百度并不是对原页面进行删除而是不给索引了而已。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/94794.html