robots屏蔽了抓取的链接,提交给百度有用吗?
[导读]:在抓取诊断时,发现http://all.xxxxxx.com/ExamItem/?id=bf6cca5b-55a7-4811-8499-197fe7865961 PC 抓取失败. 我发现我的站robots禁了ExamItem/和BabyShop/抓取,我链接提交到百度那,有用吗 先明说,我没有权...
在抓取诊断时,发现http://all.xxxxxx.com/ExamItem/?id=bf6cca5b-55a7-4811-8499-197fe7865961 PC
抓取失败.
我发现我的站robots禁了ExamItem/和BabyShop/抓取,我链接提交到百度那,有用吗
先明说,我没有权设置robots,我只是发现禁了ExamItem/和BabyShop/抓取,如果我想把ExamItem/和BabyShop/的链接提交到百度那,有用吗
禁用了,你提交也是没用的
###无效
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/39367.html