首页 > 问答 > 为何百度蜘蛛总是无法抓取站内搜索的聚合页?

为何百度蜘蛛总是无法抓取站内搜索的聚合页?

[导读]:网站内容量不是很大,想整合一些聚合页来让蜘蛛抓取扩大索引量和收录。 站内有搜索功能,就想这样来聚合一些关键词和标签的页面。但是用百度后台测试了一下抓取诊断、...

网站内容量不是很大,想整合一些聚合页来让蜘蛛抓取扩大索引量和收录。
站内有搜索功能,就想这样来聚合一些关键词和标签的页面。但是用百度后台测试了一下抓取诊断、凡是在搜索url中域名后面的search的域名显示抓取失败,是为什么呢?



你试试看你自己能不能访问?

###

换为其他的内页地址,都不存在这个问题吗?
奇葩了。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/29916.html