[导读]:今日发现百度统计的SEO建议要求修改百度推广链接后面的谷歌分析参数,说是“在静态页面上使用动态参数,会造成spider多次和重复抓取”。 但是推广链接并不是24小时都存在的...
今日发现百度统计的SEO建议要求修改百度推广链接后面的谷歌分析参数,说是“在静态页面上使用动态参数,会造成spider多次和重复抓取”。
但是推广链接并不是24小时都存在的,百度蜘蛛是否真的会抓取推广链接?
自己解决了。
查看了下百度首页的robots.txt,发现百度禁止了蜘蛛抓取百度……
User-agent: Baiduspider
Disallow: /baidu
Disallow: /s?
所以推广链接是不会被百度蜘蛛抓取到的。
百度自己的产品必须占优势的。
###我也看到了。也觉得齐国,自己抓取自己。这个应该不存在抓取问题。这个本身就是自己的数据库。
存在一个优先展示机制。
本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/17296.html