这个是头条蜘蛛的，需不需要屏蔽了，头条应该没什么用呀

头条这么狠的吗

应该不会每天都那么多吧

您好，我是头条搜索的工作人员，我们已经开放站长平台（https://zhanzhang.点toutiao点com），站长可在站长平台自主设置抓取压力，如需要进一步沟通可加我微信hello20180625

头条偶尔会这样

蜘蛛抓取但并不收录，再做判断

头条也有流量

浪费流量了这个

蜘蛛抓取但并不收录，说明现在网站所展现的内容搜索引擎并不信任或者搜索引擎暂不需要，蜘蛛一天抓取上万次，不能说明什么的，需要参考最近7天的抓取记录，再做判断。

爬了不收录，头条一天爬我200g流量

偶尔一天吧，应该不是每天都那么多