toutiaospider是什么蜘蛛？要屏蔽吗？
[导读]：今天分析网站日志，发现了toutiaospider， User Agent Equals Mozilla/5.0 (compatible; ToutiaoSpider/1.0; http://web.toutiao.com/media_cooperation/;) 这是个什么蜘蛛，大家有遇到过吗？ 看你心情了 ###...
今天分析网站日志，发现了toutiaospider，
User Agent Equals Mozilla/5.0 (compatible; ToutiaoSpider/1.0; http://web.toutiao.com/media_cooperation/;) 这是个什么蜘蛛，大家有遇到过吗？看你心情了
###头条又没有搜索引擎，怎么会有蜘蛛。不能仅仅通过UA来判断，还要结合IP与官方发布的比对。
建议屏蔽，对SEO没有价值反而增加服务器负担。
###能问下ip是多少吗
###头条也有蜘蛛了？？6666666666666，头条要打败百度吗
###头条蜘蛛？？如果没什么用处就直接ip封禁吧
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/82305.html
