[导读]：content="index,noindex,follow,Nofollow" 里面不是关键词。### 有时候会有一些站点内容，不希望被Robots抓取而公开。为了解决这个问题，ROBOTS开发界提供了两个办法：一个是robots.txt，另一...
content="index,noindex,follow,Nofollow" 里面不是关键词。###
有时候会有一些站点内容，不希望被Robots抓取而公开。为了解决这个问题，ROBOTS开发界提供了两个办法：一个是robots.txt，另一个是The Robots meta标签。
1, 默认是all
其中的属性说明如下：
设定为all：文件将被检索，且页面上的链接可以被查询；
设定为none：文件将不被检索，且页面上的链接不可以被查询；
设定为index：文件将被检索；
设定为follow：页面上的链接可以被查询；
设定为noindex：文件将不被检索，但页面上的链接可以被查询；
设定为Nofollow：文件将不被检索，页面上的链接可以被查询。
以上内容是百度搜索的结果，看看是不是你要的解答
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/25295.html
