[导读]：比如： www.abc.com 这个网站有一个用户中心，同一空间下有一个二级域名： passport.abc.com 如何使用robots.txt屏蔽屏蔽 passport.abc.com 抓取 让技术写一个判断程序，让要屏蔽的二级域名...
比如：
www.abc.com
这个网站有一个用户中心，同一空间下有一个二级域名：
passport.abc.com
如何使用robots.txt屏蔽屏蔽
passport.abc.com
抓取
让技术写一个判断程序，让要屏蔽的二级域名下面，有一个Robots.txt文件。
通过
来屏蔽。
如果主域名和二级域名共用一个目录呢？求继续回复
###User-agent: *
Disallow:
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/32756.html
