首页 > 问答 > 这种情况下,robots该怎么写?

这种情况下,robots该怎么写?

[导读]:情形: A网站和B网站指向同一个项目,同一个IP,公用同一个robots.txt。 问题: 怎么写robots.txt屏蔽B网站所有页面的抓取,A网站不屏蔽任何网址? 这种没试过,所以不敢乱回答...

情形:
A网站和B网站指向同一个项目,同一个IP,公用同一个robots.txt。

问题:
怎么写robots.txt屏蔽B网站所有页面的抓取,A网站不屏蔽任何网址?

这种没试过,所以不敢乱回答

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/27754.html