大家都来谈谈，robots.txt 该屏蔽哪些内容呢？
[导读]：基于优化和安全的两者角度来说，看看有说的棒的吗？坐等大神！ 数据库目录 后台地址 核心程序源 （如果你程序生成的页面是静态的html，则可以禁止蜘蛛爬去/?动态页面，例...
基于优化和安全的两者角度来说，看看有说的棒的吗？坐等大神！
数据库目录
后台地址
核心程序源
（如果你程序生成的页面是静态的html，则可以禁止蜘蛛爬去/?动态页面，例如PHP动态页面挂的后门程序或者后门程序生成的垃圾动态页面）
如果是动态php的，则需要屏蔽所有asp页面，禁止蜘蛛抓取
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/25079.html
