[导读]：1、从日志中根据爬虫的访问进行抽取（写个日志脚本 :参考) 2、细分到产品具体分类。导出分类 下 产品detail页面，可用脚本工具 模拟 请求。判断http响应码。（批处理脚本：参...
1、从日志中根据爬虫的访问进行抽取（写个日志脚本 :参考)
2、细分到产品具体分类。导出分类 下 产品detail页面，可用脚本工具 模拟 请求。判断http响应码。（批处理脚本：参考）
http://faq.seowhy.com/6_79_zh.html 你看这个工具是否有用；
另外，可以通过分析日志，看蜘蛛抓取返回404的url列出。
站长工具理由死链检测
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/32155.html
