123.125.71.43 - - [20/Aug/2013:18:31:23 +0800] "GET /product/group-108814.html HTTP/1.1" 200 6138 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +www点baidu点com/search/spider点html)" "-"
123.125.71.58 - - [20/Aug/2013:18:31:23 +0800] "GET /js/base.min.js HTTP/1.1" 200 1811 "www点xxyjbl点com/product/group-108814点html" "Mozilla/5.0 (compatible; Baiduspider/2.0; +www点baidu点com/search/spider点html)" "-"
123.125.71.43 - - [20/Aug/2013:18:31:23 +0800] "GET /js/search.js HTTP/1.1" 200 505 "www点xxyjbl点com/product/group-108814点html" "Mozilla/5.0 (compatible; Baiduspider/2.0; +www点baidu点com/search/spider点html)" "-"
在同一秒内，抓了一个内页和2个JS。
程序员说这个JS是 蜘蛛解析，有这样的说法吗？
不管是抓取 还是解析 不影响
JS文件里的内容 本身 搜索引擎是 不大好抓取的
本文来自投稿，不代表微盟圈立场，如若转载，请注明出处：https://www.vm7.com/a/ask/18895.html
