一共有2个栏目和10来个专题页被百度K了,然后用抓取诊断,一直是抓取失败。
但是抓取诊断我网站新闻页却能抓取成功。是栏目降权被K的原因,所以百度才一
直抓取失败吗?之前这些被K栏目排名很好的,也没做内页修改。
求大虾们分析下原因,是不是网页代码问题,还是被百度K的问题,如果是网页代码的问题,但是相同的框架结构,被K的都抓取不成功,没被K的都抓取成功。所以也说不过去。
首先,以前看到别人说的,百度抓取诊断对于双线主机和做了别名解析的非固定IP主机,总是出现抓取失败或者抓取中的现象,偶尔也能抓取成功。可见对于网站IP地址的判定经常会出错,一旦IP地址判定错误,就会出现抓取失败的现象,所以首先确定你的IP稳定否,你的论题所测试的实例是否达到证明要求的次数?
其次,经过以前几次测试,抓取失败的网站,当天所发文章全部都是秒收,证明百度蜘蛛抓取了网页,只不过抓取工具显示抓取失败而已。
最后,任何工具的新上线,都存在这样、那样的问题,我们只要选择对我们有利的地方去应用就行了,而不应过于依赖所有的功能,而且无用的分析,并不能获得什么好处和经验。
抓取的状态呢,根据URL返回的HTTP状态码分析原因
###这和K没有关系,抓取诊断其实抓取不成功也很正常,你一个URL多试几次可能就成功了,抓取诊断只是看你网站程序的正常性。比如DNS能不能解析等等
###挽尊①!!
完全是没有这个观点哦,抓取诊断是只要你网站程序正常,URL打开不被限制,这样就完全可以被抓取的。
你应该去检查一下这2个什么被K的栏目,看是有什么程序问题或者限制问题。
抓取是不会有什么被K影响的,被K,是因为违反了百度的某个算法机制。抓取的内容是会在百度数据库中保存,然后进行各种算法的审核过滤,才会被释放给广大的用户搜索。
所以被K与抓取是2个不同的程序。不相干的!
注释①:挽尊。简介:全称是挽救(楼主)尊严。一般是指楼主发完帖子后,长时间没有人回复,或者楼主发的内容比较冷、无聊,其他人回复时戏谑楼主的意思。为网络用语,即多在网络上流行的非正式语言。

本文来自投稿,不代表微盟圈立场,如若转载,请注明出处:https://www.vm7.com/a/ask/27400.html