请教老师们蜘蛛爬取的原理及过程，蜘蛛是单爬取网站的一个网页，还是说空间里面的内容蜘蛛都能爬取到？
求解

首先，很明确的告诉你，百度的蜘蛛爬取的原理除了他们的工程师外，谁也不知道。。。也猜不出来的，现在网上流传的百度蜘蛛原理是一个残缺版本，即使是工程师泄露出来的，但也是不完全的，因为百度的蜘蛛程序员成百上千。。。百度的算法频繁更新，似乎有一些规则也是可以遵循然后进行SEO，效果还是不错的。一个网站的信息，看你优化的什么样了，有些东西会自动禁止蜘蛛抓取，有些需要你写一下Robots才行。呵呵，是的就这些了。。。以上是我的个人看法，欢迎老师们指点。(ˇˍˇ）