搜索引擎对于我们来说是个非常迷茫的东西，虽然我们一直在研究SEO，但是也只是通过表面现象来推敲搜索引擎的表现。目前的很多的SEO的高手大多都是通过长期积累的SEO实战的经验，所得来的结果。
其实研究SEO还是有规律可循的，虽然我们不知道搜索引擎的工作原理，但是搜索引擎留下的痕迹则是我们研究SEO的重要的依据。搜索引擎蜘蛛在我们做SEO过程中扮演着非常重要的角色，我们每天都在建设外链，更新内容。目的都是为了能够让搜索引擎的蜘蛛能够经常的关注我们的网站，并给予比较好的排名。
既然作为比较有力的工具，吸引蜘蛛爬取我们的网站是比较关键的，怎样才能够让蜘蛛光临我们的网站并给予我们的网站一个比较好的排名呢?观察蜘蛛的爬行记录也就是我们的日志，我们会发现很多的蜘蛛的爬行的IP，搜索引擎给予网站的权重在蜘蛛的IP段上是有着比较明显的区分的。一般220.181开头的IP段是权重比较高的蜘蛛段，这些蜘蛛很难被引导到一个普通的站点，如果我们有规律的更新我们的网站的内容，并在高权重的站点发外链这些蜘蛛也就会随之而来了。
当然了，我们也要学会观察蜘蛛的爬取我们站点的日志来审核我们站点的好坏和异常，很多的被K的站点一般都很明显，昨天和当天的蜘蛛段有着很大的不同。同时在百度大更新的当天我们会发现站点的蜘蛛爬行记录是非常的多的，一般日志的大小大约是平常的2倍以上。
我们网站的任何的改变都给蜘蛛留下一个比较特殊的痕迹，通过蜘蛛的不同IP段我们可以发现网站在搜索引擎的中的表现如何。通过网站的日志我们也可以发现蜘蛛爬去网站的一般规律，大多都是固定的某些时段是蜘蛛抓取的热度区域，针对爬去的时间区间我们可以按规律的更新我们的网站内容，以便蜘蛛更好的抓取，而不至于大量内容的同一时点的大量涌入被搜索引擎视为作弊处理降权。
通过蜘蛛的爬行日志，我们不但可以观察网站在搜索引擎的表现情况，还可以识别我们的网站是否真的被搜索引擎K掉，这是我们很多SEO从业者最关心的问题。很多的网站被K只是被百度的降权而已，而不是真正的被百度给K掉，如果发现蜘蛛仍在抓取，还有挽救的可能。但是发现即使通过建设很多外链，蜘蛛也不来爬去，网站就基本告别SEO的努力目标了。
总之，蜘蛛在我们做SEO过程中，对于观察搜索引擎起着非常重要的作用，不容忽视。
文章来自www.etingou.com，转载请注明出处!谢谢