蜘蛛爬行时间的分析—网站日志分析感悟

  很多站长经常对于蜘蛛的爬行时间以及收录时间都不太有把握。可能很多人认为蜘蛛爬行一天就来一两次,或者上午来一次或者下午来一次,所以很多站长更新自己的文章都会选择固定的时间来更新,认为这是对搜索引擎友好的一种表现。其实这种想法,有一定的道理的。但是一天的收录更新量最终反映的是一天的更新数据,很少有秒收的(当然不排除较好的文章以及网站)。据笔者的分析来看,蜘蛛每时每刻都可能来我们的网站。

  笔者以自己负责优化推广的站点-妇科在线咨询网日记文件分析数据来介绍一下。选择三组数据来演示一下。

  


  图1

  图一是凌晨的蜘蛛爬行数据,有google、yahoo、baidu的蜘蛛记录

  


  图2

  图二是中午的蜘蛛爬行数据,都有google、yahoo、baidu的蜘蛛记录

  


  图3

  图三晚上的蜘蛛爬行数据,也都有google、yahoo、baidu的蜘蛛记录

  当然其爬行的记录更多,在此笔者就不一一将数据罗列出来了。这些数据表明,蜘蛛每时每刻都可能来我们的网站,所以可以说蜘蛛爬行没有固定的时间。它可能随时随地爬到我们的网站。在这里我也有一点想法,大量的外链能让蜘蛛更快更频繁的爬到我们的网站,然后就会提升我们网站的收录以及权重。就像人跟人一样,熟了、交往多了才能有进一步的发展,直到认可一个人,肯定一个人。

  所以建议各位站长朋友们随时都可以更新网站,更新有质量的文章、内容。当然每天有规律的更新也是没有关系的。只是大家不必拘于定点定时。

  转载请注明来源于:http://hi.baidu.com/mangofun/blog

时间: 2024-10-03 11:19:29

蜘蛛爬行时间的分析—网站日志分析感悟的相关文章

捕捉蜘蛛 教你简单分析网站日志

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 想要成为一名合格的SEOER,那么研究搜索引擎蜘蛛的行为就成为了你每日的必修课,所以这次我就来给大家简单的介绍一下如何去分析网站日志.既然是要分析网站日志,首先要满足的先决条件自然就是要有网站日志了,在这里我就不介绍如何去生成和获取网站日志. 因为一般情况下如果你用的是空间那么基本上绝大多数空间都有网站日志,通过都存放在空间的log文件夹下面

新手死角:不容忽视的网站日志分析

新手接触网站建设及推广,很容易进入一个定式,那就是"内容为王.外链为皇",把所有的时间都用在这2个上面,诚然这些是网站建设里面的重点,但有些东西还是不能忽视的,比如网站的一些基础架构及内链建设. 我们做好了原创内容,发了很多的外链,成功的吸引了搜索引擎蜘蛛进入了我们的网站,是不是就成功了呢?其实这只是完成了一个基础的阶段,当蜘蛛进来了,网站结构及正确的链接循环是非要重要的,如果出现了问题,会造成蜘蛛爬行的困难,久之则其必将远离我们的网站,直到不来为止. 那怎么能够发现蜘蛛在爬行网站的过

站长如何进行网站日志分析

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 一个合格的站长或者seoer必须要能看懂网站的服务器日志文件,这个日志记录了网站被搜索引擎爬取的痕迹,给站长提供了蜘蛛是否来访的有力佐证,站长朋友可以通过网站日志来分析搜索引擎蜘蛛的抓取情况,分析网站的是否存在收录异常问题.并且我们可以根据这个日志文件判断蜘蛛来访频率以及抓取规律,这将非常有利于我们做优化.另外,学习分析网站日志文件也是站长必

网站日志里的秘密 分析网站日志有助于SEO

网站日志可以很好的记录访客和蜘蛛的访问情况,通过网站日志可以很好的了解网站的一些状况,这也是为什么现在很多SEO都会去分析网站日志的原因,但是分析网站日志的人不一定完全了解网站日志,下面我就浅谈一下网站日志里的秘密. 分析网站日志当然需要网站日志分析器,当然现在很多人使用免费的网站日志分析器,但是这些网站日志分析器分析出来的东西很有限,所以说很多网站信息也就被影藏了,下面我就以那种付费的网站日志分析器来阐述. 大家通过普通日志分析器一般都是看有没蜘蛛来过,什么蜘蛛,访问时间,访问哪些了页面.访问

浅析通过网站日志分析发现的几点看法

网站日志是一个很好的工具,它是我们分析网站的一个很好的帮手,通过分析网站日志,我们可以获得很多有价值的东西,而笔者通过分析个人的几个网站日志,从另外的角度去分析用户的行为,有了一些发现,而这些发现同大家通常认可的理论有一定的差距,笔者把个案写出来,希望得到大家的指点. 首先,笔者通过对网站日志进行了处理,从网站日志中排除图像网页,如jpg,gif,jpeg以及css.同时,还排除了那些自动网页采集程序"网络蜘蛛"产生的数据.这些数据并不是真实用户所发出的请求.笔者是针对这种情况来排除采

网站日志分析普遍忽视 从日志透出的优化误区浅析

很多站长在运营网站的时候,往往都本着内容为王,外链为皇的原则,很少通过数据分析来指导自己的网站运营,网站日志的分析更是被广泛的忽视!其实网站日志本身就是一个很好的工具,日志的数据往往就是易经的卦爻词,通过这些数据往往能够找到成功运营网站的密码!之所以把网站日志比作卦爻词,就是因为日志上的数据对于站长们而言,往往就是天数,其折射出来的运营方法需要站长进行重新的编译才能够领悟出来,下面笔者就结合自己的分析经验,跟广大站长朋友们分享一下分析日志的技巧! 因为日志中的数据非常多,也非常杂,这是妨碍站长进

巧用EXCEL分析网站日志

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 站长们都知道网站日志分析的重要性,但是当拿到网站日志后,面对里面一行行的代码,看的眼花缭乱却无从下手.今天我就给大家介绍一种用EXCEL表格详细分析日志的方法,希望对大家有所帮助. 首先我们新建一个EXCEL文件,将日志文件导入到EXCEL表格中. 在数据->导入外部数据->导入数据,打开选取数据源框,如下图 然后找到网站日志所在

略懂网站日志分析,网站更安全

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 作为一个站长,皇冠网小编觉得略懂网站日志分析,网站会更安全.网站日志可以从ftp或服务器上面下载.下载后,我们可以通过相应的来源ip段进行分析,判别这ip段是否属于真实的蜘蛛. 下面皇冠网小编就对皇冠网hg-seo.com站点的日志进行分析. 第一. 小编从服务器上面下载了8-2网站日志 第二. 打开网站日志 通过上图,我们可以看出,这里面很

SEO新手要学会查看和分析网站日志

作为SEO新手一定要学会查看和分析网站日志,因为从观看这些网站日志代码当中,可以分析出一个网站大体的状况. 网站日志中常见的代码: 网站日志记录了网民访问网站后返回的一些代码,其中常见的是200.304.404,返回代码200说明这个网站访问是正常的,返回代码404说明有一些错误的链接,已经访问不到链接的这个网页,这个情况大多数是站长删除了这个网页,如果返回是304说明这个网站已经很久没有更新了. 网站日志中常见的蜘蛛: 在网站日志中你可以看到一些搜索引擎的蜘蛛,常见的有:baiduspider