Googlebot的访问曲线

下图是Googlebot访问我手里一个站点的情况，由命令" grep Googlebot access.log "生成。每隔一段时间，都会有这样的情况出现，bot按照一定的规律，集群式来访：

首先访问网站第一层目录，然后按照url长度，从短到长，发出一波“攻击”（上图中1部分）。接着访问目录下的翻页 page2, page3 一类的页面（途中2部分）。再同样按照url长度，从短到长，打出又一波“攻击”（数字3部分）。周而复始，直至访问所有网站页面。也就造成了在使用命令" grep Googlebot access.log " 的时候，生成了图片中的访问曲线。

根据我的观察和推测，每次这种访问曲线过后，网站在Google的排名都或好或坏的有较大变化。

2013-12-06Update:

有意思，上面的Googlebot访问曲线是12月2日生成的，3号我发了这篇博客，今天是6号，到处就在传Google PR更新的消息了。