グーグル スパイダーのクロール頻度

ページのインデックスを早めるには、検索エンジンのクローラーに頻繁にサイトを訪れてもらう必要があります。

グーグルは、様々な要因からサイトのクロール頻度を決定しています。

Q. ウェブのクロールはどのくらいの頻度で行われますか？

クロールは、PageRank、ページへのリンク数、および URL に含まれるパラメータ数などさまざまな要因に左右されます。

クロールのプロセスはアルゴリズム化されており、クロールを実行するサイト、クロールの頻度、および各サイトから取得するページ数はコンピュータ プログラムによって決定されます。

サイト価値を上げることにより、必然的にクロール頻度も上がるということでしょう。　

上記の文章を見る限りでは、クロール頻度にサイト更新頻度はあまり影響しないと言えるのかもしれません。

Q. Googlebotはどのくらいの頻度でウェブページにアクセスしますか？　

Googlebot は、平均して数秒に 1 回を超える頻度でサイトにアクセスすることはありません。

ただし、ネットワークの遅延などにより、短期間の間にアクセス頻度がわずかに増えるように見える場合があります。

クロール頻度云々ということよりも、スパイダーとGooglebotをわけて記述している点の方が興味深いですね。

Tweet

タグ