クローラー
ロボット型検索エンジンのプログラムのことで、クローラーが世界中のホームページを巡視して、検索順位を決めている。
ロボット型検索エンジンの場合クローラーが来ない事にはインデックスもされない。更新頻度を上げることによりクローラーの訪問頻度も上がると言われている。クローラーと仲良くならないと上位表示は期待できない。クロールするからクローラーだが、スパイダーとも呼ばれる。
クローラーの訪問頻度を上げるためには、サイトの更新頻度を上げるのが効果的。また色々なサイトからリンクを張ることで、必然的に他サイト経由でクローラーが回ってくるようになるので、自サイトの訪問頻度も高まる。
ただ、被リンクによってクロール頻度を上げるよりは、やはり更新頻度を上げて検索エンジンにアピールした方が良いように思う。更新頻度だ高ければ大して被リンクが無いサイトでも、新しい記事を公開して数分後にはインデックスされるようになる。
また、レンタルサーバーによってもクロール状況が変わる場合もあるので、注意したい。
