クロールとは、テキスト、画像、HTML情報など、Webページ上の様々な情報を収集することです。検索エンジンやキュレーションメディアなどでWebサイトの情報収集のために行われることが多く、クロールを行うプログラムの事を「クローラー」と呼びます。
Googleの検索エンジンにおいては、クローラーであるGoogleボットがWebサイトの情報を「クローリング」し、Googleのデータベースに「インデックス」を行い、ランキングのための情報を取得できるようにしています。GoogleボットがWebページをクロール出来なければ、そのページが検索結果に出ることはありません。
重要なページにはきちんと内部リンクが集まるように情報設計を行い、またクローリングの手助けとしてサイトマップを設置し、ページの重要度をクローラーへ通知するとよいでしょう。
2002年設立から、20年以上に渡りSEOサービスを展開。支援会社は延べ2,000社を超える。SEO/CRO（コンバージョン最適化）を強みとするWebコンサルティング会社。日本初のSEO情報サイトであるSEO Japanを通じて、日本におけるSEOの普及に大きく貢献。
SEO最新情報やセミナー開催のお知らせなど、お役立ち情報を無料でお届けします。
