用語解説：クロールとは

クロールとは

検索エンジンはページの情報を読み取るため、「クローラー」というロボットをWebサイトに巡回させている。
クロールとは、クローラーがページの内容を読み込み、コンテンツや画像、ファイルなどを収集することを指す。
クロールされた情報はその品質や有益性に基づいて、検索エンジンのデータベースに登録される。
このことをインデックスという。

インデックスされたページは、検索キーワードに応じて検索結果に表示される。
SEOで評価を上げるためには、まずクローラーにページを認識してもらう必要がある。

クロールされやすくするためには内部リンク構造を最適化したり、XMLサイトマップを作成したりして、ページを発見してもらいやすくすることが重要である。また、ページ単位であれば、Search Consoleからリクエストを行い、クロールを促すことも有効な手段の1つとなっている。

一方、会員限定コンテンツやテストページなど、クロールしてほしくないファイルについてはrobot.txtでDisallowを指定することで対策できる。

The following two tabs change content below.

• この記事を書いた人
• 最新の記事

デジタルマーケティング研究所編集部

デジタルマーケティング研究所では、デジタルマーケティングの施策・広告・技術を、分析・実装・検証して、WEB担当者・マーケティング担当者の方の役立つ情報を発信していきます。

>最新記事 by デジタルマーケティング研究所編集部 (全て見る)

• 用語解説：外部リンクとは - 2024年10月18日
• 用語解説：サイテーションとは - 2024年10月18日
• 用語解説：内部リンクとは - 2024年10月18日