マーケティング現場の用語集|SEO・AI検索
Crawler:クローラー
ひとことで言うと
検索エンジンが、インターネット上のWebページを自動で巡回して情報を集めるプログラムです。
クローラーは、リンクをたどりながら世界中のWebページを訪れ、内容を読み取ります。この巡回のことをクロールと呼びます。集めた情報は、検索エンジンのデータベースに登録(インデックス)され、検索順位の評価に使われます。クローラーに正しく巡回してもらうためには、サイト内のリンクを整理し、サイトマップを送信し、HTMLを正しく書くことが大切です。
新しく作った講座ページがなかなか検索結果に出てこない場合、サーチコンソールからクロールを依頼すると、クローラーが早めに訪れてくれることがあります。