検索エンジンはどうやってWebサイトを見つけるの?仕組みを解説

検索エンジンはどうやってWebサイトを見つけるの?仕組みを解説

Webサイトを公開すると、すぐにGoogleなどの検索結果へ表示されると思うかもしれません。

しかし、公開しただけでは検索エンジンがそのページを知っているとは限りません。

検索結果へ表示されるためには、まず検索エンジンにページを見つけてもらう必要があります。ここではGoogle検索を例に、Webサイトが発見される仕組みを確認していきましょう。

目次

検索エンジンは自動でWebページを探している

Googleでは「クローラー」と呼ばれる自動プログラムがWeb上を巡回し、新しいページや更新されたページを探しています。

Google検索に掲載されているページの多くは、人が1ページずつ登録したものではなく、クローラーによって自動的に発見されたものです。

このように、クローラーがWebページを探して内容を取得する作業を**「クロール」**と呼びます。

Webサイトを公開することと、検索エンジンに見つけてもらうことは別です。まずページが発見され、クロールされることが検索結果へ表示されるための第一歩になります。

クローラーはリンクをたどってページを見つける

検索エンジンが新しいページを見つける代表的な方法が、Webページに設置されているリンクです。

たとえば、すでにGoogleが知っているトップページから新しいブログ記事へリンクが張られていれば、クローラーがそのリンクをたどって新しいページへ移動できます。

Googleも、リンクを新しいページを発見するために利用しています。

そのため、新しく作ったページをWebサイト内のどこからもリンクしていない状態にすると、検索エンジンが見つけにくくなることがあります。

関連するページ同士を自然にリンクでつなぐことは、利用者だけでなく検索エンジンがWebサイト内を移動するうえでも役立ちます。

クローラーがリンクをたどって新しいWebページを発見する仕組み

サイトマップから見つけてもらう方法もある

検索エンジンへWebサイト内のURLを伝える方法として「XMLサイトマップ」があります。

XMLサイトマップは、WebサイトにどのようなURLがあるのかを検索エンジンへ知らせるためのファイルです。

特に、新しく公開したWebサイトやページ数が多いWebサイトでは、ページを発見してもらう助けになります。Googleも、サイトマップはURLの発見に役立つと案内しています。

ただし、サイトマップへURLを書けば必ずクロールや検索結果への登録が行われるわけではありません。

検索エンジンへページの存在を伝える方法の一つ、と考えておきましょう。

見つかったページはどうなる?

クローラーがページを発見すると、ページ内の文章や画像などを取得します。

Google検索では、その後にページの内容を分析し、検索用の大きなデータベースへ情報を保存する「インデックス登録」という処理があります。

大まかな流れは次のようになります。

  1. 検索エンジンがページを発見する
  2. クローラーがページを確認する
  3. ページの内容が分析される
  4. 必要に応じてインデックスへ登録される
  5. 検索内容に応じて検索結果へ表示される

「見つかる=すぐ検索結果に出る」ではないことがポイントです。

ページが発見されても、必ずインデックス登録されるとは限りません。Googleも、条件を満たしたページについてクロールやインデックス登録を保証しているわけではありません。

Webページの発見からクロールとインデックス登録を経て検索結果に表示されるまでの流れ

公開したページが見つからないこともある

Webページを公開してから、検索エンジンに発見されるまで時間がかかることがあります。

特に新しいWebサイトでは、検索エンジンがまだWebサイトの存在を十分に把握していない場合があります。

また、新しいページへのリンクがない、サイトマップにURLが含まれていないなど、クローラーがページへたどり着く手がかりが少ない状態も考えられます。

ページを公開した直後に検索結果へ出てこなくても、それだけで問題が起きているとは限りません。検索エンジンによる発見や処理には時間がかかる場合があります。

検索エンジンに見つけてもらいやすくするには?

初心者がまず確認したいのは、特別なSEOテクニックではありません。

新しいページへWebサイト内から適切にリンクし、必要に応じてXMLサイトマップを用意することから始めます。

トップページやカテゴリページなど、検索エンジンがすでに巡回しやすい場所から新しいページへつながっているか確認しましょう。

大切なのは、利用者も検索エンジンもページへたどり着けるWebサイト構造にすることです。

検索エンジンだけを意識して不自然に大量のリンクを作る必要はありません。

ページが発見される仕組みを理解しよう

検索エンジンは、クローラーを使ってWeb上のページを探しています。

既存ページからのリンクをたどったり、XMLサイトマップを参考にしたりしながら、新しいURLを発見します。

ページを見つけた後は内容を確認し、インデックス登録などの処理を経て検索結果へ表示される可能性があります。

まずは、Webサイトを公開するだけではなく、新しいページへきちんとたどり着ける状態になっているかを確認してみましょう。


メタディスクリプション

検索エンジンはどのようにWebサイトを見つけるのでしょうか。クローラーやリンク、XMLサイトマップの役割と、ページが検索結果へ表示されるまでの基本的な流れを初心者向けに紹介します。

パーマリンク

how-search-engines-find-websites

タグ

検索エンジン、クローラー、クロール、XMLサイトマップ、SEO

挿絵1

種類: クローラーがリンクをたどって新しいページを発見する仕組みの図解

挿入位置: 「クローラーはリンクをたどってページを見つける」の説明後

内容: 左側にすでに発見されているWebページ、中央にクローラー、右側に新しいWebページを配置し、リンクをたどって新しいページが発見される流れを矢印で示す。白背景を基本に、Webやろっ!のサイトカラーであるオレンジとターコイズを中心に使用する。薄い図形やドットなどを加え、シンプルすぎないフラットな図解にする。

ALTテキスト: クローラーがリンクをたどって新しいWebページを発見する仕組み

挿絵2

種類: Webページが発見されて検索結果へ表示されるまでの流れを示す図解

挿入位置: 「見つかったページはどうなる?」の説明後

内容: 「ページを発見 → クロール → 内容を分析 → インデックス登録 → 検索結果」の5段階を横方向に配置する。各工程をWebページ、クローラー、データベース、検索画面などのアイコンで示す。白背景にオレンジとターコイズを基調とし、ドット・薄い円・ラインなどの装飾を加えたWebやろっ!らしいフラットデザインにする。

ALTテキスト: Webページの発見からクロールとインデックス登録を経て検索結果に表示されるまでの流れ

SNSで友だちに教える

この記事を書いた人

Web制作会社でWebディレクターとして働く傍ら、Webサイト制作やWordPress、SEO、Web集客について発信しています。難しい専門用語をできるだけ使わず、初心者にもわかりやすい解説を心掛けています。「やってみたい」を「できた!」に変えるお手伝いができれば嬉しいです。

コメント

コメントする

目次