インデックス登録（インデクシング）

クロールとインデックス登録の違いは？

クロールは検索ロボットがページを読みに来ることで、インデックス登録は読み取った内容を分析して検索用のリストに入れることです。クロールされてもインデックスに登録されないことがあり、インデックスに登録されても特定の検索キーワードで上位に表示される保証はありません。

Googleはインデックス登録の段階で、本文のテキスト、titleタグ、画像の説明（alt）、画像・動画などを分析します。似たページが複数あれば1つのグループとみなし、その中の代表ページ（正規ページ）だけを検索結果に表示します。

ネイバーも似た過程をたどります。収集リクエストやサイトマップでアドレスを知らせると、検索ロボットが優先順位に従って訪れ、収集された文書のうちインデックスの基準を通過したものだけが検索に表示されます。

自分のページがインデックスに登録されたか確認するには？

いちばん正確な方法は、Google Search ConsoleとNaver Search AdvisorのURL検査ツールにアドレスを入れてみることです。「site:」検索は大まかな確認用なので、漏れているページを正確に見つけるには不十分です。

ネイバーのURL検査は、収集されたか、インデックス登録が可能か、インデックスに登録されたかを分けて表示し、タイトル・説明文が正しく読み取られているかも教えてくれます。GoogleのURL検査は、Googleが最後に読みに来た日付と、代表ページとして選んだアドレスまで表示します。

「site:〇〇.kr」の検索結果の件数は大まかな推定値なので、日によって変わることがあります。数字が減ったと驚くより、Search Consoleの「ページ」レポートで、インデックスに登録されたページ数の推移を見るほうが正確です。

1. 01Google Search Consoleを開き、いちばん上の検索窓に確認したいページのアドレスをまるごと貼り付けます。
2. 02結果画面で、インデックスの登録状況と、登録されていない場合はその理由が何と書かれているかを確認します。
3. 03インデックスに登録されておらず、直すところもなければ、「インデックス登録をリクエスト」を1回押します。
4. 04Naver Search Advisorのウェブマスターツールでサイトを選び、URL検査に同じアドレスを入れます。
5. 05収集・インデックスの状況とタイトル・説明文の抽出結果を確認し、必要ならリクエストのメニューからウェブページの収集をリクエストします。

「クロール済み - インデックス未登録」とはどういう意味？

Googleがページを読み取りはしたものの、まだ検索用のリストに入れていないという意味です。Search Consoleの「ページ」レポートで確認でき、似た状態に「検出 - インデックス未登録」もあります。こちらは、アドレスは知っているけれどまだ読みに来ていないという意味です。

Googleは、インデックスに登録されないよくある理由として、内容の品質が低い場合、インデックス登録を妨げる設定がある場合、サイトの構造がインデックス登録を難しくしている場合を挙げています。写真1枚と1行の説明だけのページや、ほかのページとほとんど同じ内容のページがよく当てはまります。

この状態が出ても、すぐに問題があるという意味ではありません。公開直後は時間がたつと解消されることも多いので、内容を補強できるページから手を入れ、数週間後にもう一度確認します。

• 内容の補強：価格・時間・進め方など、そのページにしかない情報を加えます。
• 重複の整理：ほとんど同じページは1つにまとめるか、代表アドレスを決めます。
• リンクでつなぐ：メニューや関連記事からそのページへリンクを張ります。
• 再確認：数週間後にURL検査で状態が変わったかを見ます。

インデックス登録のリクエストはいつ、何回すればいい？

インデックス登録のリクエストは、新しいページを公開したときや重要な内容を大きく直したときに、1ページにつき1回で十分です。Googleは、同じアドレスを何度リクエストしてもクロールが早まることはなく、個別のアドレスのリクエストには上限（割り当て）があると案内しています。

ネイバーも、収集リクエストはリアルタイムには処理されず、優先順位によって最短1日から数週間かかることがあると明らかにしています。同じアドレスを毎日繰り返しリクエストする必要はなく、収集に成功しても検索表示が保証されるわけではありません。

ページが多い、または頻繁に変わるなら、1つずつリクエストするよりサイトマップを送信しておくほうが効率的です。ブログ記事をコンスタントに投稿するお店なら、サイトマップが自動で更新されるようにしておけば大丈夫です。

検索から外したいページはどうすればいい？

検索から外したいページには、noindexの指定をします。ページのコードに<meta name='robots' content='noindex'>を入れるか、サーバーからX-Robots-Tagレスポンスヘッダーで知らせる方法です。Googleは、この指定を見るとそのページを検索結果から外すと案内しています。

このとき、robots.txtでそのページを一緒にブロックしてはいけません。検索ロボットがページに入れないとnoindexの指定も読めないため、ほかの場所にリンクがあると、アドレスが検索に残り続けることがあります。

すでにネイバー検索に表示されていたページを消した場合は、まず元のページを削除して404（ページなし）の応答が返ることを確認してから、Search Advisorのリクエストのメニューでウェブページの検索除外を申請します。再インデックスを経る必要があるため、すぐには消えません。

• 予約完了・決済完了などの案内ページ
• 制作中のデザイン案・テストページ
• 会員専用ページ（これはログインで制限するのが先です）

インデックスに登録されないよくある原因は？

いちばん多い原因は、制作中に入れておいたnoindexやrobots.txtのブロックを、公開後も解除していないことです。制作会社に、公開時のチェックリストにこの項目があるか必ず聞いてみてください。

次に多いのは、内容が少なすぎる、またはほかのページと重なっている場合です。プレビュー用のアドレスと本番のアドレスが同時に公開されていると、同じ内容が2か所にあることになり、意図しないほうが代表ページに選ばれることもあります。

JavaScriptだけで内容を描画するページは、検索ロボットが内容を見るのが遅れたり、見落としたりすることがあります。重要な文章は、ページを最初に読み込んだ時点から文字として入っているように作るのが安全です。

• 公開後も残っているnoindexの指定や、robots.txtによる全体のブロック
• プレビュー・テスト用のアドレスが検索に公開されていることによる重複
• メニューやほかのページから1つもリンクがない孤立したページ
• 写真だけで文章がほとんどないページ
• サーバーがよく遅くなったり、エラーを出したりする場合