インデックス未登録ページ：リンクチェック付きの意思決定ツリー
サーチコンソールには、原因が異なる類似した2つのラベルが表示されます。枝を順番にたどり、最初に一致するものまで進んでください。
ArchiLinksリサーチチーム ·
「発見済み、現在インデックス未登録」とは、GoogleがURLを把握しているがまだフェッチしていないことを意味します。「クロール済み、現在インデックス未登録」とは、ページをフェッチしたが、保持しないことを選んだことを意味します。前者は主に優先度と発見可能性に関わり、後者はページ自体の品質に関わります。
なぜ診断にリンクが関係するのか
チームはインデックス化を純粋な技術的な問題として診断することが多いです。確かにその場合も多いですが、見落としがちなシグナルが1つあります。
インデックスに欠落しているWebサイトURLへのバックリンクが見つかった場合、外部サイトがそれらを支持しているかどうかを確認できます。内部リンクも外部リンクもゼロのページは、Googleがクロール時間やインデックス領域を費やす理由をほとんど提供しません。
数十ページの薄っぺらいコンテンツとフラットなサイトマップを持つサイトは、最初に確認すべき一般的なケースです。
リンク関連の全コマンドについてはAPIスクリプトをご覧ください。移行予定のセクションについては、移行チェックリストでインデックスチェックをT+1週目に配置します。BingやYahooはGoogleとは異なる場合もあるため、別途テストし、2021年の開始以来BingにはIndexNowを検討してください。
意思決定ツリー
1. ページはブロックされているか、noindexか？
サーチコンソールでURLを検査します。レンダリングされたHTML、HTTPヘッダー、robots.txtを確認します。ステージング環境の名残で残ったnoindexが原因であることが多いです。該当する場合はそれを削除し、インデックス登録をリクエストしてください。
2. Googleは別のcanonicalを選択しているか？
ユーザーが宣言したcanonicalとGoogleが選択したcanonicalを比較します。これらが異なる場合、そのページはGoogleの観点から重複またはほぼ重複とみなされます。統合するか、差別化するか、またはそのまま受け入れます。
3. ページは実際のセクションから到達可能か？
インデックス登録済みのページからの内部リンクをカウントします。2つ未満、またはサイトマップからのみである場合、発見可能性が弱いです。ハブからのリンクを追加してください。
4. ページには外部リンクがあるか？
URLのtoppagesとbacklinksを確認します。他のドメインがリンクしている場合、まず内部リンクを修正し、より迅速なクロールを期待してください。リンクがない場合、ページはコンテンツの質によって地位を獲得する必要があります。
5. そのページを維持する価値があるか？
薄っぺらい、テンプレートベース、またはパラメータベースのページは、意図的に除外されることが多いです。統合するか、noindexを設定するか、削除してください。クロール予算を無駄にしないでください。
各ブランチが通常示すもの
| 発見 | 一般的な原因 | アクション | 効果が出るまでの時間 |
|---|---|---|---|
| noindexまたはrobotsブロック | ステージング用のルールが本番環境に適用された | 削除してインデックス登録をリクエスト | 数日から数週間 |
| Googleのcanonicalが異なる | 重複、パラメータ、薄っぺらいバリエーション | 統合または書き直し | 数週間 |
| 内部リンクが少ない | 孤立ページまたは深層ページ | ハブとサイトマップからのリンク | 数週間 |
| リンクは存在するがインデックス未登録 | コンテンツが低価値と判断された | コンテンツを改善し、リダイレクトまたはcanonicalを誠実に保つ | 1〜2ヶ月 |
| 多くのページが影響を受けている | サイト全体の品質または構造のシグナル | さらに送信する前に、不要なものを削除して統合する | 数ヶ月 |
インデックス登録数が急激に減少した場合
数万ページから数十ページへの減少は、トレンドではなくイベントです。まず日付を確認してください。テンプレートの変更や共有コンポーネントでのnoindexフラグが、急激な減少の大部分を説明します。
次にサンプリングを行います。減少前の50URLと減少後の50URLを取得し、各グループのステータス、canonical、内部リンクを確認します。パターンは合計値に現れる前に、サンプルに現れることがほとんどです。
インデックス登録済みだがrobots.txtでブロックされている
URLはインデックス登録済みとして表示されるが、robots.txtがクロールをブロックしている場合があります。Googleはリンクからアドレスを把握し、コンテンツを読まずにリスト化することがあるため、リストは薄っぺらく、説明がないことが多いです。コンテンツに基づいて評価させたい場合はパスをアンブロックし、ブロックされたままにする場合は単なるエントリを受け入れます。
URLに一致するルールを確認します。ステージングパス用に書かれた広範なパターンが、誤ってライブの製品フォルダをキャッチすることがあり、修正は2番目のファイルではなく、より限定的な行です。
サイトマップエントリが待機し、手動リクエストが待たない理由
手動でリクエストしたURLは数日でインデックス登録される可能性がある一方、サイトマップにのみリストされた同じURLは登録されません。このギャップは通常、ページ品質ではなくクロール優先度を反映しています。リクエストはページをキューの上位に移動させ、サイトマップエントリはキュー内で待ちます。
持続的な修正はどちらの場合も同じです。すでにクロールされているページからそのページへのリンクを追加し、サイトマップから古いエントリを削除してください。そうすれば、両方の経路が同じURLに到達します。
URLのインデックス登録をリクエストする前に
- URLはシェルやスピナーではなく、実際のコンテンツを200ステータスで返します。
- HTMLまたはレスポンスヘッダーにnoindexが含まれていません。
- canonicalはURL自体を指しているか、意図的に選択したバージョンを指しています。
- 少なくとも1つの内部リンクが、すでにインデックス登録済みのページから来ています。
- URLはサイトマップに記載されており、サイトマップには古いエントリが含まれていません。
- なぜそのページをインデックス登録すべきなのかという短いメモがあります。
site:結果とライブテストの読み方
site:クエリは、実行時にGoogleのインデックスに何があるかを示します。これはスナップショットです。Pagesレポートで確認できるページで結果が空の場合、それは判決ではなく、再確認する理由です。
URL検査とそのライブテストは、より限定的な質問に答えます：Googleが現在1つのアドレスに対してフェッチおよびレンダリングできるものは何か。フェッチまたはレンダリングの問題と品質の問題を分離するために使用してください。
自己欺瞞なしでsite:クエリを実行する
正確なアドレスでsite:を実行し、次にページの固有のフレーズで再度実行します。ライブページに対して2つの空の結果が返される場合、通常はURLがインデックスされていないか、別のcanonicalの下でインデックスされていることを意味します。何かを推測する前にcanonicalを確認してください。
スニペットなしの結果は、結果が全くないのとは異なる状態です。どちらが見えているかをメモしてください。それぞれに異なる修正が必要です。
宣言されたcanonicalと選択されたcanonicalの比較
インデックス登録済みのページでURL検査を開き、宣言したcanonicalとGoogleが選択したcanonicalを比較します。不一致がある場合、Googleは別のページをこのコンテンツの代表として選択しました。その選択があなたにとって正しいか間違っているかは判断が必要ですが、何かを変更する前にどちらであるかを決定してください。
レンダリング版が空白の場合、問題はインデックスではなくビルドにあります。JavaScriptリンク監査がそのケースをカバーしています。
より大きな規模でチェックを実行する
数百年のURLを手動でチェックするのは1回限りの作業です。定期的なチェックには、スクリプトからのステータス、canonical、リンクデータ、および各実行の履歴を保持するファイルが必要です。
すでに外部リンクを引き付けているURLから始めます。ホストでtoppagesを実行して、チェックする価値のあるセクションへのバックリンクを見つけ、そのリストを「インデックス未登録」のエクスポートと比較します。重複部分が最初に修正すべきグループです。外部サイトはすでにそこにリンクしています。
各URLに対して記録する内容
ステータスコード、宣言されたcanonical、Googleが選択したcanonical、インデックス登録済みページからの内部リンク数、リンクドメイン数を含む1行をURLごとに保存します。5つの列だけで、異なる作業が必要なグループにリストをソートできます。
アクションを起こす前にグループをソートしてください。外部リンクがあり、間違ったcanonicalを持ち、内部パスのないURLは、単に新しいURLとは異なる修正が必要です。これらを混ぜると、間違った問題にスプリントを浪費することになります。
各実行のファイルを保持してください。2つの実行間の変化は、修正が機能したかどうかを示し、単一のスナップショットではわかりません。
リクエストキューを短く保つ
手動のインデックス登録リクエストを、外部リンクがあり、クリーンなcanonicalを持つグループに制限してください。これらのページは迅速なクロールの最も良いチャンスがあり、登録されていない場合でも最も価値を持っています。
競合するcanonicalまたは薄っぺらいコンテンツを持つページは、統合用の別リストに入れるべきです。それらを繰り返しリクエストするだけでは、キューにノイズを追加するだけで、新しい情報は得られません。
インデックス登録に関する質問
- 新しいページがインデックスに現れるまでどのくらい時間がかかるべきか？
- 数時間から数週間。強力な内部リンクを持つ確立されたサイトでは、新しいURLは数日で確認できます。新しいサイトは一般的に長く待ちます。4週間以内で問題のシグナルがない場合は、パニックになる価値はありません。
- noindexはクロールバジェットに影響するか？
- noindex付きのページはタグを確認するためにまだクロールされますが、Googleは戻る頻度を減らす傾向があります。数万URL未満のほとんどのサイトでは、クロールバジェットは心配すべき制限ではありません。
- バックリンクはページのインデックス登録に役立つか？
- 発見を助け、ページが外部からの関心を持っていることを示します。インデックス登録を強制するわけではありません。薄っぺらか重複したリンク付きページは、依然として除外される可能性があります。
- サーチコンソールでのインデックス登録リクエストは修正か？
- それは治療ではなく、促しです。根本的な原因がcanonicalの競合、薄っぺらいコンテンツ、または内部リンクがない場合、ページは再び除外される傾向があります。
