Nicht indizierte Seiten: Ein Entscheidungsbaum mit Link-Prüfungen
Die Search Console bietet zwei ähnliche Bezeichnungen mit unterschiedlichen Ursachen. Arbeiten Sie die Zweige der Reihe nach durch und stoppen Sie bei der ersten Übereinstimmung.
ArchiLinks-Research-Team ·
„Entdeckt, aktuell nicht indexiert“ bedeutet, dass Google die URL kennt, sie aber noch nicht abgerufen hat. „Gecrawlt, aktuell nicht indexiert“ bedeutet, dass die Seite abgerufen wurde, Google sie sich aber nicht merken wollte. Der erste Fall betrifft meist Priorität und Entdeckung. Der zweite Fall betrifft die Seite selbst.
Warum Links in die Diagnose gehören
Teams diagnostizieren Indexierungsprobleme oft als rein technisches Problem. Das ist sie häufig auch. Doch ein Signal bleibt leicht übersehbar.
Wenn Sie Backlinks zu Website-URLs finden, die nicht im Index sind, erfahren Sie, ob externe Seiten für sie bürgen. Eine Seite ohne interne und ohne externe Links gibt Google wenig Grund, Crawl-Zeit oder Index-Speicherplatz darauf zu verwenden.
Eine Site mit einigen Dutzend dünnen Seiten und einer flachen Sitemap ist häufig genug, um dies zuerst zu prüfen.
Für die vollständige Liste der Link-Aufrufe siehe die API-Skripte; für Bereiche, die Sie gerade migrieren, setzt die Migrations-Checkliste Indexierungsprüfungen auf T+1 Woche an. Bing und Yahoo können sich auch von Google unterscheiden, testen Sie sie daher separat und prüfen Sie IndexNow für Bing ab dessen Einführung 2021.
Der Entscheidungsbaum
1. Ist die Seite blockiert oder noindexed?
Prüfen Sie die URL in der Search Console. Betrachten Sie den gerenderten HTML-Code, den HTTP-Header und die robots.txt. Ein noindex, das aus der Staging-Phase übrig geblieben ist, ist der übliche Übeltäter. Wenn ja, entfernen Sie es und fordern Sie die Indexierung an.
2. Wählt Google eine andere Canonical-URL?
Vergleichen Sie die vom Benutzer deklarierte Canonical-URL mit der von Google ausgewählten. Wenn sie abweichen, ist die Seite aus Sicht von Google ein Duplikat oder ein nahezu identisches Duplikat. Führen Sie zusammen, differenzieren Sie oder akzeptieren Sie es.
3. Ist die Seite von echten Sektionen aus erreichbar?
Zählen Sie interne Links von Seiten, die selbst indexiert sind. Weniger als zwei oder nur aus der Sitemap bedeuten eine schwache Entdeckung. Fügen Sie Links von einer Hub-Seite hinzu.
4. Hat die Seite externe Links?
Prüfen Sie toppages und backlinks für die URL. Wenn andere Domains darauf verlinken, beheben Sie zuerst die internen Links und rechnen Sie mit einer schnelleren Aufnahme. Wenn keine vorhanden sind, muss die Seite ihren Platz durch Inhalt verdienen.
5. Ist die Seite das Behalten wert?
Dünne, templatebasierte oder parameterbasierte Seiten werden oft absichtlich ausgeschlossen. Konsolidieren Sie, setzen Sie noindex oder löschen Sie. Verschwenden Sie keine Crawl-Budget für Diskussionen.
Worauf jeder Zweig normalerweise hinweist
| Feststellung | Typische Ursache | Maßnahme | Zeit bis zum sichtbaren Effekt |
|---|---|---|---|
| noindex oder Robots-Blockade | Staging-Regel in die Produktion übernommen | Entfernen und Indexierung anfordern | Tage bis wenige Wochen |
| Andere Google-Canonical-URL | Duplikate, Parameter, dünne Varianten | Konsolidieren oder umschreiben | Wochen |
| Wenige interne Links | Waise oder tiefe Seite | Link von Hubs und Sitemap | Wochen |
| Links vorhanden, aber nicht indexiert | Inhalt als geringwertig eingestuft | Inhalt verbessern, Redirect oder Canonical ehrlich halten | Ein bis zwei Monate |
| Viele Seiten, alle betroffen | Site-weites Qualitäts- oder Struktur-Signal | Ausdünnen und konsolidieren, bevor weitere eingereicht werden | Monate |
Wenn die Index-Zahl stark sinkt
Ein Rückgang von zehntausenden auf einige Dutzend ist ein Ereignis, kein Trend. Schauen Sie zuerst auf das Datum. Vergleichen Sie es mit Ihren eigenen Releases, denn eine Template-Änderung oder ein noindex-Flag auf einer gemeinsamen Komponente erklärt die meisten plötzlichen Rückgänge.
Probieren Sie dann Stichproben. Nehmen Sie fünfzig URLs vor dem Rückgang und fünfzig danach und prüfen Sie den Status, die Canonical-URL und die internen Links jeder Gruppe. Das Muster zeigt sich in der Regel im Sample, bevor es sich in den Gesamtzahlen zeigt.
Indexiert, aber durch robots.txt blockiert
Eine URL kann als indexiert erscheinen, während robots.txt das Crawlen blockiert. Google kann die Adresse durch Links kennen und sie auflisten, ohne den Inhalt gelesen zu haben, daher ist die Auflistung dünn und hat oft keine Beschreibung. Heben Sie den Pfad auf, wenn Sie möchten, dass die Seite aufgrund ihres Inhalts bewertet wird, oder lassen Sie sie blockiert und akzeptieren Sie den bloßen Eintrag.
Prüfen Sie die Regel, die zur URL passt. Ein breites Muster, das für einen Staging-Pfad geschrieben wurde, kann Live-Produktordner versehentlich erfassen, und die Lösung ist eine engere Zeile, nicht eine zweite Datei.
Warum ein Sitemap-Eintrag wartet und eine manuelle Anfrage nicht
Eine URL, die Sie manuell anfordern, kann innerhalb von Tagen indexiert werden, während dieselbe URL, die nur in der Sitemap aufgeführt ist, draußen bleibt. Diese Lücke spiegelt meist die Crawl-Priorität wider, nicht die Seitenqualität. Eine Anfrage schiebt eine Seite nach vorne in der Warteschlange, ein Sitemap-Eintrag wartet darin.
Die dauerhafte Lösung ist in beiden Fällen dieselbe. Verlinken Sie die Seite von einer Seite aus, die bereits gecrawlt wird, und halten Sie die Sitemap frei von veralteten Einträgen, sodass beide Wege zur selben URL führen.
Bevor Sie die Indexierung für eine URL anfordern
- Die URL gibt 200 mit dem echten Inhalt zurück, nicht eine Hülle oder einen Spinner.
- Es erscheint kein noindex im HTML oder im Antwort-Header.
- Die Canonical-URL verweist auf die URL selbst oder auf eine Version, die Sie absichtlich gewählt haben.
- Mindestens ein interner Link stammt von einer Seite, die bereits indexiert ist.
- Die URL ist in der Sitemap aufgeführt und die Sitemap enthält keine veralteten Einträge.
- Sie haben eine kurze Notiz dazu, warum die Seite überhaupt indexiert werden sollte.
site: Ergebnisse und Live-Tests lesen
Eine site: Abfrage zeigt, was Google in seinem Index hat, wenn Sie sie ausführen. Sie ist eine Momentaufnahme. Ein leeres Ergebnis für eine Seite, die Sie im Seitenbericht sehen können, ist ein Grund, erneut zu prüfen, kein Urteil.
URL-Inspektion und ihr Live-Test beantworten eine engere Frage: Was Google gerade für eine Adresse abrufen und rendern kann. Nutzen Sie es, um ein Abruf- oder Render-Problem von einem Qualitätsproblem zu trennen.
site: Abfragen ausführen, ohne sich selbst zu täuschen
Führen Sie site: mit der exakten Adresse aus, dann erneut mit einem einzigartigen Satz aus der Seite. Zwei leere Antworten für eine Live-Seite bedeuten normalerweise, dass die URL nicht indexiert ist oder unter einer anderen Canonical-URL indexiert ist. Prüfen Sie die Canonical-URL, bevor Sie etwas anderes annehmen.
Ein Ergebnis ohne Snippet ist ein anderer Zustand als gar kein Ergebnis. Notieren Sie, was Sie sehen, denn die Lösung für jedes ist unterschiedlich.
Die deklarierte und die ausgewählte Canonical-URL vergleichen
Öffnen Sie die URL-Inspektion auf einer indexierten Seite und vergleichen Sie die von Ihnen deklarierte Canonical-URL mit der von Google ausgewählten. Eine Diskrepanz bedeutet, dass Google eine andere Seite als Vertreter dieses Inhalts gewählt hat. Diese Wahl kann für Sie richtig oder falsch sein, also entscheiden Sie, welche es ist, bevor Sie etwas ändern.
Wenn die gerenderte Version leer ist, liegt das Problem im Build und nicht im Index. Das JavaScript-Link-Audit behandelt diesen Fall.
Die Prüfung im größeren Maßstab durchführen
Einige hundert URLs manuell zu prüfen, funktioniert einmal. Eine wiederkehrende Prüfung benötigt Status-, Canonical- und Link-Daten aus einem Skript und eine Datei, die die Historie jedes Laufs speichert.
Beginnen Sie mit den URLs, die bereits externe Links anziehen. Führen Sie toppages auf dem Host aus, um Backlinks zu Website-Bereichen zu finden, die es wert sind, geprüft zu werden, und vergleichen Sie diese Liste mit dem Export „Nicht indexiert“. Die Überschneidung ist die Gruppe, die zuerst behoben werden muss. Externe Seiten verlinken bereits dorthin.
Was für jede URL aufgezeichnet werden soll
Speichern Sie eine Zeile pro URL mit ihrem Statuscode, ihrer deklarierten Canonical-URL, der von Google ausgewählten Canonical-URL, der Anzahl interner Links von indexierten Seiten und der Anzahl der verlinkenden Domains. Fünf Spalten reichen aus, um die Liste in Gruppen zu sortieren, die unterschiedliche Arbeiten erfordern.
Sortieren Sie die Gruppen, bevor Sie handeln. Eine URL mit externen Links, einer falschen Canonical-URL und keinem internen Pfad benötigt eine andere Lösung als eine, die einfach neu ist, und die Vermischung beider verschwendet eine Sprint-Zeit für das falsche Problem.
Behalten Sie die Datei für jeden Lauf. Die Änderung zwischen zwei Läufen zeigt, ob eine Lösung funktioniert hat, was eine einzelne Momentaufnahme Ihnen nicht sagen kann.
Die Anfrage-Warteschlange kurz halten
Begrenzen Sie manuelle Indexierungsanfragen auf die Gruppe, die externe Links und eine saubere Canonical-URL hat. Diese Seiten haben die beste Chance auf eine schnelle Aufnahme und den größten Wert, wenn sie draußen bleiben.
Seiten mit einer widersprüchlichen Canonical-URL oder dünnem Inhalt gehören in eine separate Liste zur Konsolidierung. Diese immer wieder anzufordern, fügt nur Rauschen zur Warteschlange hinzu und sagt Ihnen nichts Neues.
Indexierungsfragen
- Wie lange sollte es dauern, bis eine neue Seite im Index erscheint?
- Von einigen Stunden bis zu mehreren Wochen. Etablierte Sites mit starker interner Verlinkung sehen neue URLs innerhalb von Tagen. Neue Sites warten häufig länger. Unter vier Wochen ohne Anzeichen eines Problems ist keinen Grund zur Panik.
- Beeinflusst noindex das Crawl-Budget?
- Eine Seite mit noindex wird noch gecrawlt, um das Tag zu sehen, obwohl Google dazu neigt, die Häufigkeit des Aufrufs zu reduzieren. Für die meisten Sites unter zehntausenden URLs ist das Crawl-Budget nicht das Limit, um das Sie sich Sorgen machen sollten.
- Helfen Backlinks dabei, dass eine Seite indexiert wird?
- Sie helfen bei der Entdeckung und zeigen, dass die Seite externes Interesse hat. Sie erzwingen die Indexierung nicht. Eine verlinkte Seite, die dünn oder dupliziert ist, kann dennoch ausgeschlossen werden.
- Ist die Indexierung in der Search Console anzufordern eine Lösung?
- Es ist ein Schubs, keine Heilung. Wenn die zugrunde liegende Ursache ein Canonical-Konflikt, dünner Inhalt oder keine internen Links sind, fällt die Seite tendenziell wieder heraus.
