Sidor som inte indexerats: en beslutsstruktur med länkkontroller
Sökkonsolen ger två liknande etiketter med olika orsaker. Gå igenom grenarna i ordning och stanna vid den första som matchar.
ArchiLinks forskningsgrupp ·
Upptäckt, för närvarande inte indexerad betyder att Google känner till URL:en men inte har hämtat den. Crawlad, för närvarande inte indexerad betyder att den har hämtat sidan och valt att inte behålla den. Det första handlar främst om prioritet och upptäckt. Det andra handlar om sidan i sig.
Varför länkar hör hemma i diagnosen
Team diagnostiserar indexering som ett rent tekniskt problem. Det är det ofta. Men en signal är lätt att missa.
När du hittar backlänkar till webbplats-URL:er som saknas i indexet får du veta om externa sidor intygar dem, och en sida med noll interna länkar och noll externa ger Google mycket lite anledning att använda crawl tid eller indexutrymme på den.
En webbplats med några dussin tunna sidor och en platt sitemap är tillräckligt vanlig att kontrollera först.
För hela uppsättningen länkkommandon, se API-skript; för avsnitt du är på väg att flytta, sätter migrationschecklistan indexkontroller till T+1 vecka. Bing och Yahoo kan också skilja sig från Google, så testa dem separat, och överväg IndexNow för Bing från dess lansering 2021.
Beslutsstrukturen
1. Är sidan blockerad eller noindexed?
Inspektera URL:en i Sökkonsolen. Titta på den rendererade HTML:en, HTTP-huvudet och robots.txt. En noindex som lämnats kvar från staging är den vanliga skylden. Om ja, ta bort den och begär indexering.
2. Väljer Google en annan canonical?
Jämför den användardeklarerede canonicalen med den Google-valda. Om de skiljer sig åt är sidan en kopia eller nästan kopia i Googles ögon. Slå ihop, differentiera eller acceptera den.
3. Är sidan nåbar från riktiga avsnitt?
Räkna interna länkar från sidor som själva är indexerade. Färre än två, eller bara från sitemap, betyder svag upptäckt. Lägg till länkar från en hub.
4. Har sidan några externa länkar?
Kontrollera toppages och backlinks för URL:en. Om andra domäner länkar till den, fixa interna länkar först och förvänta dig en snabbare upptäckt. Om inga, måste sidan tjäna sin plats på innehåll.
5. Är sidan värd att behålla?
Tunna, mallbaserade eller parameterbaserade sidor utesluts ofta medvetet. Konsolidera, noindexera eller ta bort. Använd inte crawl budget på att argumentera.
Vad varje gren vanligtvis pekar på
| Hittad | Typisk orsak | Åtgärd | Tid för att se en effekt |
|---|---|---|---|
| noindex eller robots-blockering | Staging-regel skickad till produktion | Ta bort och begär indexering | Dagar till några veckor |
| Annan Google-canonical | Dubbletter, parametrar, tunna varianter | Konsolidera eller skriv om | Veckor |
| Få interna länkar | Föräldralös eller djup sida | Länk från hubbar och sitemap | Veckor |
| Länkar finns men inte indexerade | Innehåll bedömt som lågt värde | Förbättra innehåll, behåll omledningen eller canonicalen ärlig | En till två månader |
| Många sidor, alla drabbade | Kvalitets- eller struktursignal för hela webbplatsen | Rensa och konsolidera innan du skickar in mer | Månader |
När indexeringsantalet sjunker kraftigt
Ett antal som faller från tiotusentals till några dussin är en händelse, inte en trend. Titta på datumet först. Jämför det med dina egna släpp, eftersom en malländring eller en noindex-flagga på en delad komponent förklarar de flesta plötsliga nedgångar.
Prova sedan. Ta femtio URL:er från före fallet och femtio från efter, och titta på varje grupps status, canonical och interna länkar. Mönstret visar vanligtvis i provet innan det visar sig i totalerna.
Indexerad men blockerad av robots.txt
En URL kan visas som indexerad medan robots.txt blockerar crawling. Google kan känna till adressen från länkar och lista den utan att läsa innehållet, så listningen är tunn och har ofta ingen beskrivning. Avblockera sökvägen om du vill att sidan ska bedömas på sitt innehåll, eller behåll den blockerad och acceptera den nakna posten.
Kontrollera regeln som matchar URL:en. Ett brett mönster skrivet för en sökväg för staging kan fånga live produktmappar av misstag, och fixen är en smalare rad, inte en andra fil.
Varför en sitemap-post väntar och en manuell begäran inte gör det
En URL du begär manuellt kan indexeras inom dagar, medan samma URL som bara listas i sitemap stannar utanför. Den där skillnaden speglar vanligtvis crawlprioritet snarare än sidkvalitet. En begäran flyttar en sida upp i kön, och en sitemap-post väntar i den.
Den hållbara fixen är densamma i båda fallen. Länka sidan från en sida som redan crawlas, och håll sitemap fri från inaktuella poster, så att båda vägarna leder till samma URL.
Innan du begär indexering för en URL
- URL:en returnerar 200 med det riktiga innehållet, inte ett skal eller en spinner.
- Ingen noindex visas i HTML:en eller svarshuvudet.
- Canonicalen pekar på URL:en själv, eller på en version du valt medvetet.
- Minst en intern länk kommer från en sida som redan är indexerad.
- URL:en listas i sitemap, och sitemap innehåller inga inaktuella poster.
- Du har en kort anteckning om varför sidan ska indexeras överhuvudtaget.
Att läsa site:-resultat och live-tester
En site:-fråga visar vad Google har i sitt index när du kör den. Det är en ögonblicksbild. Ett tomt resultat för en sida du kan se i Sidor-rapporten är en anledning att kolla igen, inte en dom.
URL-inspektion och dess live-test svarar på en smalare fråga: vad Google kan hämta och rendera just nu för en adress. Använd det för att separera ett hämta- eller renderproblem från ett kvalitetsproblem.
Att köra site:-frågor utan att lura dig själv
Kör site: med exakt adress, kör sedan igen med ett unikt uttryck från sidan. Två tomma svar för en live-sida betyder vanligtvis att URL:en inte är indexerad, eller att den är indexerad under en annan canonical. Kontrollera canonicalen innan du antar något annat.
Ett resultat utan en snippet är ett annat tillstånd från inget resultat alls. Notera vilken du ser, eftersom fixen för varje är annorlunda.
Att jämföra den deklarerade och den valda canonicalen
Öppna URL-inspektion på en indexerad sida och jämför den canonical du deklarerade med den Google valde. En mismatch betyder att Google valde en annan sida som representant för detta innehåll. Det valet kan vara rätt eller fel för dig, så bestäm vilket det är innan du ändrar något.
Om den renderade versionen är tom är problemet i bygget snarare än i indexet. JavaScript-länkrevisionen täcker det fallet.
Att köra kontrollen i större skala
Att kontrollera ett par hundra URL:er för hand fungerar en gång. En återkommande kontroll behöver status, canonical och länkdata från ett skript, och en fil som håller historiken för varje körning.
Börja med URL:erna som redan lockar externa länkar. Kör toppages på värden så att du kan hitta backlänkar till webbplatsavsnitt som är värda att kontrollera, jämför sedan den listan med Exporten Inte indexerad. Överlappningen är gruppen att fixa först. Externa sidor pekar redan dit.
Vad du ska registrera för varje URL
Lagra en rad per URL med dess statuskod, dess deklarerade canonical, den canonical Google valde, antalet interna länkar från indexerade sidor och antalet länkande domäner. Fem kolumner räcker för att sortera listan i grupper som behöver olika arbete.
Sortera grupperna innan du agerar. En URL med externa länkar, en fel canonical och ingen intern sökväg behöver en annan fix från en som helt enkelt är ny, och att blanda ihop dem slösar en sprint på fel problem.
Behåll filen för varje körning. Förändringen mellan två körningar visar om en fix fungerade, vilket en enskild ögonblicksbild inte kan berätta för dig.
Att hålla begärandekön kort
Begränsa manuella indexbegäran till gruppen som har externa länkar och en ren canonical. De sidorna har bästa chans till snabb upptäckt, och de bär mest värde om de stannar utanför.
Sidor med en konfligerande canonical eller tunt innehåll hör hemma i en separat lista för konsolidering. Att begära dem om och om igen lägger bara till brus i kön och berättar dig inget nytt.
Indexeringsfrågor
- Hur lång tid ska en ny sida ta att dyka upp i indexet?
- Från några timmar till flera veckor. Etablerade webbplatser med starka interna länkar ser nya URL:er inom dagar. Nya webbplatser väntar vanligtvis längre. Under fyra veckor utan signaler på ett problem är inte värt att panika över.
- Påverkar noindex crawl budget?
- En sida med noindex crawlas fortfarande för att se taggen, även om Google tenderar att minska hur ofta den returnerar. För de flesta webbplatser under tiotusentals URL:er är crawl budget inte den gräns du bör oroa dig för.
- Hjälper backlänkar en sida att bli indexerad?
- De hjälper upptäckt och visar att sidan har exterint intresse. De tvingar inte indexering. En länkad sida som är tunn eller duplicerad kan fortfarande uteslutas.
- Är att begära indexering i Sökkonsolen en fix?
- Det är en knuff, inte en kur. Om den underliggande orsaken är en canonical-konflikt, tunt innehåll eller inga interna länkar, tenderar sidan att falla ut igen.
