Halaman belum terindeks: pohon keputusan dengan pemeriksaan tautan
Search Console memberikan dua label serupa dengan penyebab berbeda. Ikuti cabang-cabangnya secara berurutan dan berhenti pada yang pertama kali cocok.
Tim riset ArchiLinks ·
Ditemukan, saat ini belum terindeks berarti Google mengetahui URL tetapi belum mengambilnya. Terindeks, saat ini belum terindeks berarti halaman telah diambil dan dipilih untuk tidak disimpan. Yang pertama terutama berkaitan dengan prioritas dan penemuan. Yang kedua berkaitan dengan halaman itu sendiri.
Mengapa tautan termasuk dalam diagnosis
Tim mendiagnosis pengindeksan sebagai masalah teknis murni. Seringkali memang begitu. Namun, satu sinyal tetap mudah terlewatkan.
Ketika Anda menemukan backlink ke URL situs web yang hilang dari indeks, Anda mengetahui apakah situs lain memberikan dukungan untuknya, dan halaman dengan nol tautan internal dan nol tautan eksternal memberikan Google alasan yang sangat sedikit untuk menghabiskan waktu crawling atau ruang indeks.
Situs dengan beberapa lusin halaman tipis dan sitemap datar cukup umum untuk diperiksa terlebih dahulu.
Untuk set lengkap panggilan tautan, lihat skrip API; untuk bagian yang akan Anda pindahkan, checklist migrasi menempatkan pemeriksaan pengindeksan pada T+1 minggu. Bing dan Yahoo juga dapat berbeda dari Google, jadi uji secara terpisah, dan pertimbangkan IndexNow untuk Bing sejak peluncurannya pada tahun 2021.
Pohon keputusan
1. Apakah halaman diblokir atau noindexed?
Periksa URL di Search Console. Lihat HTML yang dirender, header HTTP, dan robots.txt. noindex yang tertinggal dari staging adalah penyebab umum. Jika ya, hapus dan minta pengindeksan.
2. Apakah Google memilih canonical lain?
Bandingkan canonical yang dinyatakan pengguna dengan yang dipilih Google. Jika berbeda, halaman tersebut adalah duplikat atau hampir duplikat dalam pandangan Google. Gabungkan, bedakan, atau terima.
3. Apakah halaman dapat diakses dari bagian nyata?
Hitung tautan internal dari halaman yang sendiri sudah terindeks. Kurang dari dua, atau hanya dari sitemap, berarti penemuan yang lemah. Tambahkan tautan dari hub.
4. Apakah halaman memiliki tautan eksternal?
Periksa toppages dan backlinks untuk URL tersebut. Jika domain lain menautkan ke sana, perbaiki tautan internal terlebih dahulu dan harapkan pengumpulan yang lebih cepat. Jika tidak ada, halaman harus mendapatkan tempatnya berdasarkan konten.
5. Apakah halaman layak disimpan?
Halaman yang tipis, berbasis template, atau berbasis parameter sering dikecualikan secara sengaja. Konsolidasikan, noindex, atau hapus. Jangan habiskan anggaran crawling untuk berdebat.
Apa yang biasanya ditunjukkan oleh setiap cabang
| Temuan | Penyebab umum | Tindakan | Waktu untuk melihat efek |
|---|---|---|---|
| noindex atau blokir robots | Aturan staging dikirim ke produksi | Hapus dan minta pengindeksan | Beberapa hari hingga beberapa minggu |
| Canonical Google berbeda | Duplikat, parameter, varian tipis | Konsolidasi atau tulis ulang | Minggu |
| Sedikit tautan internal | Halaman yatim atau dalam | Tautan dari hub dan sitemap | Minggu |
| Tautan ada tetapi tidak terindeks | Konten dinilai bernilai rendah | Perbaiki konten, pertahankan redirect atau canonical yang jujur | Satu atau dua bulan |
| Banyak halaman, semua terpengaruh | Sinyal kualitas atau struktur seluruh situs | Potong dan konsolidasikan sebelum mengirimkan lebih banyak | Bulan |
Ketika jumlah terindeks turun tajam
Hitungan yang turun dari puluhan ribu menjadi beberapa lusin adalah peristiwa, bukan tren. Lihat tanggalnya terlebih dahulu. Bandingkan dengan rilis Anda sendiri, karena perubahan template atau flag noindex pada komponen bersama menjelaskan sebagian besar penurunan mendadak.
Kemudian sampel. Ambil lima puluh URL sebelum penurunan dan lima puluh setelahnya, dan lihat status, canonical, dan tautan internal setiap kelompok. Polanya biasanya terlihat dalam sampel sebelum terlihat dalam total.
Terindeks tetapi diblokir oleh robots.txt
URL dapat muncul sebagai terindeks sementara robots.txt memblokir crawling. Google dapat mengetahui alamat dari tautan dan mencantumkannya tanpa membaca konten, sehingga daftar tersebut tipis dan sering tidak memiliki deskripsi. Buka blokir jalur jika Anda ingin halaman dinilai berdasarkan kontennya, atau tetap blokir dan terima entri kosong.
Periksa aturan yang cocok dengan URL. Pola luas yang ditulis untuk jalur staging dapat menangkap folder produk langsung secara tidak sengaja, dan perbaikannya adalah baris yang lebih sempit, bukan file kedua.
Mengapa entri sitemap menunggu dan permintaan manual tidak
URL yang Anda minta secara manual mungkin terindeks dalam beberapa hari, sementara URL yang sama yang hanya terdaftar di sitemap tetap tidak masuk. Celah itu biasanya mencerminkan prioritas crawling daripada kualitas halaman. Permintaan memindahkan halaman ke atas antrian, dan entri sitemap menunggu di dalamnya.
Perbaikan tahan lama sama saja dalam kedua kasus. Tautkan halaman dari halaman yang sudah mendapatkan crawling, dan pertahankan sitemap bebas dari entri usang, sehingga kedua rute mengarah ke URL yang sama.
Sebelum Anda meminta pengindeksan untuk URL
- URL mengembalikan 200 dengan konten asli, bukan kulit atau spinner.
- Tidak ada noindex yang muncul di HTML atau header respons.
- Canonical mengarah ke URL itu sendiri, atau ke versi yang Anda pilih dengan sengaja.
- Setidaknya satu tautan internal berasal dari halaman yang sudah terindeks.
- URL terdaftar di sitemap, dan sitemap tidak berisi entri usang.
- Anda memiliki catatan singkat tentang mengapa halaman harus diindeks sama sekali.
Membaca hasil site: dan uji langsung
Kueri site: menunjukkan apa yang dimiliki Google di indeksnya saat Anda menjalankannya. Ini adalah snapshot. Hasil kosong untuk halaman yang dapat Anda lihat di laporan Halaman adalah alasan untuk memeriksa lagi, bukan vonis.
Inspeksi URL dan uji langsungnya menjawab pertanyaan yang lebih sempit: apa yang dapat Google ambil dan render sekarang untuk satu alamat. Gunakan untuk memisahkan masalah pengambilan atau rendering dari masalah kualitas.
Menjalankan kueri site: tanpa menipu diri sendiri
Jalankan site: dengan alamat yang tepat, lalu lagi dengan frasa unik dari halaman. Dua jawaban kosong untuk halaman langsung biasanya berarti URL tidak terindeks, atau bahwa URL tersebut terindeks di bawah canonical lain. Periksa canonical sebelum Anda mengasumsikan apa pun.
Hasil tanpa cuplikan adalah keadaan yang berbeda dari tidak ada hasil sama sekali. Catat mana yang Anda lihat, karena perbaikan untuk masing-masing berbeda.
Membandingkan canonical yang dinyatakan dan yang dipilih
Buka Inspeksi URL pada halaman yang terindeks dan bandingkan canonical yang Anda nyatakan dengan yang dipilih Google. Ketidakcocokan berarti Google memilih halaman lain sebagai perwakilan konten ini. Pilihan itu bisa benar atau salah bagi Anda, jadi putuskan mana yang terjadi sebelum mengubah apa pun.
Jika versi yang dirender kosong, masalahnya ada di build, bukan di indeks. Audit tautan JavaScript mencakup kasus tersebut.
Menjalankan pemeriksaan dalam skala lebih besar
Memeriksa beberapa ratus URL secara manual berfungsi sekali. Pemeriksaan berulang membutuhkan status, canonical, dan data tautan dari skrip, serta file yang menyimpan riwayat setiap pelaksanaan.
Mulailah dengan URL yang sudah menarik tautan luar. Jalankan toppages pada host sehingga Anda dapat menemukan backlink ke bagian situs web yang layak diperiksa, lalu bandingkan daftar itu dengan ekspor Tidak terindeks. Irisan adalah kelompok yang harus diperbaiki terlebih dahulu. Situs luar sudah menunjuk ke sana.
Apa yang harus dicatat untuk setiap URL
Simpan satu baris per URL dengan kode statusnya, canonical yang dinyatakan, canonical yang dipilih Google, jumlah tautan internal dari halaman yang terindeks, dan jumlah domain penaut. Lima kolom sudah cukup untuk mengurutkan daftar ke dalam kelompok yang membutuhkan pekerjaan berbeda.
Urutkan kelompok sebelum Anda bertindak. URL dengan tautan luar, canonical yang salah, dan tidak ada jalur internal memerlukan perbaikan yang berbeda dari yang baru saja baru, dan mencampur keduanya membuang sprint untuk masalah yang salah.
Simpan file untuk setiap pelaksanaan. Perubahan antara dua pelaksanaan menunjukkan apakah perbaikan berhasil, yang tidak dapat dikatakan oleh snapshot tunggal.
Mempertahankan antrian permintaan pendek
Batasi permintaan pengindeksan manual ke kelompok yang memiliki tautan luar dan canonical bersih. Halaman-halaman itu memiliki peluang terbaik untuk pengambilan cepat, dan mereka membawa nilai paling banyak jika tetap tidak masuk.
Halaman dengan canonical yang bertentangan atau konten tipis milik daftar terpisah untuk konsolidasi. Memintanya berulang kali hanya menambah kebisingan di antrian dan tidak memberi tahu Anda apa pun yang baru.
Pertanyaan pengindeksan
- Berapa lama waktu yang dibutuhkan halaman baru untuk muncul di indeks?
- Dari beberapa jam hingga beberapa minggu. Situs mapan dengan tautan internal yang kuat melihat URL baru dalam beberapa hari. Situs baru umumnya menunggu lebih lama. Di bawah empat minggu tanpa sinyal masalah tidak layak untuk panik.
- Apakah noindex memengaruhi anggaran crawling?
- Halaman dengan noindex masih di-crawl untuk melihat tag, meskipun Google cenderung mengurangi seberapa sering ia kembali. Untuk sebagian besar situs di bawah puluhan ribu URL, anggaran crawling bukan batas yang harus Anda khawatirkan.
- Apakah backlink membantu halaman terindeks?
- Mereka membantu penemuan dan menunjukkan halaman memiliki minat luar. Mereka tidak memaksa pengindeksan. Halaman yang ditautkan yang tipis atau duplikat masih dapat dikecualikan.
- Apakah meminta pengindeksan di Search Console adalah perbaikan?
- Itu adalah dorongan, bukan obat. Jika penyebab dasarnya adalah konflik canonical, konten tipis, atau tidak ada tautan internal, halaman cenderung keluar lagi.
