صفحات غير مفهرسة: شجرة قرار مع فحوصات الروابط
تقدم Search Console علامتين متشابهتين بسببين مختلفين. انتقل عبر الفروع بالترتيب وتوقف عند أول فرع يتطابق مع حالتك.
فريق أبحاث ArchiLinks ·
تعني "تم اكتشافها، وغير مفهرسة حالياً" أن Google تعرف عنوان URL ولكن لم تقم بجلبه. أما "تم الزحف إليها، وغير مفهرسة حالياً" فتعني أنه تم جلب الصفحة واختارت Google عدم الاحتفاظ بها. الأول يتعلق أساساً بالأولوية والاكتشاف. والثاني يتعلق بالصفحة نفسها.
لماذا تنتمي الروابط إلى التشخيص
تقوم الفرق بتشخيص مشكلة الفهرسة على أنها مشكلة تقنية بحتة. وغالباً ما تكون كذلك. ومع ذلك، يبقى إشارة واحدة سهلة التجاوز.
عندما تجد روابط خلفية لعناوين URL لموقعك مفقودة من الفهرس، فإنك تتعلم ما إذا كانت المواقع الأخرى تدعمها أم لا، والصفحة التي لا تحتوي على أي روابط داخلية أو خارجية تمنح Google سبباً ضئيلاً جداً لإنفاق وقت الزحف أو مساحة الفهرسة عليها.
من الشائع جداً أن يحتوي الموقع على بضع عشرات من الصفحات الرقيقة وخريطة موقع مسطحة، وهو ما يجب التحقق منه أولاً.
لمجموعة كاملة من استدعاءات الروابط، راجع سكربتات API؛ وللقسم الذي تنوي نقله، يضع قائمة التحقق من الهجرة فحوصات الفهرسة عند الأسبوع T+1. كما يمكن أن يختلف Bing وYahoo عن Google، لذا اختبرهما بشكل منفصل، وخذ في الاعتبار استخدام IndexNow لـ Bing منذ إطلاقه في عام 2021.
شجرة القرار
1. هل الصفحة محجوبة أم تحتوي على noindex؟
فحص عنوان URL في Search Console. انظر إلى HTML المُعرض، وروابط HTTP header وملفات robots.txt. غالباً ما يكون سبب المشكلة هو بقاء noindex من مرحلة التطوير. إذا كان الأمر كذلك، أزلها واطلب الفهرسة.
2. هل تختار Google رابطاً موحداً (canonical) مختلفاً؟
قارن الرابط الموحد الذي أعلنته المستخدم مع الرابط الذي حددته Google. إذا اختلفا، فإن الصفحة تعتبر نسخة مكررة أو شبه مكررة من وجهة نظر Google. ادمجها، أو افرق بينها، أو اقبل الأمر.
3. هل يمكن الوصول إلى الصفحة من أقسام حقيقية؟
احسب الروابط الداخلية القادمة من الصفحات التي يتم فهرستها بالفعل. إذا كان عددها أقل من اثنين، أو تأتي فقط من خريطة الموقع، فهذا يعني اكتشافاً ضعيفاً. أضف روابط من صفحة رئيسية (hub).
4. هل تحتوي الصفحة على أي روابط خارجية؟
تحقق من toppages وbacklinks لعنوان URL. إذا كانت مجالات أخرى تربط بها، فأصلح الروابط الداخلية أولاً وتوقع تحسناً أسرع. إذا لم توجد، يجب على الصفحة أن تستحق مكانها من خلال المحتوى.
5. هل تستحق الصفحة البقاء؟
غالباً ما يتم استبعاد الصفحات الرقيقة أو القالبية أو القائمة على المعلمات. ادمجها، أو أضف noindex، أو احذفها. لا تنفق ميزية الزحف في الجدال.
إلى ماذا تشير كل فرع عادةً
| النتيجة | السبب النموذجي | الإجراء | الوقت اللازم لرؤية الأثر |
|---|---|---|---|
| noindex أو حظر robots | تم إرسال قاعدة مرحلة التطوير إلى الإنتاج | إزالة وطلب الفهرسة | أيام إلى بضعة أسابيع |
| رابط موحد (canonical) مختلف في Google | نسخ مكررة، معلمات، نسخ رقيقة | دمج أو إعادة كتابة | أسابيع |
| قليل من الروابط الداخلية | صفحة يتيمة أو عميقة | رابط من الصفحات الرئيسية وخريطة الموقع | أسابيع |
| الروابط موجودة ولكن الصفحة غير مفهرسة | تم تقييم المحتوى بأنه منخفض القيمة | تحسين المحتوى، والحفاظ على التوجيه أو الرابط الموحد (canonical) صادقاً | شهر أو شهران |
| العديد من الصفحات، جميعها متأثرة | إشارة جودة أو هيكل شاملة للموقع | تقليم ودمج قبل تقديم المزيد | أشهر |
عما ينخفض عدد الصفحات المفهرسة بشكل حاد
العدد الذي ينخفض من عشرات الآلاف إلى بضع عشرات هو حدث، وليس اتجاهًا. انظر إلى التاريخ أولاً. قارنه بإصداراتك الخاصة، لأن تغيير قالب أو علامة noindex على مكون مشترك يفسر معظم الانخفاضات المفاجئة.
ثم قم بأخذ عينة. خذ خمسين عنوان URL من قبل الانخفاض وخمسين من بعده، وانظر إلى حالة كل مجموعة، والرابط الموحد (canonical) والروابط الداخلية. النمط يظهر عادة في العينة قبل أن يظهر في الإجمالي.
مفهرسة ولكن محجوبة بواسطة robots.txt
يمكن أن يظهر عنوان URL كمفهرس بينما تحجبه ملفات robots.txt. يمكن لـ Google معرفة العنوان من الروابط ووضعه في القائمة دون قراءة المحتوى، لذا تكون القائمة رقيقة وغالباً لا تحتوي على وصف. أزل الحظر إذا كنت تريد تقييم الصفحة بناءً على محتواها، أو اتركها محجوبة واقبل الإدخال المجرد.
تحقق من القاعدة التي تطابق عنوان URL. يمكن لنمط واسع مكتوب لمسار مرحلة التطوير أن يلتقط مجلدات المنتجات الحية بالخطأ، والحل هو سطر أضيق، وليس ملفاً ثانياً.
لماذا ينتظر إدراج خريطة الموقع ولا ينتظر الطلب اليدوي
عنوان URL تطلبه يدوياً قد يتم فهرسته خلال أيام، بينما يبقى العنوان نفسه المدرج فقط في خريطة الموقع خارجاً. يعكس هذا الفارق عادةً أولوية الزحف بدلاً من جودة الصفحة. ينقل الطلب الصفحة إلى مقدمة الطابور، بينما ينتظر إدراج خريطة الموقع في الطابور.
الحل الدائم هو نفسه في كلتا الحالتين. اربط الصفحة من صفحة يتم زحفتها بالفعل، واحتفظ بخريطة الموقع خالية من الإدراجات القديمة، بحيث تؤدي كلتا الطريقتين إلى نفس عنوان URL.
قبل طلب فهرسة عنوان URL
- يعيد عنوان URL استجابة 200 مع المحتوى الحقيقي، وليس غلافًا أو مؤشر تحميل.
- لا يظهر noindex في HTML أو رأس الاستجابة.
- يشير الرابط الموحد (canonical) إلى عنوان URL نفسه، أو إلى نسخة اخترتها عن قصد.
- يأتي رابط داخلي واحد على الأقل من صفحة يتم فهرستها بالفعل.
- مدرج عنوان URL في خريطة الموقع، ولا تحتوي خريطة الموقع على إدراجات قديمة.
- لديك ملاحظة موجزة حول سبب فهرسة الصفحة أصلاً.
قراءة نتائج site: والاختبارات الحية
يظهر استعلام site: ما لدى Google في فهرسه عند تشغيله. إنه لقطة زمنية. النتيجة الفارغة لصفحة يمكنك رؤيتها في تقرير الصفحات هي سبب للتحقق مرة أخرى، وليست حكماً نهائياً.
فحص عنوان URL واختباره مباشرة يجيبان على سؤال أضيق: ما الذي يمكن لـ Google جلبه وعرضه الآن لعنوان واحد. استخدمه لفصل مشكلة الجلب أو العرض عن مشكلة الجودة.
تشغيل استعلامات site: دون خداع النفس
شغل site: مع العنوان الدقيق، ثم مرة أخرى مع عبارة فريدة من الصفحة. إجابتان فارغتان لصفحة حية تعنيان عادةً أن عنوان URL غير مفهرس، أو أنه مفهرس تحت رابط موحد (canonical) آخر. تحقق من الرابط الموحد قبل أن تفترض أي شيء آخر.
النتيجة بدون مقتطف هي حالة مختلفة عن عدم وجود نتيجة على الإطلاق. لاحظ أيهما ترى، لأن الإصلاح لكل منهما مختلف.
مقارنة الرابط الموحد (canonical) المعلن والمحدد
افتح فحص عنوان URL على صفحة مفهرسة وقارن الرابط الموحد الذي أعلنته مع الرابط الذي حددته Google. يعني الاختلاف أن Google اختارت صفحة أخرى كممثل لهذا المحتوى. يمكن أن يكون هذا الاختيار صحيحاً أو خاطئاً بالنسبة لك، لذا قرر أيهما قبل تغيير أي شيء.
إذا كانت النسخة المعروضة فارغة، فإن المشكلة تكمن في البناء وليس في الفهرسة. يغطي تدقيق الروابط بـ JavaScript تلك الحالة.
تشغيل الفحص على نطاق أوسع
التحقق من بضع مئات من عناوين URL يدوياً يعمل مرة واحدة. يتطلب الفحص المتكرر بيانات الحالة، والرابط الموحد (canonical)، والروابط من سكربت، وملفاً يحفظ تاريخ كل تشغيل.
ابدأ بالعناوين التي تجذب بالفعل روابط خارجية. شغل toppages على المضيف حتى تتمكن من العثور على روابط خلفية لأقسام الموقع تستحق الفحص، ثم قارن تلك القائمة مع تصدير "غير مفهرسة". التداخل هو المجموعة التي يجب إصلاحها أولاً. المواقع الخارجية تشير إليها بالفعل.
ما يجب تسجيله لكل عنوان URL
احفظ سطراً واحداً لكل عنوان URL مع رمز الحالة الخاص به، والرابط الموحد (canonical) المعلن، والرابط الموحد الذي حددته Google، وعدد الروابط الداخلية من الصفحات المفهرسة، وعدد المجالات التي تربط بها. خمسة أعمدة كافية لتصنيف القائمة إلى مجموعات تحتاج إلى عمل مختلف.
رتب المجموعات قبل أن تتصرف. عنوان URL يحتوي على روابط خارجية، ورابط موحد (canonical) خاطئ، ولا يوجد مسار داخلي يحتاج إلى إصلاح مختلف عن واحد جديد ببساطة، وخلط الاثنين يضيع سباقاً على المشكلة الخاطئة.
احتفظ بالملف لكل تشغيل. التغيير بين تشغيلين يظهر ما إذا كان الإصلاح قد نجح، وهو ما لا يمكن لقطة زمنية واحدة أن تخبرك بها.
الحفاظ على قائمة الطلبات قصيرة
حدد طلبات الفهرسة اليدوية للمجموعة التي تحتوي على روابط خارجية ورابط موحد (canonical) نظيف. هذه الصفحات لديها أفضل فرصة للاستلام السريع، وهي تحمل أكبر قيمة إذا بقيت خارج الفهرس.
الصفحات ذات الرابط الموحد (canonical) المتعارض أو المحتوى الرقيق تنتمي إلى قائمة منفصلة للدمج. طلبها مراراً وتكراراً يضيف فقط ضوضاء إلى قائمة الانتظار ولا يخبرك بشيء جديد.
أسئلة حول الفهرسة
- كم من الوقت يجب أن تستغرق الصفحة الجديدة للظهور في الفهرس؟
- من بضع ساعات إلى عدة أسابيع. المواقع الراسخة ذات الروابط الداخلية القوية ترى عناوين URL جديدة خلال أيام. المواقع الجديدة تنتظر عادةً لفترة أطول. أقل من أربعة أسابيع بدون إشارات مشكلة لا يستحق الذعر بشأنها.
- هل يؤثر noindex على ميزية الزحف؟
- يتم زحف الصفحة التي تحتوي على noindex لاكتشاف العلامة، على الرغم من أن Google تميل إلى تقليل تكرار العودة إليها. بالنسبة لمعظم المواقع التي يقل عددها عن عشرات الآلاف من عناوين URL، فإن ميزية الزحف ليست الحد الذي يجب أن تقلق بشأنه.
- هل تساعد الروابط الخلفية في فهرسة الصفحة؟
- تساعد في الاكتشاف وتظهر أن الصفحة تحظى باهتمام خارجي. لكنها لا تفرض الفهرسة. يمكن استبعاد صفحة مرتبطة إذا كانت رقيقة أو مكررة.
- هل طلب الفهرسة في Search Console هو الإصلاح؟
- إنه دفع، وليس علاجاً. إذا كانت السبب الجذري هو تعارض في الرابط الموحد (canonical)، أو محتوى رقيق، أو عدم وجود روابط داخلية، فإن الصفحة تميل إلى الخروج مرة أخرى.
