مدقق قابلية الفهرسة

التحقق من قابلية الفهرسة
التالي

قد تكون الصفحة جيدة تماما لكنها غير مرئية للبحث لأن وسما واحدا يقول «noindex» أو لأن robots.txt يحجب الزاحف. الصق رابطا فيقيّم هذا المدقق كل إشارة تستخدمها غوغل، robots.txt، وميتا robots، وترويسة X-Robots-Tag، وهدف canonical، وحالة HTTP، ويخبرك إن كانت الصفحة قابلة للفهرسة ولماذا، وما الذي تغيره إن لم تكن كذلك.

كيفية التحقق من قابلية الفهرسة

  1. 1

    أدخل رابطا

    يجلب المدقق الرابط كما يفعل Googlebot.

  2. 2

    يحل عمليات إعادة التوجيه

    تتبّع سلسلة قفزات 301/302؛ والرابط النهائي هو المقيَّم.

  3. 3

    يقرأ كل إشارة قابلية فهرسة

    قواعد robots.txt، وميتا robots، وX-Robots-Tag، وcanonical، ورمز الحالة.

  4. 4

    الحكم والسبب

    قابل للفهرسة / غير قابل للفهرسة / جزئي، مع الإشارة المحددة التي سببت الحكم.

إشارات قابلية الفهرسة وأسبقيتها

تقيّم غوغل مجموعة من الإشارات بترتيب محدد؛ وإشارة سلبية واحدة في السلسلة تكفي لحجب الفهرسة.

ترتيب تقييم الإشارات

  1. حالة HTTP: 2xx مطلوبة. تتبع سلاسل 3xx؛ وتنهي 4xx و5xx الفهرسة.
  2. ‏robots.txt: إذا كان الرابط ممنوعا على Googlebot، فلن تزحف الصفحة أبدا، ما يعني أن وسوم noindex عليها لن ترى أبدا.
  3. ترويسة X-Robots-Tag: قيمة noindex في ترويسات استجابة HTTP تحجب الفهرسة.
  4. ميتا robots: الوسم <meta name="robots" content="noindex"> يحجب الفهرسة.
  5. ‏canonical: canonical يشير إلى مكان آخر يعني أن غوغل تفهرس ذلك الرابط الآخر بدلا منه.
  6. جودة المحتوى وكشف التكرار: قد تتخطى غوغل الفهرسة حتى دون توجيهات صريحة.

الأخطاء الشائعة التي يلتقطها

المشكلة السبب
قسم كامل غير مفهرس قاعدة Disallow: في robots.txt
صفحة محددة غير مفهرسة noindex في ميتا robots
مفهرسة برابط خاطئ canonical يشير إلى مكان آخر
عالق عند 5xx خطأ الخادم يكسر الزحف
تعارض Disallow + noindex robots.txt يحجب الزحف، فلا يقرأ وسم noindex أبدا
تسرب بيئة الاختبار إلى الإنتاج X-Robots-Tag: noindex متبقٍ من بيئة اختبار

فخ robots.txt + noindex

إذا منعت رابطا بـ Disallow: في robots.txt، فلن تزحف غوغل إليه أبدا، فلن ترى أي وسم noindex. قد يبقى الرابط ظاهرا في نتائج البحث كمدخل «فارغ» بالرابط فقط دون وصف. لإزالة رابط من الفهرس بشكل صحيح، اسمح بالزحف واستخدم noindex، ثم احجب الزحف فقط بعد أن تكون غوغل قد أزالته من الفهرس.

الاختبار من منظور Googlebot

يرسل المدقق وكيل مستخدم Googlebot، فتظهر أي حيل من جانب الخادم من نوع «الزواحف فقط ترى X». تحقق دائما من روابط الإنتاج، لا بيئة الاختبار.

الأسئلة الشائعة

كون الصفحة قابلة للفهرسة يعني فقط أنه لا يوجد حجب تقني؛ ولا يضمن الفهرسة. تقرر غوغل أيضا بناء على الجودة المتصورة والمحتوى المكرر وميزانية الزحف. استخدم أداة فحص الروابط في Search Console للحصول على إجابة قاطعة من غوغل نفسها.

عادة ميتا robots (أو X-Robots-Tag) وحدها هي الجواب الصحيح. يحجب robots.txt الزحف؛ وتحجب ميتا robots الفهرسة. للصفحات التي لا تريد فهرستها، اسمح بالزحف حتى تستطيع غوغل قراءة وسم noindex لديك.

تقيّم غوغل الوجهة النهائية لسلسلة إعادة التوجيه. إعادة توجيه 301 من A إلى B تعني أن غوغل تفهرس B في النهاية لا A. يحاكي المدقق هذا بحل كل عمليات إعادة التوجيه قبل التقييم.

لا. الصفحات التي تتطلب مصادقة غير قابلة للفهرسة بحكم تعريفها. إن كنت تحتاج تحسين محركات بحث لها، ففكر في نسخة معاينة عامة.

أدوات ذات صلة

Page Speed Insights

أدخل أي رابط وافتح تدقيق سرعة مجاني في Google PageSpeed Insights أو GTmetrix أو WebPageTest لعرض مؤشرات Core Web Vitals ودرجات Lighthouse.

أداة فحص ملف robots.txt

الصق قواعد ملف robots.txt الخاص بك ومسار URL للتحقق مما إذا كان هذا المسار مسموحًا به أو محظورًا. تقرأ الأداة سطور Allow وDisallow وتوضح القاعدة المطابقة.

فاحص إعادة التوجيه

أدخل رابطًا وشاهد سلسلة إعادة التوجيه كاملة: كل قفزة 301 أو 302 أو 303 أو 307 أو 308 مع رمز حالتها وترويسة Location ورابط الوجهة النهائي.

معاينة مقتطف SERP من الرابط

الصق رابطًا وشاهد كيف يظهر عنوانه ووصف الميتا والرابط القانوني مباشرةً كمقتطف جوجل. يُجلب مباشرة من الصفحة، دون نسخ يدوي.

مولد خريطة الموقع

الصق قائمة عناوين URL الخاصة بك وأنشئ خريطة موقع XML صالحة مع changefreq وpriority وlastmod الاختياري، جاهزة للحفظ والإرسال إلى Search Console.

جهاز اختبار متوافق مع الهواتف المحمولة

قم بفحص سهولة استخدام عنوان URL على الأجهزة المحمولة؛ حيث يتم عرض الصفحة بأحجام شاشات الهواتف، ويتم تحديد أي مشاكل تتعلق بنقاط النقر، أو نصوص صغيرة جدًا، أو غياب بيانات ميتا الخاصة بحجم العرض.

الأداة متاحة بلغات أخرى