Softonic

مدقق قابلية الفهرسة

خطوة 1 / 3 التحقق من قابلية الفهرسة
التالي

قد تكون الصفحة جيدة تماما لكنها غير مرئية للبحث لأن وسما واحدا يقول «noindex» أو لأن robots.txt يحجب الزاحف. الصق رابطا فيقيّم هذا المدقق كل إشارة تستخدمها غوغل، robots.txt، وميتا robots، وترويسة X-Robots-Tag، وهدف canonical، وحالة HTTP، ويخبرك إن كانت الصفحة قابلة للفهرسة ولماذا، وما الذي تغيره إن لم تكن كذلك.

كيفية التحقق من قابلية الفهرسة

  1. 1

    أدخل رابطا

    يجلب المدقق الرابط كما يفعل Googlebot.

  2. 2

    يحل عمليات إعادة التوجيه

    تتبّع سلسلة قفزات 301/302؛ والرابط النهائي هو المقيَّم.

  3. 3

    يقرأ كل إشارة قابلية فهرسة

    قواعد robots.txt، وميتا robots، وX-Robots-Tag، وcanonical، ورمز الحالة.

  4. 4

    الحكم والسبب

    قابل للفهرسة / غير قابل للفهرسة / جزئي، مع الإشارة المحددة التي سببت الحكم.

إشارات قابلية الفهرسة وأسبقيتها

تقيّم غوغل مجموعة من الإشارات بترتيب محدد؛ وإشارة سلبية واحدة في السلسلة تكفي لحجب الفهرسة.

ترتيب تقييم الإشارات

  1. حالة HTTP: 2xx مطلوبة. تتبع سلاسل 3xx؛ وتنهي 4xx و5xx الفهرسة.
  2. ‏robots.txt: إذا كان الرابط ممنوعا على Googlebot، فلن تزحف الصفحة أبدا، ما يعني أن وسوم noindex عليها لن ترى أبدا.
  3. ترويسة X-Robots-Tag: قيمة noindex في ترويسات استجابة HTTP تحجب الفهرسة.
  4. ميتا robots: الوسم <meta name="robots" content="noindex"> يحجب الفهرسة.
  5. ‏canonical: canonical يشير إلى مكان آخر يعني أن غوغل تفهرس ذلك الرابط الآخر بدلا منه.
  6. جودة المحتوى وكشف التكرار: قد تتخطى غوغل الفهرسة حتى دون توجيهات صريحة.

الأخطاء الشائعة التي يلتقطها

المشكلة السبب
قسم كامل غير مفهرس قاعدة Disallow: في robots.txt
صفحة محددة غير مفهرسة noindex في ميتا robots
مفهرسة برابط خاطئ canonical يشير إلى مكان آخر
عالق عند 5xx خطأ الخادم يكسر الزحف
تعارض Disallow + noindex robots.txt يحجب الزحف، فلا يقرأ وسم noindex أبدا
تسرب بيئة الاختبار إلى الإنتاج X-Robots-Tag: noindex متبقٍ من بيئة اختبار

فخ robots.txt + noindex

إذا منعت رابطا بـ Disallow: في robots.txt، فلن تزحف غوغل إليه أبدا، فلن ترى أي وسم noindex. قد يبقى الرابط ظاهرا في نتائج البحث كمدخل «فارغ» بالرابط فقط دون وصف. لإزالة رابط من الفهرس بشكل صحيح، اسمح بالزحف واستخدم noindex، ثم احجب الزحف فقط بعد أن تكون غوغل قد أزالته من الفهرس.

الاختبار من منظور Googlebot

يرسل المدقق وكيل مستخدم Googlebot، فتظهر أي حيل من جانب الخادم من نوع «الزواحف فقط ترى X». تحقق دائما من روابط الإنتاج، لا بيئة الاختبار.

الأسئلة الشائعة

كون الصفحة قابلة للفهرسة يعني فقط أنه لا يوجد حجب تقني؛ ولا يضمن الفهرسة. تقرر غوغل أيضا بناء على الجودة المتصورة والمحتوى المكرر وميزانية الزحف. استخدم أداة فحص الروابط في Search Console للحصول على إجابة قاطعة من غوغل نفسها.

عادة ميتا robots (أو X-Robots-Tag) وحدها هي الجواب الصحيح. يحجب robots.txt الزحف؛ وتحجب ميتا robots الفهرسة. للصفحات التي لا تريد فهرستها، اسمح بالزحف حتى تستطيع غوغل قراءة وسم noindex لديك.

تقيّم غوغل الوجهة النهائية لسلسلة إعادة التوجيه. إعادة توجيه 301 من A إلى B تعني أن غوغل تفهرس B في النهاية لا A. يحاكي المدقق هذا بحل كل عمليات إعادة التوجيه قبل التقييم.

لا. الصفحات التي تتطلب مصادقة غير قابلة للفهرسة بحكم تعريفها. إن كنت تحتاج تحسين محركات بحث لها، ففكر في نسخة معاينة عامة.

أدوات ذات صلة

محاكي نتائج بحث Google

عاين مقتطفًا تقريبيًا بأسلوب Google بحدود أحرف للهاتف وسطح المكتب. تبقى مسودتك في جلسة المتصفح.

أداة فحص رؤوس أمان HTTP

الصق ترويسات استجابة HTTP وراجع محليًا HSTS وCSP والحماية من clickjacking وسياسات MIME وreferrer وcross-origin.

مدقق خريطة الموقع بصيغة XML

افحص XML لخريطة الموقع في المتصفح لاكتشاف أخطاء التحليل والمواقع المفقودة والعناوين المكررة وقيم الحقول الشائعة.

أداة فحص طول الوصف الوصفي

قِس الوصف التعريفي بالأحرف والبكسلات التقديرية، وقارنه بمؤشرات تحريرية، وراجع نماذج توضيحية لسطح المكتب والهاتف.

فاحص عنوان Canonical URL

الصق HTML الصفحة وافحص وسم rel=canonical: هل هو موجود، وهل هو URL مطلق صالح، وهل يطابق URL الصفحة.

مدقق الروابط المكسورة

الصق رابط صفحة وتحقق من روابطها الصادرة بحثا عن أخطاء 404 وغيرها من أخطاء HTTP، مع رمز الحالة لكل رابط.

الأداة متاحة بلغات أخرى