ما هي الفهرسة، ولماذا لا يعني الزحف إلى الصفحة أنها ستُفهرس؟

إجابة مباشرة

الفهرسة هي تحليل المحتوى المسترجع وتحويله إلى سجل قابل للاستخدام في نظام بحث أو استرجاع. وقد تكون الصفحة قابلة للزحف ومع ذلك لا تُفهرس بسبب توجيه noindex، أو تكرار المحتوى، أو ضعف قابلية المعالجة، أو قرار يتعلق بالجودة، أو خطأ تقني، أو حدود نطاق النظام.

بلغة بسيطة

قد يتلقى أمين المكتبة كتاباً من دون أن يضيفه إلى الفهرس. رؤية الكتاب لا تعني أنه حصل على رقم فهرسة أو أنه سيظهر في البحث.

لماذا يهم؟

الخلط بين نجاح الزحف ونجاح الفهرسة يقود إلى تشخيص خاطئ. فقد يواصل صاحب الموقع إضافة المحتوى بدلاً من بحث سبب تعذر اختيار الصفحة رغم إمكان الوصول إليها.

لا تخلط

الاكتشاف والزحف والعرض والفهرسة والاسترجاع حالات منفصلة.
يتحكم robots.txt في الوصول؛ أما noindex فهو توجيه للفهرسة.
فهرس البحث العام وفهرس RAG الخاص بمؤسسة ليسا الشيء نفسه.

ماذا تفعل؟

افحص إشارات قابلية الفهرسة لعناوين URL المهمة.
راجع noindex وcanonical وإعادة التوجيه وحالة HTTP معاً.
حدّد بوضوح عنوان URL المرجعي المفضل للصفحات المكررة.
اختبر ما إذا كان المحتوى المنشأ بجافاسكربت أو الظاهر بعد تسجيل الدخول قابلاً للمعالجة فعلاً.
إذا وفر المزود أدوات تشخيص، فاحفظ النتيجة مؤرخة.