باختصار: للتحقق من فهرسة صفحة ما في Google ، الصق عنوانها في أداة فحص فهرسة الصفحات من PromoPilot. ستُجري الأداة طلبًا حقيقيًا إلى Google ، وتُخبرك ما إذا كان عنوان URL مُفهرسًا أم لا. في حال عدم فهرسته، ستتحقق من وجود أي مشاكل، بما في ذلك علامات meta robots وX-Robots، وملف robots.txt غير المسموح به، والتحويل إلى عنوان URL آخر، أو ملف sitemap.xml المفقود. ثم ستُقدم لك تقريرًا يُوضح أسباب المشكلة والحلول المُمكنة. الخدمة مجانية ولا تتطلب التسجيل. فيما يلي كيفية قراءة التقرير وما يجب فعله حيال كل مشكلة.
"تم نشر الصفحة قبل شهر، لكنها غير موجودة في Google " هو السؤال الأكثر شيوعاً الذي أتلقاه. في نصف الحالات، يكون السبب هو وجود noindex منسية، متبقية من عملية التطوير.
ما الذي يتحقق منه فهرسة الصفحات؟
تجمع الأداة بين أمرين: حقيقة (ما إذا كانت الصفحة موجودة حاليًا في Google) وتشخيص (ما إذا كان بإمكانها الوصول إلى هناك من حيث المبدأ).
| فحص | ما الذي ينظر إليه؟ | لماذا هذا ضروري؟ |
|---|---|---|
| التوافر في الفهرس | موقع حقيقي: ابحث في Google عن هذا الرابط | الإجابة على السؤال الرئيسي: هل ترى Google الصفحة؟ |
| الروبوتات الفائقة | الوسم <meta name="robots" content="noindex"> في الكود | يُعد الحظر المباشر على الفهرسة السبب الأكثر شيوعًا |
| علامة الروبوتات X | نفس الحظر، ولكن في ترويسة استجابة HTTP | إنه غير مرئي في كود الصفحة ويمكن تفويته بسهولة. |
| robots.txt | هل تم حظر العنوان بواسطة قاعدة عدم السماح؟ | لا يستطيع الروبوت الزحف إلى صفحة وقراءتها. |
| قانوني | إلى أي عنوان يشير الرابط الأساسي؟ | الرابط الأساسي إلى عنوان URL آخر - طلب فهرسة صفحة مختلفة |
| ملف خريطة الموقع (sitemap.xml) | هل العنوان موجود على خريطة الموقع؟ | بدون خريطة الموقع والروابط، قد لا تعرف Google عن الصفحة لفترة طويلة. |
| الحكم | ملخص مع الأسباب والحلول | ما الذي يحتاج إلى إصلاح تحديداً؟ |
كيف يمكنني التحقق مما إذا كانت صفحة ما مفهرسة في Google ؟
- افتح مدقق فهرسة الصفحات.
- ألصق عنوان الصفحة بالكامل ، بما في ذلك البروتوكول، وبنفس الطريقة التي يظهر بها في المتصفح:
https://example.com/new-page. - انقر على "التحقق من الفهرسة" وانتظر حتى يقوم Google بالاستعلام عن العوامل وتحليلها.
- اقرأ الحكم: "في الفهرس" أو "ليس في الفهرس" وقائمة الكتل التي تم العثور عليها.
- قم بإزالة السبب وأعد الفحص بعد بضعة أيام.
هذا هو شكل صفحة الأداة: حقل عنوان، وعداد للفحوصات المجانية لهذا اليوم، وقائمة بما يتم تحليله.
مثال على الحكم: تم حظر فهرسة الصفحة https://example.com/new-page لأن الكود يحتوي على تعريف meta noindex، بينما يشير عنوان URL الأساسي إلى عنوان URL مختلف. سببان في آن واحد، وكلاهما موجود في القالب.
لماذا لم تتم فهرسة الصفحة، وما الذي يجب عليّ إصلاحه أولاً؟
ضع في اعتبارك الأسباب بهذا الترتيب - من الحظر المباشر إلى الحظر "الخفيف".
- قم بإزالة علامة X-Robots-Tag أو خاصية noindex في ملف meta robots. في كثير من الأحيان، قد يتم تفعيل خيار "إخفاء الموقع عن محركات البحث" في نظام إدارة المحتوى (CMS) أثناء التطوير، ثم يُنسى تعطيله. بالنسبة لعلامة X-Robots-Tag، تحقق من إعدادات خادمك، أو شبكة توصيل المحتوى (CDN)، أو إضافة تحسين محركات البحث (SEO).
- يُمنع الوصول إلى قسم "المدونة" في ملف robots.txt. قاعدة مثل
Disallow: /blog/تُغلق القسم بأكمله. ملاحظة هامة: إذا كانت الصفحة مغلقة في ملف robots.txt، فلن يتمكن Google من قراءة "noindex" عليها. لذلك، لإزالتها من الفهرس، تحتاج إلى ملف robots.txt مفتوح و"noindex" مُفعّلين، ولفهرستها، ما عليك سوى إزالة وسم "Disallow". - الرابط الأساسي يشير إلى عنوان مختلف. إذا كانت الصفحة فريدة، فيجب أن يشير الرابط الأساسي إلى الصفحة نفسها. غالبًا ما يكمن الخطأ في القالب: جميع المنتجات لها رابط أساسي يشير إلى الفئة، وجميع المقالات إلى الصفحة الرئيسية للمدونة.
- هذه الصفحة غير موجودة في خريطة الموقع ولا تحتوي على أي روابط. إنها صفحة يتيمة لا يعرفها Google. أضفها إلى ملف sitemap.xml الخاص بموقعك، وأضف روابط من الصفحات المفهرسة بالفعل - من القائمة، والتصنيفات، والمقالات ذات الصلة.
- كل شيء متاح، لكن الصفحة غير موجودة. هذا يعني أن Google اطلعت عليها وقررت عدم إدراجها، وعادةً ما يكون السبب هو ضعف المحتوى أو تكراره. الحل الوحيد هو تحسين الصفحة نفسها.
كيفية العثور على الحظر بنفسك بسرعة. افتح الصفحة، واضغط على Ctrl+U، وابحث عن noindex و canonical في الكود. يظهر رأس X-Robots-Tag في أدوات مطوري المتصفح (علامة تبويب الشبكة ← استجابة المستند ← الرؤوس). افتح ملف robots.txt الموجود على ваш-домен/robots.txt — ابحث عن قواعد Disallow التي تتطابق مع بداية عنوان الصفحة. تقوم الأداة بكل هذا نيابةً عنك، ولكن معرفة مكان البحث أمرٌ مفيد: فهو يُسهّل التحقق من تطبيق التعديل بالفعل.
تُعدّ الصفحات التي تحتوي على معلمات وفلاتر، ?sort=price ?color=red وعلامات UTM، حالةً خاصة. لا تحتاج هذه الصفحات عادةً إلى الفهرسة؛ ومن الأفضل أن يكون الرابط الأساسي (canonical) مُوجَّهًا إلى النسخة الرئيسية. إذا تحققت من عنوان URL من هذا النوع ورأيت عبارة "غير مفهرس" مع وجود رابط أساسي (canonical) يُشير إلى الفئة، فهذا يعني أن كل شيء يعمل كما هو مُخطط له.
بمجرد حل المشكلات التقنية، يمكنك تسريع العملية: أرسل رابط موقعك المُوثَّق لإعادة فهرسته باستخدام أداة فحص الروابط في Search Console. مع ذلك، هذا مجرد طلب وليس ضمانًا: قد تستغرق فهرسة الصفحات الجديدة من عدة أيام إلى عدة أسابيع.
مقارنة: فحص فهرسة صفحات PromoPilot والبدائل
| أداة | ما هو المجاني؟ | قيود | لمن يناسب هذا المنتج؟ |
|---|---|---|---|
| PromoPilot — أداة فحص فهرسة الصفحات | معلومات الفهرسة + التشخيص: noindex، X-Robots-Tag، robots.txt، canonical، خريطة الموقع | إشارات عامة، حد التحقق اليومي | أي صفحة، بما في ذلك صفحات الآخرين، لا تملك صلاحية الوصول إلى Search Console |
| أداة فحص عناوين URL - Search Console | حالة الفهرسة الدقيقة، طلب إعادة الفهرسة | خاص بموقعك الموثق فقط | لأصحاب المواقع الإلكترونية - المصدر الرئيسي للمعلومات |
| الموقع اليدوي: استعلام في Google | نظرة سريعة على النتائج | بدون تشخيص الأسباب، قد تكون النتيجة غير دقيقة. | التقدير الأولي |
| عنكبوت تحسين محركات البحث Screaming Groove | إمكانية فهرسة الصفحة أثناء الزحف | يعرض عمليات الحظر ولكن ليس وجود Google ؛ يلزم التثبيت | فحص حظر المواقع الجماعية |
الخلاصة: تُعدّ أداة Search Console معيارًا أساسيًا لموقعك الإلكتروني، ولكنك تحتاج إلى الوصول إليها. يُسهّل الفحص عبر الإنترنت الوصول إليها في حال تعذّر ذلك (على سبيل المثال، في موقع عميل، أو مشروع قديم، أو صفحة منافس) أو عندما تحتاج إلى تحديد وجود أي عائق تقني بسرعة.
يُقدّم PromoPilot 87 أداة مجانية إضافية لتحسين محركات البحث. إذا كنت تستفسر عن موقعك الإلكتروني بالكامل، وليس صفحة واحدة فقط - أي عدد الصفحات التي يحتلها نطاقك في نتائج بحث Google ونسبة ظهوره في خريطة الموقع - فهناك فحص منفصل لفهرسة الموقع، والذي سنتناوله في المقالة التالية من هذا القسم. كما يُساعدك محلل ملف robots.txt على فهم قواعد هذا الملف.
هل توجد قيود على فهرسة الصفحات؟
تستخدم الأداة إشارات عامة ولا تحل محل البيانات من أداة فحص عنوان URL في Search Console: فقط مالك الموقع يمكنه رؤية الحالة الدقيقة وأسباب استبعاد Google.
قد تؤثر عمليات حظر البرامج الآلية المؤقتة - مثل الحماية من هجمات DDoS، واختبارات CAPTCHA، وتحديد معدل الطلبات - على دقة النتائج: فإذا لم تتمكن الأداة من فتح صفحة ما، ستكون نتائج البحث عن الروبوتات والروابط الأساسية غير مكتملة. كذلك، قد تكون صفحة حديثة مُفهرسة بالفعل، ولكن استعلام الموقع لا يُظهرها فورًا. إذا كانت النتيجة "غير مُفهرسة" ولم تكن هناك أي عمليات حظر، يُرجى إعادة المحاولة بعد يومين.
أخيرًا، تفحص الأداة الصفحة من الخارج ولا تعلم كيف قيّمت Google جودتها. حالة "تمت الزحف إليها، ولكن لم تتم فهرستها بعد" لا تظهر إلا في Search Console، ولا يتم التعامل معها من خلال الكود، بل من خلال محتوى الصفحة.
متى لا تكفي الأداة المجانية؟
صفحة واحدة بها خطأ في فهرسة الصفحة لا تستغرق سوى خمس دقائق من العمل. لكن الأمور قد تكون أكثر تعقيدًا. أنت بحاجة إلى متخصص إذا:
- عشرات الصفحات غير مفهرسة، ولا توجد محظورات واضحة؛
- يتم إنشاء ملفات canonical أو noindex أو robots.txt بواسطة مكون إضافي أو قالب ويتم "إرجاعها" بعد التحرير؛
- بعد النقل، تمت إزالة الصفحات من الفهرس ولم تظهر صفحات جديدة؛
- تظهر الصفحات في الفهرس، لكن Google يختار عنوانًا مختلفًا باعتباره العنوان الأساسي.
ما الذي يمكنني فعله لموقعك الإلكتروني؟
اسمي فاليري دانيوك، وأنا مطور برامج ومتخصص في تحسين محركات البحث، ولديّ خبرة 12 عامًا وأكثر من 200 عميل. تُعدّ مشاكل فهرسة المواقع الإلكترونية من أكثر الأسباب شيوعًا التي تدفع الناس إلى طلب خدماتي.
تحسين محركات البحث والترويج
- تدقيق شامل لتحسين محركات البحث: أكتشف سبب عدم فهرسة الصفحات وأصلح القوالب، وملف robots.txt، والروابط الأساسية، وخريطة الموقع.
- محتوى يتم فهرسته فوراً: مدونة آلية مدعومة بوكلاء الذكاء الاصطناعي تنشر مقالات مع ترميز صحيح وخرائط مواقع.
- فهرسة إصدارات اللغات - في تحليل لكيفية إنشاء موقع متعدد اللغات بدون مترجم.
المواقع الإلكترونية والمتاجر الإلكترونية
- صفحة هبوط لمنتج جديد تم إطلاقه بين عشية وضحاها - متاحة للفهرسة من الدقيقة الأولى.
- احصل على موقع ويب على غرار موقعك المفضل في دقائق معدودة على 1001site: يتم تكوين عرض الخادم وخريطة الموقع والترميز تلقائيًا.
- نقل متجر من Instagram إلى موقع ويب – مع بطاقات تم العثور عليها بواسطة Google.
إدارة علاقات العملاء والمحاسبة والأتمتة
أرسل لي عنوان صفحة غير مدرجة في Google على Telegram - وسأخبرك أين تبحث عن السبب.
نتيجة
- إن فحص فهرسة الصفحة يجيب على سؤالين: ما إذا كان عنوان URL موجودًا في Google وما الذي يمنعه من الوصول إلى هناك.
- الأسباب حسب التكرار: noindex (في الكود أو الترويسة)، robots.txt، canonical إلى عنوان شخص آخر، صفحة يتيمة بدون خريطة موقع وروابط.
- بعد إصلاح المشكلة، أرسل عنوان URL لإعادة فهرسته في Search Console وتحقق مرة أخرى بعد بضعة أيام.
- إذا لم يتم فهرسة عشرات الصفحات، فستكون هناك حاجة إلى تدقيق، وفي بعض الأحيان يكون من الأسهل إعادة بناء موقع قديم ذي قوالب معقدة على 1001site.
تحقق من الصفحة التي "اختفت" من نتائج البحث - سيظهر الحكم مع السبب في أقل من دقيقة.
مصادر
- صفحة أداة "فحص فهرسة الصفحة" الخاصة بـ PromoPilot - قائمة بالفحوصات، مثال، والقيود.
- مساعدة Google Search Console - أداة فحص عناوين URL.
- مركز بحث Google - حظر الفهرسة باستخدام noindex.
- مركز بحث Google - عناوين URL الأساسية والصفحات المكررة.
