أرى العديد من الأشخاص مازالوا يعانون مشكلة الزحف والأرشفة لمواقعهم وهذا ليس وليد الصدفة وانما بسبب التحديثاث الأخيرة التي قامت بها جوجل او عدم اعداد الخصائص الضرورية لمساعدة محركات البحث على تعقب رابط الموقع أو العناوين على صفحة الاعدادات الرئيسية لبلوجر.
حسنًا ، بعد قراءة هذا الموضوع ، ستتمكن من حل مشكلة الزحف والفهرسة حيث سأذهب الى كل إعداد رئيسي على نطاق واسع.
هنا ، سأغطي طريقة اظافة ملف robots.txt المخصص ، والصفحة الرئيسية وعلامات صفحة النشر ، والعلامات الوصفية ، وإعدادات وحدة تحكم البحث ، إلخ.
ما هو الزحف؟
الزحف هو عملية تقوم بها روبوتات محرك البحث مثل Google bots بزيارة موقع ويب للتأكد مما هو موجود على الصفحة.و يساعد محركات البحث على فهم المحتوى وفهرسته في قاعدة البيانات الخاصة بهم.
ما هي فهرسة محرك البحث؟
الفهرسة هي عملية تنظم محركات البحث المعلومات للاستجابة بشكل أسرع لاستفسارات معينة.و يقومون بتخزين بيانات الزحف في خوادمهم وتنظيمها لاستعلامات مختلفة ولا يعرضون سوى نتائج البحث ذات الصلة.
ترتيب محرك البحث
بعد تحليل بيانات الفهرسة ، تظهر محركات البحث موقع الويب ذي الصلة بترتيب الأولوية ويظهر في SERPs. (صفحات نتائج محرك البحث).
ويعتمد الترتيب على الكثير من العوامل مثل الملاءمة وترتيب الصفحة وسلطة موقع الويب والرابط الخلفي ، تستخدم Google أكثر من 200 عامل ترتيب لإظهار نتائج دقيقة.
كيفية إصلاح مشكلة الزحف والفهرسة في بلوجر؟
يعد إصلاح مشكلة الزحف والفهرسة أمرًا تقنيًا بعض الشيء ويعتمد على العديد من العوامل. هنا ، سأشرح بعض الإعدادات لتجنب هذه المشاكل.
لنبدأ بإعدادات بلوجر.
1: إعداد الخصوصية
انتقل إلى لوحة تحكم بلوجر وانقر على علامة تبويب الإعداد. ابحث الآن عن خيار الخصوصية وقم بتشغيل الإعداد "مرئي لمحركات البحث". إذا تم إيقاف تشغيل هذا ، فستتوقف فهرسة صفحات الويب.
2: برامج الزحف وإعدادات الفهرسة
قم الآن بالتمرير لأسفل إلى برامج الزحف وإعداد الفهرسة وتشغيل خيار ملف robots.txt المخصص.
أضف الآن ملف robots.txt بالتنسيق أدناه
الآن قم بتمكين خيار "علامات رؤوس مخصصة لبرامج الروبوت" ومن ثم عليك تعيين علامات الثلاثة أدناه.
افتح علامات الصفحة الرئيسية وحدد الخيار "all" و "noodp" واحفظه.
الآن حدد الأرشفة وعلامات صفحة البحث وحدد خيار "noindex" و "noodp" واحفظه.
في علامتي النشر والصفحة ، حدد الخيار "الكل" و "noodp" واحفظهما.
3: إرسال خريطة الموقع في Search Console
الآن عليك إرسال خريطة الموقع في وحدة تحكم البحث. إذا لم يكن لديك حساب ، فأنشئ حسابًا ثم تحقق من مجالك فيه.
انقر الآن على خيار خريطة الموقع في وحدة تحكم البحث وأدخل عنوان URL لخريطة الموقع. اكتب عنوان URL بهذا التنسيق وانقر فوق إرسال.
الآن يتم تقديم خريطة موقعك إلى Google. يمكنك أيضًا إرسال خريطة الموقع الخاصة بك في أداة Bing webmaster أو ربط وحدة تحكم البحث بها.
بعد إرسال خريطة الموقع ، يتم الزحف إلى موقع الويب الخاص بك تلقائيًا بواسطة روبوتات محركات البحث وفهرسته في نتائج البحث.
هنا ، تواجه بعض مواقع الويب مشكلات الزحف في موقعها على الويب. لذلك ، يحدث هذا أحيانًا بسبب الزحف إلى قيود الميزانية أو أي مشكلات إعادة توجيه أخرى.
يمكنك إصلاح مشكلة ميزانية الزحف عن طريق تحديث موقع الويب الخاص بك بانتظام ونشر المقالة بشكل متكرر.
يمكنك أيضًا إرسال عنوان URL لمدونتك يدويًا في أداة فحص عنوان URL بوحدة تحكم البحث. ما عليك سوى لصق رابط المقالة المنشورة حديثًا والنقر على طلب الفهرسة.
بعد ذلك ، ستحدد Google موقع الويب الخاص بك في الأولوية والزحف إلى موقع الويب الخاص بك في بعض الأوقات.
كيف يمكنني تجنب مشكلة الفهرسة والزحف؟
هناك عدة طرق يمكنك تنفيذها لتجنب مشكلة الفهرسة والزحف على موقع الويب الخاص بك. ستساعد هذه الطرق محرك البحث في فهرسة صفحاتك بشكل أسرع.
- انشر المقال بشكل متكرر وقم بتحديث مقالاتك القديمة.
- ركز على ربط المقالات لأنها تساعد محرك البحث على اكتشاف صفحات جديدة بسهولة.
- شارك المقال على وسائل التواصل الاجتماعي واحصل على بعض الزيارات الأولية لتلك الصفحة.
- إصلاح الروابط الداخلية المعطلة
- إصلاح حلقة إعادة التوجيه (يحدث عندما يتم إعادة توجيه صفحتين إلى بعضهما البعض)
- تحسين سرعة تحميل الصفحة
- إصلاح مشكلة الصفحات المكررة
- استخدم خريطة موقع HTML في بلوجر
استنتاج
لقد تعلمت الآن كيفية إصلاح مشكلة الزحف والفهرسة في موقع بلوجر الخاص بك. ما عليك سوى التحقق من ملف robots.txt والعلامات الوصفية بشكل صحيح واتباع أفضل الممارسات كما هو موضح أعلاه.
إذا كنت لا تزال تواجه أي أنواع من مشكلات الزحف والفهرسة ، فأعلمني بذلك في قسم التعليقات.