DIGITAL SOP 057: كيفية تكوين ملف Robots.txt المثالي

آخر تحديث/مراجعة: 15 أغسطس 2023

وقت التنفيذ: 30 دقيقة

هدف: لإنشاء ملف robots.txt أو تحسينه بشكل صحيح.

النتيجة المثالية: لديك ملف robots.txt ممتاز على موقع الويب الخاص بك والذي يسمح لمحركات البحث بفهرسة موقع الويب الخاص بك تمامًا كما تريد.

المتطلبات المسبقة أو المتطلبات:

  • يجب أن يكون لديك حق الوصول إلى خاصية Google Search Console لموقع الويب الذي تعمل عليه. إذا لم يكن لديك إعداد خاص بـ Google Search Console حتى الآن، فيمكنك القيام بذلك عن طريق المتابعة إجراءات التشغيل القياسية 020.

لماذا هذا مهم: يقوم ملف robots.txt الخاص بك بتعيين القواعد الأساسية التي ستقرأها وتتبعها معظم محركات البحث، بمجرد أن تبدأ في الزحف إلى موقع الويب الخاص بك. فهي تخبر محركات البحث بأجزاء موقع الويب الخاص بك التي لا تريد (أو لا تحتاج إليها) للزحف إليها.

حيث يتم ذلك: في محرر النصوص وفي Google Search Console. إذا كنت تستخدم Wordpress، في لوحة إدارة Wordpress أيضًا.

عندما يتم ذلك: عادةً ما تقوم بمراجعة ملف robots.txt الخاص بك كل 6 أشهر على الأقل للتأكد من أنه لا يزال محدثًا. يجب أن يكون لديك ملف robots.txt مناسب عند بدء موقع ويب جديد.

من يفعل هذا: الشخص المسؤول عن تحسين محركات البحث (SEO) في مؤسستك.

تابعنا