ملف robots.txt عادي جداً لدرجة أن بإمكانك تجاهله بسهولة. ومع ذلك…
لأنني طيب، سأعطيك الوصفة لتوفّر لنفسك روبوتاً مجاناً. ربما فهمتَ الأمر بالفعل، فالمقصود هنا فعلياً ملف مخصّص للروبوتات التي تفحص موقعك على فترات منتظمة، مثل تلك التابعة لجوجل على سبيل المثال. هذا الملف الصغير البسيط قد يُحدث فرقاً كبيراً، لأنه يبيّن لمحركات البحث أفضل المسارات التي يجب اتباعها لتصفّح الموقع وما هي المسارات الممنوعة. هيا بنا…
الوصفة رقم 13: الاستثمار في روبوت مطبخ لتحسين محركات البحث ليس رفاهية!

هذا الملف بسيط للغاية. يجب أن يكون في جذر موقعك وأن يُسمى robots.txt؛ ولا شيء أسهل من إدراجه لأننا سنفعل ذلك باستخدام إضافة شائعة جداً: Yoast
سنقوم بتكوين هذه الإضافة في وصفة لاحقة، لكن بمجرد تثبيتها ستكون جاهزة للاستخدام.
- إضافة Yoast SEO واحدة
- ثبّت إضافة Yoast SEO
- فعّلها ثم انتقل إلى قائمة SEO الجديدة التي ظهرت على يسار لوحة التحكم وفي أعلاها.
- انقر على «الإعدادات العامة» ثم على تبويب «الميزات»
- في القائمة فعّل ميزة «خرائط الموقع XML» وضعها على «مُفعّل»
انتهى الأمر. لا تصدق نفسك، أليس كذلك؟ وما جدوى ذلك؟ كما قلتُ في المقدّمة، إنه بمثابة لافتة إرشادية لجوجل. تُظهر له الطرق المتاحة لزيارة مطبخك والاتجاهات الممنوعة. قد يبدو لك تافهاً، لكنه في الواقع أساسي. على الرحب والسعة!
