💡 ما هو ملف Robots.txt؟

ملف robots.txt هو ملف نصي يوضع في جذر الموقع لإخبار محركات البحث عن الصفحات التي يمكنها الزحف إليها والصفحات التي يجب تجنبها.

نصائح مهمة:

• ضع الملف في جذر موقعك: example.com/robots.txt
• لا تحظر الصفحات المهمة التي تريد أرشفتها
• اختبر الملف باستخدام Google Search Console