السلام عليكم لو تضع صورة للملف المعني أو تنسخ كود ملف robot.txt سيكون أحسن + ممكن الروبوتات ممنوعة من الوصول الى ملفات و مناطق معينة من الموقع لذا يتم ترجمة بعض المواضيع و البعض الآخر لا تستطيع روبوتات الفهرسة الوصول إليه و الله أعلم