[عميروش]

المشاركة الأصلية كتبت بواسطة المتصفح الباحث

اسمحلي أخي بمداخلة صغيرة

ليس هناك مشكلة في قيام ملف الروبوت بحظر عناكب البحث من دخول صفحات محددة، بل بالعكس هكذا توجه العناكب للصفحات المفيدة التي فيها محتوى مفيد فقط، وتبعدها عن الصفحات التي لا فائدة من ارشفتها
مثلا صفحة التسجيل او صفحة لوحة تحكم الادارة او صفحة الاتصال مالفائدة من أرشفتها ؟ لا فائدة. إذا لا فائدة من دخول عناكب البحث إليها وبالتالي توفر على موقعك وعلى السيرفر غذا كنت على سيرفر خاص توفر موارد تحتاجها
الآن الذي عليك فعله هو النظر في ملف الروبوت إلى الصفحات المحظورة وهل تستحق الحظر ام لا ؟ ثم عدل عليها
أو ابحث في النت عن ملف الروبوت المناسب لمدونات الوورد برس

مداخلة في محلها أخي

هناك العديد من ملفات التي لا يجب حذفها عن عناكب الأرشفة

و المشكل أنه تم حجبها فقط عن قوقل و ليس عن باقي العناكب

مثل هذا الرابط ؟؟ https://www.appscart.net/feed/

حسب الملف الخاص بك هو محجوب عن قوقل ( لماذا تقوم بحجب التغذيات ؟؟؟ )

النسخة الثانية من الملف أحسن بكثير و الله أعلم


أنا لست خبير في ملف robot.txt

و لكني قمت بتحليله بإستخدام هذه الأدات

https://tools.seobook.com/robots-txt/analyzer/

و أيضا وجدت لك هذه النسخة

User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-*******/plugins Disallow: /wp-*******/cache Disallow: /wp-*******/themes Disallow: /trackback Disallow: /feed Disallow: /comments Disallow: /category/*/* Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /*?* Disallow: /*? Allow: /wp-*******/uploads # Google Image User-agent: Googlebot-Image Disallow: Allow: /* # Google AdSense User-agent: Mediapartners-Google* Disallow: Allow: /* # digg mirror User-agent: duggmirror Disallow: / Sitemap: https://www.example.com/sitemap.xml

و أوافق الأخ "المتصفح الباحث"

و أنصحك بإعادة الملف الى حالته الأصلية لأنه أكيد به كل الإعدادات الأساسية