فقط سؤال أخي أيوب هل أنت من عدلت على ملف robot.txt أم أنك وجدته هكذا ؟؟؟
اقتباس:
المشاركة الأصلية كتبت بواسطة AyOuB0587
شكرا لك اخي سامي..لكن احتاج مساعدة لضبطه احسن ضبط دون خطأ مطلقا
مرحبا أخي عميروش
ممكن تساعدني على ضبطه جيدا؟
تفضل:
كود:
User-agent: Googlebot
Disallow: /wp-
Disallow: /search
Disallow: /feed
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-*******/plugins/
Disallow: /external%20files/
Disallow: /wp-*******/cache/
Disallow: /wp-*******/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /*feed=
Disallow: /?feed=
Disallow: /comments/
Disallow: /private/
Disallow: /*tag=
Disallow: /*?tag=
Disallow: /*m=
Disallow: /*cat=
Disallow: /*&cp=
Disallow: /*page_id=
Disallow: /*?paged=
Disallow: /*comments_popup=
Disallow: /*paged=
Allow: /*cat=6
Allow: /wp-*******/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.cgi$
# disallow all files ending with these extensions
Disallow: /*.html$
|