ما هو حل مشكلة: تم حظره بواسطة ملف robots.txt؟؟ - منتديات الجلفة لكل الجزائريين و العرب

العودة   منتديات الجلفة لكل الجزائريين و العرب > منتديات أصحاب المواقع > منتدى تطوير مواقع الانترنت > قسم طلبات أصحاب المواقع

قسم طلبات أصحاب المواقع منتدى خاص بالطلبات، و حل مشاكل مواقع الأعضاء

في حال وجود أي مواضيع أو ردود مُخالفة من قبل الأعضاء، يُرجى الإبلاغ عنها فورًا باستخدام أيقونة تقرير عن مشاركة سيئة ( تقرير عن مشاركة سيئة )، و الموجودة أسفل كل مشاركة .

آخر المواضيع

ما هو حل مشكلة: تم حظره بواسطة ملف robots.txt؟؟

إضافة رد
 
أدوات الموضوع انواع عرض الموضوع
قديم 2011-12-07, 09:51   رقم المشاركة : 1
معلومات العضو
AyOuB0587
بائع مسجل (أ)
 
الصورة الرمزية AyOuB0587
 

 

 
إحصائية العضو










افتراضي ما هو حل مشكلة: تم حظره بواسطة ملف robots.txt؟؟

السلام عليكم
مرحبا إخواني
لدي استفسار بخصوص ملف: robots.txt حيث في موقع أدوات مشرفي المواقع يقول:
تم حظره بواسطة ملف robots.txt والعدد هو: 6.894...أليس كبيرا؟
وماذا يعني هذا؟ يعني أن كل هذا العدد لم يتم أرشفته؟ وبالفعل هناك مواضيع يتم أرشفتها في نصف ساعة أو أقل، وهناك مواضيع لم تتأرشف...رغم انها حصرية وغير منقولة....فهل من إفادة إخواني الكرام؟








 


رد مع اقتباس
قديم 2011-12-07, 15:33   رقم المشاركة : 2
معلومات العضو
الأستاذ سامي
مشرف سابق
 
إحصائية العضو










افتراضي

السلام عليكم
راجع ملف robots.txt خاصتك










رد مع اقتباس
قديم 2011-12-08, 05:26   رقم المشاركة : 3
معلومات العضو
عميروش
مشرف سابق
 
الصورة الرمزية عميروش
 

 

 
الأوسمة
وسام التميز 
إحصائية العضو










افتراضي

السلام عليكم

لو تضع صورة للملف المعني أو تنسخ كود ملف robot.txt سيكون أحسن

+

ممكن الروبوتات ممنوعة من الوصول الى ملفات و مناطق معينة من الموقع لذا يتم ترجمة بعض المواضيع و البعض الآخر

لا تستطيع روبوتات الفهرسة الوصول إليه

و الله أعلم










رد مع اقتباس
قديم 2011-12-08, 10:22   رقم المشاركة : 4
معلومات العضو
AyOuB0587
بائع مسجل (أ)
 
الصورة الرمزية AyOuB0587
 

 

 
إحصائية العضو










افتراضي

اقتباس:
المشاركة الأصلية كتبت بواسطة الأستاذ سامي مشاهدة المشاركة
السلام عليكم
راجع ملف robots.txt خاصتك
شكرا لك اخي سامي..لكن احتاج مساعدة لضبطه احسن ضبط دون خطأ مطلقا
اقتباس:
المشاركة الأصلية كتبت بواسطة عميروش مشاهدة المشاركة
السلام عليكم

لو تضع صورة للملف المعني أو تنسخ كود ملف robot.txt سيكون أحسن

+

ممكن الروبوتات ممنوعة من الوصول الى ملفات و مناطق معينة من الموقع لذا يتم ترجمة بعض المواضيع و البعض الآخر

لا تستطيع روبوتات الفهرسة الوصول إليه

و الله أعلم
مرحبا أخي عميروش
ممكن تساعدني على ضبطه جيدا؟
تفضل:
كود:
User-agent: Googlebot
Disallow: /wp-
Disallow: /search
Disallow: /feed
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-*******/plugins/
Disallow: /external%20files/
Disallow: /wp-*******/cache/
Disallow: /wp-*******/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /*feed=
Disallow: /?feed=
Disallow: /comments/
Disallow: /private/
Disallow: /*tag=
Disallow: /*?tag=
Disallow: /*m=
Disallow: /*cat=
Disallow: /*&cp=
Disallow: /*page_id=
Disallow: /*?paged=
Disallow: /*comments_popup=
Disallow: /*paged=
Allow: /*cat=6
Allow: /wp-*******/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.cgi$

# disallow all files ending with these extensions
Disallow: /*.html$









رد مع اقتباس
قديم 2011-12-09, 14:17   رقم المشاركة : 5
معلومات العضو
عميروش
مشرف سابق
 
الصورة الرمزية عميروش
 

 

 
الأوسمة
وسام التميز 
إحصائية العضو










افتراضي

فقط سؤال أخي أيوب هل أنت من عدلت على ملف robot.txt أم أنك وجدته هكذا ؟؟؟


اقتباس:
المشاركة الأصلية كتبت بواسطة AyOuB0587 مشاهدة المشاركة
شكرا لك اخي سامي..لكن احتاج مساعدة لضبطه احسن ضبط دون خطأ مطلقا


مرحبا أخي عميروش
ممكن تساعدني على ضبطه جيدا؟
تفضل:
كود:
User-agent: Googlebot
Disallow: /wp-
Disallow: /search
Disallow: /feed
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-*******/plugins/
Disallow: /external%20files/
Disallow: /wp-*******/cache/
Disallow: /wp-*******/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /*feed=
Disallow: /?feed=
Disallow: /comments/
Disallow: /private/
Disallow: /*tag=
Disallow: /*?tag=
Disallow: /*m=
Disallow: /*cat=
Disallow: /*&cp=
Disallow: /*page_id=
Disallow: /*?paged=
Disallow: /*comments_popup=
Disallow: /*paged=
Allow: /*cat=6
Allow: /wp-*******/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.cgi$

# disallow all files ending with these extensions
Disallow: /*.html$









رد مع اقتباس
قديم 2011-12-10, 10:37   رقم المشاركة : 6
معلومات العضو
AyOuB0587
بائع مسجل (أ)
 
الصورة الرمزية AyOuB0587
 

 

 
إحصائية العضو










افتراضي

اقتباس:
المشاركة الأصلية كتبت بواسطة عميروش مشاهدة المشاركة
فقط سؤال أخي أيوب هل أنت من عدلت على ملف robot.txt أم أنك وجدته هكذا ؟؟؟
في الاول لم نعدل عليه
لكن الان قام صديقي بالتعديل
الآن ما رأيك به أخي عميروش؟ وأرجو أن تفيدني بأحسن حل، لأن المشكلة لا تزال كما هي، ولا يزال هناك اشارة أن هناك حظر لروابط في الموقع


كود:
 User-Agent: *
Disallow: /license.txt/
Disallow: /readme.html
Disallow: /wp-admin.php
Disallow: /wp-blog-header.php
Disallow: /wp-comments-popup.php
Disallow: /wp-commentsrss2.php
Disallow: /wp-comments-post.php
Disallow: /wp-config-sample.php
Disallow: /wp-config.php
Disallow: /wp-cron.php
Disallow: /wp-links-opml.php
Disallow: /wp-login.php
Disallow: /wp-mail.php
Disallow: /wp-pass.php
Disallow: /wp-rdf.php
Disallow: /wp-register.php
Disallow: /wp-settings.php
Disallow: /wp-trackback.php
Disallow: /xmlrpc.php

Sitemap: https://www.appscart.net/sitemap.xml.gz









رد مع اقتباس
قديم 2011-12-11, 20:21   رقم المشاركة : 7
معلومات العضو
المتصفح الباحث
بائع مسجل (أ)
 
إحصائية العضو










افتراضي

اسمحلي أخي بمداخلة صغيرة

ليس هناك مشكلة في قيام ملف الروبوت بحظر عناكب البحث من دخول صفحات محددة، بل بالعكس هكذا توجه العناكب للصفحات المفيدة التي فيها محتوى مفيد فقط، وتبعدها عن الصفحات التي لا فائدة من ارشفتها
مثلا صفحة التسجيل او صفحة لوحة تحكم الادارة او صفحة الاتصال مالفائدة من أرشفتها ؟ لا فائدة. إذا لا فائدة من دخول عناكب البحث إليها وبالتالي توفر على موقعك وعلى السيرفر غذا كنت على سيرفر خاص توفر موارد تحتاجها
الآن الذي عليك فعله هو النظر في ملف الروبوت إلى الصفحات المحظورة وهل تستحق الحظر ام لا ؟ ثم عدل عليها
أو ابحث في النت عن ملف الروبوت المناسب لمدونات الوورد برس










رد مع اقتباس
قديم 2011-12-14, 16:28   رقم المشاركة : 8
معلومات العضو
عميروش
مشرف سابق
 
الصورة الرمزية عميروش
 

 

 
الأوسمة
وسام التميز 
إحصائية العضو










افتراضي

اقتباس:
المشاركة الأصلية كتبت بواسطة المتصفح الباحث مشاهدة المشاركة
اسمحلي أخي بمداخلة صغيرة

ليس هناك مشكلة في قيام ملف الروبوت بحظر عناكب البحث من دخول صفحات محددة، بل بالعكس هكذا توجه العناكب للصفحات المفيدة التي فيها محتوى مفيد فقط، وتبعدها عن الصفحات التي لا فائدة من ارشفتها
مثلا صفحة التسجيل او صفحة لوحة تحكم الادارة او صفحة الاتصال مالفائدة من أرشفتها ؟ لا فائدة. إذا لا فائدة من دخول عناكب البحث إليها وبالتالي توفر على موقعك وعلى السيرفر غذا كنت على سيرفر خاص توفر موارد تحتاجها
الآن الذي عليك فعله هو النظر في ملف الروبوت إلى الصفحات المحظورة وهل تستحق الحظر ام لا ؟ ثم عدل عليها
أو ابحث في النت عن ملف الروبوت المناسب لمدونات الوورد برس
مداخلة في محلها أخي

هناك العديد من ملفات التي لا يجب حذفها عن عناكب الأرشفة

و المشكل أنه تم حجبها فقط عن قوقل و ليس عن باقي العناكب

مثل هذا الرابط ؟؟ https://www.appscart.net/feed/

حسب الملف الخاص بك هو محجوب عن قوقل ( لماذا تقوم بحجب التغذيات ؟؟؟ )

النسخة الثانية من الملف أحسن بكثير و الله أعلم


أنا لست خبير في ملف robot.txt

و لكني قمت بتحليله بإستخدام هذه الأدات

https://tools.seobook.com/robots-txt/analyzer/

و أيضا وجدت لك هذه النسخة
اقتباس:
User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-*******/plugins Disallow: /wp-*******/cache Disallow: /wp-*******/themes Disallow: /trackback Disallow: /feed Disallow: /comments Disallow: /category/*/* Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /*?* Disallow: /*? Allow: /wp-*******/uploads # Google Image User-agent: Googlebot-Image Disallow: Allow: /* # Google AdSense User-agent: Mediapartners-Google* Disallow: Allow: /* # digg mirror User-agent: duggmirror Disallow: / Sitemap: https://www.example.com/sitemap.xml


و أوافق الأخ "المتصفح الباحث"

و أنصحك بإعادة الملف الى حالته الأصلية لأنه أكيد به كل الإعدادات الأساسية









آخر تعديل عميروش 2011-12-14 في 16:39.
رد مع اقتباس
إضافة رد

الكلمات الدلالية (Tags)
مشكلة:, بواسطة, حظره, robots.txt؟؟

أدوات الموضوع
انواع عرض الموضوع

تعليمات المشاركة
لا تستطيع إضافة مواضيع جديدة
لا تستطيع الرد على المواضيع
لا تستطيع إرفاق ملفات
لا تستطيع تعديل مشاركاتك

BB code is متاحة
كود [IMG] متاحة
كود HTML معطلة

الانتقال السريع

الساعة الآن 15:08

المشاركات المنشورة تعبر عن وجهة نظر صاحبها فقط، ولا تُعبّر بأي شكل من الأشكال عن وجهة نظر إدارة المنتدى
المنتدى غير مسؤول عن أي إتفاق تجاري بين الأعضاء... فعلى الجميع تحمّل المسؤولية


2006-2023 © www.djelfa.info جميع الحقوق محفوظة - الجلفة إنفو (خ. ب. س)

Powered by vBulletin .Copyright آ© 2018 vBulletin Solutions, Inc