السلام عليـــــــــــــــــكم
كما جاء في عنوان الموضوع
هل هناك طريقة لتحكم في وقت دخول العناكب للمنتدي Spiders علي إختلافها googlebot - msnbot-baidou.........................إالخ
وهذا بسبب استهلاكها للباندويث كبير
وذلك بعد ما إستلمت رسالة من الشركة المستضيفة تدعو فيه إلي التقليل من السماح للعناكب لدخول الموقع حفاضا علي الباندويث
فقمت بالمقارنة بين موقعي و أحد المواقع لصديق لي حيث يدخل لموقعه googlebot كل 24 ساعة مع هذا أرشفة موقعه دائما ممتازة وائد بيج رانك 3 لموقعه , في حين أن موقعي تدخله عناكب البحث تقريبا كل 3 دقائق......!
- وعليه إن تفضل أهل الإختصاص وشرحوا لنا طريقة تمكننا من التحكم في وقت دخول عناكب البحث
شكرا لكم مسبقا