أهلا وسهلا بك زائرنا الكريم في منتدى دعم PBBoard الرسمي، لكي تتمكن من المشاركة ومشاهدة جميع أقسام المنتدى وكافة الميزات ، يجب عليك إنشاء حساب جديد بالتسجيل بالضغط هنا أو تسجيل الدخول اضغط هنا إذا كنت عضواً .

ممكن شرح طريقة التحكم في وقت دخول العناكب Spiders

مشاهدة المشاركة في الموضوع بالعرض العادي

: [مجابه] ممكن شرح طريقة التحكم في وقت دخول العناكب Spiders

09-04-2013 07:31 مساءً

Soliman

وعليكم السلام ورحمة الله وبركاته ،،

التحكم في وقت زيارة العناكب يتم من خلال ملف robots.txt

أمثلة على طريقة الكتابة

للسماح بزيارة كل السبيدر لكل صفحات موقعك بس بالشروط التالية: معدل الوقت المسموح هو 5 ثواني لكل صفحة واحدة. وايضا الوقت المسموح فيه بالزيارة هو من 6 الى 8 صباحا gmt

CODE



User-agent: *

Disallow: /

Request-rate: 1/5       

Visit-time: 0600-0800

سبيدر Baiduspider مزعج وكثير الزيارات انا اريدة ان لا يزور صفحات موقعي الا كل دقيقتين.

CODE

<br />
User-agent: Baiduspider<br />
Crawl-delay: 120<br />
<br />

تم تحرير المشاركة بواسطة :Soliman بتاريخ:09-04-2013 07:32 مساءً

الساعة الآن 01:52 AM