أهلا وسهلا بك زائرنا الكريم في منتدى دعم PBBoard الرسمي، لكي تتمكن من المشاركة ومشاهدة جميع أقسام المنتدى وكافة الميزات ، يجب عليك إنشاء حساب جديد بالتسجيل بالضغط هنا أو تسجيل الدخول اضغط هنا إذا كنت عضواً .

الدعم الفني Support

[مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

: موضوع مغلق

: [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

04-06-2013 02:07 صباحاً

المدرس

السلام عليكم // جائتني رسالة من الاستضافة الي فهمت من عندها انه المشكلة الي تصير عندي في استهلاك موارد النظام هي زواحف محركات البحث ونصحنوني بالذهاب

الى لوحة التحكم في google و bing وتقليل مستوي الزحف وقمت بتقليل مستوى الزحف لكن لااعرف ماهو الحل المتبقي

ياريت لو تنصحوني بالحلول وهذه الرسالة

It seems that most of the issue on the account is caused by crawlers.

Total number of unique IP addresses: 10109

Total number of requests: 419755

Total number of unique request strings: 60012

Total number of unique referers: 12700

Total number of unique user agents: 1829

Total bandwidth sent in responses: 5G [6197229300B]

Top 10 requesting IP Addresses based on count:

COUNT: 36081 / 08.60% IP: 66.249.73.183 HOST: crawl-66-249-73-183.googlebot.com

COUNT: 11974 / 02.85% IP: 157.55.33.17 HOST: msnbot-157-55-33-17.search.msn.com

COUNT: 8041 / 01.92% IP: 157.55.32.104 HOST: msnbot-157-55-32-104.search.msn.com

COUNT: 7065 / 01.68% IP: 157.55.32.154 HOST: msnbot-157-55-32-154.search.msn.com

COUNT: 5348 / 01.27% IP: 157.56.93.84 HOST: msnbot-157-56-93-84.search.msn.com

COUNT: 3952 / 00.94% IP: 109.205.118.6 HOST: Unknown Host

COUNT: 2309 / 00.55% IP: 86.111.146.66 HOST: Unknown Host

COUNT: 1741 / 00.41% IP: 37.238.16.170 HOST: Unknown Host

COUNT: 1729 / 00.41% IP: 5.10.226.85 HOST: Unknown Host

COUNT: 1543 / 00.37% IP: 66.249.81.4 HOST: google-proxy-66-249-81-4.google.com

Top 10 Web Crawlers:

Count: 33021 / 07.87% Crawler: bingbot

Count: 32493 / 07.74% Crawler: googlebot

Count: 5954 / 01.42% Crawler: baiduspider

Count: 944 / 00.22% Crawler: msnbot

Count: 6 / 00.00% Crawler: yandexbot

We recommended setting the crawl rate as slow as possible during peak traffic times (mid-day), and only slightly higher during off-peak hours. Changing the crawl rate does not effect how Bing views your site, how often it is crawled, or how deeply your site is crawled. Reducing the crawl rate will not effect your search engine results, it will simply slow down the rate that Bing crawls your site, and as a result will cause less stress on the

NON BING/GOOGLE*************** We recommend that you limit the crawl rates for all bots or disable crawl access. To manage non (Google/BING) bot crawler rates

, you must create a robots.txt for each domain and insert the following lines in the file: User-agent: * Crawl-delay: 15

: [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

04-06-2013 05:14 صباحاً [1]

Soliman

لتقليل وقت زحف عناكب البحث بعدد الثواني من خلال ملف : robots.txt الموجود بداخل مجلد منتداك

بالبحث عن :

CODE

User-agent: *<br />

وأضافة أسفلها

CODE

Crawl-delay: 120<br />

--------------------------

ولمنع زحف الربوتات التي طرحتها في ملف robots.txt ايضاً

ضع أعلى

CODE

User-agent: *<br />

هذه الأوامر

CODE

User-agent: bingbot<br />
Disallow: /<br />
User-agent: googlebot<br />
Disallow: /<br />
User-agent: baiduspider<br />
Disallow: /<br />
User-agent: msnbot<br />
Disallow: /<br />
User-agent: yandexbot<br />
Disallow: /<br />
User-agent: search.msn.com<br />
Disallow: /<br />

مواضيع تفيدك

[مجابه] ممكن شرح طريقة التحكم في وقت دخول العناكب Spiders

شرح لملف robots.txt + محتوى الملف ﻷشهر المواقع العالمية

عناكب عناكبYahoo! Slurp دمرت موقعي

ما هو ملف robots.txt ؟ كيف يتم انشاؤه ؟

: [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

04-06-2013 06:29 صباحاً [2]

المدرس

شكرا لك اخي لكن ملاحظة بالنسبة لملف robots.txt الافتراضي داخل المنتدى لا يوجد

CODE

 User-agent *&nbsp; <br />

بل يوجد

CODE

 User-agent: Googlebot<br />

وعدلتها بنفسي ليصبح الملف :

CODE

<br />
<br />
User-agent: bingbot<br />
Disallow: /<br />
User-agent: googlebot<br />
Disallow: /<br />
User-agent: baiduspider<br />
Disallow: /<br />
User-agent: msnbot<br />
Disallow: /<br />
User-agent: yandexbot<br />
Disallow: /<br />
User-agent: search.msn.com<br />
Disallow: /<br />
User-agent: *<br />
Crawl-delay: 120<br />
Disallow: index.php?page=new_topic<br />
Disallow: index.php?page=search<br />
Disallow: index.php?page=pm_send<br />
Disallow: index.php?page=usercp<br />
Disallow: index.php?page=pm_list<br />
Disallow: index.php?page=online<br />
Disallow: index.php?page=send<br />
Disallow: index.php?page=misc&amp;sendtofriend=1<br />
Disallow: index.php?page=member_list<br />
Disallow: index.php?page=team<br />
Disallow: index.php?page=download<br />
Disallow: index.php?page=static<br />
Disallow: index.php?page=new_reply<br />
Disallow: index.php?page=report<br />
Disallow: index.php?page=options<br />
Disallow: index.php?page=logout<br />
Disallow: index.php?page=forget<br />
Disallow: index.php?page=register<br />
Disallow: /look/images/avatar/<br />
Disallow: /admin.php<br />
Disallow: /pbboard.class.php<br />
Disallow: /lang/<br />
Disallow: /engine/<br />
Disallow: /admin/<br />
Disallow: /includes<br />
Disallow: /look/<br />
Disallow: /modules/<br />
Disallow: /common.php/<br />
Disallow: /admincp/<br />
<br />
Sitemap: index.php?page=sitemap&amp;subject=1<br />
Sitemap: sitemap.xml<br />
<br />
<br />

لو عندك ملاحظة ياريت تنبهني

: تم تحرير المشاركة بواسطة :المدرس بتاريخ:04-06-2013 06:33 صباحاً

: [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

05-06-2013 02:36 صباحاً [3]

Mr King

أظن أخي أنك لازم تستبدل الرقم 120 برقم أكبر

يعني أنت تطلب من محرك البحث أنه يزور منتداك كل 120 ثانيه وهذا ماراح يفيدك في شيء والله أعلم

: تم تحرير المشاركة بواسطة :Mr King بتاريخ:05-06-2013 02:37 صباحاً

: [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

09-06-2013 12:45 صباحاً [4]

المدرس

شكرا مستر كنك سوت الوقت

وخليت الكود هذا .. وصار اجسن ماكو اي توقفات

CODE

<br />
User-agent: bingbot<br />
Disallow: /<br />
<br />
User-agent: baiduspider<br />
Disallow: /<br />
<br />
User-agent: msnbot<br />
Disallow: /<br />
<br />
User-agent: yandexbot<br />
Disallow: /<br />
<br />
User-agent: search.msn.com<br />
Disallow: /<br />
<br />
User-agent: *<br />
Crawl-delay: 150<br />
Disallow: /pb/index.php?page=new_topic<br />
Disallow: /pb/index.php?page=search<br />
Disallow: /pb/index.php?page=pm_send<br />
Disallow: /pb/index.php?page=usercp<br />
Disallow: /pb/index.php?page=pm_list<br />
Disallow: /pb/index.php?page=online<br />
Disallow: /pb/index.php?page=send<br />
Disallow: /pb/index.php?page=misc&amp;sendtofriend=1<br />
Disallow: /pb/index.php?page=member_list<br />
Disallow: /pb/index.php?page=team<br />
Disallow: /pb/index.php?page=download<br />
Disallow: /pb/index.php?page=static<br />
Disallow: /pb/index.php?page=new_reply<br />
Disallow: /pb/index.php?page=report<br />
Disallow: /pb/index.php?page=options<br />
Disallow: /pb/index.php?page=logout<br />
Disallow: /pb/index.php?page=forget<br />
Disallow: /pb/index.php?page=register<br />
Disallow: /pb/look/images/avatar/<br />
Disallow: /pb/moeiraq.class.php<br />
Disallow: /pb/admin.php<br />
Disallow: /pb/moeiraq.class.php<br />
Disallow: /pb/lang/<br />
Disallow: /pb/engine/<br />
Disallow: /pb/admin/<br />
Disallow: /pb/includes/<br />
Disallow: /pb/look/<br />
Disallow: /pb/modules/<br />
Disallow: /pb/common.php/<br />
Disallow: /pb/admincp/orums/look/<br />
Sitemap: http://www.moeiraq.com/pb/sitemap.xml<br />
Sitemap: http://www.moeiraq.com/pb/index.php?page=sitemap&amp;subject=1

: [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

09-06-2013 11:49 مساءً [5]

نجم الويب

السلام عليكم ورحمة الله وبركاته ،،

تم غلق الموضوع لأحد الأسباب التالية:

تم حل المشكلة والحمدلله.
بقاء الموضوع لمدة 3 أيام بدون الرد عليه أو وجود إشارة تدل على رجوع العضو إليه.
لا يوجد حل لهذه المشكلة (إذا وجد الحل سوف يتم إعادة فتح الموضوع).

عزيزي العضو حرصا على عدم تداخل المواضيع ببعضها وبالتالي صعوبة إستخدام عملية البحث بالنسبة للأعضاء قررت إدارة المنتديات بإغلاق المواضيع التي تتوافق مع الأسباب السابقة. بإمكانك بدأ موضوع جديد أو مراسلة أحد المشرفين إن كنت متأكد من رغبتك في الإستمرار . إدارة المنتديات،،

المواضيع المتشابهه
عنوان الموضوع	الكاتب	الردود	الزوار	آخر رد
تغيير مكان عبارة رسالة جديدة و رسالة مقروءة	يونس	3	1346	يونس
رسالة تظهر عند إضافة خاصية إشرافية جديدة فى الإشراف المتعدد	maxprof	2	986	maxprof
[مجابه] رسالة خطأ عند ترقية النسخة الجديدة	waalrd	4	1157	waalrd
نافذة لديك رسالة جديدة	PhpMax	3	1177	PhpMax

الكلمات الدلالية

لا يوجد كلمات دلالية ..

« بعد اجراء عملية دمج للمنتدى باستخدام سكربت PBBoard_Unify_v1.0 | [مجابه] رمز التحقق البشري »

الساعة الآن 12:17 PM