اخي هذا سكربت Sphider المعروف وهو سكربت ليس جديد سبق واطلعت عليه وقرأت برمجيته منذ اعوام
وهو سكربت مجاني مفتوح المصدر ومتاح تحميله للجميع في موقعه الرسمي
http://www.sphider.eu/index.php
وطريقة عمله يزحف ويبني فهرس بحث لجميع صفحات موقعك الثابتة والمتغيرة ويخضع لملف <span title="Respects robots.txt protocol, and nofollow and noindex tags.
">robots.txt ايضاً
ليش تضع له رابط تحميل خارجي وليش حاذف حقوق السكربت في ملف search.php ومستبدلها برابط موقعك !!