ملف robots.txt ليس من ضمن النسخة. هو ملف اضافي واختياري وضعه أحد الأعضاء كمثال. يمكنك البحث في النت عن هذا الملف وتحرره كما تريد. وهذه الأوامر موجود في الملف المقترح وليست من الإستضافة.