starichenko, для написания файла robots.txt не нужно особого ума и мега знаний, и лучше его не тырить у других. Есть у тебя есть время - то можешь подождать, я на днях могу написать статью по созданию собственного robots.txt, что следует учесть и как вообще его правильно забодяжить.
Если времени нет - то в интернете можно найти общие описания данного файла и принцип составления.
|