Только вот грамотно настроить не могу его. Может (если уж тема об этом файле) - кто-нибудь может выложить пример заполнения файла и какие возможные функции можно сделать в нем? Просмотр поста #14555: Используете ли Вы robots.txt в своих проектах?
DeSTrucTioN
This Planet... Bleeds To The DarkSide!
Вообще пользуюсь, Т.к. есть пара файлов/папок, которые роботы видеть не должны Только вот грамотно настроить не могу его. Может (если уж тема об этом файле) - кто-нибудь может выложить пример заполнения файла и какие возможные функции можно сделать в нем?
Только вот грамотно настроить не могу его. Может (если уж тема об этом файле) - кто-нибудь может выложить пример заполнения файла и какие возможные функции можно сделать в нем?