Файл robots.txt. Что это такое и как его правильно составить?

Файл robots.txt. Что это такое и как его правильно составить? biznesguide.ru

Файл robots.txt - это файл ограничения доступа к содержимому поисковыми роботам на http-сервере. Данный файл не является обязательной составляющей сайта. Его может вообще и не быть. Но если Ваш сайт имеет какие-то скрытые страницы или файлы, которые Вы хотите закрыть их от индексации поисковыми системами, тогда файл robots.txt Вам просто необходим.
Похожие анонсы »

Комментарии

К этому анонсу пока не оставлено ни одного комментария.
Войдите или зарегистрируйтесь, чтобы оставлять комментарии.

Спонсоры

Авторизация

Имя:
Пароль:
 

Друзья проекта

Активность на сайте