Перейти к содержанию
Форумы

Конфликт robots.txt с .htaccess


Рекомендуемые сообщения

Хочу спрятать файл robots.txt от посетителей - зачем злобным хакерам давать наводку?

Но получается, что в .htaccess запрет просмотра файла robots.txt

 

<Files robots.txt>

order allow,deny

deny from all

</Files>

 

срабатывает и для роботов - поисковиков!

.htaccess пофигу кто смотрит в robots.txt

 

Кто знает как запретить смотреть robots.txt в броузере посетителя,

но разрещить для всех роботов.

Ссылка на комментарий
Поделиться на другие сайты

Спасибо за сообщение.

 

Но это метод проб и ошибок, кто знает как поведет себя робот - возьмет и проиндексирует папки которые нельзя

индексировать! Тогда все переименовывать зановоб менять ссылки и т.д.

 

Кто знает на 100 процентов как это делать.

Ссылка на комментарий
Поделиться на другие сайты

<Files ~ "robots.txt">

Order allow,deny

Deny from All

</Files>

 

Яша-робот стал индексировать все подряд!

 

Неужели никто не знает - как справится с этой бодягой?

В таком случае - поделитесь, неужели У ВСЕХ с этим все в порядке?

И почему во всем интернете об этом - как в рот воды набрали. Это сговор...

Задумайтесь над своими роботами текста и хитачи

Ссылка на комментарий
Поделиться на другие сайты

Для публикации сообщений создайте учётную запись или авторизуйтесь

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти
×
×
  • Создать...