sguall
-
Постов
4 -
Зарегистрирован
-
Посещение
Сообщения, опубликованные sguall
-
-
Спасибо за сообщение.
Но это метод проб и ошибок, кто знает как поведет себя робот - возьмет и проиндексирует папки которые нельзя
индексировать! Тогда все переименовывать зановоб менять ссылки и т.д.
Кто знает на 100 процентов как это делать.
-
Хочу спрятать файл robots.txt от посетителей - зачем злобным хакерам давать наводку?
Но получается, что в .htaccess запрет просмотра файла robots.txt
<Files robots.txt>
order allow,deny
deny from all
</Files>
срабатывает и для роботов - поисковиков!
.htaccess пофигу кто смотрит в robots.txt
Кто знает как запретить смотреть robots.txt в броузере посетителя,
но разрещить для всех роботов.
-
Предложение - меняться фильмами или играми диск на диск.
Конфликт robots.txt с .htaccess
в Программы и Скрипты
Опубликовано
<Files ~ "robots.txt">
Order allow,deny
Deny from All
</Files>
Яша-робот стал индексировать все подряд!
Неужели никто не знает - как справится с этой бодягой?
В таком случае - поделитесь, неужели У ВСЕХ с этим все в порядке?
И почему во всем интернете об этом - как в рот воды набрали. Это сговор...
Задумайтесь над своими роботами текста и хитачи