Перейти к содержанию
Форумы

sguall

Пользователи
  • Постов

    4
  • Зарегистрирован

  • Посещение

Сообщения, опубликованные sguall

  1. <Files ~ "robots.txt">

    Order allow,deny

    Deny from All

    </Files>

     

    Яша-робот стал индексировать все подряд!

     

    Неужели никто не знает - как справится с этой бодягой?

    В таком случае - поделитесь, неужели У ВСЕХ с этим все в порядке?

    И почему во всем интернете об этом - как в рот воды набрали. Это сговор...

    Задумайтесь над своими роботами текста и хитачи

  2. Спасибо за сообщение.

     

    Но это метод проб и ошибок, кто знает как поведет себя робот - возьмет и проиндексирует папки которые нельзя

    индексировать! Тогда все переименовывать зановоб менять ссылки и т.д.

     

    Кто знает на 100 процентов как это делать.

  3. Хочу спрятать файл robots.txt от посетителей - зачем злобным хакерам давать наводку?

    Но получается, что в .htaccess запрет просмотра файла robots.txt

     

    <Files robots.txt>

    order allow,deny

    deny from all

    </Files>

     

    срабатывает и для роботов - поисковиков!

    .htaccess пофигу кто смотрит в robots.txt

     

    Кто знает как запретить смотреть robots.txt в броузере посетителя,

    но разрещить для всех роботов.

×
×
  • Создать...