Яндекс & robots.txt

Было абсолютно всё тоже самое, за исключением строчки

Disallow: /templates

она была добавлена перед тем, как сообщить Яндексу о необходимости удалить эту директорию, а сегодня эту строчку заменил на

Disallow: /temp

для бота * (секции для бота Яндекса нет, для него должна действовать общая секция).

Я правильно понял, что Disallow: /templates вы добавили именно между 14-м и 16-м?

Нет, 18-го.

Спасибо, понятно.

Две новости - хорошая и плохая.

Хорошая - робот у нас все корректно понял, и начал по мере обхода выкидывать раздел.

Плохая - есть глюк в delurl. Исправим.

Спасибо.

Прошу прощения за оффтопик, хотелось задать вопрос лично BigBrother.

Скажите, пожалуйста, как Вас зовут. Мы знаем поименно всех Яндексоидов, здесь время от времени появляющихся, а Вашего имени не знаем.

Seventh Son, если не ошибаюсь, Романом его зовут. ;)

зы: BigBrother, привет Платону ;)

да не все ли равно, как его зовут? по мне, так пусть это будет образ типа платона. главное, чтоб не раз в полгода заходил, а вот как сейчас, достаточно оперативно реагировал. :)

Всё-таки не всё ладно с интерпретацией robots.txt:

Запись

Disallow: /cgi-bin/search

присутствует в robots.txt уже не один год, однако такой запрос:

http://www.yandex.ru/yandsearch?text=43n39e

в данный момент на четвёрной позиции показывает ссылку:

http://sochi.org.ru/cgi-bin/search.cgi?c=01&m=near&np=7&ps=10&q=%D7%C1%D4%C5%D2%CC%CF%CF&s=IRPD&sp=1&sy=0&tmplt=search.htm.ru&wf=33F37F73

А она прямо запрещена к индексированию согласно стандарту robots.txt

😕

попробуйте удалить эту страницу

удаляет только если роботсом запрещена, ведь так?

Вы думаете таких страниц одна штука ?

Эти страницы в принципе не должны были индексироваться, никак.