Нет
10 символов
Kost, потому что если мозгов нет, они думают, что чем больше файл robots.txt, тем круче.
По моему, выложить на серче свой, криво составленный роботс, стало чем-то вроде писькометра, аля, "А смотрите, я вообще ничего не понимаю, но у меня есть свой сайт!11разраз"
Такой ответ от службы технической поддержки Вас не устроил?
Если ПС не понимает какую-то директиву она ее игнорирует. robots.txt - это набор рекомендаций, а не правил.
Че серьезно? Другое дело, что далеко не все ПС понимают эту директиву, поэтому рекомендуется использовать Disallow
К сожалению из-за изменения ширины колонок в процессе работы могут возникнуть ошибки, приводящие к некорректным результатам. Мы вынуждены были отказаться от этой возможности.
Так и было сделано. В случае если донор в индексе, CS Yazzle показывает "Да". "-" показывается в случае, если программе не удалось получить результат. При каком методе проверки индексации вы обнаружили подобную ошибку?
Предложите это на http://idea.yazzle.ru/ Если другие пользователи поддержат вашу идею, мы обязательно воплотим ее в жизнь. На данный момент есть возможность импортировать обратные ссылки из наиболее популярных бирж ссылок, но видимо вы ими не пользуетесь.
Как-то так..
Soniqq, Что за бред? Яндекс прекрасно понимает User-agent: * если не найдено User-agent: Yandex
Использовать User-agent: Yandex стоит, если вы хотите изменить правила поведения ИМЕННО Яндекс робота, а не просто повторить те же самые правила, что б robots.txt смотрелось внушительнее... Продублируйте тогда для каждого юзер-агента, че нет-то?
Ragnarok, переспам ключевика :D
Более актуальный раздел перед вашим вопросом
Автоматическая модерация ссылок. Там есть и магазин фильтров.. и все на свете.. :)