имхо, противозаконного в этом ничего нет ... и помочь Яндексу нужно
я говорил про простой метод сравнения выдачи и XML - иногда они реально различаются ... странно что никто не упомянул про готовые решения на xml.yandex.ru , например http://xml.yandex.ru/examples.xml?id=372989
XML не нужен ;)) пользуйтесь pda.yandex.ru , там все для Вас уже сделали (на основе xml)
Большой пардон! а почему это при получении некорректного статуса (500) к robots.txt робот отказывается индексить весь сайт ? почему это не рассматривается как отсутствие robots.txt ?
программисты никогда не были маркетологами ... им всегда требовалась "нормальная" прослойка между ними и клиентом ...
Kost, спасибо. Думаю так же.
#rhost="ua.crimea.*" дает "Результат поиска: страниц — 1 449 644, сайтов — не менее 354", и там далеко не все в Каталоге Яндекса ...
P.S. в be1/stat появилась новая ссылка - "проиндекированные в домене" - это хосты типа ***.site.ru , а то все руками приходилось ...
просто вероятно, что сайты в оной зоне не будучи внесенными в каталог яндекса "отдают" свой тИЦ основному домену ...
Если старые урлы не представляется возможным узнать, то Вам, по хорошему, нужно выкачать из Яндекса (#link"www.site.ru*"|#link"site.ru*" + rd=0) . После этого распарсите полученные страницы на предмет ссылок на Ваш сайт. Далее, с помощью CMS или mod_rewrite обеспечьте внятный контент по оным урлам ( 200 Ok )
имхо, Яндекс молодец!
закрываю
что бы сообщения не походили на нарушение правил форума, некоторые сообщения почиканы, некоторые получили выговор с занесением в личное дело.
