Странно, почему-то в этот раз уведомление об апдейте в Я.Вебмастер не пришло. Оно только меня проигнорировало?
В принципе оно и верно - назвать это апдейтом язык не шевелится.
Тёма К.
По чем купил - по том и продаю. Проверял экспериментально, в я.вебмастере в анализаторе robots при 1029 строках сайт полностью запрещен, а при 1019 все что надо разрешено.
Игнор robots при превышении его размера, конечно же логично, но, к сожалению, на практике это оказалось не так.
Мне нужно было исключить из индекса несколько тысяч страниц товаров (спецсимволами перечислить их было нельзя)
Оказывается, при превышении 1020 строк в robots Яндекс не просто игнорирует лишние строки или весь robots, а считает сайт (начиная с главной страницы) полностью запрещенным роботсом (запретов на нужные страницы в пределах 1020 строк не было).
... это потому что меня от-туда выкинули.
Блин, как я лопухнулся! Весь сайт пропал из выдачи из-за превышения robots.txt (директива allow: / оказалась в 1032 строке).
Кто-нибудь знает, как быстро восстановится весь сайт и потеряет он что-либо в позициях?
