Ну если банить их не за что и телфон не является причиной бана, то возможно во время обхода робот получил какой-нить глючный ответ от сервера.
У меня не так давно робот при отсутствии robots.txt взял какие-то непонятные значения и выкинул сайт из индекса.
у меня пока все спокойно, никаких изменений ни на одном из 10 сайтов
У меня сайт на 2 месяца выпал из индекса, сначала во время индексации был недоступен, а потом робот вместо файла robots.txt (этого файла вообще не было) получал какие-то другие значения, в итоге создал ничего не запрещающий файл и в течении недели сайт проиндексировался.
Очень приятно работать с ТС.
Очень порадовало качество размноженных статей.
Надеюсь сотрудничество будет долгострочным.
Ctulhu, скинул в личку
буду уменьшать размер страницы
Спасибо за помощь!
Да так тоже смотрел, выдавал главную страницу.
Сейчас уже выдает содержимое роботса
А как просмотреть, что выдает сервер?
Нет, смотрели в корне сайта. Но там его нет и в других местах его тоже нет.
Сейчас так и сделали. Но вопрос в том, почему Яндекс показывает что он есть, да еще и такого размера?