Сменил robots.txt , а Яндекс всё равно применяет старые правила

Just Beginner
На сайте с 17.08.2007
Offline
89
973

Сайт пол года находился в разработке. Висела заглушка. Была полностью запрещена индексация в robots.txt

Сегодня ночью запустили сайт, сняли заглушку, сменили robots.txt на другой.

Купил на сайт хороших ссылок что бы ускорить индексацию.

Через 12 часов зашёл в Янд.вебмастер - написано, что проиндексировано 89 страниц и все кроме главной исключены из индекса из-за блокировки в robots.txt

Проверил через сервис яндекса robots.txt ещё раз - всё нормально. Все эти страницы разрешены.

Похоже Яндекс просто блокирует страницы на основании старого robots.txt

Подскажите пожалуйста, что делать? Как указать яндексу, что robots.txt сменился?

Гугл нормально индексирует.

I
На сайте с 19.11.2009
Offline
28
#1

Ждите хотябы неделю, нет изменений - письмо платонам

Just Beginner
На сайте с 17.08.2007
Offline
89
#2

Неужели Яндексу нужна целая неделя что бы понять, что изменили robots.txt 😮

nik_kent
На сайте с 05.02.2008
Offline
193
#3
Just Beginner:
Сегодня ночью запустили сайт, сняли заглушку, сменили robots.txt на другой
tools.promosite.ru/updates/:
выложен индекс по 28 мая 2011

P.S. Вы бы хоть думали немного, что-ли...

С уважением, Николай.
Shessmaster
На сайте с 15.10.2007
Offline
240
#4
Just Beginner:
Неужели Яндексу нужна целая неделя что бы понять, что изменили robots.txt

Должен пройти как минимум один апдейт.

Или вы думали, что поменяв robots.txt сайт через 12 часов попадет в индекс?

Психиатр
На сайте с 16.11.2010
Offline
360
#5
Shessmaster:
Или вы думали, что поменяв robots.txt сайт через 12 часов попадет в индекс?

Ну яндекс совершенствует свои алгоритмы. Разве нет? :)

Just Beginner:
Неужели Яндексу нужна целая неделя что бы понять, что изменили robots.txt 😮

Это ещё не срок...

Just Beginner
На сайте с 17.08.2007
Offline
89
#6

Вопрос не о том, что сайт в индексе должен быть через 12 часов.

А о том, почему в вебмастере написано что странице заблокированы, когда они уже давно разблокированы.

Shessmaster
На сайте с 15.10.2007
Offline
240
#7
Психиатр:
Ну яндекс совершенствует свои алгоритмы. Разве нет?

Ага, Яндекс - найдется всё! Google - а ничего и не терялось.... :)

Just Beginner:
А о том, почему в вебмастере написано что странице заблокированы, когда они уже давно разблокированы.

А давно - это сегодня ночью.

Кто или что по вашему обновляет информацию в панели вебмастера?

Just Beginner
На сайте с 17.08.2007
Offline
89
#8

Вчера, одновременно с созданием этой темы написал Платонам. На удивление быстро, вчера же в 16:36 они мне ответили, что действительно были некоторые неполадки в обработке robots.txt с моего сайта. Что теперь они устранены и в течении 2х недель страницы появятся в результатах поиска.

К ночи бот яндекса стал ходить по всем страницам сайта, а не только по главной.

Сегодня утром в результатах поиска уже появилось 63 страницы.

Я конечно понимаю, что это быстробот и что они выпадут до следующего апа, но зато теперь всё нормально индексируется, а не блокируется старым изменённым robots.txt

Так что я был прав, а Вы зря мне так репу заминусовали. Мне на неё плевать. А вот анонимно через репу писать всякие оскорбления - это не по мужски. Так делают только трусы, которые не то, что в реале в лицо, а даже открыто на форуме бояться высказать своё мнение.

Всем спасибо за помощь.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий