Робот Я индексирует, а в базе нет

AStr.
На сайте с 05.11.2004
Offline
133
466

Сайт пропал из базы Яндекса полтора месяца назад. Робот индексатор Яндекса постоянно заходит и индексирует страницы, в том числе и главную, а в базе сайт не появляется.

Вот одна из многих запись из лога, которую оставил индексатор Я:

"[17/Dec/2004:02:45:46 +0300] "GET /robots.txt HTTP/1.1" 200 38 "-" "Yandex/1.01.001 (compatible; Win16; I)

[17/Dec/2004:02:45:46 +0300] "GET / HTTP/1.1" 200 17719 "-" "Yandex/1.01.001 (compatible; Win16; I) "

Кто-нибудь знает в чем причина?

Недвижимость в Испании у моря, здесь 325 дней в году светит солнце (https://best-espana.com/)
X
На сайте с 11.08.2004
Offline
22
#1

Может вы ему в роботс.тхт запретили?

Хостинг под дорвеи (http://rana.com.ru/) Бесплатная автосамбилка сайта в поисковые системы (http://rana.com.ru/sub/)
AStr.
На сайте с 05.11.2004
Offline
133
#2
Как писал Xpymc
Может вы ему в роботс.тхт запретили?

если бы всё было так просто ;)

P.S. роботс такой:

User-Agent: *

Host: www.сайт.ru

R
На сайте с 12.08.2003
Offline
30
#3

Может в тексте страницы запрещена индексация

С уважением, Григорий Рубцов, Онлайн-курс оптимизации сайта (http://tandem-online.ru/seminars/info/seminar748.html)
AStr.
На сайте с 05.11.2004
Offline
133
#4
Как писал rgbeast
Может в тексте страницы запрещена индексация

нет, не запрещена.

Перед тем как сайт пропал, он хорошо индексировался, никакие изменения в сайт не вносились, пропал из базы и не возвращается туда, хотя индексируется.

P.S. james bond тоже не заходил ;)

NF
На сайте с 23.04.2004
Offline
51
#5

Подожди пару недель с момента захода робота.

Всё будет нормально. Иногда почему то заминки случаются. У меня в прошлый раз 3 недели такая ситуация была. Потом всё нормально в базу попало.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий