Kost

Рейтинг
737
Регистрация
31.01.2001

Неужели не дают шелл?

dj_maxx:
Сегодня утром зашел Яндекс, прочитал файл и ушел. Что опять не так?

Что же вы всем парите мозг? У сайта было зеркало www.ifly.org.ua, вот оно и проиндексировано.

А вы его взяли и отключили. Теперь Яндекс будет еще долго пытаться его индексировать.

P.S. А в логах очень вредно выкидывать User-agent, непонятно, что это за робот заходил, индексатор, или, например, зеркальщик. Да и вообще IP роботов Яндекса я наизусть не знаю :).

Вы считаете на более представительной группе сайтов, чем обсчитываемые ливинтернетом?

Наверное потому, что за пределами Украины тоже есть пользователи интернета.

Здесь можно посмотреть примерно соотношение пользователей и др. интересную информацию количественно, не полагаясь на "разные сайты".

Vitiai:
А где в каких логах? Где их посмотреть, какой робот появляется на сайте?

Первый вопрос адресуйте своему хостеру, раз до сих пор не знаете. Скачайте логи и ищите там следы Яндекса (см. его FAQ).

Сравните:

http://www.yandex.ru/yandsearch?serverurl=www.yoshkar-ola.info

http://www.yandex.ru/yandsearch?serverurl=yoshkar-ola.info

Ну и первым делом сюда.

В начале раздела ссылка на этот FAQ.

Почитайте также http://robotstxt.org.ru .

Katrin Baukina:
но 30 минут уже прошло - это уже слишком много

Точно, я бы через 10 минут уже позвонил, не случилось ли чего. Мало ли, вдруг у человека понос :).

Ответ нормальный. Только это "зеркальщик", а не индексатор, см. ссылку выше.

Всего: 14616