Форум Поисковые системы Яндекс

бот яндекса тупой

M
На сайте с 28.05.2008
Offline
35
mimicunit
1639

старого сайта на площадке нет уже месяц

был WP, сайт вылетел из индекса - снес что-б ресурсы не кушал

после этого уже 2-ю неделю новый белый сайт висит

бот новые страницы не ест, а к старым стучится с завидной регулярностью уже больше месяца, по логам смотрел

из новых страниц только robots.txt ест нормлаьно, а другие не хочет, не index.php, не sitemap.xml не ел

и такая-же ситуация на большой стопке бывших сплогов

лучше-б яндекс нормальную, адекватную и своевременную индексацию сделал

кусок лога: 

93.158.148.31 - - [14/Dec/2009:19:12:48 +0300] "GET /ya-vot-i-bespokoyus/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:13:27 +0300] "GET /i-mnogo-strashnee/trackback/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:13:48 +0300] "GET /i-poluchaetsya-zlo/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:14:31 +0300] "GET /a-potom-strashno-istoshno-zakrichala/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:15:43 +0300] "GET /fedor-podnyal-palec/trackback/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:16:12 +0300] "GET /net-ne-poveryu/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:16:19 +0300] "GET /ni-zvuka/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:16:26 +0300] "GET /ya-igral-rol-voloshina/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:17:20 +0300] "GET /a-tebe-chto-zdes-nado/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:17:52 +0300] "GET /ya-poshla-za-vami-a-vas-net/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:18:42 +0300] "GET /net-ne-poveryu/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:19:40 +0300] "GET /zabirajte-platok-i-uxodite/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:20:09 +0300] "GET /kyzya-xochesh-ya-pobeseduyu-s-orbodom/feed/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:20:30 +0300] "GET /v-chem-ulichali-ersteda/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:21:21 +0300] "GET /radostto-byla/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:22:02 +0300] "GET /spi-radi-boga/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:22:32 +0300] "GET /nichego-etogo-kolya-konechno-ne-znal/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"

93.158.148.31 - - [14/Dec/2009:19:23:18 +0300] "GET /promolchu-kak-ryba/ HTTP/1.1" 404 814 "-" "Yandex/1.01.001 (compatible; Win16; I)"
N
На сайте с 04.03.2008
Offline
202
noosfera
#1

буратино был тупой, тупой как дрова, тупой как дрова...

Павел Крылов
На сайте с 02.10.2009
Offline
129
Павел Крылов
#2

Писать Платону пробовали? Мол так и так ...

HD
На сайте с 14.12.2009
Offline
0
hello-design
#3

нужно обратиться в поддержку яндекса

M
На сайте с 28.05.2008
Offline
35
mimicunit
#4

написать яндексу что у них краулер убогий? 😆

так они похоже сами это знают, не умеют индексировать - с выдачей извращаются 🙅

написать платону список своих доменов - чтоб их сразу все забанили?

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
Stripe
На сайте с 05.09.2006
Offline
222
Stripe
#5

mimicunit, А не думали вы, что любой сайт может в 404 уйти, как должен бот при этом действовать?

Сайты от 30р почти по любой теме или наполнение ваших сайтов (/ru/forum/887821) дешевым контентом. Базы товаров и контента (http://nakovalnja.ru). Вечные ссылки за 1$ или 30р. (/ru/forum/741397)
s91
На сайте с 13.04.2009
Offline
88
s91
#6

Такая же история была с одним сайтом, когда заменил весь контент, движок, структуру, вообщем всё на нем.

В логах еще долго появлялись ошибки из-за обращения яши к несуществующим страницам.

Но я считаю - это правильная реакция на полную замену сайта.

Через 3 недели сайт полностью переиндексировался, а обращений к старым страницам почти не осталось

Не бывает белой и черной оптимизации. Бывает только обман и разные способы его реализации
Нарушения и угрозы безопасности Refirect 301 для новой Apache и логи сайта
SF
На сайте с 11.10.2005
Offline
137
SellingFeis
#7

mimicunit, надо всеже комплексно смотреть на вещи а не однобоко только с Вашей позиции.

Stripe, правильно говорит, сайт(страница) может быть временно недоступен(на) и его из за этого из индекса выкидывать чтоли? :)

Инструкция: Как Правильно Делать Сайты: Домен, Хостинг, Установка CMS (http://www.3sd.ru/kak-delat-site/index.php).
Stripe
На сайте с 05.09.2006
Offline
222
Stripe
#8
Вопрос: Когда сайт недоступен по причинам хостинга, через сколько времени сайт может выпасть из индекса?
Садовский: Через 4 захода робота. Если сайт не популярный, то примерно через неделю. Но этот критерий надо уточнять, так как это зависит от того, как не работает сайт. Если сайт недоступен и робот это понимает, то выкидываться он не будет. Если для робота выдастся страница 200, то он её переиндексирует. Всё зависит от типа ошибки хостинга.

/ru/news/83

IZmoskvy
На сайте с 18.12.2006
Offline
211
IZmoskvy
#9

Это что, у меня некоторые поддомены которые почти год назад снёс до сих пор в индексе. Да и ещё позиции неплохие занимают.

Делаю видео и проморолики. Имеется сетка сайтов Московских организаций для размещения ваших статей со ссылками. Профессионально занимаюсь созданием и продвижением сайтов ( https://8saitov.ru ).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий