Что нужно делать, если новый сайт не индексируется (инструкция)

123 4
Г0
На сайте с 19.08.2004
Offline
129
14338

Вопросов за неделю много, решил сделать стуктурированный ответ, если кто может дополнить – милости просим.

Что нужно делать, если новый сайт не индексируется несколько месяцев (пошаговая инструкция):

0. Для начала все же проверяем действительно ли в Яндекс не знает ни одной вашей страницы, для этого вставляем в строку браузера такую ссылку запрос:

http://www.yandex.ru/yandsearch?surl=searchengines.ru&pag=u&numdoc=50&rd=0

только вместо searchengines.ru вписываем свой сайт. И только если там ничего не будет, тогда начинаем читать дальше.

После этого лезем на сервер в логи или просим их у хостера/админа и ищем там

Yandex/1.01.001 (compatible; Win16; I)

– это бот индексатор, если он заходил то ваша сайт или его части скорее всего появятся в Яндексе после следующего апдейта. Узнать что был апдейт можно здесь /ru/forum/search-engines/yandex

по теме, в которой у многих «поднялось» и у многих «упало» :bl: . Если индексатора не было, то читаем дальше.

1. Возможно яндекс не знает сайт, даже если вы добавляли его в форму http://webmaster.yandex.ru (ну бывает так, везде техника глючит).

Устанавливаем внешние ссылки (хотя бы одним из вариантов).

а) Проходим по белым каталогам и регистрируем там свой сайт. Список белых каталогов тут: http://wlist.com.ru/.

б) Устанавливаем одну две жирные ссылки с главных страниц других сайтов на свой сайт (если у вас знакомый – попросите на месяц, если нет, тут на форуме можно купить, ищите в подписях форумян или тут /ru/forum).

Если вы все это делали месяц-два назад но ничего не помогло, то переходим к разделу 2.

2. Проверяем на наличие санкций (бан) и техническую возможность индексации.

- заходим на http://webmaster.yandex.ru, добавляем главную страницу сайта в форму (аддурэлка)

Варианта ответа Яндекса тут 3:

б) …. сайт запрещен к индексации …. (значит либо Бан либо файл robots.txt) идем в раздел 3.

в) …. не доступен сайт …. (идем в раздел 4)

а) …. сайт будет проиндексирован …. (значит ни Бана ни технических проблем скорее всего нет – идем в раздел 5)

3. Ищем, почему запрещен к индексации

Тут варианта 2

а) раздел сайта или сайт запрещен к индексации в файле robots.txt, он лежит в корне вашего сайта. Тогда идем сюда и ищем как сделать правильно, исправляем и начинаем с пункта 2 заново.

б ) если с файлом robots.txt все нормально, то «запрещен к индексации» - это и есть скорее всего бан, в этом случае идем в раздел 6. Примечание: бан нового сайта если он не был в выдаче маловероятен, поскольку бан может быть произведен если на вас кто-то пожаловался, а это может быть если вы были в выдаче. Конечно, всегда есть вероятность что он был в выдаче но вы просто не успели этого заметить.

4. Ищем проблемы на сервере

а) пытаемся набрать свой сайт в бразуре, если все нормально, то все равно есть вероятность, что видите его только Вы, переходим к пункту б.

б) просим зайти на сайт кого-нибудь из другого города, а лучше из другой страны, мало ли вдруг у вас в городе проблемы с интернетом и сайт не видно снаружи, если все нормально, то переходим к пункту в.

в) еще раз идем в форму http://webmaster.yandex.ru и делаем добавление любой страницы сайта, после этого лезем на свой сервер (где крутится сайт) или просим хостера предоставить логи вашего сайта. В файле логов ищем Yandex т.е. Вам нужна свежая строчка HTTP/1.1" 200 286 "-" "Yandex/1.03.003 (compatible; Win16; D)", обратите внимание на последнюю букву D – это робот который говорит Яндексу, что страница существует, а вам говорит, что Яндекс технически способен достучаться до вашего сайта.

г) на всякий случай идем сюда http://www.be1.ru/stat/ и набираем адрес проблемного сайта с косой чертой «/» в конце.

Внизу страницы будет написано:

Заголовок - размер _________, ip _______________

HTTP/1.1 200 OK

Если там не «HTTP/1.1 200 OK», то показывайте этот ответ своему админу или хостеру. Тыкайте их носом и говорите «не порядок, нада поправить»

5. Решаем проблемы с яндексом.

Для начала все же еще раз удостоверимся, у яндекса ли проблемы или у Вас (хотя в принципе, если Яндекс вас не индексирует проблемы в любом случае у Вас, Яндексу от этого не на много хуже живется :bl: ).

Идем и смотрим, а вообще другие поисковики знают Ваш сайт? Например гугль.

Вводим в браузер эту строчку, но вместо https://searchengines.guru/ ставим свой сайт.

http://www.google.com/search?&q=allinurl:https://searchengines.guru//+site:https://searchengines.guru/

Если там не пусто, то пора и в Яндекс писать.

Начинаем:

Адрес поддержки имени Платона Щукина addurl собака уandex-team.ru

Адрес обычной поддержки support собака yandex.ru

Но лучше отправлять через форму http://feedback.yandex.ru/?from=webmaster

поскольку отправка сообщения через форму почти гарантирует, что ваше письмо не будет отброшено новым модным антиспамовым фильтром. (мне например решили проблему через 2 дня после отправки через форму, а на письма не отвечали месяц)

В письме указываем (все вежливо):

Имя сайта:

Что он отвечает HTTP/1.1 200

Что добавлялся много раз и давно (месяц, два, три) с http://webmaster.yandex.ru

Что есть внешние ссылки и даже Тиц

Что проиндексирован другими поисковиками

Что бот D заходит после добавления в форму http://webmaster.yandex.ru

Что бот I так и не зашел.

Говорим «заранее благодарен за помощь».

Не забываем что сабджект письма должен говорить о том что у вас проблемы с индексацией сайта, а не просто «не фурычит что-то»

Ждем, если ответа нет неделю, повторяем письмо.

6. Решаем проблемы с баном

На всякий случай пишем в Яндекс, чтобы узнать забранен ли сайт?

После получение подтверждения о бане лезем на свой сайт, исправляем косяки и пишем серьезное и немного слезливое но короткой письмо, типа …. бес попутал … наняли черного опитимизатора … теперь все исправлено … больше так не будем …. пожалуйста снимите бан….

Ждем ответа, если нет неделю, повторяем опять.

Примечание:

- все ИМХО, комменты и исправления приветствуются.

- имена ботов Яндекса могут меняться со временем.

Вижу сусликов, которых нет. Покупаю заброшенные сайты, ссылки с pr17-18, пью водку. В личку. Интим не предлагать.
Р
На сайте с 23.05.2006
Offline
258
#1

Отлично написано! Ещё такую же инструкцию с перечнем причин бана, и вопросов на форуме не останется почти:D :D

The WishMaster
На сайте с 29.09.2005
Offline
2542
#2

Куда копирайты ставить, если захочу куда-то опубликовать?:)

Пешу текста дешыго! Тематики - туризм, СЕО, творчество, кулинария, шизотерика :)
I
На сайте с 14.09.2005
Offline
22
ivp
#3
Разработчик:
Отлично написано! Ещё такую же инструкцию с перечнем причин бана, и вопросов на форуме не останется почти:D :D

Молодцы. Еще просьба написать когда будет пересчет тИЦ и PR.

ИзВиНиТЕ зА неРовнЫй ПОчеРк
Bor-ka
На сайте с 16.11.2004
Offline
253
#4

Геннадий0, хорошо написано.

Предлагаю зафиксировать тему и "тыкать" в нее носом

lastadm
На сайте с 15.01.2006
Offline
169
#5

Выдает ли сайт 200 ок ... не закрыт ли он от индексации в роботсе - я бы проверил в первую очередь.

Изучаем правила форума ()
Н
На сайте с 20.01.2006
Offline
48
#6

В силу своей безграмотности поправил орфографию, пунктуацию и еще некоторые очепятки. Стиль старался не менять, за исключением мест, способных вызвать неоднозначное понимание. Безусловно, подобный текст очень трудно написать на чистом русском языке, но, тем не менее, мне кажется, что так будет лучше.

Что нужно делать, если новый сайт не индексируется несколько месяцев

(пошаговая инструкция)

0. Для начала все же проверяем – действительно ли Яндекс не знает ни одной вашей страницы, для этого вставляем в строку браузера такую ссылку-запрос:

http://www.yandex.ru/yandsearch?surl=searchengines.ru&pag=u&numdoc=50&rd=0 ,

только вместо searchengines.ru вписываем свой сайт. И только если там ничего не будет, тогда начинаем читать дальше.

После этого лезем на сервер, в логи, или просим их у хостера/админа и ищем там

Yandex/1.01.001 (compatible; Win16; I)

– это бот индексатор, если он заходил, то ваш сайт или части сайта скорее всего появятся в Яндексе после следующего апдейта. Узнать был ли апдейт можно здесь /ru/forum/search-engines/yandex

по теме, в которой у многих «поднялось» и у многих «упало» 😂 . Если индексатора не было, то читаем дальше.

1. Возможно, яндекс не знает сайт, даже если вы добавляли его в форму http://webmaster.yandex.ru (ну, бывает так, везде техника глючит).

Устанавливаем внешние ссылки (хотя бы одним из вариантов).

а) Проходим по белым каталогам и регистрируем там свой сайт. Список белых каталогов тут: http://wlist.com.ru/ .

б) Устанавливаем одну, две жирные ссылки с главных страниц других сайтов на свой сайт (если у вас знакомый – попросите на месяц, если нет, тут на форуме можно купить, ищите в подписях форумян или тут /ru/forum) .

Если вы все это делали месяц-два назад, но ничего не помогло, то переходим к разделу 2.

2. Проверяем на наличие санкций (бан) и техническую возможность индексации.

Заходим на http://webmaster.yandex.ru , добавляем главную страницу сайта в форму (аддурэлка)

Варианта ответа Яндекса тут 3:

б) …. сайт запрещен к индексации …. (значит либо бан, либо что-то не так с файлом robots.txt) идем в раздел 3.

в) …. сайт недоступен …. (идем в раздел 4)

а) …. сайт будет проиндексирован …. (значит ни бана, ни технических проблем, скорее всего, нет – идем в раздел 5)

3. Ищем, почему запрещен к индексации.

Тут варианта 2

а) раздел сайта или сайт запрещен к индексации в файле robots.txt, он лежит в корне вашего сайта. Тогда идем сюда и ищем как сделать правильно, исправляем и начинаем с пункта 2 заново.

б ) если с файлом robots.txt все нормально, то «запрещен к индексации» - это и есть скорее всего бан, в этом случае идем в раздел 6. Примечание: бан нового сайта, если он не был в выдаче, маловероятен, поскольку бан может быть произведен, если на вас кто-то пожаловался, а это может быть, если вы были в выдаче. Конечно, всегда есть вероятность, что сайт был в выдаче, но вы просто не успели этого заметить.

4. Ищем проблемы на сервере

а) пытаемся набрать URL своего сайта в бразуре, если все нормально, то все равно есть вероятность, что видите его только Вы, переходим к пункту б.

б) просим зайти на сайт кого-нибудь из другого города, а лучше из другой страны, мало ли, вдруг у вас в городе проблемы с Интернетом, и сайт не видно снаружи, если все нормально, то переходим к пункту в.

в) еще раз идем в форму http://webmaster.yandex.ru и делаем добавление любой страницы сайта, после этого лезем на свой сервер (где крутится сайт) или просим хостера предоставить логи вашего сайта. В файле логов ищем Yandex т.е. Вам нужна свежая строчка HTTP/1.1" 200 286 "-" "Yandex/1.03.003 (compatible; Win16; D)", обратите внимание на последнюю букву D – это робот, который говорит Яндексу, что страница существует, а вам говорит, что Яндекс технически способен достучаться до вашего сайта.

г) на всякий случай идем сюда http://www.be1.ru/stat/ и набираем адрес проблемного сайта с косой чертой «/» в конце.

Внизу страницы будет написано:

Заголовок - размер _________, ip _______________

HTTP/1.1 200 OK

Если там не «HTTP/1.1 200 OK», то показывайте этот ответ своему админу или хостеру. Тыкайте их носом и говорите «не порядок, нада поправить»

5. Решаем проблемы с яндексом.

Для начала все же еще раз удостоверимся, у Яндекса ли проблемы или у Вас (хотя, в принципе, если Яндекс вас не индексирует, то проблемы в любом случае у Вас, Яндексу от этого не на много хуже живется ).

Идем и смотрим, а вообще другие поисковики знают Ваш сайт? Например Гугль.

Вводим в браузер эту строчку, но вместо https://searchengines.guru/ ставим свой сайт.

http://www.google.com/search?&q=allinurl:https://searchengines.guru//+site:https://searchengines.guru/

Если там не пусто, то пора и в Яндекс писать.

Начинаем:

Адрес поддержки имени Платона Щукина addurl собака уandex-team.ru

Адрес обычной поддержки support собака yandex.ru

Но лучше отправлять через форму http://feedback.yandex.ru/?from=webmaster ,

поскольку отправка сообщения через форму почти гарантирует, что ваше письмо не будет отброшено новым модным антиспамовым фильтром. Мне, например, решили проблему через 2 дня после отправки через форму, а на письма не отвечали месяц.

В письме указываем (все вежливо):

Имя сайта:

Что он отвечает HTTP/1.1 200

Что добавлялся много раз и давно (месяц, два, три) с http://webmaster.yandex.ru

Что есть внешние ссылки и даже Тиц

Что проиндексирован другими поисковиками

Что бот D заходит после добавления в форму http://webmaster.yandex.ru

Что бот I так и не зашел.

Говорим «заранее благодарен за помощь».

Не забываем, что сабжект письма должен говорить о том, что у вас проблемы с индексацией сайта, а не просто «не фурычит что-то»

Ждем, если ответа нет неделю, повторяем письмо.

6. Решаем проблемы с баном.

На всякий случай пишем в Яндекс, чтобы узнать забранен ли сайт?

После получение подтверждения о бане лезем на свой сайт, исправляем косяки и пишем серьезное и немного слезливое, но короткой письмо, типа …. бес попутал … наняли черного опитимизатора … теперь все исправлено … больше так не будем …. пожалуйста снимите бан….

Ждем ответа, если нет неделю, повторяем опять.

Го (http://GoStart.ru) - самая пленительная игра (http://forum.kido.com.ru) в мире.
Г0
На сайте с 19.08.2004
Offline
129
#7

Разработчик, думал над этим. Но кажется такая тема на форуме где-то была, да и не использую я черных методов (почти), так что в бане не бывал :)

The WishMaster, можете ставить копирайты на мой будущий хомяк www.ribachok.ru с кейвордом рыбалка :)

Новичек, спасибо за правки, орфография и пунктуация у меня всегда хромают, так что лучше оставить статью в вашей редации.

Статейка написана после борьбы по этому поводу с Яндексом и на основе рекомендаций форумян, котрым в свою очередь тоже надо сказать спасибо ☝ .

Спасибо всем за комменты :)

T
На сайте с 27.06.2006
Offline
179
#8

(0) Отличная статья, для новичков, думаю, будет очень полезна.

С
На сайте с 21.09.2006
Offline
10
#9

Я бы еще добавил ссылочку "robots.txt глазами Яндекса" - http://www.yandex.ru/cgi-bin/test-robots?host=searchengines.ru

город Владимир (http://on33.ru/)
Proffoto
На сайте с 07.06.2006
Offline
99
#10

Предлагаю данный топик, или саму статью закрепить, в самом верху форума. С пометкой "Важно".

Создание и продвижение сайтов - портфолио (http://www.free-lance.ru/users/webmaestro/portfolio/).
123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий