сайт (форум) исчез из Yandex примерно год назад

Beirut, не вы первый не вы последний

Таких историй - масса в последние неск. месяцев. Чудит Яндекс.

А есть примеры победы над этим чудачествами?

Я, к примеру, для одного из вылетевших проектов сделал зеркало. Оно проиндексировалось уже на 30К, и трафик пошел, но показатели и брэнд остались на проблемном сайте. И что дальше делать? Клеить? Но не случится ли повтора с выпадом...

И что, так каждый квартал для Яши зеркала ваять?

если кому интересно, то вот продолжение истории, которую я рассказал в первомм сообщении этой темы:

1. я проанализировал состояние моего сайта при помощи webmaster.yandex.ru/wmconsole/, сделал выводы

2. написал письмо роботу Щукину, в котором довольно подробно рассказал все, что я уже говоил в этой теме, а так же предпринятые мной меры (даже текст моего robots.txt)

3. через неделю пришел ответ от Щукина, что сайт был отключен за нарушения, сейчас нарушения исправлены, решение о возвращении сайта в строй будет принято через месяц (ну это стандартно, вы все с этим знакомы)

4. все время с момента ответа Щукина роботы Яндекса усиленно перечитывали весь сайт, по 2000 - 4000 страниц в день. Тут я понял, что решение, скорее всего, принято положительное.

5. так и оказалось, через месяц весь сайт появился в поисковой выдаче Яндекса. Пока немного, но даже и 300 дополнительных посетителей в день - это хорошо. Так что есть смысл сотрудничать с Яндексом!

на моем форуме используется известный SEO оптимизатор от vBSEO, кто-то тут спрашивал, понимает ли Yandex кириллические URLs в UTF-8, не будет ли он возражать против нумерованной sitemap внизу каждой страницы форума - так вот, линки прекрасно понимает и против sitemap не возражает.

Так что смело пишите Щукину, даже в сложных случаях (как мой) этого вполне достаточно, и не стоит беспокоить лично начальство Yandex :)

ulitka, спасибо за рассказ. Скажите, а что именно прояснилось, после анализа сайта в панели вебмастера Яндекса?

ulitka, Очень бы хотелось узнать в чем все таки яндекс усмотрел нарушение?

Хорошо, дело было вот в чем:

1. год назад я перевел форум с одного скрипта на другой, так как основная масса работы делалась вручную, то было обязательным оновременное существование форума на новом и на старом скрипте. А о том, чтобы закрыть форум на время миграции - даже не могло быть и речи.

2. После окончания миграции в домене ulitka.com были две директории с контентом (пусть и совершенно по-разному организованному) /forums/ и /forum/. Старый форум был закрыт для регистрации и постинга новых сообщений, но он еще был нужен для пользователей (они копировали свою личную почту, так как ее не удалось мигрировать в новую базу данных).

3. Через некоторое время Yandex забанил мой домен. Ни вопросы, ни просьбы - не помогли. Я плюнул на Yandex, благо google не стал любить мой сайт меньше.

4. Через год я наткнулся на ваш форум и прочитал несколько историй про "выпадения из базы". Дальнейшее развитие событий я описал в этой теме. Коротко говоря - в панели webmaster.yandex.ru уже через год я обнаружил ОБА форума, почти полностью проиндексированных, но у меня не было возможности удалить при помощи интерфейса старые линки. Я предположил что причина бана - копия или зеркало, я не знаю как это точно называется. Вобщем я полностью удалил старый контент, поставил там robots.txt запрещающий Yandex читать из старой директории, написал об этом Щукину и через месяц домен вернулся в выдачу в полном составе, причем с каждым днем трафик от Yandex только увеличивается.

P.S. хочу отдельно отметить, что google продолжал индексировать ОБА форума, несмотря на то, что это был один и тот же контент, просто по-разному организованный, я даже пытался одно время перенаправлять все поисковые запросы, приходящие на старый форум, на новый, используя mod_rewrite... Но теперь я с уверенностью могу сказать, что в этом нет никакого смысла, потому как google умнее, что ли, он не банит за копию, как Yandex, но и больше трафика не отдает. Вобщем сейчас у меня все "по-честному", и это никак не отразилось на поисковом трафике (в смысле, его не стало меньше), а даже, скорее - наоборот.

IMHO, самый простой способ не нарушать правил - это быть естественным в управлении своим web-огородом. :)

ulitka, спасибо за подробности. Надеюсь, сотрудники Яндекса тему тоже читают. ;)