BigBrother: Жаль, сейчас не могу конкретный случай посмотреть - хотя и понимаю, почему скорее всего именно так произошло.
Мне тоже почти понятны - свою точку зрения высказал в предыдущем посте.
Пару слов в защиту Яндекса и "хозяйства" BigBrother: WebAlta, в тот же день, разогналась настолько (увидев новый домен), что почти _сутки_ не проверяла изменений в robots.txt =)
Да это wolf'a какие-то черти не в ту степь "качать права" понесли. :D
Mishael: Если бы с момента правки и индексации роботса прошла неделя а робот все еще бегал - это было бы поводом для беспокойства, а немгновенный учет - что же тут удивительного?
Форумы Яндекс полюбит не скоро, но индексировать их тоже как-то надо. Есть несколько "трюков", которые позволяют сдвинуть процесс с мертвой точки, но и они не всегда срабатывают. Можно ждать месяцами, можно заваливать Платонов письмами - но это долго, и не всегда принесет удовлетворительный результат.
Первопричина проблемы - не недостатки ПС Яндекс, а современные форумные движки как класс. Одно только море внутренних ссылок с 301-м редиректом (!) спугнет любого здравомыслящего Паука. Но, если ткнуть робота носом 10000 раз в страницы с уникальным контентом (в разрезе форума - это отдельные посты), через некоторое время Паук перестает бояться, и дальше роется по форуму уже без "подсказок".
К сожалению, в частных случаях задача преодоления группы фильтров, препятствующих начальной индексации форума, превращается в нетривиальную.
"Выпавший" кусок очереди на индексацию непосредственно после запрета индексации, а также успешно продолжающаяся индексация форума на новом месте дают основания считать, что локализованная часть очереди попадала в "песочницу". Яндекс всегда знал о существовании страниц, но просто _не_хотел_ их индексировать.
По логам видно, что robots.txt был прочитан с хоста с IP отличным от IP основного робота-индексатора. Так как Яндекс - это распределенная вычислительная сеть, сложилась ситуация, когда фильтры были сброшены раньше, чем "вычищена" очередь по изменениям в robots.
vlav: Помойка находится на другом домене. Разве может 1-links.soft.1-info.ru как то влиять на club.1-info.ru? Тогда все домены провайдеров, которые предлагают сайты на поддоменах своего домена должны быть давно забанены? Или я не прав?
С хостингами и региональными доменами у Яндекса особые отношения.
Остальных же рассматривают как единый сайт, и санкции, обычно, накладываются на основной домен и его поддомены разом.
vlav: С какого может быть этот бан вообще - там нет ни одного малейшего нарушения их правил?
Поинтересуйтесь у Платонов. Вообще-то, после полного выпадения из индекса 1-info.ru, отрицать возможность бана и сидеть сложа руки несколько нелогично. ;)
vlav: Кстати - про помойки. У меня есть наипомоечнейшая помойка, которую я специально развел
Эх, заранее "соболезную", если сюда сегодня вечером заглянет товарищ BigBrother. :)
Я думаю Директ от этого много не потеряет...
Я просто намекаю, что профессиональный оптимизатор сможет получить свою долю и с Директа. ;) Причем различными путями.
А во-воторых, куда обратится пользователь, ни найдя ничего путного в выдаче? Именно к Директу!
Если кампаниями в Директе тоже будут рулить SEO'шники - возможно, и в Директ. ;)
Но сейчас, зачастую, можно наблюдать обратную картину - выдача ПС релевантна запросу, а Директ - нет.
Возьми http://www.yandex.ru/yandsearch?text=%E2%E8%E4%E5%EE%F2%E5%F5%ED%E8%EA%E0+%ED%EE%E2%EE%E3%EE%E4%ED%E8%E5+%F1%EA%E8%E4%EA%E8&stype=www , к примеру. Запрос по видеотехнике, но дяди с новогодними турами в Подмосковье и Литву, а также "текстильные магнаты" поставили настолько высокие BID'ы, что Директ как-то неинтересен.
Кроме того, если не находят ничего путного в Яндексе, равновероятно могут уйти и в Раму, и в Гугл, прокрутив страницу колесом мыши.
Что это может быть?
Думаю, это последствия проблем на хостинге 11 и 12 декабря.
http://top.mail.ru/dynamics?%C4%C9%CE%C1%CD%C9%CB%C1.x=12&%C4%C9%CE%C1%CD%C9%CB%C1.y=11&period=Today&what=Hosts&id=728645
Должен сам в каталог вернуться. Только срочно допишите _последней_ строкой в robots.txt:
Host: www.chirchik.ru
Потому что уже сейчас, похоже, основным зеркалом стал домен без www (на нем тИЦ 200), но есть еще шанс, что индекс не обнулят.
Смысл топика - чтобы все завидовали? ;) Или налили виртуального пива? :D
Жаль, сейчас не могу конкретный случай посмотреть - хотя и понимаю, почему скорее всего именно так произошло.
Мне тоже почти понятны - свою точку зрения высказал в предыдущем посте.
Пару слов в защиту Яндекса и "хозяйства" BigBrother: WebAlta, в тот же день, разогналась настолько (увидев новый домен), что почти _сутки_ не проверяла изменений в robots.txt =)
Странная тема вообще то.
Да это wolf'a какие-то черти не в ту степь "качать права" понесли. :D
Если бы с момента правки и индексации роботса прошла неделя а робот все еще бегал - это было бы поводом для беспокойства, а немгновенный учет - что же тут удивительного?
Форумы Яндекс полюбит не скоро, но индексировать их тоже как-то надо. Есть несколько "трюков", которые позволяют сдвинуть процесс с мертвой точки, но и они не всегда срабатывают. Можно ждать месяцами, можно заваливать Платонов письмами - но это долго, и не всегда принесет удовлетворительный результат.
Первопричина проблемы - не недостатки ПС Яндекс, а современные форумные движки как класс. Одно только море внутренних ссылок с 301-м редиректом (!) спугнет любого здравомыслящего Паука. Но, если ткнуть робота носом 10000 раз в страницы с уникальным контентом (в разрезе форума - это отдельные посты), через некоторое время Паук перестает бояться, и дальше роется по форуму уже без "подсказок".
К сожалению, в частных случаях задача преодоления группы фильтров, препятствующих начальной индексации форума, превращается в нетривиальную.
"Выпавший" кусок очереди на индексацию непосредственно после запрета индексации, а также успешно продолжающаяся индексация форума на новом месте дают основания считать, что локализованная часть очереди попадала в "песочницу". Яндекс всегда знал о существовании страниц, но просто _не_хотел_ их индексировать.
По логам видно, что robots.txt был прочитан с хоста с IP отличным от IP основного робота-индексатора. Так как Яндекс - это распределенная вычислительная сеть, сложилась ситуация, когда фильтры были сброшены раньше, чем "вычищена" очередь по изменениям в robots.
Хотел бы я посмотреть, как можно запретить индексацию морды в роботсе
Например, безусловным редиректом на уникальную внутреннюю, и запретом индексации уже этой внутренней посредством robots.txt
Надежнее всего - через форму обратной связи:
http://feedback.yandex.ru/?from=webmaster
На заявки, посланные по обычной Е-почте, они почему-то значительно хуже отвечают.
У меня нет времени просто на обнавление
Ну, хотя бы просто найдите время для повторения школьной программы по русскому языку. В жизни может пригодиться не меньше тИЦа. ;)
Помойка находится на другом домене. Разве может 1-links.soft.1-info.ru как то влиять на club.1-info.ru? Тогда все домены провайдеров, которые предлагают сайты на поддоменах своего домена должны быть давно забанены? Или я не прав?
С хостингами и региональными доменами у Яндекса особые отношения.
Остальных же рассматривают как единый сайт, и санкции, обычно, накладываются на основной домен и его поддомены разом.
С какого может быть этот бан вообще - там нет ни одного малейшего нарушения их правил?
Поинтересуйтесь у Платонов. Вообще-то, после полного выпадения из индекса 1-info.ru, отрицать возможность бана и сидеть сложа руки несколько нелогично. ;)
Кстати - про помойки. У меня есть наипомоечнейшая помойка, которую я специально развел
Эх, заранее "соболезную", если сюда сегодня вечером заглянет товарищ BigBrother. :)