С вашим сайтом разобрались. Служба поддержки дала некорректный ответ, главная страница сайта исчезла из поиска по причине, никак не связанной с алгоритмами антиспама. Извините за ложную информацию. Сейчас робот проиндексировал страницу и в течение недели она должна появиться на поиске. Причину, по которой саппорт дал некорректный ответ, мы выяснили и процедуру исправили. Спасибо, что помогли стать Яндексу лучше.
С уважением,
Александр Садовский.
Почему вы называете это "баном"? Почему страница не может исчезнуть, потому что сервер ответил роботу 404 или потому что она оказалась дубликатом другой страницы на сайте?
Пишите. Без примеров сложно сказать, что произошло.
Прочтите еще раз, игнорируя иллюстрации. :) Что именно вы хотите услышать?
Мы не караем сайты и не садим никого на электрический стул. Работа антиспамовых алгоритмов нужна для обнаружения и специального учета сайтов и страниц, которые мы не можем корректно отранжировать из-за того, что они применяют техники, направленные на обман алгоритма ранжирования. Это не кара, а способ улучшить качество поиска.
Это все из-за невнимательности. Мне кажется, что если оптимизатор не замечает, что в поиске понижается или исчезает часть страниц, значит, он не занимается контентом сайта, а продвигает его по 2-3 десяткам запросов известным способом.
Откуда у вас такая информация? Ваш сайт пострадал из-за ссылки конкурента? На основе каких фактов сделаны такие выводы? Приведите, пожалуйста, ссылку на сайт.
Внешние факторы при принятии решения алгоритмом используются очень осторожно и не могут привести к проблемам в ранжировании хорошего сайта без признаков спама.
Что вы подразумеваете под "автобаном"? Я часто сталкиваюсь с употреблением терминов, в которые, создается впечатление, каждый из оптимизаторов вкладывает свой смысл, никак не связанный с алгоритмами поиска Яндекса.
Поэтому я не понимаю, почему вы решили, что веб-мастера ничего не устраняли.
Этот сайт -- отличная иллюстрация, почему мы не даем какого-то эпохального ответа о магическом "фильтре 'ты последний'", как его называют в этом форуме. Когда наблюдатель регистрирует яркое свечение в воздухе, это не обязательно НЛО. Это могут быть атмосферное явление, светлячки и даже галлюцинации. Аналогично, объективно наблюдаемое падение трафика не означает приговора "ты последний" и может быть вызвано целым рядом причин -- изменениями на сайте (например, случайный или намеренный запрет обращения к страницам в robots.txt), изменениями в алгоритме ранжирования (которое сказывается на всех сайтах), корректной или ошибочной расклейкой зеркал, пропаданием нескольких очень весомых ссылок на сайт, которые ранее придавали ему авторитет и т.д. Кто тут последний? Пожалуйста, не надо таких пессимистических высказываний. Поиск -- сложная система и если он ведет себя не так, как вы ожидаете, причина совсем не обязательно в том, что кто-то куда-то что-то наложил.
Вернемся к www.psy-files.ru. Мы много раз говорили, что неразборчивость в ссылках может повредить сайту при ранжировании и важно не только кто ссылается, но и куда ссылается сам сайт. Посмотрите на страницу http://www.psy-files.ru/2006/11/27/ -- в футере виден ма-а-аленький блок ссылок "Бесплатные знакомства: сайты знакомств - бесплатные знакомства | Лучший сайт знакомств, служба знакомств, фотографии: знакомства для подростков. | Популярные артисты; артисты оригинального жанра, оркестр." Такие блоки или отдельные ссылки были/есть на многих страницах сайта. Именно их появление стало причиной падения трафика с Яндекса. Алгоритмы ранжирования и антиспама не всегда воздействуют на сайт целиком, иногда санкции применяются к разделам, иногда -- к отдельным страницам. В данном случае были понижены конкретные страницы, замеченные в неразборчивых связях. Но ссылок оказалось так много, что более 99% страниц потеряли позиции в поиске.
Пожалуйста, следите за связями своих сайтов и надевайте noindex на ссылки при контактах с подозрительными ресурсами!
Большое спасибо всем за поздравления!
В отпуске я постарался забыть об интернете и мне это даже удалось, поэтому ответил не сразу. :)
Когда Яндекс.Картинкам известны как страница А, находящаяся на том же сервере, где расположена картинка, так и страница Б с другого сервера, показавшая картинку с сервера А, то нахождение страницы Б вместо А -- баг, мы его исправим. Если же роботу Картинок неизвестна страница А, но известна Б, то лучше дать пользователю посмотреть страницу в том окружении и с теми подписями, по которым она была найдена, чем не находить картинку вообще.
Это не отменяет тезиса Ильи о том, что поисковая система выступает в роли прокси, который соединяет пользователя с владельцами сайтов.
Спасибо всем, кто задал свои вопросы, спасибо модераторам, которые помогли выбрать наиболее интересные из них и отточить формулировки. Какие вопросы получились в конце концов, вы можете прочитать в презентации с секции (PPT).
Наиболее полные отчеты о секции, которые уже есть в сети:
Update: еще два отчета
Конечно же, это была ирония о "событии", а не отношение лично к Игорю Солодову. Любой веб-мастер вправе запрещать все страницы сайта в robots.txt, переименовывать или без жалости удалять их. Это его личное дело. Но именно поэтому мне кажется неправильным кричать о личных делах в формате пресс-релиза. Что если завтра каждый из нас начнет рассылать пресс-релизы, что он почистил зубы или, наоборот, категорически отказался от чистки по трем основательным причинам: во-первых, это требует ежедневной работы, во-вторых, в продаже только щетки низкого качества, в-третьих, чистка щеткой экономически неэффективна по сравнению с чисткой пылесосом?
Пресс-релиз Игоря Солодова -- такой же пиар, как и бесконечное закрытие, ликвидация и распродажа в магазинах "Ж". Ну порекламировал свой сайт человек, на здоровье. Зачем же из этого устраивать событие? Робот Яндекса близко знаком с миллионами сайтов, запрещающий robots.txt стоит не только на сайте Игоря, но и на многих других, например, http://wordstat.yandex.ru/robots.txt. Может, нам стоит написать в блог, рассказать о смелом решении блокировать поисковики? А то и пресс-конференцию собрать?
Даже не касаясь аргументов Игоря об отношениях сайтов с искалками (они очень спорны), посмотрим на мудрые причины отказа от индексации. Две из трех -- это критика поисковой оптимизации и контекстной рекламы. Но разве запрет в robots.txt мешает размещать контекстную рекламу? Или злые поисковики насильно размещают рекламу сайта, а он едва успевает отбиваться? А разве нельзя воспитать волю и заставить себя не заниматься поисковой оптимизацией без запрета искалок в robots.txt? Не случайно, чувствую, ох, не случайно там говорится про "иглу", что-то тут нечисто.
По статистике сайта видно, что цель провокации достигнута -- посещаемость за вчера и сегодня втрое выше привычной. А через месяц "радикальный эксперимент" (а эксперименты бывают и неудачные) можно тихо признать провалившимся и robots.txt стереть. Поэтому давайте смотреть на все события взвешенно и не делать из мухи слона.
