А вот и хорошая новость. Яндекс вернул в индекс 11 тыс. страниц форума. Приму поздравления. И что сделалось и чего не сделалось.
Пример, наложения фильтра и его снятие. Почему (как я думал) был наложен фильтр, я описал и привёл скрин вот тут /ru/forum/comment/5586512
Я закрыл весь redirect в robots.txt, а также сделав специальную страницу перехода. Стал ждать. Итог. 4.10.2009 весь редиректорный мусор вывалился в запрещённые к индексации. И весь форум снова в индексе поисковой системы. http://yandex.ru/yandsearch?serverurl=www.forumangarska.ru&lr=11266 Никаких иных манипуляций не производил. Можно сказать ситуация с плохими ссылками с сайта подтверждёна.
Ну и это по сути пример, как можно вывалить сайт из индекса (это к теме о споре, мол можно вынести сайт или нет). Если на сайте есть незакрытый (в роботс) редирект, проспамте его так, как я уже писал и сайт вывалится из индекса Яндекса.
А что Вы реально сделаете ?
Этот момент ничего не изменит, также как не изменила мировая тенденция отказа от продукции компании Microsoft. Как был мелкософт гигантом, так и остался. И при всё при том, ни один разработчик игр не отказался от платформы Windows, ни один разработчик ПО не отказался от платформы Windows, так почему вдруг Вебмастера будут отказываться от Яндекса ?
Замечу, что ни одна компания, которая делает сайты, не будет говорить своим клиентам о том, что Яндекс плохой и под него сайт они делать не будут. Ни один оптимизатор не заявит о том, что он под Яндекс не будет продвигать. Все тут же потеряют клиента.
Ужесточая правила игры, Яндекс всё больше отсеивает мелких вебмастеров. Сегодня, он от них не зависит, как может быть на начале своей работы.
Короче тема про фильтр, в очередной раз перешла в плоскость обсуждения противостояния с ПС.
Связи никакой абсолютно. Всё что я хотел сказать, сводится в одно "Ты виноват лишь в том, что хочется мне кушать".
Я могу сколь угодно долго говорить про плохой/хороший Янлекс, про то, что его ждёт судьба Рамблера, что он вкидывается сайты по какому-то признаку, а тут он просто заглючил.
В любом случае, Яндексу плевать на всё это. Резкий рост ГС, УГС и др. с середины-конца 2008 года, привёл к очень неприятным моментам.
Во-первых, стоимость вхождения на интернет-рынок стала очень низкой, при этом отдача почти сразу и высокая окупаемость. Конечно этому способствуют и оптимизаторы, рентабельность которых варьируется от 50% и выше. Редко какая отрасль готова давать такую рентабельность. А если учесть, что вхождение (как я уже писал) стала очень низкой, то в отрасль хлынуло огромное кол-во дилетантов, новичков и т.д., которые элементарно начали демпинговать цены на раскрутку, так как могли скосить лишние 30-40% от стоимости.
В основу большинства псевдо-раскрутчиков стоит очень низкий объём работы с контентом сайта заказчика и в основном это покупка ссылок.
А так как снижение бюджетов (в связи с демпингом) повлекло и потребность в дешёвых ссылках. Ес-но за спросом и рванули псевдо-веб мастера. И тут же появились и тебе грабберы, синонимазеры, генераторы, бурным цветом расцвёл рерайт. Причем порой не самого высокого качества. Общаясь с копирайтерами обнаружил, что за последний год обём заказов на рерайт превосходил заказов на написание полных статей, не ошибусь, если приближу отношение 1 к 20.
При этом большинство не особенно интересовалось качеством рерайта. Рерайт проверялся на уникальность, если всё ок публиковался. А то, что читабельность порой таких текстов была на уровне синонимайзинга, то это дело десятое.
И вот в разработчики подался народ, благо рост сайтов привёл к снижению цен на хостинг и на домены. Если еще несколько лет назад, стоимость домена в зоне RU была 20-25 у.е., то сегодня можно и за 3 у.е. достать. Падение почти на 900%. А это в нормальном бизнесе серьёзные цифры.
И вот уже пошли сателлит по 5у.е., 3 у.е. При этом страниц было от 50 и выше. Ну какой нормальный человек, напишет 50 статей, текстов, за 150 рублей ?? А стоимость сайтов продолжала падать.
Любой школьник мог сэкономив на завтраках в школе попросить у родителей еще чуть чуть, купить небольшую пачку таких вот ГС, запихнуть их в Сапу и вот уже через месяц не только окупился, но и приносит прибыль. Это, ИМХО, очень ненормальная картина.. И с этим Яндекс начал откровенную борьбу. То, что под раздачу попадают и не только ГС, другой вопрос. Время покажет.
В любом случае, при любом исходе дела, правила игры нам всем устанавливает Яндекс. И ни один бизнес не может быть на 80-100% зависим от внешнего фактора. Если у Вас такой бизнес - значит он ОЧЕНЬ ВЫСОКОРИСКОВАННЫЙ. Тогда будьте готовы ко всему.
Читал, читал ... очень утомило. Ничего нового, одно по одному, редко кто-то выскажет действительно дельную мысль. Однако из всего происходящего вижу как минусы, так и плюсы.
Минусы, у самого вылетел сайт. Особо скрывать нечего, форум вот ентот. www. forumangarska. ru
Да ссылки продавал, по 4 со страницы, В индексе на момент вылета было 11 тыс. страниц, при 175 тыш загруженных, осталось 6. В ВМ вижу статистику пока старую по запросам, но потом видно будет.
Теперь, причина вылета. Говорить о неуникальном контенте, глупо, так как любой форум на 99,9% состоит из того, что пишут пользователи. Продажные ссылки, тоже не думаю. Зато почитав, о "плохих" ссылках пришёл к выводу, что это как раз про меня. И виноват в этом тоже я. В своё время я на форуме все ссылки перевёл через редирект, а вот закрыть редирект в robots.txt как-то не сообразил (о чём жалею). Долгое время не обращал внимания, но когда обратил внимания было видимо поздно и 17-й повернув в нужную позу отодрал мой форум.
Собственно картинку приложил, чтобы было понятно, что к чему. Судя по всему глюк в редиректорной работе и приклеил к моему сайту ссылки на всякую хрень, как найденные на сайте, хотя, как я уже однажды поднимал подобную тему тут на форуме и никто толком ничего не сказал.
Весь интересный эффект заключается в том, что картина такая. Сайт 1 ссылается так сайт2/redirect.php?url=сайт3. Как ни печально, результат, ПС приклеивает ссылку на сайт3, как исходящую с сайта 2. Это наверняка и я находил ссылки на свой форум именно в таком вот виде и порой до сих пор нахожу.
В итоге куча вот такой вот бяки и привели (уверен на 99%) к тому, что форум вылетел к едрене фене. Закрытие в robots.txt не так давно уже погоды не исправит. Форум непонять где.
Хотя блоговый робот ( blog.yandex.ru ) снимает посты регулярно и прям таки с бешенной скоростью. Достаточно написать пост, и его в течение 15-20 минут уже можно найти на blog.yandex.ru
Собственно, если сайт имеет редирект, который не закрыт в роботе, то при желании прицепить к нему АГС-17 можно, проспамив таким вот образом (как уже привёл пример).
Теперь о плюсах. Не знаю, кто как, я на всех своих СДЛ поднял цены на 60-80%. Ссылки которые разместились давным давно, не трогаю, а вот новые уже приходят по новой цене, о чём не жалею и люди берут.
Вываливание из базы большого числа ГС - лишний повод поднять цены на сайты, которые и СДЛ, и старички, и даже пусть тИЦ не очень большой. от 100 примерно.
Чистка в целом мне кажется пошла на пользу. По себе ес-но сужу. Например, в кои-то веки я начал так активно закачивать уникальный контент на пару своих сайтов, так как переживаю, не дай божи тьфу тьфу. Обычно это происходило от раза к разу, а последнее время решил чуть почаще. А то ну его в ....ду этот Яндекс.
Ну и хоронить Яшу, тоже не следует. На сегодня его позиции не так крепки, как несколько лет назад, но и говорить о том, что вот вот рухнет - не стоит.
И еще, любой выпавший сайт - это очень большая доля вины самого ВМ. Даже если он позиционируется как СДЛ. В выдаче до сих пор можно встретить очень неказистые, порой даже совсем кривые и простые страницы, на которых люди пишут действительно что-то своё. В то время как пустые и прилизаные сайты на WP пачками вылетают в трубу.
Кстати, сайты старички видимо не трогают. Знаю крупный проект, который только с морды продаёт от 12 до 16 ссылок в одной кучи, и по другим странциам и нифига. Пол ляма страниц в индексе, ЯК и т.д. Не шелохнётся ... хотя продажных нетематичных там такая куча, что дивую даёшься. Интересно, ссылку могу в личку сбросить.
На сегодно оно дорогого стоит.
Почему никто итог не подводит под всем ? Во-первых пока ясности не видно, продолжает данный фильтр свой крестовый поход или нет. Остановился или не остановился ? И главное, что дальше.
Ведь ГС будут продолжать клепать и врядли качество их станет лучше. Сколько бы благими намерениями не молили на Яндекс, не будут лучше те ГС, которые есть или остаются. Они будут точно такие же, только заточены под новый фильтр.
И также говно-мастера будут строчить те самые говно-сайты, через время появятся какие-нить плугины для WP или Joomla для внешней "правильности" сайта и всё вернётся на новый круг, но уже с отстрелявшимся АГС-17.
И почему-то мне кажется, что частистно виновата именно направленность на семантику русского языка поисковой машины Яндекс. Должного механизма "распознать и понять" у Яндекса пока нет (как и Гугла кстати), но решения при создании фильтров принимаются исходя из постулата, что машина Яндекса уже понимает о чём там пишут на странице.
И главное, что меня всегда смущало, когда робот делал выводы о том, полезен или бесполезен для пользователя та или иная страница.
А потому, что ловко говносайты у него не получается отловить. Он больше похож на ловца слонов, который пришёл ловить бабочек. Достал не то сетку, не то сачёк и давай махать.
Ну я не преувеличиваю, но в любом случае, работа оптимзиаторов по большей части способствует более менее приемлемой выдаче. Пока проваливаются общие запросы, это ладно, но когда начуться валится запросы уже коммерческие, то тут для потребителей вопрос будет стоять серьёзно.
А насколько я понимаю, доверие пользователей к серпу до сих пор выше, нежели к директу.
При таких топорных методов может в дальносрочной перспективе даже снизить. Конечно в краткосрочной перспективе доход возрастёт, но со временем мне кажется нас ждёт обратноый эффект. Выдача ухудшается, на самом деле.
Во-первых ввод региональной выдачи уже приводит к тому, что в регионах выдача непонятная. Многие внерегиональные и коммерческие запросы выглядят просто хламом.
Для сравнения показал выдачу Яндекса и Гугла по такому запросу как "нефтепродукты". У Яши в топе половина хлама, в то время как на 90% данный запрос задают отделы закупок или снабжения.
Гугл, благодаря оптимизаторам, почти две страницы держит всё, что нужно. Яндекс же со своей попытккой объять не обяътеное хватается за всё, в итоге в выдаче всё, что может быть хоть как-то косвенно связано с данным запросом от состава нефтепродуктов, до того, как анализировать в воде.
В итоге борьба с оптимизаторами приведёт к мусору в выдаче, мусор в выдаче начнёт выдавливать пользователей, а утеканием пользователей начнут уходить рекламодатели в итоге Яндекс может превратиться во второй Rambler, который есть, но особо не нужен.
