Возвращение из под АГС

Попробуйте добавить любую выпавшую страницу в аддурилку. Если пишет "запрещено к индексации" а не выпавшая добавляется как "уже проиндексировано" - АГС

Вернул форум с 13 тыс страниц примерно за недели 3. Писал в Яндекс один раз, но причину установил - убрал. Кстати сапа-ссылки не играют роли.

Тоже интересует, как вернуть сайты под агс( очень интересует!(((

У сайта есть Sitemap ? Если нет, сделайте для начала. И в ВМ яндекса дайте ему скушать.

И что?))) ну скушает, и что дальше?

Пусть сначала съест. Наличие sitemap один из факторов, которые позволяет выводить сайты из АГС. Одного конечно sitemap мало, нужно смотреть каждый сайт в отдельности, но влияние он оказывает. По крайне мере все сайты, которые вернулись в нормальную работу, всем делали sitemap и это облегчало процедуру выхода. И наборот, там где не стали делать, один из сайтов до сих пор под фильтром сидит.

А вообще, сам АГС - это не что иное, как хорошо замаскированный глюк робота.

И в чем была причина?

...

по теме - через месяц после АГС вернулся в индекс один сайт

делал следующее

- из SAPE сами отвалились купленные ссылки - не все, но много

- поменял дизайн, в том числе убрал в ноиндекс ссылки на внутренние с главное (всякие архивы и тп)

- покупал несколько жирных ссылок, но потом после попадания в индекс, думая что это без олку их убрал

хм.. морда "уже проиндексировано" а страницу любую добавляю, пишет что "успешно добавлен. По мере обхода робота он будет проиндексирован и станет доступным для поиска."

Что это тогда было? о_О

А что за причина тогда была?

А я уже где-то об этом писал. Вот тут

/ru/forum/comment/5590853

На тот момент в индекс вернулось 11 тыс. На сегодня в индексе уже 14 тыс. 13 было сразу после индексации. Короче суть не важно.

В данном случае речь шла о плохих исходящих. Сапу не снимал. Забыл правда добавить в том посте, что добавил в ВМ еще и sitemap. Но тогда не придал значения этому факту.

Спустя недельку со знакомым выводили тоже два форума из под АГС. Там вроде бы всё ок было. Ради эксперимента на одном сделали нормальный sitemap и убрали "облако тэгов" ( на IPB такой мод есть). На втором просто убрали облако тэгов. Стали ждать. Первый после прохода робота влетел обратно в индекс без всяких проблем. Второй как и был под фильтром. Установка sitemap и закрытие в роботе всех исходящих ссылок - и второй форум влетел обратно.

Подобное повторилось с несколькими блогами. Но там я не работал, но также установили sitemap и немного подрулили облако тэгов. Сайты возвращались.

Просто со временем пришли к выводу, что это реальный глюк робота яндекса (об этом уже тут тоже кто-то писал) приходя на сайта он начинает путаться, в итоге сам по себе формирует карту и загоняет 10 страниц. Почему так предположили сразу, я тоже писал, но повторю. Когда мой форум вылетел, то в индексе образовалась страница /viewtopic.php . Но понятно, что на форуме (движок phpBB) нет таких страниц. Даже ссылки не может существовать, так как всегда это с параметром.

Страница могла появится только в результате работы автомата. Путанная структура сайта, предположу, что где-то даже возникал вечный цикл, заставлял автомат отказывать в индексации страниц, так как он считал их всех идентичных друг другу, а в ответ пытался сформировать что-то подобие основных разделов.

А разных случаях разные факторы, но в целом, как показала общая практика, sitemap облегал возврат сайтов. Одни и те же манипуляции с наличием sitemap'а и без него приводили к разным результатам.

И еще, страницы, которые оставались в индексе были и в выдаче. Скажем мой форум по основному запросу как был в топе так и оставался до конца. Точнее главная страница.

mymind добавил 19.11.2009 в 10:08

Да забыл отметить такой факт. АГС - это скорей всего отработка робота, который удаляет дубли страниц. У кого сайты в ВМ посмотрите внимательно.

Кол-во загруженных страниц не совпадает с индексом (это вроде как давно уже), однако замечено, в индекс может залететь 2-3 тыс страниц, а потом вылететь эти же 2-3 тыс. Может залететь 5 тыс и потом вылет 1,5 тыс. Это каждый ап происходит.

Я по крайне мере это отслеживаю на всех сайтах. Поэтому уверен, что АГС - это нечто иное, как отработка фильтра индекса, которые выбрасывает страницы по каким-то своим соображениям. Скажем логично выбросить 1-2 тыс страниц с форума, когда это просто список тем, при этом они же смещаются и в скорости на странице 2 тоже самое, что и на странице 1 ... а ссылки разные.