Изучаю спрос: Удалятель для сапы

Кстати, Яндекс.Вебмастер врёт насчёт времени последнего посещения сайта роботом. Я смотрю по посетителям с фильтром по юзер-агенту, на один мой сайт, где нету ни одной страницы в индексе, регулярно заходит бот от Яндекса.

Мне вот тут интересно стало - а считает ли Яндексовый бот ссылку со страницы, не находящейся в индексе?

Т.к. "страницы в индексе" - это страницы, участвующие в ранжировании при поисковых запросах, а может ссылки с таких страниц считаются?

Была бы вот прога которая проверяет ссылки по условиям - типа "нет ни в Гугле, ни в Яндексе" - удаляем. Или "уже вторую проверку ссылка не в индексе Яндекса" - удаляем (это чтобы не мигать сотнями ссылок из-зи возможных временных глюков). В так, конечно, плагин для Мозиллы рулит.

А если это сделать в виде сервиса, с оплатой, допустим, $10 в месяц?

Lucid_Mind добавил 28.04.2009 в 09:26

Т.е. регистрируешься, пишешь свой логин\пасс от сапы, указываешь, сколько апов выдачи может ссылка не быть в Яше и Гугле (3 по умолчанию). Если ссылки нету в индексе - ссылка удаляется.

Естественно, по каждому шагу будет формироваться отчёт.

Через какой сервис лучше всего проверять - был ли ап выдачи?

А что значит не находится в индексе ? Каком индексе ? Как Вам например "скрытый индекс" ?

Далее сами думаю додумаете. :)

Nicola добавил 28.04.2009 в 16:02

Это вполне логично. Это все можно написать. И все у Вас будет.