Для сайтов в ЯК у яндекса есть отдельный робот-дятел. Он "простукивает" доступность сайта. Если сайт недоступен 3-5 дней - то он временно вылетает из ЯК. После возобновления доступности сайта - дятел видит это и сайт через те же 3-5 дней сайт возвращается обратно.
Если дятел к вашему сайту не стучится - значит вернуться в ЯК автоматом не получится.
Про вылет за смену контента определённо сказать не могу. Сайт может поменять контент и все равно остаться в ЯК, может быть выкинут через неделю или месяц. Наверное, там модераторы за этим следят.
Вордстат показывает обработанные запросы, т.е. выкручивает падежи, числа как ему захочется, а рамблер выдаёт именно то, что запрашивали в неизменном виде. При этом, рамблер показывает даже те запросы, которые юзвери ввели всего раз в месяц, яндекс же на точность плюёт.
Но зато рамблер и банит за большое количество запросов быстрее и надольше.
Это всё равно не рефереры, а просто ловушки на паука :)
Так он не признаётся!
Сорри, не совсем понятна, так сказать цель тестирования...
Оно платное или нет?
Вы хотите чтобы хорошо протестировали, но при этом чтобы не было "гнусных скриптовых рабовладельцев, способных убить айпишник за пятнадцать минут работы" :)
Это как-то противоречит одно другому, имхо.
По-моему, даже добрый скриптовладелец за 1 минуту в бан без напряга 1 айпишник легко выносит :)
Мне вот тоже такое пишет...
Есть форум, модераторы злые, капча поставлена, все спамные ссылки нах рубятся, боты со ссылками в профиле - тоже.
Как понять, что именно яша считает спамом?
В сообщении пишет ссылку на страницу - там вообще нету никаких внешних ссылок, все нормальные посты юзеров... Единственное, к чему можно придраться - продажа сапассылок.
Но ни на одной из страниц, о которых писал я.вебмастер - этих ссылок нет и не было.
Кто-то сталкивался с таким? Или может знает причину.
Золотые слова... Интересно, кто-то из ноющих возьмётся? К тому же ТС гонорар предлагает!
Яндекс борется с таким. И большей частью успешно.
Бугога.. ТС, такого нет в природе.
Выбирайте - либо медленно и без прокси, либо быстро, но с ними.
Быстро и без прокси не бывает.
Насколько я понял, у ТС задача определять тематику любой конкретной страницы, а не понять как работает я.робот.
