И снова вопрос о клоакинге...

Ну смотри, главное чтобы после прочитаных тем, когда протрезвеешь клоакинг не болел :)

MaxHero, клоакинг палится хитроботами Яши и Гугла.

Хитробот - бот который приходит с левого айпи, с не-ботовским юзерагентом, с реферером из поиска, исполняет скрипты, читает стили, не реагирует на robots.txt

Для эффективного клоакинга необходимо определять не только простых ботов, пользователей с барами, но и хитроботов :D

Это вообще решаемая задача?

покажите мне хоть одного такого бота яндекса

теоретически - да.

сделать кнопку для перехода с использованием капчи. и вести статистику айпи, прошедших капчу, и непрошедших.

4arger добавил 10.01.2010 в 20:15

я думаю их сложно определить.

Если бы ты захотел сделать такого бота, ты бы стал палиться юзерагентом или подсетью ip?

Грамотного хитробота определить будет проблематично.

Бывают. Хотя и не факт, что именно от Яндекса. Когда в индексе еще нет ни одной странички, а заходят посетители якобы из поисковиков.

Конечно, могут быть и левые парсеры всякие, но иногда уже по приметам узнаешь - этот гугловский, а этот не пойми кто, возможно яндекс.

Гугловских я как-то сразу чувствую. Есть в них что-то не русское, слегка туповатое(хоть гугл и продвинутый поисковик, но шифроваться не умеет).

Скоро видимо уже и Яндекс будет использовать известный сервис ))

А вообще можно любую форму для этого прикрутить - не обязательно капчу... - возраст, например, спрашивать - только реальные юзеры теряются от этого - собственно, это уже обсуждалось здесь. Да и на своем опыте знаю.

Хитробота вероятно можно так выловить. Берёте картинку 1x1 пиксель, делайте из неё ссылку, суёте в футер. Смотрите логи страницы куда была ссылка, юзер не увидит ссылку, а бот перейдет.

/ru/forum/comment/6116511

А зачем вообще его (хитробота) вылавливать?

Имхо, нет в этом никакого практического смысла.