Как отсечь ip роботов и парсеров?

Коллеги!

Помогите, может кто-то решал подобную задачу.

Нужно выдергивать ip посетителей сайта, отсекая при этом роботов и ботов.

Где можно посмотреть список основных user agents поисковиков и тех, кто активно парсят сайты?

Может есть еще какие-нибудь варианты отделить людей от роботов на сайте?