А Яндекс-то и не знает... RookeeBot

В htaccess по ip и юзер агенту такое банить нещадно :) и да, логи сервера смотреть надо, чтоб всяких рукоблудов быстрее находить и банить, чтоб сервак не грузили.

Да нунаф?!😮

А чего ради ентот так подписали, ась?

Конкурентов, гугляндексы, штоле валят?...😂

Я могу представиться как хочу - хоть яндексом :)

Но в вашем случае, наверное, все-таки руки, скорее всего топ мониторят, чтобы просчет бюджетов сделать.

Ну я и грю: - Где моя доля?😂

А то, что анализ топ10 - это очамвидно, без анализа.

- Ща, я им вот так, на халяву, все и выложу...

Разбежались ап стенку йадом...

Ну как-бы посетители вашего сайта тоже должны вам за посещение вашего ресурса платить?

А гугляндексы - платят и ничего... Как с этим?

Не прямо, но косвенно трафиком, таки да.

А за посетителей платят рекламодатели.

А рукосуи - хотят на халяву...

- Ы?

Редкостный идиотизм.

Это - уже личное, а не бизнес...😂

Или ты будешь отрицать постулат:

- Если по инету шариться робот, значит это кому-то нужно.

Когда ты выложил сайт - его имеет кто хочет. Это интернет, детка

ТС параноик? В больничку надо бы.

А по теме, как тут писали выше адекватные люди, robots.txt и htaccess решит все проблемы, если какой то определенный бот из нескольких тысяч не нравится.