Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Стоит ли блокировать ботов AI?

1234567 8
yalol
На сайте с 12.12.2007
Offline
244
yalol
8320
У меня давно заблокированы боты AI к индексированию моего информационного сайта. Сейчас думаю, а правильно ли это? Может быть так трафик бы шел оттуда? Что думаете?
Vladimir SEO
На сайте с 19.10.2011
Offline
2155
Vladimir SEO
#1
yalol :
Может быть так трафик бы шел оттуда
не может, нету там трафика
L
На сайте с 10.02.2015
Offline
276
livetv
#2
Я не заметил трафика.
Правда некоторые забанены, некоторые нет.
Попадания в жопити и гемини коррелируют с позициями в google.
Хотя вряд ли вы блокировали гемини. По ней недавно появилась статистика в GSC.
yalol
На сайте с 12.12.2007
Offline
244
yalol
#3
Еще момент.  У меня включен TSL 1.3. Нужно ли его отключить?
Mik Foxi
На сайте с 02.03.2011
Offline
1273
Mik Foxi
#4
не дадут они трафика. зато нагрузку увеличивают в разы. если вам жалко ставить 5 серверов, вместо 1 под сайт, то лучше блокировать. 
Антибот, антиспам, веб фаервол, защита от накрутки поведенческих: https://antibot.cloud/ (8 лет на защите сайтов).
22
На сайте с 01.10.2010
Offline
166
Ясен Пень
#5
Где-то есть дельная  инструкция по блокировке ИИ? Буду признателен
SA
На сайте с 12.04.2024
Offline
70
SeoA
#6
Информационник. С чатгпт заходят посетители, в день примерно 15% от общего трафика.
Коммерц. Заходят, но поменьше.
Блокировать не надо, надо создавать такую глубину тематики, чтобы целый ответ не поместился в чатгпт.
P
На сайте с 26.04.2010
Offline
448
plab
#7
yalol :
У меня давно заблокированы боты AI к индексированию моего информационного сайта. Сейчас думаю, а правильно ли это? Может быть так трафик бы шел оттуда? Что думаете?

Контент прям такой уникальный? Если ИИ возьмет не у вас, то у другого. Трафика с самих ии-ответов почти нет. Алиса дает 0.1%, chatgpt 0.05%, данных по ИИ-ответам от гугла нет, т.к. они уходят в общую статистику кликов.

В 15% от общего трафика не верю. Либо это какая-то высокая специфика: скачивание, графика и т.п. 

OpenAI анонсировала подписку ChatGPT Яндекс разрабатывает свою версию В сети появились скриншоты
W
На сайте с 08.05.2013
Offline
112
webgroupco
#8
Ясен Пень #:
Где-то есть дельная  инструкция по блокировке ИИ? Буду признателен

Что надо или не надо сами уберите

.htaccess

RewriteCond %{HTTP_USER_AGENT} (acunetix|ahrefsbot|aihitbot|amazonbot|applebot|baiduspider|blexbot|bubing|bytedance|bytespider|claudebot|clshttp|detectify|domaincrawler\.com|dotbot|extract|facebookexternalhit|flipboardproxy|go-http-client|gptbot|grab|harvest|httrack|imagesiftbot|keys-so-bot|linkpadbot|majestic12\.co\.uk|mauibot|megaindex\.ru|meta-externalagent|miner|mj12bot|nikto|petalbot|python-requests|riddler|semrushbot|shapbot|trovitbot|twengabot|winhttp|xenu\s+link\s+sleuth|youbot) [NC]

RewriteRule ^.*$ - [F,L]



robots.txt

User-agent: SemrushBot
Disallow: /
User-agent: BLEXBot
Disallow: /
User-agent: AhrefsBot
Disallow: /
User-agent: MJ12bot
Disallow: /
User-agent: Bytespider
Disallow: /
User-agent: serpstatbot
Disallow: /
User-agent: barkrowler
Disallow: /
User-agent: GPTBot
Disallow: /
User-agent: meta-externalagent
Disallow: /
User-agent: Applebot
Disallow: /
User-agent: Keys-so-bot
Disallow: /
keys-so-bot .htaccess и боты. как Актуальная блокировка ботов без
Y
На сайте с 29.05.2006
Offline
157
yandrey
#9
webgroupco #:
Что надо или не надо

бесполезно, основной поток идёт от ботов, которые игнорируют robots.txt, с браузерными юзер агентами, кучи разных ASN  и стран

только "proof of work" методы более менее действенны

Ponyk
На сайте с 17.08.2025
Offline
43
Ponyk
#10
yalol :
У меня давно заблокированы боты AI к индексированию моего информационного сайта. Сейчас думаю, а правильно ли это? Может быть так трафик бы шел оттуда? Что думаете?

Думаю что зря. Почему? - Вы и сами отвечаете. 

Или жалко мощностей хостинга.

Вебкам (видеочат) партнëрка https://clck.ru/3UsnJ6 (не адалт, обычные камы)
1234567 8

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий