Запрет на обход и обучение нейронками вашего сайта

12 3
M
На сайте с 17.06.2021
Offline
65
1630
Ребят а вы запрещаете через роботс обход нейронками ваших сайтах? и еще вопрос, возможно туповатый, это влияет на ранжирование и выдачу?
я так понимаю в сгенерированные (первые места) твой сайт не попадет если запретить обход, но сказывается это на трафе или нет? есть у кого уже опыт?

выходят такие новости, классика, богатые богатеют, а на мелкий бизнес всем пофиг)
https://habr.com/ru/news/811293/
OpenAI заключила лицензионное соглашение с Financial Times
OpenAI заключила лицензионное соглашение с Financial Times
  • 2024.04.29
  • habr.com
OpenAI заключила соглашение c Financial Times о лицензировании контента и разработке инструментов искусственного интеллекта для издания. Теперь пользователи ChatGPT будут видеть цитаты и ссылки на статьи газеты. OpenAI разработает для FT новые ИИ-продукты. Издание уже использует решения OpenAI, в том числе ChatGPT Enterprise. В марте FT...
Bybit крипто биржа https://partner.bybit.com/b/58507 /// Зарубежные VPS с оплатой РФ картами https://aeza.net/?ref=416422 (+15% к пополнению)
Vladimir SEO
На сайте с 19.10.2011
Offline
1719
#1
я запретил жпт на сайтах в роботсе
makepuff :
и еще вопрос, возможно туповатый, это влияет на ранжирование и выдачу?

каким макаром ?

makepuff :
я так понимаю в сгенерированные (первые места) твой сайт не попадет если запретить обход
что за места и где 
Эксперт по продуктам Google https://support.google.com/profile/58734375 ᐈ Продвижение коммерческих сайтов https://kulinenko.com/
WebAlt
На сайте с 02.12.2007
Offline
251
#2

У ChatGPT есть такая нехорошая штука (по данным центра мониторинга и управления сетью связи общего пользования (ЦМУ ССОП Роскомнадзор)) как сбор информации о критических уязвимостях информационных ресурсов, индексирование персональных данных и использование информации в зарубежных моделях обучения. Поэтому тоже запрещаю:

User-agent: GPTBot
Disallow: /
M
На сайте с 17.06.2021
Offline
65
#3
Vladimir SEO #:
что за места и где 

ну sge выдача у гугла и яндекса генерка, это же ИИ ответы насколько я понимаю
понятно что sge пока только английского языка касается, но все равно... а для яндекса видимо уже актуально

M
На сайте с 17.06.2021
Offline
65
#4
https://www.bloomberg.com/robots.txt

чекаю как у крупных сайтов прописаны роботсы, у новостников обычно запрещено, стаковерфлоу без запретов

my_name_is_slim
На сайте с 16.02.2024
Offline
9
#5
давно запретил сканировать сайт.
Shelton724
На сайте с 26.05.2011
Offline
242
#6
makepuff :
Ребят а вы запрещаете через роботс обход нейронками ваших сайтах?

Там нельзя что-то запретить, можно только порекомендовать.

M
На сайте с 17.06.2021
Offline
65
#7
Shelton724 #:

Там нельзя что-то запретить, можно только порекомендовать.

я думаю для таких ботов это запрет, иначе компании будут судится как собственно делает форбс

SR
На сайте с 17.01.2021
Offline
104
#8
И давно директива в роботсе стала правилом? Это рекомендация. От того, что вы в роботсе что-то запретите, ничего не изменится.
Тот самый
softerra
На сайте с 02.10.2023
Offline
27
#9
Shelton724 #:

Там нельзя что-то запретить, можно только порекомендовать.

В роботсе нельзя, а в .хтаксессе можно.
G6
На сайте с 12.07.2007
Offline
162
#10
Steve Rambo #:
От того, что вы в роботсе что-то запретите, ничего не изменится.

Нормально слушают боты ИИ указание в robots.txt. По логам можете посмотреть. Можно или нужно (тут каждый сам), добавить файлик ai.txt, в нем также запрет ботам. Можно в корень, но лучше и удобнее в директорию  /.well-known/. Туда вообще можно положить массу интересного. ИИ боты часто обращаются к этому файлу. Содержание  ai.txt можно под себя в конструкторах этого файла сделать или качнуть готовый.

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий