Ну давай, расскажи как правильно, очень интересно))) А то куда уж мне. Как там твоя нервная сеть осмысленный текст генерирует?
Делать мне нечего 😆 тебе объяснять только время терять, бестолковое занятие. Вот если бы ты что-то действительно знал, тогда можно было бы о чём-то с тобой говорить.
ЗЫ. Попробуй на своём Пайтоне написать простую нейросеть без сторонних библиотек, которую можно обучить нескольким фразам и чтобы потом в зависимости от вопроса она генерировала нужную фразу. В процессе может узнаешь как и что может нейросеть, а что не не может. Получишь ответы на свои вопросы данной темы. А пока мне с тобой больше не о чем тут говорить.
Ой, надоел уже, не понимаешь о чем пишешь и что тебе пишут. Достаточно вот этого бреда -
Тебе говоришь про слои и методы выбора, я ты детскую чушь лепишь, не понимая как тут токены привязаны. осмысленный))) Какая осмысленность в трансформере, чудик? Трансформер-слой выдает на выходе распределение вероятностей следующего слова, дальше в зависимости от стратегии выбирается следующий токен. Но судя по всему ты и значения токен в данном контексте не понимаешь. Базовую теорию выучи сначала, потом умничай.
Неужели? 😁 Это тебе как раз надо поучить...
Всё в одну кучу свалил.. Я тебе конкретный вопрос задал ранее, как происходит генерация осмысленного текста в нейросети.
Ты вообще в курсе, что такое нейронная сеть трансформер? Почему её так называют? Их много разных разновидностей, от работы с текстом, изображениями, видео, предсказания и тд., а также мульти совмещённые несколько видов сразу: распознавание голоса, генерация текста и речи, генерация текста и видео и тд. ...
Опять ты про токены, это к самой нейросети отношения имеет только косвенное, чтобы данные преобразовывать в числовые вектора по которым нейросеть уже будет просчитывать и выдавать выходные данные.
Давай, разжуй 😀
Тому, кто разбирается, достаточно того что я привел, чтобы понять, как система делает токенизацию данных, если тебе это нужно разжевывать, то это значит только то, что ты ничего не понимаешь. Ты до сих пор не понял даже, что такое натренировать модель и сколько это стоит. Вот это то, что ты пытаешься выдать за свою нейросеть - чепуха несусветная. Ты понимаешь хоть уровень затрат? русский алфавит это уже 33 токена, сколько базовый словарь займет? Не самая новая LLama Это от 24 Гигов. Популярная Llama 3.2 1B сьела 370к часов тренировки на GPU, а не домашнем компе с мощностью 700W, Выброс СО2 - 107 тонн!!! Это только основная таблица без квантизации, адаптеров и тюнинга! А ты тут заливаешь что написал свою языковую модель. Твоя модели и "Мама мыла раму " не сможет сказать.
Надоел уже со своими сказками. Ни слова по делу не знаешь, пример привести не можешь, ни одного термина не понимаешь. Не засоряй тему.
Всё с тобой понятно.. Твой уровень интеллекта сопоставим с теми кто утверждает, что ООП это вред. Да, ты используешь ООП и знаешь его плюсы перед функциональным программированием, да ты используешь разные готовые решения в том числе и ИИ. Но то как оно работает не понимаешь и не знаешь, постоянно ссылаешься на разные источники, библиотеки и тд. Даже в этом ответе ты даже ума не приложил, что я тебя спросил, а я спросил о том как генерируется осмысленный текст нейросетью. Если бы у тебя реально были знания в этой области, то ты тут не писал бы о азах про веса, токенизацию и прочее. Да это основы нейросетей, но то как происходит составление фразы\предложения с осмыслением ты даже понятия не имеешь..
ЗЫ. Развлекайся в своей теме дальше, мни себя мега гуру по нейросетям..
Это чушь собачья..
Во-первых ты сказал, что сможешь всё объяснить и ничего не объяснил. Во-вторых ты используешь готовые решения, а не создаёшь свои нейросети, где примеры кода генерирующего осмысленный текст с пояснениями?
ЗЫ. А в-третиьх, я тебе ничего не покажу пока не увижу что-то реального от тебя.
До сих пор я от тебя ничего нового чего бы не знал не услышал. Если ты тут такой всезнайка, то сам без помощи GPT расскажи хотя-бы как генерируется осмысленный текст и приведи примеры кода(без сторонних библиотек, ты же сможешь написать, ты же знаешь как это делается;)
ЗЫ. Я знаю как генерируется осмысленный текст нейросетью, тестировал свои способы на Rust.
Мне интересно было узнать твой уровень знаний, ты создал тему с вопросом, что может, а что не может ИИ. Я в других тема уже высказывался, что у тебя поверхностные знания, тут я в этом убедился окончательно.
Совместной работы с тобой я не хочу, мы с тобой пообщались в дискорде, мне этого было достаточно. Кроме того я просто сказал, что ты во-первых не сможешь понять того что я делаю и что толку от тебя будет ноль, вот и всё.
Веса, градиентный спуск и тд. о чем ты пишешь, это только азы нейронных сетей. Эта информация есть везде, в книгах, статьях в интернете, видео, GPT чат выдаёт примитивный код описывая эти азы. Но то как происходит семантический анализ текста, генерация, составление предложений, изображений, музыки и тд. этого ты не знаешь, там под капотом алгоритмы намного сложнее тех азов о которых ты говоришь, даже некоторые создатели нейронных сетей не понимают как это происходит. Я немного погрузился в реализацию и захотелось сделать по другому. Если бы нашёлся человек(не ты), который понимал бы больше простого перцептрона, то возможно я бы с ним посотрудничал.
Это всем известно кто использует машинное обучение, как подготовить данные для обучения и тд.
Работа с ИИ требует знаний, я ежедневно 2-3 часа выделяю только чтоб учиться в этой области. А ты тратишь это время на сказки. Лучше бы попробовал поспрашивать, чем понты колотить. Но я почему то уверен, что ты даже мой готовый код для тренировки простой модели с 5-ю входными и одним выходным параметром не поймешь)))Займись лучше чем-нить полезным, больше толку будет.
Ты хороший исполнитель, тебе дают задание, ты гуглишь как это сделать и делаешь по аналогии. Ты всегда ссылаешься на общеизвестные подходы, инструменты и тд. Твоя проблема в том что ты не умеешь мыслить креативно, находить нестандартные решения и тд. Таких как ты легко заменит ИИ.
Давай проверим вместе. Какой алгоритм ты планируешь улучшать?
Во-первых у меня свои подходы которые я задолбаюсь тебе объяснять и всё-равно не поймёшь, проходили уже с фреймворком. А во-вторых уже настроился делать в этот раз всё сам, даже от таких как ты тут толка ноль.
Не 10, а 5 и я его уже давно разработал, не спешу просто с релизом, документацию пишу, контрольную панель, установку модулей и др. доработки.
Да, знаю как работает нейросети и есть мысли как сделать по своему.
Вы наверное не в курсе, но процессор изначально спроектирован так чтобы вычислительная машина могла думать(теория Тьюринга), решать задачи по определённым алгоритмам и искусственный интеллект люди давно хотели создать. Но возможностей, то есть объёмов оперативной и вычислительной мощностей не достаточно было. Сейчас произвели некое подобие нейросети в человеческом мозге который способен мыслить.
Вот именно программки.. Нейронные сети это не программки, они обладают той же характеристикой, что и человеческий мозг, то есть умеют воспроизводить полученные знания, некое подобие мыслительной деятельности. Изучите как работают нейронные сети прежде чем сравнивать программки(см. выделенное) с нейронной сетью.
