Все пользуются. Мало кто понимает, что внутри.
«Без труда не вытащишь и…» Вы уже договорили. Просто слышали эту фразу сто раз, и продолжение всплыло само.
ChatGPT, GigaChat, Claude работают так же. Только масштаб другой.
Что внутри. Огромная сеть из простых элементов, связанных друг с другом. Отсюда и «нейро»: отдалённо похоже на нейроны в мозге.
У каждой связи есть сила. Она записана числом, и это число называют весом. Таких весов в современной модели сотни миллиардов.
Как её обучали. Собрали гигантский архив текстов: книги, статьи, сайты. Модель шла по нему слово за словом и пыталась угадать следующее. Ответ сверяли с оригиналом и чуть подкручивали веса, чтобы в следующий раз правильный вариант казался ей вероятнее. Одни связи усиливали, другие ослабляли.
Как тропинка в парке: где ходят чаще, там натоптано.
Миллиарды угадываний, тысячи мощных компьютеров, месяцы работы.
Примерно так ребёнок учит родной язык. Правил ему никто не объясняет. Он слышит, пробует, его поправляют. Через несколько лет просто знает, как правильно. А объяснить почему не может. С моделью так же.
Как она отвечает. Слово за словом. Поставила одно, посмотрела на всё, что получилось, поставила следующее.
Спросите её, когда родился Пётр Первый. Искать она не умеет. Просто фразу «Пётр Первый родился в 1672 году» видела тысячи раз. Тропинка натоптана.
При этом записи «Пётр Первый - 1672» внутри нет. Нет ячейки с датой, как в справочнике. Есть только миллиарды чисел, которые вместе выводят к ответу.
Получается, она знает всё и ничего одновременно. Но спросите, и тропинка приведёт к ответу.
Это и есть нейросеть. Огромная сеть связей, натоптанная на чужих текстах.
Когда обучение закончили, веса больше не трогают. В таком виде модель и выпускают к людям.
Отсюда забавный эффект. Для модели время остановилось в день, когда закончили обучение. Без подсказки она уверенно назовёт прошлогоднюю дату и перескажет «свежие новости» годичной давности. Как человек, проспавший двенадцать месяцев: бодр, уверен в себе и слегка не в курсе.
P.S. Спойлер: в конце недели (надеюсь, этой) выйдет промежуточный релиз AssistVoice 1.15.1. Что нового: отправка и приём сообщений в Telegram и погода.
📡 Канал в Telegram
🪙 Поддержать меня монетой