New We are sorting MAX channels into categories and territories. Read the news
Public channel ID 75953370013751

#Хранилище 038

Dataset для нейросетей.

«Если наука докажет ошибочность какого-либо положения буддизма, буддизму придётся измениться».

— Tenzin Gyatso, Our Faith in Science

Channels in category
975
This channel's rank
№ 975
Open category →
Open in MAX

Posts for the period

By reactions

Search and the whole feed — after free registration. Custom dates — with a subscription; the channel owner sees them for free. Sorting by reactions — with a subscription. Sign up

Loading…

1. Обучение нейросети — как учёба школьника. Ученик решает задачи, сверяет ответы с учебником, находит ошибки и постепенно запоминает правильные решения. Нейросеть делает похожее: предсказывает следующий токен (слово или его часть), сравнивает его с правильным и вычисляет ошибку — Loss (числовой показатель того, насколько ошиблась модель). Алгоритмы Backpropagation (расчёт влияния каждого веса на ошибку) и градиентного спуска (постепенное изменение весов для уменьшения ошибки) корректируют миллиарды параметров — весов (чисел, определяющих работу нейросети). После огромного количества повторений модель усваивает закономерности, знания и навыки.

2. Генерация ответа (инференс — использование уже обученной модели) — как экзамен. Ученик получает вопрос и отвечает, используя полученные знания. Нейросеть разбивает вопрос на токены (слова или их части), преобразует их в числовые векторы (наборы чисел, представляющие информацию) и передаёт в трансформер (архитектуру нейросети для обработки информации). Механизм Attention («внимание» — определение важных связей между токенами) помогает учитывать контекст. Затем модель рассчитывает вероятности продолжения и последовательно генерирует ответ.

Главный вывод: обучение — это изменение весов и формирование знаний и навыков, а генерация — использование уже обученной модели без изменения весов. Обучение крупных нейросетей требует огромных вычислительных ресурсов и дата-центров, а для запуска небольшой готовой модели, например Qwen, может хватить обычного компьютера.
Views: 16
Go to post Open in MAX Report an inaccuracy
VKontakte Telegram Odnoklassniki
Favorites at datool.ru

Follow the channel in your account

Sign up at datool.ru to add the channel “#Хранилище 038” to favorites and track its metrics.

Sign up
For channel owners

Verify your channel

Sign in or sign up at datool.ru, then add our bot to the channel following the instructions in your account. Once ownership is verified, the lock disappears and channel management becomes available.

Sign in or sign up

Report an inaccuracy

Describe what needs fixing. If you have a source, add a link.

You are leaving datool.ru

The link leads to an external website. datool.ru is not responsible for its content — check the address before entering passwords or payment details.

Redirecting in 10 s

Go