Neural Network
Определение
Нейронная сеть — вычислительная система, вдохновлённая структурой мозга, состоящая из связанных узлов (нейронов), обрабатывающих информацию слоями.
Простое объяснение
Это программа, устроенная как упрощённый мозг: много маленьких кусочков соединены друг с другом и вместе решают задачи.
Подробнее
Типы нейронных сетей:
- Feedforward — базовая архитектура
- CNN — для изображений
- RNN/LSTM — для последовательностей
- Transformer — для текста (LLM)
- GAN — для генерации
Связанные термины
Reinforcement Learning
Обучение с подкреплением — метод машинного обучения, при котором агент учится принимать решения, получая награды или штрафы за свои действия.
Inference
Инференс — процесс получения предсказаний или результатов от обученной AI-модели на новых входных данных.
Speculative Decoding
Speculative Decoding — метод ускорения inference LLM, где маленькая модель генерирует черновые токены, а большая модель верифицирует их параллельно.
LoRA
Low-Rank Adaptation — метод эффективного дообучения больших языковых моделей, который замораживает исходные веса и добавляет небольшие обучаемые матрицы.