Adapter
Определение
Адаптер — небольшой обучаемый модуль, встраиваемый между слоями предобученной модели для её адаптации под новые задачи без изменения основных весов.
Простое объяснение
Адаптер — как съёмный объектив для фотоаппарата. Камера (модель) остаётся той же, но разные объективы (адаптеры) позволяют снимать портреты, пейзажи или макро.
Подробнее
Связанные термины
PEFT
Parameter-Efficient Fine-Tuning — семейство методов дообучения моделей, которые обновляют лишь малую часть параметров, сохраняя качество полного fine-tuning.
YOLO
YOLO (You Only Look Once) — семейство алгоритмов компьютерного зрения для обнаружения объектов в реальном времени на изображениях и видео.
FlashAttention
FlashAttention — алгоритм вычисления attention, оптимизированный для GPU, который значительно снижает использование памяти и ускоряет обучение и inference.
Глубокое обучение
Подмножество машинного обучения, использующее многослойные нейронные сети для анализа данных.