Unsupervised Learning
Определение
Обучение без учителя — тип машинного обучения, при котором модель находит скрытые паттерны в данных без предварительной разметки.
Простое объяснение
Это когда AI сам находит группы и закономерности в данных, без подсказок — как если бы ты сам разложил игрушки по кучкам без инструкции.
Подробнее
Задачи unsupervised learning:
- Кластеризация — группировка похожих объектов
- Dimensionality reduction — сжатие данных
- Anomaly detection — поиск аномалий
- Pre-training — обучение LLM
Алгоритмы: K-means, PCA, Autoencoders.
Связанные термины
KV Cache
KV Cache — механизм кэширования ключей (Keys) и значений (Values) в трансформерах для ускорения авторегрессивной генерации.
PEFT
Parameter-Efficient Fine-Tuning — семейство методов дообучения моделей, которые обновляют лишь малую часть параметров, сохраняя качество полного fine-tuning.
Embedding
Эмбеддинг — представление данных (текста, изображений, аудио) в виде числовых векторов, где семантически близкие объекты располагаются рядом в векторном пространстве.
Emergent Abilities
Emergent Abilities — способности, которые появляются у моделей только при достижении определённого масштаба и отсутствуют у меньших версий.
