Управление данными
Определение
Управление данными (Data Management) — процессы сбора, хранения, обработки и защиты данных, критичные для работы AI-систем.
Простое объяснение
Это правила и инструменты для работы с данными: как их собирать, хранить и защищать, чтобы AI мог хорошо учиться.
Подробнее
Компоненты data management для AI:
- Data Governance — политики и стандарты
- Data Quality — чистота данных
- Data Lineage — отслеживание происхождения
- Data Security — защита и приватность
Качество данных определяет качество AI.
Связанные термины
Synthetic Data
Синтетические данные — искусственно сгенерированные данные, имитирующие реальные, используемые для обучения AI при недостатке или конфиденциальности реальных данных.
Machine Translation
Machine Translation — автоматический перевод текста с одного языка на другой с помощью AI-моделей.
BLEU/ROUGE
BLEU и ROUGE — классические метрики для оценки качества генерации текста путём сравнения с эталонными ответами.
Question Answering
Question Answering (QA) — задача автоматического ответа на вопросы на естественном языке на основе текста или базы знаний.