Data Labeling
Определение
Data Labeling — процесс разметки данных людьми для создания обучающих выборок для supervised learning моделей.
Простое объяснение
Data Labeling — как обучение AI на примерах, размеченных людьми. Показываем "это кот, это собака" много раз, пока AI не научится различать сам.
Подробнее
Связанные термины
MMLU
MMLU (Massive Multitask Language Understanding) — бенчмарк для оценки знаний и способности к рассуждению LLM по 57 предметным областям.
Question Answering
Question Answering (QA) — задача автоматического ответа на вопросы на естественном языке на основе текста или базы знаний.
Leaderboard
Leaderboard — таблица рейтингов AI-моделей по результатам стандартизированных бенчмарков, позволяющая сравнивать их производительность.
BLEU/ROUGE
BLEU и ROUGE — классические метрики для оценки качества генерации текста путём сравнения с эталонными ответами.
