B
BLEU/ROUGE
Также известен как: BLEU Score, ROUGE Score
Данные и аналитикаОпределение
BLEU и ROUGE — классические метрики для оценки качества генерации текста путём сравнения с эталонными ответами.
Простое объяснение
BLEU и ROUGE — как проверка сочинения по ключевым словам. BLEU проверяет, что вы использовали правильные слова. ROUGE — что не упустили важные мысли из темы.
Подробнее
BLEU (Bilingual Evaluation Understudy) измеряет точность n-грамм: какая доля n-грамм сгенерированного текста встречается в эталоне. Используется для машинного перевода. ROUGE (Recall-Oriented Understudy for Gisting Evaluation) измеряет полноту: какая доля n-грамм эталона встречается в генерации. Используется для суммаризации. Обе метрики имеют ограничения: не учитывают семантику, парафразы, качество текста. Современные подходы используют model-based метрики (BERTScore, GPT-4 as judge).
Связанные термины
Retrieval
Retrieval — поиск и извлечение релевантной информации из базы данных или корпуса документов по запросу.
Управление данными
Управление данными (Data Management) — процессы сбора, хранения, обработки и защиты данных, критичные для работы AI-систем.
Machine Translation
Machine Translation — автоматический перевод текста с одного языка на другой с помощью AI-моделей.
Предиктивная аналитика
Предиктивная аналитика — использование исторических данных и ML для прогнозирования будущих событий, трендов и поведения.