B
BLEU/ROUGE
Также известен как: BLEU Score, ROUGE Score
Данные и аналитикаОпределение
BLEU и ROUGE — классические метрики для оценки качества генерации текста путём сравнения с эталонными ответами.
Простое объяснение
BLEU и ROUGE — как проверка сочинения по ключевым словам. BLEU проверяет, что вы использовали правильные слова. ROUGE — что не упустили важные мысли из темы.
Подробнее
BLEU (Bilingual Evaluation Understudy) измеряет точность n-грамм: какая доля n-грамм сгенерированного текста встречается в эталоне. Используется для машинного перевода. ROUGE (Recall-Oriented Understudy for Gisting Evaluation) измеряет полноту: какая доля n-грамм эталона встречается в генерации. Используется для суммаризации. Обе метрики имеют ограничения: не учитывают семантику, парафразы, качество текста. Современные подходы используют model-based метрики (BERTScore, GPT-4 as judge).
Связанные термины
Anomaly Detection
Anomaly Detection — автоматическое выявление необычных паттернов, выбросов или аномалий в данных.
Summarization
Summarization — автоматическое создание краткого изложения длинного текста с сохранением ключевой информации.
Knowledge Graph
Граф знаний — структура данных, представляющая информацию в виде сети связанных сущностей и отношений между ними, используемая для улучшения AI-систем.
Предиктивная аналитика
Предиктивная аналитика — использование исторических данных и ML для прогнозирования будущих событий, трендов и поведения.