S
Summarization
Также известен как: Суммаризация, Text Summarization, Краткое изложение
Данные и аналитикаОпределение
Summarization — автоматическое создание краткого изложения длинного текста с сохранением ключевой информации.
Простое объяснение
Summarization — как попросить умного помощника "прочитай этот длинный документ и расскажи главное за 2 минуты".
Подробнее
Два подхода: extractive (выбор важных предложений из оригинала) и abstractive (генерация нового текста). LLM совершили прорыв в abstractive summarization: модели понимают смысл и перефразируют. Применения: суммаризация новостей, meeting notes, документов, email threads. ROUGE metrics оценивают качество. Challenges: factual consistency (не добавлять ложную информацию), длинные документы (превышают контекст). RAG + summarization позволяют работать с документами любой длины.
Связанные термины
Retrieval
Retrieval — поиск и извлечение релевантной информации из базы данных или корпуса документов по запросу.
MMLU
MMLU (Massive Multitask Language Understanding) — бенчмарк для оценки знаний и способности к рассуждению LLM по 57 предметным областям.
Anomaly Detection
Anomaly Detection — автоматическое выявление необычных паттернов, выбросов или аномалий в данных.
Object Detection
Object Detection — задача компьютерного зрения: найти объекты на изображении и определить их классы и положение.