Семантический поиск
Определение
Семантический поиск — поиск информации по смыслу, а не по ключевым словам, с использованием эмбеддингов и векторных баз данных.
Простое объяснение
Это умный поиск, который понимает смысл вопроса. Если спросить «как починить компьютер», найдёт статьи про ремонт ПК, даже если там нет слова «починить».
Подробнее
Как работает семантический поиск:
- Текст преобразуется в эмбеддинг (вектор)
- Находятся похожие векторы в базе
- Возвращаются семантически близкие документы
Технологии: Pinecone, Weaviate, sentence-transformers.
Связанные термины
Retrieval
Retrieval — поиск и извлечение релевантной информации из базы данных или корпуса документов по запросу.
BLEU/ROUGE
BLEU и ROUGE — классические метрики для оценки качества генерации текста путём сравнения с эталонными ответами.
Question Answering
Question Answering (QA) — задача автоматического ответа на вопросы на естественном языке на основе текста или базы знаний.
Data Labeling
Data Labeling — процесс разметки данных людьми для создания обучающих выборок для supervised learning моделей.