К содержанию
Quantoros

Чем embedding-модель отличается от генеративной модели?

LLM & AIУровень: БазаLLM Foundations

Чем embedding-модель отличается от генеративной модели?

Подсказки
  • Что означает близость в выбранном представлении и метрике?
  • Проверьте нормировку, точный и приближённый поиск, а также соответствие обучения поисковой задаче.

Ответ

Embedding-модель превращает вход в числовое представление, обычно вектор фиксированной размерности, пригодный для поиска, сравнения и кластеризации. Сходство векторов зависит от цели обучения и не является точной мерой смысла во всех задачах. Генеративная языковая модель формирует последовательность токенов для ответа, перевода или текста. Она тоже использует внутренние эмбеддинги, но её конечный продукт иной. Некоторые поисковые модели возвращают несколько векторов на документ, поэтому формулировка «всегда один вектор» слишком узкая.

Источник и лицензия: Skillumen — Awesome AI Engineer Interview Questions · CC0-1.0 · перевод: Quantoros

Похожие вопросы