К содержанию
Quantoros

Что CountVectorizer.transform выдаёт для документа только из токенов вне обученного словаря?

Classic MLУровень: ПрактикаVocabulary outside training

Что CountVectorizer.transform выдаёт для документа только из токенов вне обученного словаря?

Подсказки
  • Словарь был обучен при fit.
  • У нулевой строки сохраняется обученное число столбцов.

Ответ

Нулевую строку признаков. Transform не расширяет словарь; отслеживайте долю OOV, потому что классификатор тогда почти не получает текстовых свидетельств.

Источник и лицензия: scikit-learn 1.7.2 — feature extraction · BSD-3-Clause · ответ: редакция Quantoros · перевод: Quantoros

Похожие вопросы