Что CountVectorizer.transform выдаёт для документа только из токенов вне обученного словаря?
Classic MLУровень: ПрактикаVocabulary outside training
Что CountVectorizer.transform выдаёт для документа только из токенов вне обученного словаря?
Подсказки
- Словарь был обучен при fit.
- У нулевой строки сохраняется обученное число столбцов.
Ответ
Нулевую строку признаков. Transform не расширяет словарь; отслеживайте долю OOV, потому что классификатор тогда почти не получает текстовых свидетельств.
Источник и лицензия: scikit-learn 1.7.2 — feature extraction · BSD-3-Clause · ответ: редакция Quantoros · перевод: Quantoros