Почему HashingVectorizer сам не вычисляет зависящий от корпуса IDF?
Classic MLУровень: ПродвинутыйIDF introduces state
Почему HashingVectorizer сам не вычисляет зависящий от корпуса IDF?
Подсказки
- Хешированию не нужны частоты корпуса, IDF нужны.
- Учитывайте состояние всего pipeline.
Ответ
Этот ответ — часть менторства
К продвинутым вопросам есть полный разбор и тренировочное собеседование с практикующим квант-ресерчером. Первый созвон бесплатный.
Источник и лицензия: scikit-learn 1.7.2 — feature extraction · BSD-3-Clause · ответ: редакция Quantoros · перевод: Quantoros