Почему LightGBM предупреждает об отрицательных категориях, если в исходном столбце только положительные числа?
Classic MLУровень: ПрактикаCategorical integer encoding
Почему LightGBM предупреждает об отрицательных категориях, если в исходном столбце только положительные числа?
Подсказки
- Сформулируйте задачу, входные данные и то, что модель должна предсказывать.
- Сравните метод с простым baseline: допущения, функция потерь и независимая проверка.
Ответ
Категориальные значения ограничены диапазоном int32. Очень большие положительные ID при преобразовании могут переполниться или стать некорректными, отсюда предупреждение. Категории стоит перевести в компактные неотрицательные коды и сохранять одинаковое отображение при обучении и инференсе. Коды не означают числовой порядок категорий. Пропуски и неизвестные категории нужно обработать явно, а не надеяться на приведение к целому типу.
Источник и лицензия: LightGBM developers — Official FAQ · MIT · ответ: редакция Quantoros · перевод: Quantoros