Что называют проклятием размерности?
Classic MLУровень: ПрактикаClassification
Что называют проклятием размерности?
Подсказки
- Какую информацию нужно сохранить при переходе в пространство меньшей размерности?
- Проверьте центрирование, масштабирование и различие между проекцией и выбором признаков.
Ответ
При увеличении числа измерений пространство возможных значений быстро растёт, а имеющиеся данные становятся разреженными. Для сопоставимого покрытия пространства требуется существенно больше примеров; оценивать зависимости и расстояния становится труднее. Поэтому большое число признаков при ограниченной выборке усложняет обобщение.
Источник и лицензия: Alexey Grigorev & contributors — Data Science Interviews · CC-BY-4.0 · перевод: Quantoros