Раздел: Машинное обучение
- Линейная сепарабельность
Свойство набора данных, при котором классы можно разделить одной прямой (в 2D), плоскостью (в 3D) или гиперплоскостью в пространстве большей размерности.
- L2-регуляризация
Метод регуляризации, который добавляет к функции потерь штраф за большие веса, пропорциональный сумме их квадратов. Снижает переобучение, заставляя модель использовать признаки более…
- L1-регуляризация
Метод регуляризации в машинном обучении, добавляющий к функции потерь штраф за сумму абсолютных значений весов, что обнуляет часть параметров и создаёт разреженные…
- Weight decay
Метод регуляризации в обучении нейросетей, при котором веса модели штрафуются за большие значения, чтобы предотвратить переобучение.
- Гиперплоскость
Подпространство размерности n−1 в n-мерном пространстве, которое делит его на две половины и используется как граница принятия решений в линейных классификаторах.
- Метод опорных векторов (SVM)
Алгоритм машинного обучения с учителем, который строит разделяющую гиперплоскость с максимальным зазором между классами для классификации и регрессии.
- Bias-Variance Tradeoff
Компромисс между смещением и дисперсией модели: снижение одного параметра ведёт к росту другого, а оптимальная сложность минимизирует общую ошибку.
- Кросс-валидация
Метод оценки модели, при котором данные разбиваются на k частей, и модель поочерёдно обучается на k-1 частях и тестируется на оставшейся.
- Dropout
Dropout - метод регуляризации нейронных сетей, при котором во время обучения случайно отключается часть нейронов, чтобы предотвратить переобучение и улучшить обобщающую способность…
- Недообучение
Состояние модели машинного обучения, при котором она не улавливает закономерности в данных и показывает низкую точность как на обучающей, так и на…