Особым свойством метода опорных векторов является непрерывное уменьшение эмпирической ошибки классификации и увеличение
зазора. Основная идея метода опорных векторов — перевод исходных векторов в пространство более высокой размерности и поиск разделяющей гиперплоскости с максимальным зазором в этом пространстве. Две параллельных гиперплоскости строятся по обеим сторонам
гиперплоскости, разделяющей наши классы.
Разделяющей гиперплоскостью будет гиперплоскость,
максимизирующая расстояние до двух параллельных гиперплоскостей. Алгоритм работает в предположении, что чем
больше разница или расстояние между этими параллельными гиперплоскостями, тем меньше будет средняя
ошибка классификатора.
Бустинг
Процедура последовательного построения композиции алгоритмов машинного обучения, когда каждый следующий алгоритм стремится компенсировать недостатки композиции всех предыдущих алгоритмов. Бустинг представляет собой жадный алгоритм построения композиции алгоритмов. В течение последних 10 лет бустинг остаётся одним из наиболее популярных методов машинного обучения, наряду с нейронными сетями и машинами опорных векторов. Основные причины — простота, универсальность, гибкость (возможность построения различных модификаций), и, главное, высокая обобщающая способность.
Задачи машинного обучения
- Регрессии
- Классификации
- Кластеризации
- Уменьшения размерности
- Выявления аномалий
Метод моделирования измеряемых данных и исследования их свойств. Данные состоят из пар значений зависимой переменной (переменной отклика) и независимой переменной (объясняющей переменной). Регрессионная модель есть функция независимой переменной и параметров с добавленной случайной переменной. Параметры модели настраиваются таким образом, что модель наилучшим образом приближает данные.
Один из разделов машинного обучения, посвященный решению следующей задачи. Имеется множество объектов (ситуаций), разделённых некоторым образом на классы. Задано конечное множество объектов, для которых известно, к каким классам они относятся. Это множество называется обучающей выборкой. Классовая принадлежность остальных объектов не известна. Требуется построить алгоритм, способный классифицировать произвольный объект из исходного множества.
Достарыңызбен бөлісу: |