Какие существуют методы минимизации эмпирического риска?

Некоторые методы минимизации эмпирического риска:

• Метод наименьших квадратов. 3
• Метод максимального правдоподобия. 3 Заключается в максимизации условной вероятности данных при гипотезе. 3
• Метод максимальной апостериорной вероятности. 3 Заключается в максимизации условной вероятности гипотезы при данных. 3
• Метод ближайших соседей. 3 Идея алгоритма классификации с помощью этого метода состоит в аппроксимации апостериорной вероятности класса через объекты обучающей выборки и расстояния до них. 3
• Метод структурной (упорядоченной) минимизации эмпирического риска (МСМЭР). 4 Позволяет сбалансировать ёмкость класса решающих функций и объём обучающей выборки. 4

Также существует метод эмпирической минимизации риска (ERM), который фокусируется на минимизации средней ошибки по данным обучения. 2 Для этого используются алгоритмы оптимизации, например градиентный спуск. 2