Какие методы используются для проверки обобщающей способности моделей?

Некоторые методы, которые используются для проверки обобщающей способности моделей:

• Скользящий контроль (leave-one-out). proproprogs.ru Из всей выборки убирают поочерёдно по одному вектору наблюдений и обучаются каждый раз на оставшейся выборке. proproprogs.ru В итоге получается множество разных моделей, на основе которых формируют общую модель с лучшими обобщающими способностями. proproprogs.ru
• Кросс-валидация (cross-validation). proproprogs.ru cs.mipt.ru Вся выборка разбивается на отдельные группы наблюдений, и на каждой итерации одна группа используется как проверочная, а другие составляют обучающее множество. proproprogs.ru Для каждого обучающего набора формируется своя модель. proproprogs.ru
• Тестовая выборка. quizlet.com wiki.loginom.ru Для проверки обобщающей способности модели используется тестовое множество, формируемое из примеров обучающей выборки, не использовавшихся в процессе обучения. wiki.loginom.ru Если модель обеспечивает низкую выходную ошибку как на обучающем, так и на тестовом множестве, то с высокой долей уверенности можно утверждать, что она приобрела обобщающую способность. wiki.loginom.ru