Почему переобучение может негативно сказаться на обобщающей способности модели?

Переобучение может негативно сказаться на обобщающей способности модели, потому что модель начинает запоминать каждую деталь обучающих данных, включая шум, редкие случаи и ошибки. vc.ru

В результате внутренние параметры подстраиваются не под структуру задачи, а под конкретные примеры. vc.ru Модель больше не формирует правило, а фиксирует исключения. dtf.ru

Некоторые последствия переобучения:

• Снижение точности. vc.ru Модель показывает высокие показатели на известных данных, но проваливается на новых. dtf.ru
• Нестабильность поведения. vc.ru Модель ведёт себя непредсказуемо на новых примерах. practicum.yandex.ru
• Ограничение применения. dtf.ru Переобучённая модель становится негибкой: она не может быть дообучена, плохо переносит новые задачи, требует полного переобучения даже при малых изменениях. dtf.ru
• Иллюзия качества. dtf.ru Переобучённые модели могут демонстрировать высокие метрики на тестах, особенно если тестовые данные близки к обучающим. dtf.ru Это создаёт иллюзию качества, которая особенно опасна в бизнесе и научных применениях. dtf.ru