Почему избыточная сложность параметров модели может привести к переобучению?

Избыточная сложность параметров модели может привести к переобучению, потому что модель с большим количеством параметров может запомнить все особенности тренировочных данных, вместо того чтобы выявить общие закономерности. 4

В результате модель показывает высокую точность на обучающих данных, но плохо справляется с новыми, ранее не виданными примерами. 5

Кроме того, обучение чрезвычайно сложных моделей может быть дорогостоящим и неэффективным с точки зрения вычислений: ресурсы используются для изучения шума и несущественных деталей, а не ключевых шаблонов в данных. 1