В 1969 году Марвин Минский и Сеймур Паперт опубликовали книгу «Перцептроны», в которой математически доказали, что у простой модели перцептрона есть фундаментальные ограничения. vc.ru web.archive.org Некоторые из них:
- Ограничения, связанные с линейной разделимостью данных. neurotoday.ru Если классы нельзя разделить прямой линией (или гиперплоскостью в многомерном пространстве), простой перцептрон не справится с задачей. neurotoday.ru Классический пример такой проблемы — функция «исключающее ИЛИ» (XOR), которую невозможно решить с помощью одного перцептрона. neurotoday.ru
- Неспособность к обобщению характеристик на новые стимулы, которые не совпадают точно с обучающими примерами. neurotoday.ru ru.wikipedia.org
- Трудности с анализом сложных ситуаций путём их разложения на простые компоненты. neurotoday.ru ru.wikipedia.org
- Неинвариантность относительно переноса, вращения или растяжения. sashasava.gitbooks.io Например, если нужно распознавать печатные буквы независимо от их положения на странице, простой перцептрон не сможет обеспечить такую инвариантность. neurotoday.ru
- Отсутствие преимуществ относительно других статистических методов в прогнозировании. sashasava.gitbooks.io
- Ограничения по скорости и памяти. sashasava.gitbooks.io
Эти ограничения стимулировали развитие многослойных нейронных сетей, которые способны решать нелинейно разделимые задачи и обрабатывать более сложные паттерны в данных. neurotoday.ru