Разница между рекуррентными и стандартными Feed-Forward нейросетями заключается в следующем:
В рекуррентных нейросетях нейроны обмениваются информацией между собой: например, вдобавок к новому кусочку входящих данных нейрон также получает некоторую информацию о предыдущем состоянии сети. 2 Таким образом в сети реализуется «память», что позволяет анализировать любые последовательности данных, в которых важно, в каком порядке идут значения. 2
В стандартных Feed-Forward нейросетях информация передаётся только вперёд по сети, от слоя к слою. 2 В таких сетях нет никакой памяти, кроме той, которая была получена на этапе обучения. 1
Таким образом, рекуррентные нейросети учитывают порядок во времени и обладают памятью, в то время как стандартные Feed-Forward сети не имеют такой возможности. 1