Что такое архитектура Gru?

GRU (Gated Recurrent Unit) — это один из видов рекуррентных нейронных сетей (RNN), аналогичный LSTM (Long Short-Term Memory). habr.com Разработанная в 2014 году, эта архитектура была предназначена для упрощения и ускорения обучения по сравнению с LSTM, сохраняя при этом большую часть её эффективности. habr.com

GRU поэлементно обрабатывает последовательные данные, корректируя своё скрытое состояние на основе текущего ввода и предыдущего скрытого состояния. www.mql5.com На каждом временном шаге GRU вычисляет вектор-кандидат, объединяя информацию из входных данных и предыдущего скрытого состояния. www.mql5.com Затем этот вектор обновляет скрытое состояние для последующего временного шага. www.mql5.com

В GRU есть два типа ворот: habr.com

• Ворота обновления. habr.com Контролируют, насколько новая информация будет влиять на состояние ячейки. habr.com Они определяют, какую часть прошлого состояния следует сохранить и какую часть текущего ввода следует учесть. habr.com

• Ворота сброса. habr.com Помогают модели решить, какая информация из прошлого необходима для текущего выхода. habr.com Если ворота сброса близки к нулю, то это означает, что прошлая информация не будет учитываться, что позволяет модели отбросить нерелевантные данные. habr.com