要点まとめ

双方向RNNとは過去の情報だけではなく、未来の情報も用いて精度を向上させるモデルのこと。実用例としては文章の推敲や機械翻訳などがある。機械翻訳等は未来の情報も用いることで、前後の文脈から意味を出力することが可能になる。

過去からの情報 $s_{t}$ は、一つ過去の情報 $s_{t-1}$ と現在の情報 $x_{t}$ とから計算される。未来からの情報 $s'_{t}$ は、一つ未来の情報 $s'_{t+1}$ と現在の情報 $x_{t}$ とから計算される。