キーワードの意味
RNNは、時系列に沿って入力を処理し、前の時点の情報を次の計算へ渡します。文章や音声のような順序データに使われましたが、長い依存関係や並列処理ではTransformerが広く使われるようになりました。
たとえば、こんな場面で
文章を先頭から読み、これまでに出てきた語の情報を次の語の予測に利用します。
このキーワードが登場する用語
このキーワードをより詳しく知りたいときは、元になった用語ページも読んでみてください。
Recurrent Neural Network
RNNとは？
過去の入力を内部状態として引き継ぎ、順序のあるデータを扱うニューラルネットワーク。