Neural Turing Machines ソースコード Attentionインターフェース Adaptive Computation Time コード Neural Programmer ソースコード 総括的な今後の展望 参考 本記事はAttention and Augmented Recurrent Neural Networksの著者の許諾を得て翻訳しました。 Recurrent Neural Networksは、文章や音声、動画などの順序を持つデータをニューラルネットワークで扱うことができるディープラーニングの重要な要素のうちの1つです。 RNNを使うことで、一連の順序に現れるパターンを抽象的に理解して、注釈をつけたり、まったくのゼロから一連のデータを生成することすらできるのです! シンプルなRNNの設計では、長期の時系列データには苦戦しますが、「long short-term
![Attentionで拡張されたRecurrent Neural Networks](https://cdn-ak-scissors.b.st-hatena.com/image/square/4737bef892a04970ec13e78deacfbd9400f25b18/height=288;version=1;width=512/https%3A%2F%2Fdeepage.net%2Fimg%2Fdistill-rnn%2Fattention-rnn-top.jpg)