リカレントニューラルネットワークの理不尽な効力（翻訳） - Qiita

Andrej Karpathy 氏のブログ記事 http://karpathy.github.io/2015/05/21/rnn-effectiveness/ の翻訳です。 翻訳の誤りなどあればご指摘お待ちしております。 リカレントニューラルネットワークには何か魔法のようなところがあります。画像説明（Image Captioning）のために初めてリカレントニューラルネットワークの訓練をした時のことを、私はまだ覚えています。わずか数十分間の訓練で、最初のベイビーモデル（適当に選んだハイパーパラメータを持つ）は、意味を成すのかどうかという画像について、すばらしい説明を生み出し始めました。モデルの単純さの割に結果の品質は、時に、それまでの予想を打ち砕きますが、これがその時でした。当時この結果がとても衝撃的だったのは、一般的に RNN は訓練することが難しいと思われていたためでした（より多くの経

[sh19910711]

"任意のプログラムを（適切な重みで）シミュレートできるという意味で、RNN はチューリング完全であることが知られています / 普遍近似定理と同様、これについてはこれ以上深入りするべきではありません" 2016

[nedokun]

RNN　ディープラーニング　どこか有名な先生がＲＮＮを紹介したときの翻訳