Recurrent Neural Network Regularization

テクノロジーカテゴリーの変更を依頼記事元:

arxiv.org

6 usersがブックマークコメント

記事へのコメント1件

注目コメント
新着コメント

aonotas RNN+Dropoutな話。過去の隠れ層からの伝搬をDropoutさせて、過学習を回避。 [1409.2329] Recurrent Neural Network Regularization

2015/01/27 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

Recurrent Neural Network Regularization

We present a simple regularization technique for Recurrent Neural Networks (RNNs) with Long Short... We present a simple regularization technique for Recurrent Neural Networks (RNNs) with Long Short-Term Memory (LSTM) units. Dropout, the most successful technique for regularizing neural networks, does not work well with RNNs and LSTMs. In this paper, we show how to correctly apply dropout to LSTMs, and show that it substantially reduces overfitting on a variety of tasks. These tasks include langu