音響処理の基礎 with CNN 〜機械学習で「太鼓の達人」の自動作譜をしてみた〜 - Qiita

この記事の対象者 音響処理の基礎を概観したい ディープラーニングを用いた音響処理に興味がある 太鼓の達人が好きだ つまり初心者向けってことです。プロの方のツッコミもお待ちしています。 結果 見て（聴いて？）もらうと早いと思います。これは今回作ったモデルで生成した譜面を太鼓さん次郎2で演奏したものです。 米津玄師さんの「ピースサイン」： 「音楽から全自動で太鼓の達人の譜面を作るAI」を作りました またいつか解説記事書きます pic.twitter.com/IW6qrd9knS — うっでぃ (@woodyOutOfABase) July 16, 2018 UndertaleよりToby Foxさんの"Your Best Nightmare" @no_TL pic.twitter.com/UW5ntQg0KC — うっでぃ (@woodyOutOfABase) July 20, 2018 ki

[kei_1010]

音ゲーの自動作譜はめちゃ需要ありそう。

[tuki0918]

“Dance Dance Convolution”

[naari_3]

めっちゃリズム難な譜面出来てて面白い、いい感じにクオンタイズして16分までに絞れれば万々歳

[fashi]

今まで機械的にやるのは(簡単そうに思えるが実際には)難しいと思われていた作業が深層学習で可能になっていくのを見るのは楽しいな

[ST_ha1cyon]

はえー すっげ

[gcyn]

『これを「画像」とみなしてCNNで処理してやることでOnset Detectionをしてもらおうっていうのが今回の試みです』

[ikumisawakuchi]

これはすごいな

[makou]

トランジェント拾うってやつかなあ。

[hiromichinomata]

"学習時にminibatch=128でもメモリ使用量は数100MBでした。学習もGPU使用で2時間かからず終わる" 思ったより軽い

[zgmf-x20a]

CNN？だったのだけど、なるほど…

[n_231]

“実際、人間の耳にある蝸牛では長さの微妙に違う繊毛が固有振動数の違いにより様々な周波数に特異に反応することで音を聞いているらしいです”

[kuxumarin]

大学で習ったこととかが応用されてるのでなんとなく雰囲気をつかむことできる...!

[emergent]

“Dance Dance Convolution”

[mohno]

そろそろ自動採譜が出てこないかな(定期)