タグ

dtmと機械学習に関するfield_combatのブックマーク (5)

  • 誰の声でも100人の声に変えられる声変換システム - Dwango Media Village(ドワンゴメディアヴィレッジ,dmv)

    著者の声を録画・録音して声を変換し元の映像と組み合わせてみた映像です。 このときの変換元の音声は撮影用のスマートフォンで録音しており、部屋の残響が含まれるなど声が少し不鮮明になる収録環境ですが、それでもしっかり声変換できていることがわかると思います。 概要 Dwango Media Villageの廣芝です。 誰の声でも狙った複数の人の声に変えることができる声変換システムを開発し、実際に声を変えることができるデモページを公開しました。 (2022年5月 SeirenVoiceシリーズの製品化に伴いデモページは終了しました。) この記事では、声変換技術を研究開発する際に取り組んだ課題について紹介します。 声の変換技術には、リアルタイム性と品質のトレードオフがあります。 既存の声変換システムはリアルタイム性を重視する傾向がある一方、品質を重視したものはあまり見かけません。 品質を優先した声変換

    誰の声でも100人の声に変えられる声変換システム - Dwango Media Village(ドワンゴメディアヴィレッジ,dmv)
    field_combat
    field_combat 2020/09/15
    VSTとかにならんかな
  • AI(人工知能)でDX7の音色を自動生成してくれるWebサービス、『This DX7 Cartridge Does Not Exist』

    『This DX7 Cartridge Does Not Exist』。カートリッジ部分をクリックするだけで32種類の音色が生成され、自動的にSysExファイルがダウンロードされる オーディオ・ソフトウェアやAI技術などのR&Dを手がけるNintorac Audioが開発した『This DX7 Cartridge Does Not Exist』は、1クリックでDX7の音色を32種類生成し、SysEx(.syx)形式で書き出す無償のWebサービス。ダウンロードされたSysExファイルは、DX7実機はもちろんのこと、Dexed(DX7をイミュレートしたフリーのソフト音源。MacWindows対応)やRockrelay Synth FM(Android用アプリ)といったソフトウェアでも利用することができます。 SysExファイルをDexedにロードしたようす 一体『This DX7 Cartr

    AI(人工知能)でDX7の音色を自動生成してくれるWebサービス、『This DX7 Cartridge Does Not Exist』
    field_combat
    field_combat 2020/06/04
    FMシンセ用プリセットジェネレータ
  • GitHub - deezer/spleeter: Deezer source separation library including pretrained models.

    Spleeter is Deezer source separation library with pretrained models written in Python and uses Tensorflow. It makes it easy to train source separation model (assuming you have a dataset of isolated sources), and provides already trained state of the art model for performing various flavour of separation : Vocals (singing voice) / accompaniment separation (2 stems) Vocals / drums / bass / other sep

    GitHub - deezer/spleeter: Deezer source separation library including pretrained models.
    field_combat
    field_combat 2019/11/07
    波形データから最大5トラックに分離できるらしい。この辺が発展したらエグいプラグインできそう。処理時間が問題になるのは間違いないけど
  • 機械学習でギターアンプをモデリングする - Qiita

    2018/2/6追記 Twitter等で質問を頂いたので、その回答などを末尾に補足として追記しました。 2018/2/9追記 ソースコードを公開しました。 https://github.com/coz-a/Audio-Effect-Replicator サマリ LSTMを使って、ギターアンプの音をシミュレートした。 はじめに 昨年の夏にCNNを使ったギター画像の分類にチャレンジしましたが、引き続きギター関連のネタです。今回は音で遊びます。 ご存知の方が多いかと思いますが、さまざまな音源で聞けるエレクトリック・ギターの音は、通常、ギターアンプから出た音です。ギターの出力を直接ミキサーやパソコンのオーディオIFに入力して録音しても、所謂「エレキギターの音」にはなりません。ギターの信号が、アンプの真空管やスピーカーを通して歪むことで、初めてエレキギターらしい音になるのです。 このアンプの歪みをシ

    機械学習でギターアンプをモデリングする - Qiita
    field_combat
    field_combat 2018/02/06
    ちょっとやってみたい
  • 遺伝的FM音源

    遺伝的アルゴリズムを使って人間がパラメータを調整する事なくFM音源から意図した音色の音を出す手法を解説します https://github.com/Fadis/genetic_fm 追記: 発表の動画を用意しました https://www.youtube.com/watch?v=oJy0g0mt8LA

    遺伝的FM音源
  • 1