並び順

ブックマーク数

期間指定

  • から
  • まで

1 - 40 件 / 43件

新着順 人気順

音楽生成の検索結果1 - 40 件 / 43件

  • 最近話題になった 音楽生成AI まとめ|npaka

    最近話題になった「音楽生成AI」をまとめました。 1. AudioGenテキストからオーディオを生成するAIモデルです。「風が吹く中で口笛をする音」や 「大勢の歓声の中で話す男性の声」といったテキストから、それらしい音を生成してくれます。 現在のところ、モデルやAPIは提供されていません。 We present “AudioGen: Textually Guided Audio Generation”! AudioGen is an autoregressive transformer LM that synthesizes general audio conditioned on text (Text-to-Audio). 📖 Paper: https://t.co/XKctRaShN1 🎵 Samples: https://t.co/e7vWmOUfva 💻 Code & mod

      最近話題になった 音楽生成AI まとめ|npaka
    • 音楽生成AI「Suno AI」が話題、文章から楽曲を瞬時に作成 プロの音楽家も「これはヤバい」と驚愕

      音楽生成AI「Suno AI」がX(旧Twitter)上で話題になっている。歌詞や曲調を文章で指示するだけで音楽を自動生成するサービスで、PCやスマートフォンのWebブラウザ上から利用できる。生成した音楽の出来栄えには、プロの音楽家からも驚きの声が上がっている。 Suno AIは、米国を拠点とする音楽家とAIの専門家たちからなる米Sunoが運営するサービス。開発者の中には、米MetaやTikTokを運営する中国ByteDanceなどに所属していた人たちもいるという。利用にはGoogleやMicrosoft、Discordのアカウントが必要で、12月14日時点ではβ版を提供中。1日5回まで無料で音楽を生成できる他、有料プランもある。 早速使ってみた そのお手並みは? 記者も試しに利用してみた。メニューにある「Create」を押し、「記事を書くのがはかどる音楽を作成してください」と指示を入れた

        音楽生成AI「Suno AI」が話題、文章から楽曲を瞬時に作成 プロの音楽家も「これはヤバい」と驚愕
      • AIで動画&音楽生成はここまで来た!|shi3z

        AI動画生成が結構いいところまできた。 Runway-MLのGen2も素晴らしいのだが、オープンソースのZeroscope-v2-xlがすごい 音楽もmusicgenで大体作れる これまで音楽生成には否定的だったが、ここまで作れるなら、DJ機材用のループ素材として十分使える気がする。というか30秒も作れるのでループでは勿体無いというか。「久石譲っぽく」とか「ジョン・ウィリアムズ風」とかでそれっぽいものが出てくる。

          AIで動画&音楽生成はここまで来た!|shi3z
        • 意外と良くなってきてしまった動画生成と音楽生成。第二回AIアートグランプリはどうなる!?

          意外と良くなってきてしまった動画生成と音楽生成。第二回AIアートグランプリはどうなる!? 2023.08.13 Updated by Ryo Shimizu on August 13, 2023, 11:41 am JST ほんの一ヶ月前まで、動画生成は全然だめだった。 Gen2は高価だが狙ったものを出しにくい。何より動いてくれない。 ところがAnimateDiffという技術が公開された。これはとても激しく、それっぽく動く。 コツは必要だが、以前よりずっと綺麗に動いているのは間違いない。 筆者の運営するサイトMemeplexやreplicateで使うことができる 音楽生成も、「やはりAIに音楽みたいな人間の機微を読み取るようなものは無理か」と考えていた。 「専門家」である僕でさえ、つい一ヶ月ほど前はそうだったのだ。 新しいオーディオ生成モデルである「JEN-1」と「AudioLDM2」はそ

            意外と良くなってきてしまった動画生成と音楽生成。第二回AIアートグランプリはどうなる!?
          • Metaが音楽生成AIモデルをオープンソースで公開、テキスト&音声入力で誰でも高品質な音楽を作成できるように

            Metaの研究チームが音楽を生成するAIモデル「MusicGen」を公開しました。オープンソースでの公開となっているため誰でも無料でモデルを利用できるほか、作例やデモが公開されており、その品質を実際に確かめることが可能になっています。 [2306.05284] Simple and Controllable Music Generation https://doi.org/10.48550/arXiv.2306.05284 MusicGen: Simple and Controllable Music Generation https://ai.honu.io/papers/musicgen/ MusicGenはChatGPTなどの大規模言語モデルと同様にTransformerを利用したモデルです。言語モデルは文の次の言葉を予測しますが、MusicGenは音楽の次のセクションを予測する仕組

              Metaが音楽生成AIモデルをオープンソースで公開、テキスト&音声入力で誰でも高品質な音楽を作成できるように
            • Microsoft Copilot、音楽生成AI「Suno AI」のプラグインで作詞作曲が可能に

              関連記事 音楽生成AI「Suno AI」が話題、文章から楽曲を瞬時に作成 プロの音楽家も「これはヤバい」と驚愕 音楽生成AI「Suno AI」がX上で話題になっている。歌詞や曲調を文章で指示するだけで音楽を自動生成するサービス。生成した音楽の出来栄えには、プロの音楽家からも驚きの声が上がっている。 Microsoft Copilot、GPT-4 Turbo、最新DALL・E 3対応などでグレードアップ Microsoftは、生成AIサービス「Microsoft Copilot」で間もなく提供する予定の複数の新機能を発表した。「GPT-4 Turbo」採用で2023年4月までの情報を反映する他、動画要約も可能になる。 Microsoft、「Bing Chat」を「Copilot」にリブランド GPTも作れる「Copilot Studio」も発表 Microsoftは2月に立ち上げた“AI採用

                Microsoft Copilot、音楽生成AI「Suno AI」のプラグインで作詞作曲が可能に
              • 文章で指示するだけで音楽を作れる音楽生成AI「Stable Audio 2.0」が登場したので使ってみた

                画像生成AI「Stable Diffusion」の開発元として知られるStability AIが音楽生成AI 「Stable Audio 2.0」を公開しました。すでに日本からも利用可能になっていたので、実際にStable Audio 2.0を使って音楽を生成する手順をまとめてみました。 Stable Audio 2.0 のご紹介 — Stability AI Japan https://ja.stability.ai/blog/stable-audio-20 ◆Stable Audio 2.0で作れる音楽の例 Stable Audio 2.0はテキストで指示するだけで音楽を生成できるAIです。以下のムービーを再生すると、「Cinematic Synthwave(映画風のシンセウェイヴ)」というプロンプトで生成した音楽の例を聴けます。 Stable Audio 2.0 - YouTube

                  文章で指示するだけで音楽を作れる音楽生成AI「Stable Audio 2.0」が登場したので使ってみた
                • 音楽生成AIの進化速度に舌をまく、無料でも試せるStable Audio 2.0を使う (1/2)

                  著作権侵害を未然に防ぐ機能も持つ 昨年紹介した音楽生成AI「Stable Audio」が「Stable Audio 2.0」となり大きく進化した。 生成AIがブレイクするきっかけを作った画像生成AI「Stable Diffusion」を開発したStability AIによる音楽生成AIだ。2023年8月にバージョン 1.0をリリースした際にはこの連載でも紹介した。グーグルの「MusicLM」のようにプロンプトを与えることで、音楽を作り出す音楽生成AIで、Stable Diffusionのようにステップを経て徐々に生成が完了する“拡散モデル”を使用しているのが特徴だ。Stable Audio 2.0では、モデルが新しくなったのが最大の改良点だ。ある入力に対応して生成される出力に関して、生成のルールやパターンを決めるのがモデルである。つまり、知識やアルゴリズムを持つ中核部分が改良されたことにな

                    音楽生成AIの進化速度に舌をまく、無料でも試せるStable Audio 2.0を使う (1/2)
                  • Google DeepMindが音楽生成に特化したAIモデル「Lyria」を発表、口ずさむだけでメロディーが生成される

                    Googleの人工知能関連企業「Google DeepMind」が2023年11月16日、音楽生成に特化したAIモデル「Lyria」と、Lyriaを用いて音楽制作が可能な2つのツールセット「Dream Track」「Music AI Tools」を発表しました。 Transforming the future of music creation - Google DeepMind https://deepmind.google/discover/blog/transforming-the-future-of-music-creation/ An early look our AI Music experiment - YouTube Blog https://blog.youtube/inside-youtube/ai-and-music-experiment/ DeepMind and

                      Google DeepMindが音楽生成に特化したAIモデル「Lyria」を発表、口ずさむだけでメロディーが生成される
                    • 「Microsoft Copilot」が音楽生成AI「Suno」と提携、テキストでの命令で自由に作曲/プラグインとして提供

                        「Microsoft Copilot」が音楽生成AI「Suno」と提携、テキストでの命令で自由に作曲/プラグインとして提供
                      • 「Suno」と一味違う音楽生成AI登場。音楽から新しい音楽をパート毎に生成「StemGen」、着せ替えAI「Outfit Anyone」など重要論文5本を解説(生成AIウィークリー) | テクノエッジ TechnoEdge

                        2014年から先端テクノロジーの研究を論文単位で記事にして紹介しているWebメディアのSeamless(シームレス)を運営し、執筆しています。 1週間分の生成AI関連論文の中から重要なものをピックアップし、解説をする連載です。第25回目は、生成AI最新論文の概要5つをお届けします。作曲歌唱AI「Suno」の登場で脚光を浴びている音楽生成についての新たな技術が登場。こちらはより音楽制作現場に寄り添った技術で、入力した音楽を参考にして新たな楽曲を生成する「StemGen」をはじめとして最新論文を紹介します。 生成AI論文ピックアップ音楽から新しい音楽を生成していくモデル「StemGen」、無音からも可能。ByteDanceらが開発 画像内のキャラクターや人物を着せ替えできる拡散モデル「Outfit Anyone」、アリババグループなどが開発 テキストや顔写真からダンス動画を生成するモデル「Dr

                          「Suno」と一味違う音楽生成AI登場。音楽から新しい音楽をパート毎に生成「StemGen」、着せ替えAI「Outfit Anyone」など重要論文5本を解説(生成AIウィークリー) | テクノエッジ TechnoEdge
                        • Stability AI、音楽生成AI「Stable Audio」を2.0に更新 最長3分の作曲が可能に

                          画像生成AI「Stable Diffusion」で知られる英Stability AIは4月3日(現地時間)、テキストで作曲できる生成AI「Stable Audio 2.0」を発表した。Stable AudioのWebサイトにログインすることで無料で利用できる他、間もなくStable Audio APIでも利用できるようになる見込みだ。 Stable Audioは、同社が昨年9月に発表した音楽生成AI。リリース当初の無料版では44.1kHzで最長45秒のトラックしか生成できなかったが、バージョンアップで最長3分のフルトラックの音楽を生成できるようになった。 テキストからだけでなく、音声からも作曲できる。オーディオサンプルをアップロードし、自然言語のプロンプトでサンプルをアレンジできる。 無料では、3分の音楽を20曲まで作れる。作った音楽を入力オーディオとして利用することもできる。 旧版同様に

                            Stability AI、音楽生成AI「Stable Audio」を2.0に更新 最長3分の作曲が可能に
                          • 音楽生成AI のリリース年表|npaka

                            AI 🤝 Music Suno can now sing! Our new model generates music with vocals, and you can try it now on Diśčòrd. See below for some early examples and an invite link to our open beta: pic.twitter.com/CjjfYM2YRZ — Suno (@suno_ai_) July 21, 2023

                              音楽生成AI のリリース年表|npaka
                            • グーグル、プロも驚く音楽生成AI「Music AI Sandbox」を開発(アスキー) - Yahoo!ニュース

                              グーグルは5月14日(米国時間)に開催した開発者向けイベント“Google I/O”で、音楽生成AI「Music AI Sandbox」を発表した。本連載でも昨年、グーグルが音楽生成AIの「MusicLM」を発表したことに触れた。また、Metaも音楽生成AIとして「Audiobox」を発表。AI大手のStability AIも「Stable Audio」をバージョン2.0に進化させている。 では、Music AI Sandboxの位置付けとはどういうものだろうか。 AIは音楽クリエイターの仲間なのか まず、Music AI Sandboxは、グーグルの母体アルファベットでAI開発を担当するGoogle DeepMindが手がけた音楽生成AIである。具体的にどういうものかは、Google DeepMindが公開した動画を見るとわかりやすい。 ここではプロデューサーでありミュージシャンでもある

                                グーグル、プロも驚く音楽生成AI「Music AI Sandbox」を開発(アスキー) - Yahoo!ニュース
                              • Stable Diffusion開発元によるAI音楽生成サービス「Stable Audio」の可能性(CloseBox) | テクノエッジ TechnoEdge

                                画像生成AIのStable Diffusionを開発したことで知られる英国企業Stability AIが9月13日、音楽生成AIサービス「Stable Audio」を開始しました。 作りたいサウンドをテキストで記述すると、それに従って高品質な音が生成されるというサービス。いわばサウンド版Stable Diffusionです。 このニュースをStability AIのXへのポストで知ってすぐに(20分は経っていない)アカウントを作って試してみたのですが、4つ目のプロンプトを生成しようとしたところであまりの人気でサイトがダウン。それ以降はまともにアクセスができない状況です。 ▲たまに画面も出現するが、生成はできない じっくり使ってからレポートしようと考えていたのですが、まだアクセスできないので、ちょっとだけ試してみたことから、その可能性を探っていきたいと思います。 無料含む3つのプランStab

                                  Stable Diffusion開発元によるAI音楽生成サービス「Stable Audio」の可能性(CloseBox) | テクノエッジ TechnoEdge
                                • Microsoft Copilotに音楽生成AI「Suno」がプラグインとして実装

                                    Microsoft Copilotに音楽生成AI「Suno」がプラグインとして実装
                                  • やまかず on Twitter: "テキストから音楽生成きた! Stable Diffusionと同様、テキストを入力するだけでAIが音楽を生成してくれるColabノートブックが公開 (中身はmuburt(@mubertapp)のAPI) やってみたけどこのプロ… https://t.co/FsRwGDg34J"

                                    テキストから音楽生成きた! Stable Diffusionと同様、テキストを入力するだけでAIが音楽を生成してくれるColabノートブックが公開 (中身はmuburt(@mubertapp)のAPI) やってみたけどこのプロ… https://t.co/FsRwGDg34J

                                      やまかず on Twitter: "テキストから音楽生成きた! Stable Diffusionと同様、テキストを入力するだけでAIが音楽を生成してくれるColabノートブックが公開 (中身はmuburt(@mubertapp)のAPI) やってみたけどこのプロ… https://t.co/FsRwGDg34J"
                                    • 無料で使える音楽生成AI「Stable Audio Open」をStable Diffusion開発元が公開、テキストから最長47秒のサウンドトラックを生成可能

                                      画像生成AI「Stable Diffusion」の開発元として知られるStability AIが、オープンソースの音楽生成AI「Stable Audio Open」を公開しました。Stable Audio Openは、文章で指示するだけで最長47秒の音楽を生成できます。 Stable Audio Open — Stability AI https://stability.ai/news/introducing-stable-audio-open We’re excited to announce Stable Audio Open, an open source model optimised for generating short audio samples, sound effects and production elements using text prompts. This

                                        無料で使える音楽生成AI「Stable Audio Open」をStable Diffusion開発元が公開、テキストから最長47秒のサウンドトラックを生成可能
                                      • 音楽生成AIサービス「Udio」の使い方 Suno AIの対抗馬になりそうな気配がする

                                        自動作曲AIサービス「Udio」が、4月10日にリリースされました。 現在はβ版として公開されており、1カ月で1200曲まで生成が可能です。 実際に試してみたところ、テキストを入力することで簡単に本格的な楽曲を生成することが可能でした。使い方などを解説していきます! テキストやタグで手軽に自動作曲できる「Udio」「Udio」は、Web上で利用可能な自動作曲AIサービス。 GoogleやDiscord、Xのアカウントを連携してサインインすることで利用を始められます。 曲を生成するには、画面の上部に表示されるテキストボックスに、生成したい曲のジャンルや雰囲気を入力。「Suggested tags」として表示されるタグをクリックすることでも、曲の雰囲気を指定できます。 「Create」ボタン横のサイコロアイコンをクリックすることで、ランダムなプロンプト(命令文)で生成することもできます。 「U

                                          音楽生成AIサービス「Udio」の使い方 Suno AIの対抗馬になりそうな気配がする
                                        • 元「嵐」担当プロデューサーが生んだ音楽生成AI、「4秒以下で作曲可能」

                                          カンデオホテルズの館内BGMの作曲者は、実はAI(人工知能)――。開発したのは日本のスタートアップ・Amadeus Code(アマデウスコード、東京・港)だ。日本語と音楽の構造が似ていることから、自然言語処理技術を応用。世界をリードしている。 カンデオ・ホスピタリティ・マネジメントの穂積輝明会長兼社長は「チェックイン、深夜、朝食といったシーンごとに違う音楽を流したかったが、作曲家にそこまで多くの曲をつくってもらうことは難しい」と話す。既にある楽曲を流す手もあるが、版権の問題がある。そこで出合ったのが、音楽生成AIのスタートアップ・Amadeus Code(アマデウスコード、東京・港)。2019年から利用を始め、制作したオリジナルBGMは100曲を超えているという。 穂積氏はアマデウスの井上純CEO(最高経営責任者)に、「私が好きな米国のピアニストであるキース・ジャレットとジョージ・ウィンス

                                            元「嵐」担当プロデューサーが生んだ音楽生成AI、「4秒以下で作曲可能」
                                          • 音楽生成AI「Suno」で、いよいよ一部の音楽家は廃業か? - paiza times

                                            <この記事の著者> 大谷大 - Tech Team Journal ウェブデザイナー/映像クリエイター/作曲家/ギタリスト/ブロガー/YouTuber BGMや効果音を無料でダウンロードできるサービス「タダオト」を運営し、自らが作曲した楽曲を掲載。2023年に生成AIにハマり、さまざまな仕事でフル活用しながらそのノウハウをYouTubeやブログで情報発信している。 生成AIはさまざまな分野で進化していますが、いま熱いのは音楽生成AIの「Suno」です。 https://www.suno.ai/ app.suno.ai Sunoが登場するまでは「さすがに人が作ったクオリティには全然及ばない」くらいのクオリティでした。Sunoを使えば、楽曲制作を20年以上やってきた僕が聴いても、人が作ったかAIが作ったか判断できないレベルの楽曲も生み出すことができます。 さすがにこのレベルとなると、一部の音楽

                                              音楽生成AI「Suno」で、いよいよ一部の音楽家は廃業か? - paiza times
                                            • 「Microsoft Copilot」モバイルアプリに初の更新、「Pro」ならば「Copilot GPTs」なども使える/音楽生成AI「Suno」をはじめとするプラグインをON/OFFすることも

                                                「Microsoft Copilot」モバイルアプリに初の更新、「Pro」ならば「Copilot GPTs」なども使える/音楽生成AI「Suno」をはじめとするプラグインをON/OFFすることも
                                              • グーグル、プロも驚く音楽生成AI「Music AI Sandbox」を開発 (1/2)

                                                グーグルは5月14日(米国時間)に開催した開発者向けイベント“Google I/O”で、音楽生成AI「Music AI Sandbox」を発表した。本連載でも昨年、グーグルが音楽生成AIの「MusicLM」を発表したことに触れた。また、Metaも音楽生成AIとして「Audiobox」を発表。AI大手のStability AIも「Stable Audio」をバージョン2.0に進化させている。 では、Music AI Sandboxの位置付けとはどういうものだろうか。 AIは音楽クリエイターの仲間なのか まず、Music AI Sandboxは、グーグルの母体アルファベットでAI開発を担当するGoogle DeepMindが手がけた音楽生成AIである。具体的にどういうものかは、Google DeepMindが公開した動画を見るとわかりやすい。 ここではプロデューサーでありミュージシャンでもある

                                                  グーグル、プロも驚く音楽生成AI「Music AI Sandbox」を開発 (1/2)
                                                • 複数画像レイヤー同時生成できるAI「LayerDiffuse」、MML対応音楽生成AI「ChatMusician」、高性能なリップシンクAI「EMO」など重要論文5本を解説(生成AIウィークリー) | テクノエッジ TechnoEdge

                                                  2014年から先端テクノロジーの研究を論文単位で記事にして紹介しているWebメディアのSeamless(シームレス)を運営し、執筆しています。 1週間分の生成AI関連論文の中から重要なものをピックアップし、解説をする連載です。第36回目は、生成AI最新論文の概要5つを紹介します。 生成AI論文ピックアップ 透明画像含む複数のレイヤーをテキスト指示で同時に生成するAI「LayerDiffuse」 1枚の顔写真と音声から、喋って歌う頭部動画を生成するモデル「EMO」、アリババが開発 大規模言語モデルの計算コストを大幅に軽減する1ビットLLM「BitNet 1.58Bits」をマイクロソフトが開発 音楽をテキストのように扱い、音楽の理解と生成を行うAI「ChatMusician」 複数のLoRAを適応する画像合成法「Multi-LoRA」 透明画像含む複数のレイヤーをテキスト指示で同時に生成する

                                                    複数画像レイヤー同時生成できるAI「LayerDiffuse」、MML対応音楽生成AI「ChatMusician」、高性能なリップシンクAI「EMO」など重要論文5本を解説(生成AIウィークリー) | テクノエッジ TechnoEdge
                                                  • テキストに加えてメロディやテンポなど時間的変化がある要素もコントロール可能な音楽生成モデル「Music ControlNet」が開発される

                                                    近年はテキストから音楽を生成するAIツールが進歩を遂げ、さまざまなスタイルで高品質の音楽を生成できるようになっていますが、従来のテキストによる生成ではビートの位置や音楽のダイナミクス(強弱)など、時間と共に変化する属性を制御するのが難しかったとのこと。そこでカーネギーメロン大学とAdobe Researchの研究チームが、複数の時間的変化コントロールを可能にする音楽生成モデル「Music ControlNet」を発表しました。 [2311.07069] Music ControlNet: Multiple Time-varying Controls for Music Generation https://arxiv.org/abs/2311.07069 Music ControlNet https://musiccontrolnet.github.io/web/ 以前からテキストを基に音

                                                      テキストに加えてメロディやテンポなど時間的変化がある要素もコントロール可能な音楽生成モデル「Music ControlNet」が開発される
                                                    • YouTube、プロンプトを入れてアーティストを選びAI音楽生成

                                                        YouTube、プロンプトを入れてアーティストを選びAI音楽生成
                                                      • アドビ、音楽生成AI「Project Music GenAI Control」を発表--細かい調整も可能

                                                        Adobe Researchチームは米国時間2月28日、生成AIを使用した音楽生成・編集ツール「Project Music GenAI Control」を発表した。このツールは、まだ初期段階にあり、テキストプロンプトから音楽を生成できる機能を提供する。AIは共同作曲者の役割を果たすという。 テキストから音楽を生成する他の音楽生成AIと同様、Project Music GenAI Controlでも、「力強いロック」「ハッピーなダンス」「激しいヒップホップ」といった単純なテキストプロンプトを入力して、数秒以内に、新しい楽曲を出力させることができる。 Explore the future of sonic creativity with Project Music GenAI Control! Emerging experimental tech from the Adobe Research

                                                          アドビ、音楽生成AI「Project Music GenAI Control」を発表--細かい調整も可能
                                                        • 盗作を回避する音楽生成AI「MusicLDM」、AIたちが協力しゲーム開発する「MetaGPT」、など重要論文5本を解説(生成AIウィークリー) | テクノエッジ TechnoEdge

                                                          2014年から先端テクノロジーの研究を論文単位で記事にして紹介しているWebメディアのSeamless(シームレス)を運営し、執筆しています。 1週間分の生成AI関連論文の中から重要なものをピックアップし、解説をする連載です。第6回目は、盗作するリスクを回避する音楽生成AI、複数のAIが協力してソフトウェア開発するフレームワークなど、5つの論文をまとめました。 生成AI論文ピックアップAI同士がソフトウェアを開発する大規模言語モデルを用いたフレームワーク「MetaGPT」 音楽にキャプションを付けるAIデータセット「LP-MusicCaps」 音楽から画像、音楽から動画の生成デモも登場 16,000以上のAPIを操作する大規模言語モデルのためのフレームワーク「ToolLLM」 WeChatやTencent含む研究者らが開発 目の前の視覚体験と言語を関連付け、より複雑なタスクを解決できるAI

                                                            盗作を回避する音楽生成AI「MusicLDM」、AIたちが協力しゲーム開発する「MetaGPT」、など重要論文5本を解説(生成AIウィークリー) | テクノエッジ TechnoEdge
                                                          • AUTOMATIC1111版WebUIで自動音楽生成|IT navi|note

                                                            昨年(2022年)12月、画像生成AIのStable Diffusionを利用して、入力したプロンプトに沿った楽曲を自動生成するRiffusionが公開されました。 今回は、Riffusionの仕組みとこれをAUTOMATIC1111版WebUIで利用する方法について説明します。 Riffusionのデモサイトの画面1.Riffusionの仕組み Riffusionは、Seth Forsgren氏とHayk Martiros氏が作成した自動音楽生成AIモデルで、昨年12月にデモサイトが公開され、コード、ウェブアプリ、モデルチェックポイントも公開されています。 以下のデモサイトでは、入力したプロンプトに沿った楽曲をseed値を切り替えながらループ再生してくれます。 Riffusionは、Stable Diffusion(SD)に調整を加えて、プロンプトから関連する楽曲のスペクトログラム(音の

                                                              AUTOMATIC1111版WebUIで自動音楽生成|IT navi|note
                                                            • TOWA TEIは音楽生成AIとどう向き合う? ガシャポン的要素が増えた先にある“選択眼”の重要性

                                                              Daft Punkが2021年に解散したが、その要因のひとつにはAIがあるという。ロボットをモチーフに現実とフィクションの境目を往来するようなプロジェクトを進めていくうちに、未来がやってきた。人間とマシーンの関係を脅かすような昨今のAIの発展に、彼らは恐怖心を抱くようになった。(※1) 事実、音楽シーンに限らず、昨今は様々な領域でAIが猛威を振るっている。AIアートはイラストレーター界隈で広く話題を呼び、ChatGPT以外にも文章を生成するAIサービスは複数存在する。筆者の知り合いのラジオマンいわく、「ラジオのジングル程度ならばAIが作れるかも」とのことだ。 この数年の間に加速度的に成長するAIだが、アーティストはいかにしてその「知能」と対峙しているのか。本稿では、1994年の『FUTURE LISTENING!』以降様々なサウンドを探求してきたTOWA TEI(テイ・トウワ)が、これから

                                                                TOWA TEIは音楽生成AIとどう向き合う? ガシャポン的要素が増えた先にある“選択眼”の重要性
                                                              • 音楽生成AI「Stable Audio」を試すが、道はまだまだ長そうだ (1/2)

                                                                現在のAIブームのきっかけは、画像生成AIがブレークしたことだ。 あまりにもリアルで人間が描いたものを凌駕するような絵画をAIが描いたことで話題を呼んだ。今では様々な画像生成AIが登場しているが、その中心は「Stable Diffusion」という画像生成AIだ。複数の研究者によって開発され、Stability AIという会社が提供したものだが、そのStability AIが今度は「Stable Audio」という音楽生成AIを発表した。つまり話題の画像生成AIの大手が手がけた音楽生成AIということになる。 1万9500時間以上の音楽データから学習した音楽生成AI Stable Audioは、グーグルの「MusicLM」やメタの「MusicGen」のように、プロンプト(指示文)に基づいて音楽を作り出す本格的な生成AIだ。Diffusionは拡散モデルを意味し、浮き上がるようなステップを経て

                                                                  音楽生成AI「Stable Audio」を試すが、道はまだまだ長そうだ (1/2)
                                                                • YouTubeが独自の「音楽生成AI」開発に本腰 初音ミクのクリプトンとコラボを発表 (1/3)

                                                                  グーグルの日本法人が記者会見を開催。YouTube独自の音楽生成AIをつくるための「YouTube Music AIインキュベーター」が日本で始まることが発表しました。左側がグーグル & YouTubeの音楽部門グローバル責任者 リオ・コーエン氏、右側はクリプトン・フューチャー・メディアの代表取締役 伊藤博之氏 アーティストに音楽家、プロデューサーなど音楽制作に関わるクリエーターが、YouTubeによる音楽生成AIへの取り組みに情報を提供するパートナープログラム「YouTube Music AIインキュベーター」が日本で始動します。 3月21日にはYouTubeの音楽部門グローバル責任者であるリオ・コーエン氏が来日し、音楽創作にAIを活用するためのガイドラインとして2023年夏に「AI Music Principles(音楽AIの基本的な考え方)」を立ち上げた背景を記者会見の場で説明しまし

                                                                    YouTubeが独自の「音楽生成AI」開発に本腰 初音ミクのクリプトンとコラボを発表 (1/3)
                                                                  • テキストから音楽生成するAI「Stable Audio」 45秒まで無料

                                                                      テキストから音楽生成するAI「Stable Audio」 45秒まで無料
                                                                    • Nao Tokui / 徳井直生 『創るためのAI』📘 on Twitter: "昨日のリリース以来大きな話題になっている @OpenAI のAI音楽生成システム Jukebox。https://t.co/wuOzIZVxgm 公開されているコードで自分も試してみました。 パワフルなGPUで3時間ほどかかりま… https://t.co/2y3XCTxH71"

                                                                      昨日のリリース以来大きな話題になっている @OpenAI のAI音楽生成システム Jukebox。https://t.co/wuOzIZVxgm 公開されているコードで自分も試してみました。 パワフルなGPUで3時間ほどかかりま… https://t.co/2y3XCTxH71

                                                                        Nao Tokui / 徳井直生 『創るためのAI』📘 on Twitter: "昨日のリリース以来大きな話題になっている @OpenAI のAI音楽生成システム Jukebox。https://t.co/wuOzIZVxgm 公開されているコードで自分も試してみました。 パワフルなGPUで3時間ほどかかりま… https://t.co/2y3XCTxH71"
                                                                      • 【Suno AI】テキストだけで曲、歌詞、歌声を作れる禁断の音楽生成AIの使い方〜実践まで | WEEL

                                                                        【Suno AI】テキストだけで曲、歌詞、歌声を作れる禁断の音楽生成AIの使い方〜実践まで 2024 4/18 皆さんは「Suno」という音楽生成AIをご存じですか? Suno AIは、これまで出来なかったユーザーが入力した歌詞でヴォーカルまで生成してくれる革新的な音楽生成AIです。さらに音楽の知識や作曲知識がなくともプロンプト次第で、あなたも音楽プロデューサーになれてしまうとんでもないAIなのです。 今回は、Sunoの概要や実際に使ってみた感想、Stability AI社が2023年9月に公開したStable Audioとの比較をお届けします。 Suno AIの登場によって誰でも簡単に音楽制作をできるような時代がやってきたと言えるほど、革新的なサービスであるSuno。 その優れている点や将来性についても触れますので、是非最後までご覧ください! なお弊社では、生成AIツール開発についての無

                                                                        • Metaによる音楽生成AIを試す「Meta MusicGen」 (1/2)

                                                                          音楽の世界でも広がる生成AI 生成AIが注目される流れは、画像や文章だけではなく音楽にも波及している。例えば、5月にSpotifyがAIで生成された数万曲を削除したというニュースがあった。これは著作権のほかにも、ビジネスモデル的な課題があるということを示している。 実際探してみると、AIが音楽を作成するというサービスは意外に多い。しかし先日紹介したグーグルの「MusicLM」のように長いプロンプト(指示文)を使用して曲の生成を指示できる音楽生成AIは探してみてもあまり見つからない。MusicLMはベータ版の運用を拡大しているが日本は対象外だ。 そうした中で、先日メタ(旧フェイスブック)が、MusicLMに似た音楽の生成AIプラットフォーム「Meta MusicGen」を発表した。メタも、(アップルを除く)ほかのテックジャイアント同様、AIに焦点を合わせてきている。その一環でもあるのだろう。

                                                                            Metaによる音楽生成AIを試す「Meta MusicGen」 (1/2)
                                                                          • テイラー・スウィフトを中国語で歌わせる!? 音声変換もできる新音楽生成ツールキット「Amphion」【研究紹介】

                                                                            音楽生成AIの分野では、歌詞や曲調を文章で指示すると音楽を生成する「Suno」や、ループ音源に応じて別パートを複数生成し統合する「StemGen」などの多くの研究が報告され注目されている。しかし、これらのリポジトリは分散しており、品質もばらつき、初心者には使いにくい状況がある。 今回、新たに登場した「Amphion」は、音楽だけでなく、音声やオーディオ全般の生成にも対応している統一されたフレームワークを提供する。このツールキットは、生成モデルの内部メカニズムを理解しやすくするための視覚化機能を備えており、音楽や音声の生成分野に新たに参入する研究者やエンジニアに向けた入門ツールの提供を目的としている。 ▲Amphionは、テキストや歌詞などから音楽や音声を生成する Amphionには、テキストから音声に変換する「TTS」(Text to Speech)、歌声変換「SVC」(Singing V

                                                                              テイラー・スウィフトを中国語で歌わせる!? 音声変換もできる新音楽生成ツールキット「Amphion」【研究紹介】
                                                                            • 「AIかどうか判別できないクオリティ」 音楽生成AI「Udio」が話題に

                                                                              グーグルDeepMind出身の研究者とエンジニアが設立したAIベンチャーUdioは4月10日、音楽生成AI「Udio」を公開した。4月11日現在は無料のベータ版となっており、1ユーザーあたり毎月最大1200曲まで作曲可能だ。 Introducing Udio, an app for music creation and sharing that allows you to generate amazing music in your favorite styles with intuitive and powerful text-prompting. 1/11 pic.twitter.com/al5uYAsU5k — udio (@udiomusic) April 10, 2024 Udioはテキストプロンプトなどを使い、作曲経験のないユーザーでも曲作りを楽しめるサービス。1つのクリップの

                                                                                「AIかどうか判別できないクオリティ」 音楽生成AI「Udio」が話題に
                                                                              • Googleが音楽生成AIツール「Music AI Sandbox」発表、テキストでジャンルやテンポなどを指示するだけで音楽を作成可能

                                                                                Googleは現地時間2024年5月14日に開催された開発者向けイベント「Google I/O」で、簡単なプロンプトでループ音源を作成したり、メロディのジャンルを変更したり、複雑なテキストからメロディを提案したりできるAIツール「Music AI Sandbox」を発表しました。複数のミュージシャンがMusic AI Sandboxに取り組む様子や、Music AI Sandboxで作成したデモ音源も公開されています。 These tools allow users to create new instrumental sections from scratch, transfer styles between tracks, and much more. You can listen to brand new demo recordings created as part of thes

                                                                                  Googleが音楽生成AIツール「Music AI Sandbox」発表、テキストでジャンルやテンポなどを指示するだけで音楽を作成可能
                                                                                • 音楽生成AI「Suno」「Udio」「Sonauto」を制作者視点でレビュー。音楽制作のカタチは変わるのか

                                                                                  音楽生成AI「Suno」「Udio」「Sonauto」を制作者視点でレビュー。音楽制作のカタチは変わるのか:ものになるモノ、ならないモノ(96) ChatGPTをはじめとする生成AIが注目を集める中、生成AI技術を使って音楽を自動で生み出すWebサービスが続々と登場している。音楽生成AIの実力はどのようなものなのか。音楽制作事業者としての視点で、生成AIが生み出す音楽を考察する。

                                                                                    音楽生成AI「Suno」「Udio」「Sonauto」を制作者視点でレビュー。音楽制作のカタチは変わるのか