動画生成AIの使い方が様変わり。今までの記事はもう役に立たない。Runway Gen-3 AlphaによるMV制作 - Blog 2024/07/16 引き続き、Runway Gen-3 Alphaを使用したMVプロトタイプ制作を進めています。Gen-3にImage to Videoが実装されたら、本格的に映画制作を再開しますが、今のところMV制作のみ。 Gen-3 Alphaのプロンプト開発今やっている作業の流れは、初期プロンプトの生成から始まります。 GPT-4とClaudeを使ってMidjourney V6で生成したイメージを分析させ、プロンプトにしますが、そのままでは使えないので、強度の高いワードを調べて複数のプロンプトを組み合わせます。 GPT-4とClaudeを使って初期プロンプトを生成 これはカスタムプロンプトの素材になるGen-3 Alphaで強度の高いワードの調査をします

Luma AIが6月12日に公開した動画生成AIサービス「Dream Machine」が、月に無料で30回まで試せることもあって、大きな話題となっています（「ついに来た! 無料で試せる動画生成AI『Luma Dream Machine』」参照）。ただ、技術情報は出ておらず、どういう関係や経緯で出しているかは一切不明です。 ※記事の配信先によっては動画や図版がうまく表示されないことがあります。その場合はASCII.jp掲載の記事をご覧ください 手軽に高品質な動画が生成できる「Luma AI」のサービス Luma AIはこの連載でも何回か紹介してきたように、大量の写真から3Dモデルを生成するサービスからスタートし、昨年12月には3Dモデル生成サービス「Genie」で参入しているAIスタートアップ企業です（連載第41回「3Dスキャンの進化がすごい」参照）。生成AIの3D化技術で先行していることか

このサービスの有償プランに申し込んで使って、少しプロンプトのコツが掴めたので、お伝えしたいと思います。 ただ、自分が使った目的は映画などの映像制作ではなく、あくまでも静止画、それも人物を動かすことなのでご注意を。より具体的には、11年前に他界した妻の動く姿を見ることです。 ■フィルムカメラの写真を動かすまずやってみたのは、実際に撮った写真をDream Machineで動かすことです。 使った写真は、1978年から1987年にかけてフィルムカメラで撮影したもの。子供が生まれてビデオカメラ（ビデオ8mm）を買ったのが1987年なので、それまでは動いている映像がほとんどなかったのです。 例外として、学園祭の劇で主役を演じたものと、特捜最前線でエキストラをやったときのものは残っていますが。 多くの人にとって、1980年代以前の、動きのある映像は残っていないと思います（8mmフィルム愛好家がいる家庭

Gen-2: Generate novel videos with text, images or video clips A multimodal AI system that can generate novel videos with text, images or video clips. No lights. No camera. All action. Realistically and consistently synthesize new videos. Either by applying the composition and style of an image or text prompt to the structure of a source video (Video to Video). Or, using nothing but words (Text to