AIミュージックビデオ生成ワークフロー

MP3をインヴィディオ・エージェント・ツーでミュージックビデオに変換する ワークフロー： ステップ1 - MP3の曲、キャラクターごとの参照画像1枚、任意で歌詞をアップロードしました。 ステップ2 - エージェント・ツーが曲を分析します。BPM、バース/コーラスのタイムスタンプ、ボーカルの入りを単語レベルの歌詞タイミングまでマッピングし、音声をマスタータイムラインにします。 ステップ3 - 次に世界を構築します。ロケーションシート（ワールドバイブル：環境、小道具、照明）を生成し、キャラクターを参照画像に固定して、顔がずれないようにします。 ステップ4 - エージェント・ツーが曲を分割します。トラックを正確な15秒のセグメント（0–15、15–30、30–45…）にトリミングし、それぞれを自身のビデオブロックのタイミングソースにします。 ステップ5 - 連鎖シーケンスを生成します。各ブロックについて、前のクリップの最終フレームを連続性として取得し、キャラクター参照と音声スライスを組み合わせ、ディレクターレベルのプロンプトを書き、生成します。リップシンクは実際のボーカルに自動的にマッチします。 ステップ6 - ミュージックビデオ生成には、リズムに合わせたキャラクターの音楽リップシンクに優れたHailuo minimax H3モデルを自動的に選択します。 ステップ6 - 何か問題が発生した場合（例：間違ったシート、照明のずれ）、エージェント・ツーはプロンプトを書き直し、ずれた部分をロックし、そのブロックのみを再生成します。 ステップ7 - すべてのクリップが生成されたら、エディター「スレート」上で全クリップを組み立て、内蔵オーディオをミュートし、元のMP3を1つの連続したベッドとして配置し、フェードを追加してレンダリングします。