30秒動画、50以上の参照素材に対応。 今すぐ試す
Seedance 2.0 音声ワークフロー

Seedance 2.0 の音声参照がうまくいかない?

この黒画面動画ワークフローを試してみてください。リップシンク、MV 制作、キャラクター動画で、Seedance 2.0 が参照音声をより忠実に追従するようになります。

問題

音声参照はリズムや間隔がずれることがあります。

解決策

音声セグメントを黒画面の動画として入力します。

問題

音声参照は似て聞こえても、ずれが生じる

Seedance 2.0 は音声参照にネイティブ対応していますが、音声をそのまま参照として使うと、生成された音声と元の音声に大きな差が出ることがあります。特に音楽ではこの差が顕著です。

入力音声と Seedance 出力の波形比較 1
出力は似て聞こえますが、リズムや間隔が異なる場合があります。
入力音声と Seedance 出力の波形比較 2
黒画面動画を参照にすると、出力が入力音声とはるかに一致するようになります。
コアワークフロー

音声を黒画面の動画に変換する

解決の鍵はシンプルです。各音声セグメントを黒画面の動画に変換し、その黒画面動画を Seedance 2.0 の入力として使います。

Seedance で生成する前に音声を黒画面動画へ変換するワークフロー図
01

素材を準備する

元の音声、はっきりしたキャラクターの参照画像、そしてリップシンクの内容を決める歌詞やセリフを用意します。

02

音声を分割する

Seedance 2.0 が対応する動画は最長 15 秒のため、長い楽曲やセリフは複数の短いセグメントに分割します。

03

各セグメントを黒画面動画に変換する

元の音声トラックを含む黒画面の MP4 を作成します。これで音声が、Seedance がより忠実に追従できる動画入力になります。

04

Seedance 2.0 で生成する

黒画面動画を入力参照として使い、出力の長さは入力動画の長さと厳密に一致させます。

素材

音声、歌詞、参照画像を準備する

Seedance 音声ガイドのキャラクター参照画像

元の音声

歌詞

Waking up to golden light. Coffee warm and feeling right.

Birds are singing just for me. Living life so wild and free.

This is my beautiful life. Every moment shining bright.

Dancing through the ups and downs. Wearing joy like a crown.

Beautiful life, oh yeah. Beautiful life

重要なステップ:各音声セグメントを Seedance 2.0 の動画参照として使う前に、黒画面の MP4 に変換してください。
変換

黒画面動画を作成する

FFmpeg で作成するか、CapCut などの動画編集ソフトで音声セグメントを黒いキャンバスに配置し、MP4 として書き出します。

FFmpeg コマンド例
ffmpeg -f lavfi -i color=c=black:s=1280x720:r=24 -i clip1_audio.mp3 -shortest -c:v libx264 -c:a aac clip1.mp4
結果

黒画面入力と Seedance 出力の比較

各セグメントでは黒画面動画を参照入力として使い、Seedance 2.0 に画像内の主人公を厳密なリップシンクで動かすよう指示しています。

01

woo~

黒画面の参照動画と Seedance 2.0 の出力

プロンプト

Use the audio from @Video 1 to drive the protagonist in @Image 1 to generate an MV with multiple shots, creating an overall light, lively, and sunny atmosphere. Lip-sync is strictly synchronized: "woo~ woo~"

黒画面動画

出力動画

02

Waking up to golden light. Coffee warm and feeling right.

黒画面の参照動画と Seedance 2.0 の出力

プロンプト

Use the audio from @Video 1 to drive the protagonist in @Image 1 to generate an MV with multiple shots, change the outfit and background, and create an overall light, lively, and sunny atmosphere. Lip-sync strictly: "Waking up to golden light. Coffee warm and feeling right."

黒画面動画

出力動画

03

Birds are singing just for me. Living life so wild and free.

黒画面の参照動画と Seedance 2.0 の出力

プロンプト

Use the audio from @Video 1 to drive the protagonist in @Image 1 to generate an MV with multiple shots, change the outfit and background, and create an overall light, lively, and sunny atmosphere. Lip-sync strictly: "Birds are singing just for me. Living life so wild and free."

黒画面動画

出力動画

04

This is my beautiful life

黒画面の参照動画と Seedance 2.0 の出力

プロンプト

Use the audio from @Video 1 to drive the protagonist in @Image 1 to generate an MV with multiple shots, change the outfit and background, and create an overall light, lively, and sunny atmosphere. Lip-sync strictly: "This is my beautiful life"

黒画面動画

出力動画

05

Every moment shining bright. Dancing through the ups and downs. Wearing joy like a crown.

黒画面の参照動画と Seedance 2.0 の出力

プロンプト

Use the audio from @Video 1 to drive the protagonist in @Image 1 to generate an MV with multiple shots, change the outfit and background, and create an overall light, lively, and sunny atmosphere. Lip-sync strictly: "Every moment shining bright, Dancing through the ups and downs. Wearing joy like a crown."

黒画面動画

出力動画

06

woo~ Beautiful life, oh yeah Beautiful life.

黒画面の参照動画と Seedance 2.0 の出力

プロンプト

Use the audio from @Video 1 to drive the protagonist in @Image 1 to generate an MV with multiple shots, change the outfit and background, and create an overall light, lively, and sunny atmosphere. Lip-sync strictly: "woo~ Beautiful life, oh yeah Beautiful life"

黒画面動画

出力動画

最終出力

リップシンク動画と元の音声を合成した完成品

出力音声は入力音声と 100% 同一ではありませんが、MV 制作におけるポストプロダクションの調整コストを減らせるだけの一貫性があります。

Seedance 2.0 で音声ワークフローを試そう。

音声セグメントを黒画面の動画参照に変換して、SeeGen AI でより一貫したリップシンク動画を生成しましょう。

Seedance 2 を無料で試す