AIで歌わせる口パク動画の作り方！無料で初心者向けに解説

現在はAIで作詞作曲をする事もできますし、その曲を歌わせる事も可能です。
また普通に話している声にAI画像を口パクさせて本当に話しているかのような感じにする事もできます。

口パクの事をリップシンクと言います。
アニメや実写のキャラの口の動きと音声を合わせる事です。

今回はそんなリップシンクのやり方を説明します。
紹介するサイトは画像生成、音声生成、動画生成の3つが可能ですが、他にもっと適したソフトやWEBサイトが多いので、ここではリップシンクに特化したやり方をご説明します。

リップシンクで早口な曲で口パクに挑戦

まずはAIで作らせた早口の四文字熟語の歌にリップシンクで静止画を口パクさせて動画にしてみました。
作った動画はこんな感じ。

早口の四文字熟語に対して割と口パクが合ってると思います。
無料で出来る割には上出来です。

ちなみに鬼滅の刃の胡蝶しのぶにもしゃべらせてみました。
このアニメやイラストのような画像でもリップシンクは可能。

この動画は元々は静止だった女性の画像をリップシンクできるソフトに取り込んで生成しました。
静止画自体は無料で画像を生成しまくれるImagefxを利用しています。

こんな感じの画像を作って好みを１つだけ選択しています。

Hedraはヘドラではなくヒドラと読むみたいですね。
このWEBサイトでリップシンクの動画が生成可能です。

Hedra

トップページで「Sign UP」をクリックして登録。
Googleアカウントがあれば、それでログインできるようになります。

トップページは「Video」「Image」「Audio」と３つ項目があります。
ここで「Video」をクリックします。

画面右下の「Audio script」で音源を選択。
「Start frame」で動画にしたい画像を選択します。

「Audio script」に関しては３個の項目があります。

・打ったテキスト文字を読み上げて音声にする。
・マイクに向かってしゃべった音声を利用。
・自分が持っている音源をアップロードして使う。

今回の場合は持っていた音源を使っています。
AIに作らせた曲を利用。

「Start frame」もAudioと同様に3項目。

・Hedra側でイメージ画像を生成。
・自前のカメラで画像を撮影。
・自分が持っている画像をアップロード。

今回はImagefxで作らせた画像をアップロードしています。
画像はImagefxで無料で作れるので、そちらで作った方が失敗した時も繰り返し生成可能。

音源に関しては無料プランの場合だと20秒までとなります。
それでも精度を試したり参考程度にするなら問題ないです。

例えば5分の音源をアップロードした場合は、自分の好みの部分の20秒を選択できます。

音源と静止画のアップロードが完了したら「上矢印マーク」をクリック。
1分程度で動画が出来上がります。

登録したばかりの時は300ポイントが付いてきます。
このポイントを使いきったら有料プランに入る事になります。

もしくは別のGoogleアカウントを利用すれば再び300ポイントが得れます。
多くのGoogleアカウントを持っている人も多いと思うので、どうしても無料で試したい人は、この方法でもいけます。

今回の口パク動画は20秒の動画を初期設定の720pで生成。
消費ポイントは110でした。
秒数や解像度で消費ポイントは変わります。

プランは一番安いベーシックで8ドルです。
ポイントが10000も貰えます。
単純計算で30分程のリップシンク動画が生成可能。

30分あれば1曲5分くらいのミュージックビデオが6本くらい生成できます。
youtubeやTiktokにアップするショート動画でしたら30本くらいは生成できるでしょう。

1ヶ月だけ有料プランに入ってみても十分に元は取れそうです。

ブログを資産にして稼ぐ方法もこのサイトではご説明。
ぜひ参考にしてみてね。
ブログで稼ぐ方法！初心者も出来る