本日は、昨日レクチャーを受けたHey Genを使いこなせるようになるために、丸一日勉強しました。
ただ人がしゃべっている動画ではなく、伝えるための解説動画
アバターのモーションや音声を生成するだけであれば、そこまで難しくはないですが、違和感のないものを生成しようとするのはとても難しいです。
特に難しいのは、シーンが切り替わるタイミングです。シーンごとにモーションを生成しているため、前のシーンでは腕を上げて終わっていたのに、次のシーンになると腕を下げた状態で始まってしまうということが起きてしまいます。
シーンをスムーズに切り替えるために、最初と最後の手の位置を固定させる指示を出す、そもそものシーンを減らすなど工夫をすることで違和感のない動画を生成することが出来ました。
また、解説動画なので「ただ、人がしゃべっているだけ」の動画では成り立ちません。
解説動画として成り立たせるには、途中で解説の画像を入れる、画面キャプチャを設置するなど細かなポイントがたくさんあります。その中でも、1番苦労したのがテロップです。
もちろん、AIで生成することも可能ですが、AIの生成するテロップは読みづらく、テロップとしてはとても機能していません。そのため、自分で音声を聞きながら声に合わせてテロップを設置するという作業を繰り返しました。
ですが、もっと色んな方法やAIを勉強すれば、読みやすい完璧なテロップを生成してくれるAIが存在すると思うので、Hey Genの勉強だけでなく、テロップの勉強もしたいと思いました。
