- 生成AI：Seedance 2.5
- リファレンスビデオ : Unreal Engine 5.8
- キャラクター : MetaHuman (デジタルヒューマン)
- 編集・カラーグレーディング : DaVinci Resolve Studio
目次
Unreal Engineと生成AIを融合するエキスパート・Luxmondo
著しい速さで発展を続ける生成AI。手間のかかる実撮影機材の準備・使用やCGアセットの制作をすることなく、プロンプト（テキスト）で高品質な映像を制作することができる生成AIを、Luxmondoでは実写、3D CGに続く、第3の映像制作手法と捉えています。
しかし生成AIは、乱数を使ったディフュージョンモデルをベースとする性質上、「生成してみないと何ができるかわからない」という不確実性が付きまといます。そのため、そのままでは意図を持って映像を制作することは難しく、たまたま生成された映像で妥協をするか、あるいは意図通りの映像に近づくまでひたすらトライ＆エラーを繰り返すことになります。
本動画は、Unreal Engineを用いて生成AIを正確にコントロールし、「生成AIで思い通りの映像を制作する」ことが可能であることを示すデモ動画です。Unreal Engineで制作したリファレンス映像を用いることで、AIの生成映像が正確に再現されていることがサイドバイサイドで確認できます。Unreal EngineのエキスパートであるLuxmondoでは、キャラクターの動きやエフェクトのタイミング、カメラワークなど、プロンプトや静止画ではAIに伝えることができない映像要素をCG映像で与えることで、生成AIで思い通りの映像を制作する本手法に、特に力を入れて取り組んでいます。