最近、AI技術分野で画期的な進歩がありました。Captions社が発表した新しいAIモデル「Mirage」は、従来のリップシンクと動画生成技術に革命を起こしました。Mirageは、脚本や音声クリップを分析し、架空のキャラクターが登場するリアルタイムのユーザー生成コンテンツ(UGC)スタイルの動画を生成します。その表情やボディランゲージのリアルさは従来技術をはるかに凌駕し、AI動画制作の新たな時代を切り開いています。
Mirageの最大の強みは、「ゼロからの生成」機能です。事前に録画された映像や従来のリップシンクツールに頼ることなく、入力された音声やテキストに基づいて、オリジナルのキャラクター、背景、ナレーション、さらには完全な脚本まで生成できます。
Captionsチームによると、Mirageは膨大な量のリアルな人間の演技データでトレーニングされた高度な生成AI技術を使用しており、驚くほどリアルな表情の微妙な変化や自然な動きを実現しています。従来のリップシンクや吹き替えの方法と比較して、Mirageのキャラクターは、唇の動きが正確であるだけでなく、目線や頷きなど、文脈に完璧に合った微妙なニュアンスも表現します。
業界の専門家は、Mirageによって、特に広告やコンテンツ制作者にとって動画制作プロセスが大幅に簡素化されると指摘しています。脚本から完成した動画を生成するのに数分しかかからず、俳優、スタジオ、複雑なポストプロダクション編集が不要になり、コストと時間を大幅に削減できます。現在、Mirageは29以上の言語で動画生成に対応しており、グローバル市場のプロモーションを促進します。
Z
ユーザーテストでは、Mirageが生成した「架空のキャラクター」はUGC動画の中で自然に見え、視聴者がAI生成であることに気付かないことも多いことが分かっています。Captions社は、今後モデルをさらに最適化し、カスタマイズオプションを追加していくことを約束しています。このAIリップシンク技術の飛躍は、創造性を高めるだけでなく、バーチャルキャラクターのリアリティを新たなレベルに引き上げ、その将来的な影響に注目が集まっています。
お試しはこちら:https://www.captions.ai/mirage