かつて、3D画像の生成は非常に困難な作業で、複雑なワイヤーフレーム、ソフトウェア、ハードウェアを必要としていました。しかし現在、状況は大きく変わりました。Stability AIは最近、単一の画像から高速で3D画像を生成できるStable Fast3Dという新しい生成AI技術を発表しました。
最も素晴らしいのは、Stability AIによると、新しいモデルは0.5秒で3D画像を生成できるということです。この処理速度は以前と比べて飛躍的に向上しており、以前のモデルでは同様の効果を得るのに数分かかっていたものが、Stable Fast3Dではその1200倍もの速度で同じタスクを完了できるのです。
製品入口:https://top.aibase.com/tool/stable-fast-3d
3月には、Stability AIはStable Video3D(SV3D)を発表しており、3Dアセットの生成には10分かかっていましたが、今回のStable Fast3Dは大幅な進歩を遂げました。
Stability AIは、この新しいモデルがデザイン、建築、小売、仮想現実、ゲーム開発など、多くの業界で実用的な価値を持つと予測しています。ユーザーは、Stable Assistantチャットボット、Stability AI API、コミュニティライセンスのHugging Faceを通じて、このモデルを使用できます。
Stable Fast3Dの原理
Stable Fast3Dはゼロから構築されたわけではなく、以前のTripoSRモデルから進化したものです。3月、Stability AIは3DモデリングサプライヤーであるTrip AIと協力し、高速3Dアセット生成技術の開発に取り組んでいました。
研究論文では、研究者たちはStable Fast3Dの革新的な手法について詳しく説明しています。Stable Fast3Dの中核は、強化されたトランスフォーマーネットワークを使用して、入力画像から高解像度の3平面、つまり3Dボリューム表現を生成することです。このネットワークは、計算の複雑さを大幅に増やすことなく、より大きな解像度を効率的に処理することを目的としており、より精細なディテールのキャプチャとエイリアシングアーティファクトの削減を実現します。
研究者たちは、革新的なマテリアルとライティングの推定方法についても詳しく説明しています。マテリアル推定ネットワークは、新しい確率的方法を使用してグローバルな金属とラフネスの値を予測し、画像の品質と一貫性を向上させる結果をもたらします。
さらに特筆すべきは、Stable Fast3Dモデルは、メッシュ、テクスチャ、マテリアルプロパティなど、3D画像に必要な複数の要素を、コンパクトですぐに使用できる3Dアセットにまとめることができる点です。
Stability AIは、Stable Diffusionテキストから画像生成技術で最も有名かもしれませんが、少なくとも2023年11月からは3Dの研究を開始しており、今年の3月のStable Video3Dでは3D画像の生成品質と視聴体験が向上しました。それだけでなく、先週同社はStable Video4Dを発表し、短い3Dビデオ生成に時間次元を追加しました。
技術レポート:https://static1.squarespace.com/static/6213c340453c3f502425776e/t/66ab9814a3551056403508b4/1722521625313/SF3D-10.pdf
要点:
- 😃Stability AIがStable Fast3D技術を発表、0.5秒で3D画像を生成、従来をはるかに凌駕する速度。
- 👍新モデルは多くの業界で実用的な価値を持ち、様々な方法で使用可能。
- 👏Stability AIは2Dから4Dへと継続的に技術革新を遂げ、画像生成技術の発展をリードし続けている。