最近、再構築と生成によって作成された3Dアセットは、手作業で作成されたアセットと同等の品質レベルに達し、代替分野における可能性を示しています。しかし、これらのアセットは3D業界アプリケーションで使用するために常にメッシュに変換する必要があるため、この可能性は十分に実現されていません。現在のメッシュ抽出方法は、人間アーティストが作成したメッシュ（AMs）よりも明らかに劣るメッシュを生成します。特に、現在のメッシュ抽出方法は高密度な面を依存し、幾何学的特徴を無視するため、非効率的な複雑な後処理と低い表現品質につながります。
これらの問題を解決するために、研究者らは、アーティストが作成した3Dメッシュを生成するための自己回帰モデルであるMeshAnythingを提案しました。MeshAnythingは、様々な既存モデルとシームレスに統合して、高品質なテキスト/画像/形状条件付きメッシュ生成を実現します。
製品入口：https://top.aibase.com/tool/meshanything
MeshAnythingによって生成されたメッシュは、ストレージ、レンダリング、シミュレーションの効率を大幅に向上させながら、従来の方法と同等の精度を実現します。
MeshAnythingのアーキテクチャは、VQ-VAEと形状条件付きデコーダーのみのトランスフォーマーで構成されています。まず、VQ-VAEを使用してメッシュの語彙を学習し、その語彙上で形状条件付きデコーダーのみのトランスフォーマーを訓練して、形状条件付きの自己回帰メッシュ生成を行います。多くの実験により、この方法で生成されたAMsの面数は従来の方法よりも数百倍少なく、ストレージ、レンダリング、シミュレーションの効率が大幅に向上し、従来の方法と同等の精度が達成されることが示されました。
様々な3Dアセット作成方法との統合により、MeshAnythingは高度に制御可能なアーティスト作成メッシュ生成を実現します。さらに、グランドトゥルースと比較して、この方法はメッシュトポロジと面数においても優れており、全く異なるトポロジで同様の形状のメッシュを生成できます。これは、この方法が単なる過学習ではなく、効率的なトポロジを使用してメッシュを構築する方法を理解していることを証明しています。
この製品の主な機能：
強力なメッシュ生成能力：MeshAnythingは自己回帰トランスフォーマー技術を利用して、画像や点群など様々な形式の入力を精細なメッシュモデルに変換でき、優れた生成能力とモデル性能を備えています。
自動化されたアート制作：MeshAnythingはユーザーに便利なツールを提供し、アート制作をより自動化・知能化します。ユーザーは技術的な詳細に煩わされることなく、創造的な表現に集中できます。
多様な適用シーン：MeshAnythingは、工業デザイン、アート制作、デジタルエンターテインメントなど、様々な分野で幅広く適用できます。様々なユーザーの創作とニーズを満たします。
なお、MeshAnythingはA6000 GPUでメッシュを生成するのに約7GBと30秒かかります。計算資源の制限により、MeshAnythingは面数が800未満のメッシュのみを学習し、面数が800を超えるメッシュを生成することはできません。入力メッシュの形状は十分に明確である必要があります。そうでなければ、800面だけで表現するのは非常に困難です。そのため、フィードフォワード型の画像から3Dへの方法は、形状の品質が不十分なため、しばしば悪い結果をもたらします。
試用入口：https://huggingface.co/spaces/Yiwen-ntu/MeshAnything
