近年、生成 AI は画像、動画、テキストなどの 2D コンテンツに広く適用されていますが、3D 生成は単なる次元の増加以上のものを伴うため、手の届く範囲にあるように見えても難しい課題のままです。また、表現方法、学習目標、エンジニアリングの使いやすさを総合的にテストします。

3D 生成モデルが直面する中心的な課題は、単に「オブジェクトのように見える結果を生成できるかどうか」ということではありません。むしろ、それは「高次元空間において、幾何学的一貫性、意味的安定性、構造的有用性を同時に維持する方法」に関するものです。モデルは、ある視点からはもっともらしく見えるものの、視点を変えるとすぐに崩れてしまうことがあります。また、視覚的には非常にリアルであっても、編集・再利用可能な標準的な3Dアセットとしてエクスポートできない場合もあります。これらの問題は、3D生成技術を現実世界の制作シナリオに適用することに直接的な制限を与えます。

近年、業界では様々な技術的アプローチを絶えず試行錯誤し、試行錯誤を繰り返しています。例えば、NeRF ベースの方法は、視覚の連続性において優れたパフォーマンスを発揮します。しかし、これは当然モデリングよりもレンダリングに偏っており、メッシュ、トポロジ、物理的特性に対する下流の要求を満たすことが困難です。ボクセルまたは明示的なメッシュに基づく生成方法には明確な構造があります。しかし、解像度、詳細表現、一般化能力の点で長い間限界がありました。シングルビューまたはマルチビューの 3D 生成方法により、効率性が飛躍的に向上しました。しかし、一般的に、複数の視点にわたる一貫性が不十分であったり、幾何学的構造が不安定であったりするなどの問題に直面しています。

これらのアプローチを繰り返し進化させることで、単一のモデルやトレーニング手法の不十分さが明らかになるのではなく、より深い事実が明らかになります。つまり、3D 生成の問題は、本質的には表現、生成パス、およびトレーニング目標の間の体系的な不一致です。モデルの最適化の目的が、主に「構造的に健全」であることではなく「合理的に見える」ことに向けられている場合、生成された結果がデモンストレーションとアプリケーションの間のギャップを埋めることは難しくなります。

これを考慮して、Microsoft Research Asia は最近、金属、プラスチック、ガラス、木材、水の波紋など豊富な材質の 3D オブジェクトを生成できるだけでなく、オブジェクトの内部ジオメトリを完全に構築できる TRELLIS.2 をリリースしました。TRELLIS.2は、従来のフィールドベースの3D生成手法とは異なり、革新的なフィールドフリー表現であるスパースボクセル構造「O-Voxel」を提案します。この表現手法は、任意の位相構造と豊富なマテリアル特性を持つ高解像度の3Dアセットを生成でき、前処理段階における開発者の負担を大幅に軽減します。

同時に、TRELLIS.2 は 16 倍の空間圧縮も実現し、40 億のパラメータを持つ大規模な生成モデルでトレーニングと推論を効率的に完了できるようになります。実際のパフォーマンスに関しては、512³ 解像度でフルテクスチャ アセットを生成するのにかかる時間はわずか 3 秒程度です。

「TRELLIS.2 3D生成デモ」は、HyperAIウェブサイト（hyper.ai）の「チュートリアル」セクションで公開されています。効率的な3Dモデル生成をぜひご体験ください！

オンラインで実行:https://go.hyper.ai/1nofM

効果のデモンストレーション：

デモの実行

1. hyper.aiのホームページにアクセス後、「TRELLIS.2 3Dデモ生成」を選択するか、「チュートリアル」ページに移動して選択します。ページがリダイレクトされたら、「このチュートリアルをオンラインで実行」をクリックします。

2. ページがジャンプしたら、右上隅の「クローン」をクリックしてチュートリアルを独自のコンテナにクローンします。

注：ページの右上で言語を切り替えることができます。現在、中国語と英語が利用可能です。このチュートリアルでは英語で手順を説明します。

3. 「NVIDIA RTX 5090」と「PyTorch」のイメージを選択し、必要に応じて「Pay As You Go」または「Daily Plan/Weekly Plan/Monthly Plan」を選択し、「ジョブ実行を続行」をクリックします。

HyperAI は新規ユーザーに登録特典を提供しています。わずか $1 で、RTX 5090 のコンピューティング パワーを 20 時間利用できます (元の価格は $7)。リソースは永続的に有効です。

4. リソースが割り当てられるのを待ちます。ステータスが「実行中」に変わったら、「ワークスペースを開く」をクリックしてJupyterワークスペースに入ります。

効果実証

ページがリダイレクトされたら、左側の README ページをクリックし、上部の [実行] をクリックします。

プロセスが完了したら、右側の API アドレスをクリックしてデモ ページに移動します。

以上が今回HyperAIがおすすめするチュートリアルです。ぜひ皆さんも体験してみてください！

チュートリアルのリンク:https://go.hyper.ai/1nofM