メッシュブロブを超えて: NOVA3D と構造化 3D 生成の紹介

AI 主導の 3D 生成の領域は、長らく「テキストからメッシュ」ツールが支配してきました。これらのツールは視覚的に印象的な結果を生み出す一方で、構造が不透明です。開発者やアーティストにとって、これらの出力はしばしば「メッシュブロブ」―単一で融合したジオメトリであり、手動で大幅にクリーンアップしなければ編集、アニメーション、プロフェッショナルな制作パイプラインへの統合がほぼ不可能です。

NOVA3D はこのパラダイムに根本的な変化をもたらします。静的なジオメトリファイルを生成するのではなく、NOVA3D はネイティブ Blender の構築コードを書き出すことで、構造化されたマルチパート 3D アセットを生成します。このアプローチにより、3D アセットは静的ファイルから編集可能なプログラムへと変換され、部品の識別、階層、マテリアルが生成時点から保持されます。

不透明メッシュの問題点

従来の AI 3D 生成では、出力は通常単一のメッシュです。たとえばロボット犬を生成し、左前脚を少し長くしたい場合、脚を選択してスケールを変更できません。メッシュを手作業で彫刻するか、プロンプト全体を再実行してより良い結果を期待するしかありません。この構造認識の欠如により、個々のコンポーネントに対する正確な制御が必要なゲーム開発、ロボティクスシミュレーション、E コマースのコンフィギュレータなどで、AI 生成資産の利用が困難になります。

NOVA3D の仕組み: 中間層としてのコード

NOVA3D は AI ネイティブな 3D 生成ランタイムとして機能します。ピクセルや頂点を予測するだけでなく、ユーザー入力を実行可能な Blender Python プログラムに変換します。このプログラムがアセットを部品ごとに構築します。

3 つの入力モダリティ

  1. Text Prompts: 自然言語の説明(例: "green toaster oven, glass door, 3 knobs left side")が Python コードに変換され、ボディ、ドア、ノブが個別の名前付きエンティティとして構築されます。
  2. Reference Images: ユーザーは写真(PNG/JPG)をアップロードでき、システムは比例、シルエット、部品構造を読み取り、対応するマルチパート GLB を生成します。
  3. Sketches: ラフな落書きは空間的意図として解釈され、シルエットを描くだけで NOVA3D ランタイムがその形状に基づく構造化アセットを生成します。

構造化出力の価値

ブロブではなくシーングラフを生成することで、NOVA3D は技術パイプラインにとって重要な複数の利点を提供します。

  • Named Parts and Hierarchy: アセットは明確な階層(例: body $\rightarrow$ head $\rightarrow$ front_left_leg)とともに提供されます。これはゲームエンジンでのリギングやアニメーションに不可欠です。
  • Part-Local Edits: 出力が構築手順であるため、開発者はソースコードを修正して特定の部品だけを変更でき、オブジェクト全体を再生成する必要がありません。
  • Pipeline Readiness: 出力は構造化された GLB シーンで、マテリアルと変換情報が保持されているため、最新の 3D エンジンやシミュレーションツールと即座に互換性があります。

3D 生成アプローチの比較

NOVA3D がどこに位置するかを理解するために、既存の 3D AI カテゴリと比較すると分かりやすいです。

カテゴリ 典型的な出力 NOVA3D のアプローチ
テキストから 3D メッシュ 高速なビジュアルジオメトリ コンセプトアートには有用だが、しばしば不透明で編集が困難。
AI CAD システム パラメトリックな機械部品 エンジニアリングには強力だが、広範なクリエイティブ資産には範囲が狭すぎることが多い。
NOVA3D 編集可能な構築手順 + GLB 部品の識別とパイプライン制御が最重要となるマルチパート 3D に最適化されている。

実用的な応用例

この構造化アプローチは、いくつかの高付加価値ユースケースへの扉を開きます。

  • ゲーム開発: アニメーション用にすでに分割されたアセットを迅速にプロトタイプ化。
  • E コマース: 生成されたオブジェクトのマテリアルや部品をユーザーが交換できる製品コンフィギュレータの作成。
  • ロボティクスとデジタルツイン: 個々のコンポーネントが物理エンジンと相互作用する必要があるシミュレーション用モックアップの生成。
  • 3D プリント: 印刷と組み立てのために簡単に分離できるマルチパートプロトタイプの作成。

プロジェクトが進化するにつれ、開発者は関節機構(アーティキュレーション)を計画中であると示しています。これにより、インタラクティブなワールドビルディングや複雑な機械アニメーションへの有用性がさらに高まります。

Sources