背景

コンピュータグラフィックス業界は大きな転換期を迎えています。ここ数年、生成AIモデルは画像やビデオを数秒で生成できるようになりましたが、同時に「細かい制御」と「物理的正確さ」の欠落という根本的な限界が露呈しました。建築・設計・VFX業界では、単なる見た目の美しさだけでなく、物理演算に基づいた正確な3Dシーン、そして制作者による明確なクリエイティブコントロールが必須です。Nvidiaが今回打ち出す「ハイブリッドAI」ビジョンは、こうした課題を古典的なレンダリングと物理シミュレーション技術をAIエージェントで統合することで解決しようとするものです。

内容

NvidiaはSiggraph 2024で、AI生成だけでは足りない理由を明言し、代わりに「AIエージェントが確立された3Dグラフィックスと物理ツールを編成し、古典的手法をAI駆動のワークフロー内で構成要素として活用する」ハイブリッドアプローチを提示しました。発表された21本の研究論文は、すべて3Dと物理に基盤を置き、制作者による方向付けが可能という共通点があります。特に注目すべきは「ArtiFixer」で、これはノイズが多く不完全な実世界の3Dスキャン(ガウシアンスプラッティング等で取得)を、クリーンで完全な3Dシーンに変換するAIモデルです。レイトレーシングを一切使わずに、シーンジオメトリから直接フォトリアルなグローバルイルミネーションを予測する新手法も搭載しています。同時にNvidiaは「Model Context Protocol(MCP)」を推進しており、これはAIエージェントをAdobe、Blender、Unreal Engine、SideFX Houdini、Foundryツール、Canvaなどの既存DCC(Digital Content Creation)ツールと連携させ、カスタムプラグインの煩雑な開発を不要にします。

技術的ポイント

MCPの重要性は、既存の3D制作パイプラインへの無理のない統合にあります。従来、AIエージェントを複数ツールに統合する際には、各ツール向けにカスタムプラグインを実装する必要がありました。MCPは標準化されたプロトコルとして機能し、AIシステムがアプリケーション間でデータを移動し、定型的タスクを自動化し、3D経験の少ないユーザーに対して自然言語インターフェースとして振る舞うことができます。Unreal EngineではMCPを使うことで、シーン、アセット、プロジェクト状態を推論するアシスタントが実現します。Blenderではlightweight MCPサーバーがBlenderのPython API、ドキュメント、複雑なセットアップへの自然言語アクセスを提供します。

もう一つの技術的転換は、Omniverseの「脱集約型化」です。元々Omniverseはモノリシックなプラットフォームでしたが、今やマイクロサービス・クラウドベースモデルへシフト。さらにNvidiaは新たなOmniverseライブラリを展開し、これはRTXレンダリングから物理・センサシミュレーションまでコア機能を「エージェント親和的」な形で公開します。こうしたライブラリはOmniverse専用製品ではなく、既存アプリケーションにも埋め込み可能で、その結果、CAD設計データから物理AI対応の汎用USD資産への変換が容易になります。

業界への影響

建築・設計・エンジニアリング業界全体に、大きな制作ワークフローの転換をもたらします。従来は、設計者がRevitやAutoCAD等で設計→ビジュアライゼーション専門家がUnrealやBlenderで3D化→シミュレーション担当が物理環境をセットアップという分業体制でした。MCPとArtiFixer、Omniverseライブラリの組み合わせは、設計初期段階から「自動的に物理的に正確な3Dシーン」を生成し、さらに日射解析や熱流体動力学(CFD)といった複雑なシミュレーション準備を自動化できるようになることを意味します。

PTC Onshapeの事例は象徴的です。機械設計データから、ロボティクスやその他物理AIユースケース用にシミュレーション対応のUSD資産を直接生成できるようになりました。これは建築でも同じロジックが適用できます。例えば、構造部材の配置→衝突検出・落下シミュレーション、MEP配管の自動ルーティング→流体シミュレーション検証といった自動化が視野に入ります。都市計画やGIS応用でも、ArtFixerが大規模な現実空間キャプチャから自動的にデジタルツイン用シーンを生成し、信号機やビル群の配置検証をAIエージェントに任せられるようになります。