コンテンツへスキップ
vrBlogs

World LabsのAtlas API、スプラットをメッシュワークフローに導入

World LabsのAtlas APIは、シーン生成、スプラット再構成、GLBメッシュ変換向けに6つのタスクエンドポイントを公開しており、入力項目と料金も文書化されている。

v

著者 vrBlogs

· 1分で読めます · 出典: VR.org News

World LabsのAtlas APIは、シーン生成、Gaussianスプラットの再構成、スプラットからGLBメッシュへの変換に対応する6つのタスクエンドポイントを提供する。APIリファレンスには、各エンドポイント、リクエストパス、アセットと操作を扱う補助サービスが記載されている。

VR.org Newsは、World Labsが11月12日に公開したリリース記事を受け、開発者がプロジェクトAPIキーでAtlasを利用できると報じた。Atlasの発表日は9月1日。World LabsのワールドモデルであるAtlasは、写真またはテキストプロンプトを受け取り、3D空間で整合性を保つシーンを構築する。新しい視点や動画、ユーザーが歩き回れるスプラットも生成できる。

Atlasで構築された4つのアプリ

4つのアプリは、サインインすれば誰でも利用できる。Viewfinderは写真または生成画像からシーンを再構成し、その中をカメラパスに沿って飛行できる。Chiselではシーンをグレーボックス化でき、ブロックを動かすたびに各カメラの視点が更新される。

Relightはスプラットシーンを再照明し、再加工する。名称どおり、Splats to Meshはスプラットをメッシュに変換する。

6つのタスクエンドポイントと非同期ジョブ

6つのタスクエンドポイントは、atlasChisel、atlasGenerate、atlasTextToImage、images2PosedRGBD、posedImages2Splats、splats2Mesh。Atlas API referenceによると、いずれも/api/v2/tasksの下でタスク名を続けたPOSTリクエストを使う。

開発者はプロジェクトキーを作成し、クライアントを設定するかWorld Labs CLIからサインインして、タスクを送信する。Atlasは完了結果ではなくoperationを返す。開発者は/api/v2/operations/{operation}をポーリングし、:waitを呼び出せるほか、:cancelで処理をキャンセルしたり、:traceを要求したりできる。後者は、結果とともに送信したリクエストを正確に返す。

アセットエンドポイントはファイルのアップロードと出力を処理する。APIにはヘルスチェック、ファイルのアップロードと読み取りに使うアセットコレクション、操作コレクション、タスクに設定できるWebhookも用意されている。

VRにおけるsplats2Meshの意義

splats2MeshはGaussianスプラットを、World Labsが「実際のジオメトリ」を備えると表現するメッシュに変換し、GLBとして返す。Gaussianスプラットは、シーンを三角形ではなく、数百万個の柔らかな色付き楕円体として保存する。デスクトップGPUでは撮影した部屋を高速に描画できる一方、スプラットには通常の衝突判定に使えるサーフェスがなく、エンジンのライトや影も三角形メッシュと同じようには作用しない。

このタスクでは、メッシュの周囲に直立したコライダーボックスを配置し、2つ目のGLBとして返せる。結果はUnityやGodotに渡せ、メッシュジオメトリによる衝突判定が可能になる。3回の呼び出しで構成するワークフローでは、まずimages2PosedRGBDでカメラと深度を推定し、次にposedImages2Splatsを実行し、最後にsplats2Meshでジオメトリを生成する。スプラット処理には通常15~25分かかる。

スプラットからメッシュへの変換はAtlas以前から存在した。SuGaRは2023年末にこの処理を実現し、KIRI Engineは2024年3月、スマートフォンアプリにワンタップ版を追加した。今回報告された違いは、COLMAP、スプラットトレーナー、メッシュ化処理を個別に接続しなくても、カスタムコードから利用できる点にある。

ツール、業界、エンジン連携

Atlasのページで名前が挙がる3DツールはBlenderだけだ。ドキュメントには、Claudeなどのエージェントクライアント向けMCPサーバーに加え、ウェブ上でスプラットを描画するSpark.jsも記載されている。Unityパッケージ、Unrealプラグイン、Godotアドオンについては報告されていない。

Atlasは業界として映画、建築、ロボティクスを挙げ、ゲームやインタラクティブ環境向けにSplats to Meshを提案している。返されるGLBはGodotがネイティブに読み込める形式で、UnityではglTFastパッケージを通じて読み込める。Godotユーザーはすでにこの形式を好んでおり、同じ理由からBlendkitプラグインにもprefer-GLTFオプションが追加された。エンジン内から6つのエンドポイントを呼び出すエディタープラグインは、まだ作られていない。

入力、出力、公開されている料金

posedImages2Splats documentationによると、refined出力は5,000クレジット、または$5。refine: falseを指定するDraft出力は500クレジット、または$0.50。Refined実行では順序付けされたposedFramesを2~512個受け付け、Draftでは2~32個に対応する。

各フレームは画像アセット、カメラ、深度を組み合わせる。深度はdepth.depthAssetに指定するlinear-depth EXRでなければならず、images2PosedRGBD、またはatlasGenerateでreturnDepthを指定して返されたものを使う。アセットには、プロジェクト所有のアセットID、10 MiB未満のインラインbase64、公開HTTPS URLを指定できる。返された画像、カメラ、深度は常に一組で保持しなければならない。

すべてのカメラグリッドは1280x720、720x1280、960x720、528x704のいずれかを使う必要があり、幅×高さで測定する。全フレームで同じグリッドを指定しなければならない。RGB画像はそのグリッドにリサンプリングされるため、カメラ内部パラメーターが示すのは必ずしも元画像ではなく、選択したグリッドである。4種類のグリッドでimages2PosedRGBDまたはatlasGenerateが生成した出力は、そのままワークフローに渡せる。posedImages2Splatsの結果はSPZファイルになる。

Atlas billing documentationでは、1米ドルを1,000クレジットとする換算レートが定められている。クレジットはプロジェクトのAPIキーに紐づくアカウント残高から引き落とされる。アカウント所有者と請求所有者は、手動でクレジットを追加するか、自動チャージを有効にできる。支払い方法と請求書はSettings → Billingで管理し、残高、チャージ、月間利用上限はSettings → Developer Platformで管理する。

他のタスク料金はサインイン後のプラットフォームに表示され、変更される可能性があるため、バッチ処理の見積もりには現在の料金表を使う必要がある。報告によると、Atlasの完全な料金ページは公開されていない。また、World Labsは9月28日、評価額が示される前に本文が終わっている、全株式交換による買収について正式契約を締結したという。

分類VR AI
共有

この記事を楽しめましたか?

お気に入りに追加して編集者に知らせるか、後で読むために保存してください。

コメント

会話に参加するにはサインインしてください。

サインイン

    まだコメントはありません。会話を始めましょう。

    よろしいですか?