WorldGen
🌍 WorldGen - 在數秒內生成任何3D場景
WorldGen 是什麼?
🌍 WorldGen - 在數秒內生成任何3D場景}? Wait, the user said
WorldGen 概覽
這是什麼
WorldGen 是一個能從文字提示或圖片在數秒內生成 3D 場景的工具。它專為遊戲、模擬、機器人技術與虛擬實境應用而設計,可快速建立 3D 環境。本專案由 Ziyang Xie 開發,並以 Apache-2.0 授權開源。
主要功能
- 從文字提示或圖片在數秒內即時生成 3D 場景。
- 支援 360 度自由探索生成的 3D 場景,並具備環路閉合功能。
- 支援室內與室外場景,以及寫實與非寫實風格。
- 支援以任何解析度、任何相機設定與軌跡進行即時渲染。
- 提供文字轉場景與圖片轉場景兩種生成模式。
- 提供網格生成模式,作為高斯潑濺輸出以外的選擇。
- 包含實驗性的 ml-sharp 功能,可能產生更好的高斯潑濺結果。
使用情境
WorldGen 可用於快速原型化遊戲環境的 3D 場景、模擬訓練資料、機器人導航場景以及虛擬實境體驗。它也適合為創意專案或 3D 場景理解研究生成背景場景。
快速開始
bash# 複製儲存庫git clone --recursive https://github.com/ZiYang-xie/WorldGen.gitcd WorldGen# 建立新的 conda 環境conda create -n worldgen python=3.11conda activate worldgen# 安裝 torch 與 torchvision(需 GPU 支援)pip3 install torch torchvision# 安裝 worldgenpip install .# 安裝 DA-2(360 度深度估計)-- 使用 --no-deps 避免版本衝突pip install git+https://github.com/EnVision-Research/DA-2.git#subdirectory=src --no-deps# 安裝 pytorch3d 相依套件pip install git+https://github.com/facebookresearch/pytorch3d.git --no-build-isolation
授權與價格
WorldGen 採用 Apache-2.0 授權。定價類型標示為開源。
內容整理自該專案公開的 README 與儲存庫資訊。