字節跳動Seed3D 1.0發佈:一張圖就能生成高精度3D模型

IT之家
昨天

IT之家 10 月 23 日消息,據字節跳動 Seed 官方公衆號,字節跳動 Seed 團隊今天推出 3D 生成大模型 ——Seed3D 1.0,實現從單張圖像到高質量仿真級 3D 模型的端到端生成。Seed3D 1.0 基於創新的 Diffusion Transformer 架構,通過大規模數據訓練完成,可生成包括精細幾何、真實紋理和基於物理渲染(PBR)材質的完整 3D 模型。

IT之家從官方介紹中獲悉,通過 Seed3D 1.0 生成的 3D 模型能夠無縫導入 Isaac Sim 等仿真引擎,僅需少量適配工作即可支持具身智能大模型訓練。此外,通過分步的場景生成,Seed3D 1.0 可從單個物體生成,拓展至構建完整的 3D 場景。

Seed 團隊還稱,此次發佈的 Seed3D 1.0 紋理與材質生成性能超過此前的開源及閉源模型,幾何生成性能超過業界更大參數規模的模型,綜合能力達到行業領先水平。

項目主頁:https://seed.bytedance.com/seed3d

體驗入口:https://console.volcengine.com/ark/region:ark+cn-beijing/experience/vision?modelId=doubao-seed3d-1-0-250928&;amp;tab=Gen3D

Seed3D 1.0 採用生成式 AI 廣泛應用的模型架構 Diffusion Transformer,來設計 3D 幾何生成和紋理貼圖模型。其能夠實現對 3D 幾何的高精度構建,既能生成精確的結構細節,又能保證封閉曲面、流形幾何等形態的物理完整性,以滿足仿真計算要求。

官方還表示,Seed3D 1.0 基於多模態 Diffusion Transformer 架構,構建了多視角圖片生成模型。模型輸入參考圖片和 3D 幾何渲染圖,輸出多視角一致的紋理圖像。

官方提供的測試結果稱,Seed3D 1.0 在細節保持和結構完整性方面優於其他方法,1.5B 參數的 Seed3D 1.0 在性能上超過了業界 3B 參數的模型(Hunyuan3D-2.1),能夠更準確地還原複雜物體的精細特徵。

採用分步生成策略,Seed3D 1.0 還可從生成單一物體拓展至生成完整、連貫的 3D 場景。系統能夠首先利用視覺語言模型從輸入圖像中提取對象和空間關係的信息,構建場景佈局圖;然後為每個對象生成相應的 3D 模型;最後根據空間佈局將各個物體組裝成完整場景。這一框架使 Seed3D 1.0 能夠生成豐富的 3D 環境,從辦公室空間到城市街景,為世界模擬器提供了場景內容支撐。

免責聲明:投資有風險,本文並非投資建議,以上內容不應被視為任何金融產品的購買或出售要約、建議或邀請,作者或其他用戶的任何相關討論、評論或帖子也不應被視為此類內容。本文僅供一般參考,不考慮您的個人投資目標、財務狀況或需求。TTM對信息的準確性和完整性不承擔任何責任或保證,投資者應自行研究並在投資前尋求專業建議。

熱議股票

  1. 1
     
     
     
     
  2. 2
     
     
     
     
  3. 3
     
     
     
     
  4. 4
     
     
     
     
  5. 5
     
     
     
     
  6. 6
     
     
     
     
  7. 7
     
     
     
     
  8. 8
     
     
     
     
  9. 9
     
     
     
     
  10. 10