字節跳動近日正式發佈了其最新一代3D 生成大模型 ——Seed3D2.0。此次發佈標誌着技術的重大進步,Seed3D2.0在幾何和紋理材質生成方面達到了 SOTA(最先進的技術)水平。根據字節跳動的介紹,Seed3D2.0的技術報告現已公開,同時相關 API 也已上線,方便開發者進行應用。

image.png

在與當前市場上主流3D 生成模型的對比中,Seed3D2.0顯示出了卓越的性能。特別是在幾何生成和紋理材質生成這兩項關鍵指標上,該模型的表現都超越了其他競爭者。通過對複雜結構的更精細還原,以及更真實的 PBR 材質生成,Seed3D2.0在行業中樹立了新的標杆。

爲了驗證 Seed3D2.0的效果,字節跳動招募了60位擁有3D 建模經驗的評審人員,對其與其他六個主流模型的生成質量進行了盲評。結果顯示,Seed3D2.0在幾何結構生成的評測中明顯領先,偏好率超過其他模型,驗證了其架構創新帶來的幾何質量提升。在紋理生成的對比中,Seed3D2.0的偏好率同樣高達69% 以上,顯示了其強大的市場競爭力。

image.png

Seed3D2.0採用了 Coarse-to-Fine 的兩階段生成策略,成功將整體結構與幾何細節解耦,實現了對銳利邊緣、薄壁結構及複雜拓撲等生成難點的突破。同時,模型也整合了統一的 PBR 生成機制,進一步提升了材質的細節和邊界精度。通過引入 VLM 先驗技術,Seed3D2.0在未知光照條件下的材質分解表現更加穩定與準確。

image.png

除了幾何和紋理生成,Seed3D2.0還具備部件級分割與補全、鉸接資產生成以及基於圖像、視頻或文本的場景組合生成能力,進一步拓寬了其在實際應用中的場景。

劃重點:  

🌟 Seed3D2.0在幾何和紋理生成領域取得了 SOTA 水平,顯著提升了生成質量。  

🖼️ 該模型在盲評測試中表現優異,顯示出高於69% 的偏好率。  

🔧 引入了 Coarse-to-Fine 策略和 VLM 先驗,增強了生成的穩定性和準確性。