DoNews4月23日消息，字節(jié)跳動今日正式發(fā)布更高精度的新一代 3D 生成大模型 —— Seed3D 2.0，目前 Seed3D 2.0 技術(shù)報告已公開，API 也已上線火山引擎。
字節(jié)跳動表示，在與現(xiàn)有 3D 生成模型的對比評測中，Seed3D 2.0 在幾何生成、紋理材質(zhì)生成兩項核心指標(biāo)上均取得 SOTA 結(jié)果（指在某項具體任務(wù)或基準(zhǔn)測試中表現(xiàn)最優(yōu)的模型或方法）。模型對復(fù)雜結(jié)構(gòu)的還原更加精細(xì)，PBR 材質(zhì)的生成也具有更強(qiáng)的真實感和穩(wěn)定性。
字節(jié)跳動招募了 60 位具有 3D 建模經(jīng)驗的人類打分員，對 Seed3D 2.0 和六個主流模型的生成質(zhì)量進(jìn)行兩兩盲評對比。
Seed3D 2.0 在幾何形狀生成的對比測試中展現(xiàn)出顯著優(yōu)勢，相比所有其他 3D 生成模型呈現(xiàn)更高的偏好率（人類打分員認(rèn)為其生成質(zhì)量更優(yōu)的比例），驗證了架構(gòu)創(chuàng)新帶來的幾何質(zhì)量提升。
在紋理 3D 內(nèi)容生成的人類打分中，Seed3D 2.0 同樣領(lǐng)先其他基線方法，面對目前行業(yè)內(nèi)主流模型，Seed3D 2.0 的偏好率達(dá)到 69% 以上。
Seed3D 2.0 引入 Coarse-to-Fine 兩階段生成策略，把“整體結(jié)構(gòu)”和“幾何細(xì)節(jié)”解耦，分開優(yōu)化，從而在銳利邊緣、薄壁結(jié)構(gòu)和復(fù)雜拓?fù)涞葞缀紊呻y點(diǎn)上取得突破。
同時，Seed3D 2.0 采用統(tǒng)一的 PBR 生成模型聯(lián)合建模完整 PBR 貼圖，使用 MoE 架構(gòu)提升高分辨率材質(zhì)細(xì)節(jié)與邊界精度，并且引入 VLM 先驗，增強(qiáng)未知光照下的材質(zhì)分解穩(wěn)定性與準(zhǔn)確性。
在幾何與紋理之外，Seed3D 2.0 能完成部件級分割與補(bǔ)全、鉸接資產(chǎn)生成以及基于圖像、視頻或文本的場景組合生成，讓生成式 3D 模型可應(yīng)用于實際部署。
