南洋理工大学、数美万物和西湖大学联合提出的Ultra3D是一种全新的3D生成框架,旨在解决高质量3D生成中效率与质量之间的矛盾。该框架通过创新的两阶段生成流程,显著提升了3D资产建模的效率与质量。
Ultra3D的核心创新在于其“coarse-to-fine”(粗到细)的两阶段生成流程。在第一阶段,Ultra3D利用高效的VecSet表示快速生成粗略网格(coarse mesh),并导出稀疏体素;在第二阶段,引入新提出的局部化Part Attention机制,对每个体素进行细粒度特征建模,从而大幅降低冗余计算,提升生成效率。该方法在保持高保真度的同时,显著提升了生成速度,支持1024分辨率输出,并在多个领域(如数字内容创作、游戏建模、AR/VR等)具有广泛应用前景。
Ultra3D的提出解决了传统3D生成方法在高分辨率建模中计算复杂度高的问题,为高分辨率3D生成进入新阶段提供了可行方案。此外,Ultra3D的创新点还包括其在表示压缩和注意力机制上的创新,实现了3.3倍速度提升,并在生成质量上领先业内方法。
数美万物作为该研究的重要参与者之一,其自研的Sparc3D算法和Ultra3D在3D生成领域也取得了显著突破,例如Sparc3D通过稀疏卷积和3D VAE技术,实现了三维数据的无损压缩和高效生成。数美万物还发布了Hitem3D等工具,进一步推动了3D内容创作的革新。
南洋理工大学作为该研究的主导机构之一,其在科研和技术创新方面具有深厚积累,其“创业型大学”战略和教师队伍建设经验也为该研究提供了有力支持。
Ultra3D的提出不仅推动了3D生成技术的发展,也为数字内容创作、游戏建模、AR/VR等领域提供了更高效、更高质量的解决方案
声明:文章均为AI生成,请谨慎辨别信息的真伪和可靠性!