告别算力焦虑!苹果推出 LGTM 框架:让 4K 级 3D 渲染在 Vision Pro 上腾飞

近日,苹果研发团队携手香港大学发布了题为《少用高斯函数,多用纹理:4K 前馈纹理飞溅》(Less Gaussians, More Textures: 4K Feedforward Texture Splatting)的最新研究,带来一套名为 LGTM 的全新技术框架。该方案直指当前 3D 高斯喷溅(3D Gaussian Splatting)在高分辨率下的算力瓶颈,为 Apple Vision Pro 等超高像素设备的图形渲染提供了新思路。

核心突破:将几何与分辨率“解耦”

目前主流的前馈式 3D 高斯喷溅虽能高效把 2D 图像转成 3D 场景,但分辨率一升高,计算量就会呈平方级激增,4K 级实时渲染因此难以落地。

LGTM 框架的关键在于把几何复杂度与渲染分辨率分开处理。它不靠堆砌更多高斯函数,而是通过两步提升画质:

  1. 几何学习: 先用低分辨率图像学习场景基础几何,并与高分辨率真值图(GT)对齐,确保在 2K/4K 下几何结构无缝无洞。

  2. 纹理增强: 引入专门的外观网络,把高分辨率图像中的精细细节转换为纹理,叠加到简化的几何上。

QQ20260403-100737.jpg

助力 Apple Vision Pro

Apple Vision Pro 双眼合计约 2300 万像素,单眼已超 4K。传统的SPLAT等前馈模型在应对如此高像素密度时往往性能吃紧。LGTM 则可作为升级模块嵌入现有系统(如 NoPoSplat、DepthSplat 等),在保持较低算力开销的同时,带来更清晰的纹理、更锐利的文字,以及更贴近真实的沉浸式画面。

项目演示页面可以看到,相比传统方法,LGTM 明显抬升了前馈式 3D 重建的画质上限。这意味着未来的 visionOS 用户有望在实时生成的虚拟空间中体验到更逼真的细节与观感。

爱智特-AI智能体一站式企业智能体交易学习发行平台|智能体教程|智能体社区
© 版权声明
THE END
喜欢就支持一下吧
点赞13 分享