沉浸式高斯泼溅之旅:旧金山恩典座堂

查看原文 HN 讨论

文章摘要

Vincent Woo(HN 用户 akanet)发布了他的新作:旧金山恩典座堂(Grace Cathedral)的沉浸式高斯泼溅(Gaussian Splatting)漫游。这是一个纯浏览器体验,无需安装任何应用,在手机和桌面上都能跑;进入后会以电影化的镜头运动带你从街道穿入教堂内部,也可以随时切换为 FPS 式自由行走(桌面用 WASD 加鼠标拖拽,手机上点击即走)。

技术上这是他 2025 年 Sutro Tower 三维扫描项目的进阶版。当年的流程大致是:用无人机围绕目标飞行、拍摄数千张照片,在 RealityCapture 里做对齐(让计算机理解不同照片中的点对应现实中的同一个点),再用 gsplat 生成三维模型。恩典座堂的难度远高于铁塔——作者自述这次的野心在于以一种新方式把室内与室外场景融为一体,并且要让它”不只是个玩具”。渲染引擎用的是 PlayCanvas,它带有全局排序,因此从任何相机角度看泼溅都能正确渲染。

作者在评论里披露了大量制作细节。为了消除不同拍摄批次之间的不一致,他花了很多时间手工遮罩(hand-masking):两次拍摄间隔太久,期间教堂居然新建了一整段天花板。splatting 里的 PPISP 引导对解决多相机、多光照条件下的传感器差异帮助很大。室内外两套数据的配准,靠的是彩窗上的锚点。场景中的汽车被单独分离出来做了程序化动画——它们本身也是高斯泼溅,和场景其余部分一样;附近某栏建筑顶上还有一面在微风中飘动的美国国旗作为彩蛋,团队甚至讨论过要不要加鸟,最终没有进最终版本。

作品里最受好评的功能叫 Peek——一种剖切视图,可以像看建筑剖面图那样”揭开”教堂外壳窥视内部结构。多位评论者说它像是《不可思议的剖面》(Stephen Biesty)那类儿童科普书的科幻版。这个项目还有一层实用意义:恩典座堂计划用它向潜在的场地租用者展示空间,因此作者在”能在各种设备上流畅运行”这件事上投入了大量精力。

HN 评论精华