Clear Sky Science · zh

一种由双先验驱动的高保真博物馆文物重建的高斯点渲染框架

· 返回目录

为何以 3D 保存文物很重要

世界各地的博物馆正竞相为易碎文物创建精细的数字副本,从青铜钟到瓷器花瓶。这些虚拟替身可以在网上浏览,研究时无需接触原物,并能在实物受损时继续保存信息。但许多藏品只以有颜色的点云形式保存原始 3D 扫描数据——空间中数百万个点,且没有配套照片。本文提出了一种将仅有的点数据转化为栩栩如生 3D 模型的新方法,为大量“沉睡”的遗产档案打开了生动数字展示的可能。

当今数字复制品的问题

迄今为止,高质量 3D 重建通常沿两条路径进行。一种是利用多角度的常规照片同时估计形状与颜色,但在文物常见的光滑、低纹理表面上表现欠佳,并且难以恢复真实尺度。另一种是使用精密激光扫描器直接捕捉几何形状,有时配合单独的相机记录颜色。这条路线精确但昂贵,而且仍无法直接生成现代虚拟展览所需的那种富有光照感的渲染。较新的技术称为 3D 高斯点渲染,能够实时呈现逼真场景,但通常依赖相机图像和由这些图像构建的粗糙初始点云。对于仅以点云存档的博物馆物件,这一链条会失效。

从点到数字复制体的新途径

作者提出了一种“双先验”框架,从高质量有色点云开始,最终生成可渲染的详细模型——无需任何原始照片。第一个先验是几何性的:一种智能采样方法遍历密集扫描,衡量多尺度下的形状和颜色变化。能够捕捉表面边缘、雕刻、裂缝或突变色的点被赋予更高的重要性,而平坦或均匀区域则被稀释。然后,从中精心挑选的点子集用于初始化数百万个微小的三维构建单元——称为高斯基元,它们构成最终模型的骨架并携带正确的现实世界尺度。

Figure 1
图 1。

教会模型物体应有的外观

第二个先验是视觉性的:该方法不使用真实照片,而是直接从点云生成“理想”训练图像。虚拟相机环绕文物放置,包括在真实展厅中可能难以实现的角度,每个点被投影到这些视角中以创建合成彩色图像。可见性算法会移除在某一角度下应被遮挡的点,避免背景细节错误出现在前景的重影现象。由于图像与几何来自相同源,形状与颜色之间不存在错位——这是传统工作流程中将独立扫描与照片集合结合时常见的难题。

清理与锐化合成视图

点投影得到的原始图像边缘往往锯齿状,细节也有些模糊。为了解决这一点,合成图像首先经过抗锯齿步骤来平滑“阶梯式”轮廓,同时保留纹理,然后再经过基于 Transformer 的超分辨率网络。该网络将多视图视为视频帧,学习从邻近视图中借用细微细节,这些视图以略有不同的角度观察相同区域。结果是一组清晰的高分辨率视图,作为强有力的教学信号:反复渲染并调整 3D 高斯模型,使其输出尽可能匹配这些增强图像。

Figure 2
图 2。

这对博物馆及更广范围的意义

在新的文化遗产数据集和标准 3D 基准上的测试表明,这种双先验方法比若干主流高斯点渲染变体产生更清晰、更准确的渲染,尤其在复原细小装饰和整体形状保持上更为忠实。对于已拥有精确点云但缺乏可用照片的博物馆,该方法提供了一种实用途径,将旧扫描赋予新生命,转化为适合展览、教育与研究的交互式数字替代品。主要的限制在于该方法假设原始扫描密集且完整——如果数据稀疏或严重损坏,效果会大打折扣。尽管如此,对于满足该条件的众多藏品,该框架为从原始测量到令人信服的虚拟文物搭建了一座强有力的桥梁。

引用: He, Y., Zhang, X., Xie, Z. et al. A dual-prior driven Gaussian splatting framework for high-fidelity reconstruction of museum artifacts. npj Herit. Sci. 14, 69 (2026). https://doi.org/10.1038/s40494-026-02330-z

关键词: 数字文化遗产, 3D 重建, 点云, 高斯点渲染, 博物馆文物