观看笔记 · 3DGS

从一张照片,再看《神骸》与《擎土》

墨西哥艺术家达米安·奥尔特加在中国的首次大型个展「战斗、星球与牛皮纸」,于杭州天目里美术馆呈现。他将墨西哥传统人偶与《变形金刚》的想象带入大型雕塑。

Gallery Mate天目里美术馆

这篇观看笔记,想先向 Funes「梁柱之间」 致敬。Funes 用可探索的 3D 档案记录建筑与文化遗产;「梁柱之间」将中国古建筑的三维实景模型、摄影与历史文献连接起来。它们让我们想到:离开现场以后,观看也可以继续。受到这份启发,我们从自己的看展照片出发,尝试为《神骸》和《擎土》保留一种可以转动、可以重看的形态。

两张现场照片,也是下方两个 3DGS 的输入图像。

在天目里美术馆的这次看展记录中,《神骸》和《擎土》留下了两种很不一样的轮廓:一个紧密、向内聚拢,一个舒展、向外延伸。照片保存了当时的视角,也让人想起在作品面前挪动脚步的感觉。

9 月 21 日,我们在 Gallery Mate 中分别用一张现场照片生成了它们的 3DGS。这里把照片和生成结果放在一起,留出一点时间,看看哪些形态被保留了,哪些细节在换一个角度后变得陌生。

01 / 02

神骸

从密集的正面开始

《神骸》的照片里,浅色的头骨形态层层堆叠,围住中央较小的面部。棕色、分节的肢体又给整个形象带来一种盔甲般的节奏。第一眼容易被正面的密集细节吸引,再看时,可以把注意力放到外轮廓与关节之间的间隙。

观看提示:先对照原图辨认头部与肩部的层次,再小幅转动模型,观察轮廓如何变化。

《神骸》现场照片:层叠的浅色头骨形态与棕色分节肢体
现场原图

02 / 02

擎土

沿着机械肢体的方向看

《擎土》的照片更有一种迎面而来的动势。明黄色的部件向不同方向伸展,靠近镜头的深色开口占据了画面一侧。它的吸引力来自部件之间的距离、方向和遮挡关系。把视线从最前方移向后面的黄色结构,会读到另一条观看路线。

观看提示:从前方开口转向黄色部件,比较近处与远处的遮挡;原图之外的形态请作为生成结果观看。

《擎土》现场照片:黄色机械形态向外伸展,前方为带有斑驳色彩的开口
现场原图

背后的技术:从照片到 TripoSplat

用一张照片生成

这两个模型使用 fal 平台上的 TripoSplat(tripo3d/triposplat)生成。TripoSplat 是 TripoAI / VAST AI Research 开源的单图到 3D 模型:输入一张二维图像,输出三维高斯表示。在这次尝试中,我们分别提交《神骸》和《擎土》的现场照片,而不是围绕实物拍摄一组多视角照片。

3DGS 是什么?

3D Gaussian Splatting(3DGS)可以理解为用许多带有位置、形状、颜色和透明度的小团块来表示物体。观看时,渲染器将这些三维高斯投影到屏幕并叠加成图像。它不是把照片贴在一个平面上,也不同于用三角形网格拼出表面的常见 3D 模型;改变视角时,可以看到新的轮廓和遮挡关系。

从生成结果到网页

Gallery Mate 的服务端向 fal 提交照片 URL,并指定 output_format 为 splat。生成完成后,保存返回的 .splat 文件;本文使用 Spark 与 Three.js 在浏览器中渲染。只有点击“进入 3D 观看”时,页面才加载查看器与模型;旋转和缩放是在查看已有结果,不会再次调用生成服务。

继续了解: fal 上的 TripoSplat 文档 · 3D Gaussian Splatting 原始研究

生成不是扫描

单张照片没有提供的背面、深度与被遮挡部分,需要由模型推断,可能与实物不同。这里向 Funes 和「梁柱之间」致敬的是让观看延续的想法,并不意味着这次单图生成与这些项目的采集、重建流程相同。这两个结果适合辅助回看与比较,不能作为作品尺寸、材质或完整结构的测量依据。

回到这次展览

照片与作品名称来自 Gallery Mate 已公开的艺术志。这里的文字是观看提示;作品的正式信息请以艺术家及馆方发布为准。

双展并行 | 战斗、星球与牛皮纸: 达米安·奥尔特加&黄梅雨锋

阅读原艺术志

一张照片留下一个视角。把它和新的观看方式放在一起,也许会让我们重新留意当时没有细看的地方。