“图像堆叠”技术为许多现代相机的后处理功能奠定了基础(比如松下 Lumix GH5),但加州大学圣芭拉分校(UCSB)的一支研究团队,却借助类似技术实现了在拍照后对图像进行组合的功能。通过与 Nvidia 的合作,团队开发出了一种无法借助普通相机拍摄出来的图像效果。研究人员称之为“计算放大系统”,可以通过控制场景深度、不同物体在不同深度下的相对大小、以及相机的视角,来实现新颖的图像组合。

新式缩放算法可在后期变更“多视角照片”的构图-VDGER

这套计算缩放系统,能够在单张“多视角”照片中自动结合“广角+长焦”。

新式缩放算法可在后期变更“多视角照片”的构图-VDGER

简而言之,拍摄者被允许“毫无违和感”地操纵一张图像前后景的元素。

新式缩放算法可在后期变更“多视角照片”的构图-VDGER

广角端(预期背景)

具体操作分为三个步骤:

● 拍摄者通过移动来靠近拍摄对象(期间连续拍摄),但不用调整镜头的焦距;

● 系统会接受堆叠,并利用一套算法来估计相机的位置、以及指向何处;

● 然后利用“一种新颖的多视角 3D 重建方法”,以创建每幅图像的一个深度映射。

新式缩放算法可在后期变更“多视角照片”的构图-VDGER

预期前景

所有这些信息可被用于组合成一张多视角图像,且拥有不同的组合。通过一个简单的 UI,摄影师可以轻松探索不同的视角。(听起来有点像“光场相机”)

新式缩放算法可在后期变更“多视角照片”的构图-VDGER

两张图像组合后的成品

最终结果是自动创建出一副结合了广角和长焦端(放大)的图像,想象一下你和朋友分别站在一座美丽的老房子前的景象 —— 放大让你对人物有更好的辨识,但身后的教堂背景大部分被忽略。

研究团队在美国计算机协会(ACM)的 SIGGRAPH 2017 大会上对这项技术进行了演示。