导语: 谷歌最近宣布了一项基于庭院灯厂家光的全新技术——Relightables。
「庭院灯厂家光」在影视作品、游戏和假造环境中的作用至关紧张,它是一种紧张的造型手段,在影片中起着传达信息、表达情绪、烘托气氛、刻画人物性格和生理转变等作用。它影响着影片基调的形成和影片风格的显现,与影片基调形成对立同一的关系,与其它造型手段结合体现影片的节奏和旋律。
影视作品里很多殊效场景都必要借助绿幕完成,在技术不过硬的时候北京人事考试网,常会发生「五毛殊效」的惨案。
想要复制完善的光效更是个难题。随着计算机视觉技术的演进,计算机已经能够比较「天然」地还原人脸外形、皮肤纹路,但是在模仿庭院灯厂家光条件这一块照旧缺乏写实感。
而谷歌最近宣布了一项基于庭院灯厂家光的全新技术——Relightables。能够完善解决这一点。
Relightables 体系工作流程可分为三个部分:捕获、重修和渲染。
该体系的核心依靠于一个包含多视角(自动)立体深度传感器的庭院灯厂家光球面装配,球面装配安装有 331 个可编程的庭院灯厂家以及 90 个高分辨率 12.4MP 重修相机。
捕获人体所用的相机包含 32 个红外(IR)相机和 58 个 RGB 相机。红外传感器提供正确、可相信的 3D 数据,RGB 相机捕获高质量几何法线贴图和纹理。这些相机以 60Hz 的频率记录原始视频百度排名优化,研究者基于球面梯度照明交替使用两种不同的照明条件。
接下来,研究者将数据上传到公共存储库中,第一个阶段是生成每个「机位」的深度图、分割图和 3D 网格 [Kazhdan 和 Hoppe 2013]。
他们用一个对齐算法来处理重修网格的序列,如此一来河南人事考试网,长的子序列就可以共享常见的三角定位(triangulation)。研究者提出了一种新的方法来解决关键帧的选择题目,将其变化为一个 MRF 推理题目来解决。每个独特的三角定位都被参数化为通俗的 2D 纹理空间,该空间可以和所有共享该三角定位的帧共享。
最后每个网格都有两个可用的梯度球形照明图像,从中可以生成反照率、法线、光泽度和环境光遮挡图。这些图与标准渲染引擎兼容,可用在任何设定的光线条件下重复活成渲染图像。
谷歌这个全新的体系可以完善还原人物四周的光影结果,使得合成的影像看起来更加真切。可以无缝地将捕获到的人体融合到实际世界中或电影、游戏等中的数字场景。它可能会彻底变革 3D 捕捉技术领域。
编辑:严志祥