迪士尼公布三款实时捕捉技术

Category: 
迪士尼公布三款实时捕捉技术
2017年4月27

迪士尼研究院最近开发了三个技术:头发的数字模拟,现场动态面部增强,面部表情的数字模拟。

 

▌头发的数字模拟

 

头发对迪士尼至关重要,迪士尼许多公主都有飘逸的长发。但目前的主要困难之一是需要不断重置物理参数。研究员Liwen Hu提到,这就是为什么迪士尼“开始探索从现实世界中捕捉头发,在反演过程中估计相应的仿真参数。”

现场动态面部增强

 

在投影过程中,最具挑战的是投射画面的延迟,在这款设备上,有可能模拟图像还没来得及投射到脸上或头发上,脸或头就已经移动开了。现在许多涉及到实时反馈的设备都面临这个问题,如无人、VR/AR设备(相关连接:画面延迟太困扰?我们看看“预测追踪”的原理)。

迪士尼研究员Amit Bermano和他的团队提到,他们已经通过“使用红外光照进行高速计算校准相机”侦测人脸方向以及表情,通过尽量降低算法的复杂性,同时采用卡尔曼滤波器(Kalman Filtering)来解决问题。简单来说,就是非常快的追踪,加上对未来轨迹的预测。

面部表情的数字模拟

 

第三个技术可以进行实时多视角人脸捕捉,最后合成一张图像。这个技术有助于在头显设备中进行虚拟影像的实施捕捉。

相关文章

VRrOOm Wechat