虚幻引擎开发商 Epic Games 发布了 Live Link Face,这是一款 iPhone 应用程序,它使用手机中的前置 3D 传感器为视频游戏、动画或电影等 3D 项目中的面部动画进行实时动作捕捉。
该应用程序使用来自 Apple 的 ARKit 框架和 iPhone 的 TrueDepth 传感器阵列的工具,将实时动作捕捉从观看手机的演员流式传输到在附近工作站上运行的虚幻引擎中的 3D 角色。它捕捉面部表情以及头部和颈部旋转。
根据 Epic宣布该应用程序的博客文章,Live Link Face 可以一次流式传输到多台机器,并且“强大的时间码支持和精确的帧精度可实现与其他舞台组件(如相机和身体动作捕捉)的无缝同步”。用户从手机的前置摄像头获得原始 blendshape 数据的 CSV 和 MOV,以及时间码。
对许多人来说,iPhone 的 TrueDepth 传感器阵列似乎是寻找问题的一种解决方案——Touch ID 在早期 iPhone 中对大多数人的用途来说工作得很好,而且除了 Face ID 之外,该技术并没有太多明确的应用。当然,有Animojis,很多人都喜欢它们——但大多数人不会说他们单枪匹马地证明了这项技术的合理性。