通常情况下，需要昂贵的设备和专业知识来创建一个准确的三维重建某人的脸，这是现实的，看起来不可怕。 现在，卡内基梅隆大学的研究人员利用普通智能手机上录制的视频完成了这一壮举。
使用智能手机拍摄面部正面和侧面的连续视频，生成密集的数据云。 由CMU的机器人研究所开发的一个两步过程利用这些数据，在深度学习算法的一些帮助下，构建面部的数字重建。 该团队的实验表明，他们的方法可以达到亚毫米的精度，优于其他基于相机的过程..
数字人脸可用于为游戏或虚拟或增强现实构建化身，也可用于动画、生物识别甚至医疗程序。 一个准确的三维渲染面部也可能有助于建立定制的外科口罩或呼吸器。
机器人研究所的副研究教授SimonLucey说：“在计算机视觉和图形学中，建立面部三维重建一直是一个悬而未决的问题，因为人们对面部特征的外观非常敏感。” “即使是重建过程中的轻微异常也会使最终结果看起来不切实际。”
激光扫描仪，结构光和多摄像机工作室设置可以产生高度精确的面部扫描，但这些专门的传感器是令人望而却步的大多数应用。 然而，CMU新开发的方法只需要一部智能手机。
这种方法是卢西与硕士生Shubham Agrawal和Anuj Pahuja共同开发的，于3月初在科罗拉多州斯诺麦斯举行的IEEE计算机视觉应用冬季会议上提出。 它从拍摄15-20秒的视频开始。 在这种情况下，研究人员使用一个iPhoneX在慢动作设置..
卢西说：“慢速运动的高帧速率是我们方法的关键之一，因为它产生了密集的点云。”