2019-06-20 18:30
扫码打开虎嗅APP
题图来自《阿丽塔战斗天使》
面部动作捕捉的原理是什么?能被用来做什么?
面部动作捕捉(Facial Motion Capture),有时也被称为“面部表情捕捉”(Facial Expression Capture),是使用一定的设备记录人类面部表情和动作的方法,可以使合成的虚拟角色栩栩如生、更加自然。
最早人们使用机械传动方法捕捉面部动作,这种设备由头盔、关节、刚性连杆组成,需要固定在人的嘴部、面颊等位置,通过测定连杆的变化来还原人的表情。
这种方法对演员的面部表情限制较大,已经退出历史舞台,目前最常用的是光学方法和结构光方法。
光学方法是利用相机获取面部的动作,单个、 多个相机均可;结构光方法是向面部投射点阵再读取,通过点阵图案的变化获取面部的三维信息。
有时我们也会在演员的脸上粘贴或绘制标记点,帮助进行追踪。
电影、游戏的演出一般会将多个相机以头盔方式固定在演员头部,配合标记点更精确的捕捉演员表情;
虚拟偶像有时会使用手机或电脑摄像头进行直播,不过追踪精度较差;
Animoji 则依靠了结构光,不需要标记点也能合成动作流畅的小动物形象。