马克·扎克伯格在虚拟现实中接受了利克斯·弗里德曼的采访,双方都使用了Meta的原型逼真Codec头像。
Codec头像是Meta的长期研究项目,旨在通过头戴设备的面部追踪传感器(最终还包括眼镜)实现具有真实感的逼真实时头像,从而革新远程沟通方式。
Meta于2019年首次披露了该项目的存在,并在随后的几年里展示了多个真实度更新和全身版。这些头像由机器学习驱动生成,并使用专用捕捉设备进行拍摄,该设备拥有100多个相机。不过,Meta的研究人员正在努力用智能手机扫描来取代这一捕捉设备。
扎克伯格和弗里德曼都佩戴着Quest Pro头显,该头显内置面部追踪和眼部追踪。然而,目前还不清楚头像是在头显上进行解码和渲染,还是由一台PC完成。两个头显都连接了一个USB-C电缆,但这可能只是为了避免采访期间耗尽电池,而不是与PC VR连接。
在采访过程中,弗里德曼经常表达对所经历的震惊和怀疑之情,声称这真实地让他感觉像是坐在扎克伯格面前,并在某一时刻说他真正忘记了他所看到的头像不是真实的人。他明确表示,与几乎所有先前的逼真数字人类尝试不同,Codec头像超越了“诡异山谷”的限制,正如我们在去年的实际体验中所指出的。
当然,Meta要在出货产品中达到这种真实度还有很长的路要走。如今,Meta头像因其基本的卡通风格而广受嘲笑,与逼真程度相去甚远,而Quest 3既没有眼部追踪,也没有面部追踪传感器。不过,如果今年早些时候泄露的Meta路线图可信,Meta可能计划在与LG的合作中,于2025年在下一代Quest Pro中发布Codec头像。