VR聊天室要来了?脸书现实实验室成功创造了人类的“虚拟化身”

2019-03-15 08:43:37 文/前瞻网 作者/ Winnie Lee

现实感是由准确的数据驱动的,这需要良好的测量手段。因此,打造真正的虚拟化身的关键是找到一种方法来衡量人类表情中的身体细节,比如一个人眯起眼睛或皱起鼻子的方式。

在不远的将来,你也许能够与远方的人交流,他们的虚拟影像仿佛就站在你面前一样栩栩如生。

Facebook的现实实验室研究部门(Reality Labs)正试图将这一前景变为现实,其最新研究结果相当令人信服。

在一系列视频中,这些虚拟头像被称为“Codec Avatars”,栩栩如生地漂浮在空中,可以互相交谈,因为人们真实的面部表情会在虚拟现实头像上连续地复制细节。

Facebook表示,通过模拟在同一个房间里的感觉,该项目有一天可以缓解远距离家庭成员、友谊或人际关系中的孤独感。

除了使用Facebook的先进技术,个人的虚拟现实版本可以随时随地见面。

匹兹堡Facebook现实实验室的研究主管亚瑟·谢赫(Yaser Sheikh)举了一个例子,两个在现实生活中从未谋面的人在埃菲尔铁塔上虚拟聚会。

(图源:视频截图)

脸书现实实验室在一篇博客中解释说:“利用开创性的3D捕捉技术和人工智能系统,Codec Avatars可以让人们在未来快速、轻松地创建出逼真的虚拟化身,帮助虚拟现实中的社交联系变得像现实世界中的一样自然和常见。”

“多年来,化身一直是电子游戏和应用程序的主要角色,但谢赫相信,极其精确的虚拟人物形象——那些能够完美捕捉苦笑或皱眉的面孔——将会是颠覆性的。”

它是如何工作的?

用户进入Facebook现实实验室的一个捕捉工作室,里面装满了相机和麦克风。其中一个捕捉工作室有1700个麦克风来记录声音以便达到身临其境般的效果。

成千上万的相机拍摄用户的面部照片,从而组装出一个人的三维个人资料。

“Codec Avatars”由代码组装成音频和视觉信号。这些音频和视觉信号被传输到用户佩戴的专用头戴式耳机中。

这款耳机使用一系列红外激光将人的虚拟化身投射到他们的视野中。

Facebook现实实验室几年来一直在研究这项技术。

该研究小组展示了它如何能够创造出3D的、逼真的用户头部虚拟再现,并指出它目前正在努力改善虚拟化身嘴巴周围的细节、“表情质量”和眼神交流。

“捕捉工作室”通过麦克风和数百台高分辨率相机收集用户面部和身体的细节。根据Facebook现实实验室的数据,每个摄像头每秒能捕获1GB的数据。

其中一个工作室有1,700个麦克风,可以“用3D技术重建声场”。

这款耳机目前只是一个原型,它使用一系列红外激光将人的虚拟化身投射到他们的视野中。

该公司表示,制作一个准确的虚拟化身是让虚拟视频聊天体验更受欢迎的唯一方法。

FRL研究科学家托马斯?西蒙(Tomas Simon)在一份声明中说,测量是基础。

“现实感是由准确的数据驱动的,这需要良好的测量手段。因此,打造真正的虚拟化身的关键是找到一种方法来衡量人类表情中的身体细节,比如一个人眯起眼睛或皱起鼻子的方式。”

捕捉所有的面部表情、手势和细微的细节已经被证明是一项艰巨的任务。

谢赫在一份声明中说:“我们通常把这称为通过‘自我测试’和‘母亲测试’。”

“你必须喜欢你的虚拟形象,你的母亲也必须喜欢你的虚拟形象,然后你们才能像在现实生活中那样舒服地互动。这是一个很高的标准。”

Facebook的研究人员可能还有很长的路要走,才能让它逼真的虚拟化身变得和人类的孪生兄弟一样难以区分。

在Facebook工程师页面上发布的一段视频中,两位VR化身讨论了高温瑜伽。

虚拟化身的嘴巴、眼睛和脸颊会对真人的面部表情做出反应,但眼睛看起来还是有点死气沉沉的,人类和虚拟化身之间的反应有一点延迟。

尽管如此,这标志着苹果的Memoji甚至Facebook的Spaces等虚拟现实应用的突破性进步,后者允许用户在聊天室里与朋友的虚拟现实复制品互动。

FRL的研究科学家萨拉吉(Jason Saragih)在一份声明中说,这是第一种自动生成真人数字肖像的方法。

“它为虚拟面对面交流提供了一种可以广泛推广的方式。”

他补充说:“虚拟互动让人感觉就在你面前,这是我们实现人际关系目标的一大步。”

Facebook认为这项技术可以改变人们通过VR和AR眼镜进行交流的方式。

它还可能对我们如何存储亲人的数字记忆产生更广泛的影响。

FRL技术项目经理贝尔科(Danielle Belko)在一篇博客文章中解释说:“亚瑟的父母进来给他们的孙辈和未来的曾孙录了一条信息。他们创造了一个互动的时间胶囊。”

“我从来没有想过远程呈现技术会给我们的下一代带来怎样的影响,但是你能想象一下,当一个人不在了的时候,你还能看到他发来的个性化信息,这会是什么样?”

免责声明:凡注明为其它来源的信息均转自其它平台,由网友自主投稿和发布、编辑整理上传,对此类作品本站仅提供交流平台,不为其版权负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。联系邮箱:leixiao@infoobs.com