Meta blog post recap: a ten-year journey toward the next computing platform
CheckCitation/SourcePlease click:XR Navigation Network
(XR Navigation Network 2024年04月05日)自马克·扎克伯格宣布收购Oculus以来,已经过去十年时间。日前,Meta发布博文回顾了这段路程,并展望了未来。以下是具体的整理:
我们正站在下一个计算平台的边缘,而这个平台的重点是人而非产品。在过去的十年里,我们一直在朝着这一时刻前进,投资于人工智能和元宇宙的重大研发,以帮助迎来下一轮以人为本的计算浪潮。我们的产品,包括Meta Quest 3和 Ray-Ban Meta智能眼镜,已经在改变数百万人体验世界的方式。
我们把你的手带到了虚拟现实(无论有没有控制器)。
我们发明了内向外追踪,这样人们就可以在无线束缚的情况下探索新世界。
我们以低于2000美元的价格为你提供eye tracking和自然面部表情。
我们让你以大约一台游戏机的价格无缝地融合虚拟世界和物理世界。
我们与一个由开发者、创作者和梦想家组成的社区一起完成了这一切。
今天,Meta Reality Labs正在庆祝元宇宙和人工智能过去十年的工作,并在展望未来。
自马克·扎克伯格宣布收购Oculus,并开始认真推进他对元宇宙的愿景至今已有十年时间。这是对Reality Labs十年的投资,包括未来的研究、持续的产品开发和大量的原型。
如果你关注Reality Labs有一段时间,你很可能熟悉首席科学家迈克尔·亚伯拉什(Michael Abrash)。他一直都非常清楚,MR和AR将是个人电脑的继任者,而这是他与扎克伯格的共同愿景。
亚伯拉什表示:“无论身在世界的哪个地方,我们都可以相互陪伴,而不是被距离分开。我不用局限在一个屏幕工作,我可以有很多屏幕,然后可以从任何角度与你分享,我可以点击切换工作区,我们的Avatar可以像在同一个房间里一样进行协作,使用比物理世界中的同类工具更好的虚拟白板等工具。我加入Meta是因为非常明显的原因,XR将改变世界,马克·扎克伯格看到了同样的未来,并做出了承诺,所以资源将确保到位。这个未来真的会发生。”
今天,我们将回顾过去,庆祝过去十年的创新,感谢早在这个领域成为主流之前就对它抱有信心的人,以及让这一切成为可能的社区。
从Rift开始
这一切都始于一个开发工具包和一个梦想……以及大量的胶带。超过9000名狂热者总共提供了240万美元来帮助实现这一梦想。从DK1到DK2,Oculus团队把人们从客厅里抬到摩天大楼顶并直视霸王龙的眼睛,而他们只是刚刚开始。
Rift于2016年3月开启了现代VR,而他们随后于同年12月推出了我们的第一代Touch控制器。Touch采用符合人体工程学的设计,鼓励自然的手势和交互,开辟了一个充满可能性的新世界,比如在《The Climb》中用自己的手攀登悬崖,在《 The Mage’s Tale》中比划施法。
这是一个需要专用虚拟现实房间和通常复杂的传感器设置的时代,直到Rift S于2019年5月发货。后者结合了Quest首次引入的内向外追踪技术,消除了对外部传感器的需求。我们现在比以往任何时候都更多地投资于PC VR,包括Air Link和远程桌面等。但我们看到了无线一体机所能提供的自由,所以我们剪断了电源线,并朝这一方向全力以赴。
随时随地的Go
Go是我们第一款VR all-in-one machine产品,它于2018年推出,并旨在成为拥抱VR的最简单方式。起价199美元,设备大大提高了视觉清晰度,同时减少了Rift的纱窗效应。
Go是人们通过Quest体验到的媒体和娱乐的早期前身,它为人们提供了音乐会、电影、体育赛事等的前排座位,同时允许他们以当今智能手机无法实现的方式与朋友共聚。在我们以Go的三自由度为基础构建Quest的六自由度追踪,并搭载改进的光学和显示技术之后,体验只会变得更好。
我们与小米合作,在全球范围内推出了Go和专为国内market打造的小米VR。Go同时标志着我们与High-pass多年合作关系的开始,以满足VR一体机(最终是MR)产品类别的计算需求。这是我们与业内其他公司合作,共同将科技带给每个人的持续战略的一环。
开创征途的Quest
除了Rift S,我们同时推出了Quest,这是世界第一款六自由度VR一体机,于2019年上市。人们第一次无需布线即可自由探索虚拟世界。由于人工智能在手部追踪方面的突破,用户可以使用自己的双手探索虚拟世界并与之交互。2020年10月,我们推出了Quest 2,并迎来了更多的人加入。2021年带来了一系列技术发展,如最初的Passthrough和Air Link,人们可以通过WiFi将PC VR游戏无线串流到Quest。我们继续稳步推出新的软件更新,而随着时间的推移,人们的头显的价值将不断增加。
通过2022年10月的Quest Pro,我们向世界介绍了引人注目的混合现实,包括眼动追踪和自然面部表情。仅仅一年后,Meta Quest 3于2023年10月推出,成为世界第一款大众市场的MR头显,允许全球各地的人们无缝融合虚拟世界和物理世界。
从多任务处理日常事到NBA赛季的场边座位,从Meta Horizon Worlds的音乐会到你个人影院的好莱坞热门节目,从完全沉浸式的世界到你最喜欢的Xbox游戏,Quest 3已经成为终极家庭娱乐系统。广泛的健身和健康应用使得Quest 3成为获得相关收益的好方法。《Super Rumble》允许你通过头显与朋友们一起吃鸡。随着新的合作伙伴关系、游戏和体验的不断公布,体验只会变得更好。
通往新联结形式的Portal
2017年,Building 8因其对brain computer interface和新型免提通信模式的研究而引起了轰动,但正是视频通话设备奠定了它的传统。
Meta对智能扬声器的回应是,Portal通过屏幕和人工智能智能智能摄像头提供环境信息、娱乐等,允许人们在视频通话中保持在画面中。一位获奖剧作家利用Portal与3000英里外的演员和导演合作。军人家庭使用Portal在士兵服役期间保持联系并享受故事时间。一对湾区夫妇通过Portal订婚,一家人在疫情期间用它度过了海岸到海岸的美好时光。
当然,创新之路并不总是线性的。人们喜欢Portal。它为大家提供了跨越数英里的新联结方式,而且体验非常有趣。从孙子们与远方的家人分享他们最新的工艺项目,到永远不必错过生日聚会(甚至周日晚餐),Portal可以帮助人们克服距离。这是一款领先的智能家居设备…同时是最早集成视频通话屏幕的公司之一。
智能手机与智能眼镜
想象一下,你可以以更人性化、简化的方式利用电脑或智能手机的所有实用性和优势。你将能够完成你计划要做的一切,并获得前所未有的力量。情景感知型人工智能可以帮助你探索和了解周围的世界,你可以一眼就能获得丰富的3D虚拟信息。你同时可以更好地与朋友和家人建立联系,无论他们碰巧在世界的哪个地方。
现在再想象一下,如果你能用一副轻便时尚的眼镜来完成这一切。这是第一款方便易用的设备,它不会强迫你在物理世界和数字世界之间做出选择,而是以无缝、直观的方式将它们结合在一起。这种眼镜允许你抬起头来,与你周围的世界保持联系,而不是把你的注意力转移到手掌的边缘。
这是我们对AR眼镜的长期愿景,而我们现在正在朝着这个目标努力。今天的智能眼镜是一块重要的垫脚石:时尚、全天可穿戴的外形,并搭载智能技术、传感器等。这就是为什么我们与EssilorLuxottica合作,从人们喜爱的标志性时尚开始,然后再重新想象它的样子。
2021年9月,我们推出了第一代智能眼镜Ray Ban Stories。它们有着令人印象深刻的音频效果,非常适合听音乐、收听播客和在旅途中接听电话。但更重要的是,凭借高质量照片和视频的免提拍摄,Ray Ban Stories为人们提供了一种新的方式来捕获这一时刻,同时保持完全沉浸其中。
2023年10月,Ray Ban Meta智能眼镜系列首次亮相,它以第一代眼镜为基础加倍改进。我们在Ray Ban Meta智能眼镜集成了Meta AI,并对其进行了优化,以实现免提、随时随地的体验。通过说“嘿,Meta”,人们可以激发创造力,获取信息,并控制眼镜,而这一切只需使用你的声音。多亏了人工智能,随着时间的推移,眼镜会变得越来越好、越来越智能。新的人工智能体验即将到来,包括多模态人工智能,因而眼镜可以理解你所看到的内容,从而提供有用的答案。
假设现在是晚饭时间,你不知道吃什么。你可以在柜台摆放一定的配料,并请Meta AI为你提供食谱建议。或者说你正在旅行,遇到一个德语标志。你可以查看文本,并要求Meta AI为你提供母语解释。
不懈的研究
最后但同样重要的是,我们将焦点转向Reality Labs Research(RL-R)。与Meta的基础人工智能Fundamental AI Research team (FAIR)非常相似,成立RL-R是因为我们明白对未来下重注的重要性。RL-R拥有丰富的长尾研究遗产,并致力于推动从显示系统到触觉等领域的最新技术向前发展。我们定期发表我们的研究,与更广泛的研究学界分享,这样他们就有机会扩展它。
但这并不全是登月计划和研究原型。RL-R是诸多成功技术兑现的所在地,包括Quest的手部追踪和我们智能眼镜产品中的音频增强。正是RL-R与我们产品团队的携手合作,使得Quest Pro和后来的Quest 3中推出的Pancake透镜和偏振光学器件成为可行的现实。
RL-R内部的团队(以及整个公司的产品团队)远非满足于安于现状,他们正继续探索很可能在未来几年成为行业标准的新研究领域,包括EMG、超逼真的 Codec Avatars和情境化人工智能。所有这一切都是令人兴奋的新技术,我们相信,随着下一次计算范式的重大转变到来,所述技术将帮助人们与设备和彼此无缝交互。
说到人工智能…
从计算机视觉到机器学习等等,人工智能一直在我们的长期元宇宙愿景以及我们为实现这一目标所做的工作中发挥着关键作用。最近在大型语言模型领域的突破正在加速我们的进步。
这就是我们作为一家公司的两大赌注结合在一起的地方。Quest 3提供了引人注目的MR体验,从完全沉浸式到允许你与物理世界和数字内容协同交互的体验,而Ray Ban Meta智能眼镜则可以支持你利用Meta AI的实用性和娱乐性,但随着这两种技术的融合,AR眼镜将提供两全其美的效果。就像智能手机没有淘汰笔记本电脑或台式电脑一样,AR眼镜不会成为MR头显的终结。相反,我们看到的是一组设备构成了未来的结构。由于过去18个月人工智能模型的快速突破,我们现在认为,即便在没有显示器的情况下,我们在迈向全AR眼镜的道路上所拥有的智能眼镜都将比我们之前想象的更具吸引力和实用性。
为未来而创建
我们正在构建一种新型的计算平台,而它将帮助你更好地与你关心的人和事建立联系。这种联系比今天的2D屏幕更自然、更直观,并且意味着可以帮助你与朋友和家人同步工作、学习、玩耍、购物和创造的体验,以及不容易适应我们今天使用电脑和智能手机模式的全新体验。
科技,尤其是连接人们的科技,它们应该要向尽可能多的人提供。这是我们工作的基础,同时是我们DNA的核心。创新就是要实现新的突破。要真正做到这一点,你需要把突破带给大众。
亚伯拉什指出:“马克(扎克伯格)在Reality Labs投资打造了一系列的卓越知识、使命和资源,创造了一个50年一遇的机会来改变世界的工作、游戏和连接方式,就像个人计算一样。但更重要的是,计算的下一次进化即将发生。但它如何发生真的取决于谁来执行。如果你想成为其中的一员,Reality Labs会是一个很好的地方。”
在过去的十年里,我们非常荣幸能与社区一起工作,共同致力于使下一个计算平台成为现实。我们将致力于继续公开地建设,并与帮助铺平道路的合作伙伴合作。我们迫不及待地想看看未来10年会发生什么。