绿色检查
链接复制到剪贴板

探索 AR 技术的发展和 Meta 的 Orion 眼镜

了解增强现实技术及其应用,以及 Meta 的新型 Orion AR 眼镜及其沉浸式体验的潜力。

尽管我们生活在一个丰富的、充满数据和信息的三维(3D)世界中,但我们日常使用的大多数设备都依赖于二维(2D)屏幕。然而,随着技术的进步,这种情况正在随着增强现实(AR)等创新技术的引入而慢慢改变。AR 用于将图像声音和数据等数字内容与我们的现实世界环境相融合,使其更具互动性和吸引力。 

人工智能(AI),尤其是计算机视觉,是增强现实技术的主要推动力。视觉人工智能使增强现实设备能够通过检测物体跟踪运动识别空间特征来分析和解释环境。在本文中,我们将探讨增强现实的工作原理及其在教育医疗娱乐等领域的应用。我们还将讨论最近取得的突破,如Meta 公司新推出的 Orion 增强现实眼镜,它使增强现实技术变得更加普及。让我们开始吧!

图 1.一名学生在课堂上使用 AR。

增强现实技术的发展

增强现实技术通过智能手机、平板电脑或 AR 眼镜等设备,将图像、视频或 3D 模型等数字元素添加到现实世界中。例如,如果你将手机摄像头对准一张空桌子,增强现实技术就能让这张桌子看起来像放了一个虚拟咖啡杯。AR 可以将计算机生成的元素与我们在现实生活中看到的元素融合在一起,从而增强我们对周围环境的感知。

1968 年,被誉为"计算机图形学之父"的伊万-萨瑟兰在哈佛大学创造了第一个 AR 头戴式显示器。AR 最初用于航空、军事和工业培训等领域。AR 的首次商业应用出现在 2008 年的宝马迷你车互动广告中。用户将印刷好的杂志广告放在电脑摄像头前,就能在屏幕上看到汽车的数字模型并控制其运动,感觉就像在现实生活中与汽车互动一样。这为 AR 进入营销旅游时尚娱乐等行业打开了大门。随着2016年《口袋妖怪Go》等游戏应用程序的流行,AR的采用率也随之增加。预计到 2034 年,全球增强现实市场规模将达到惊人的 28,048.2 亿美元左右。 

图 2.全球 AR 市场规模增长图。

计算机视觉在 AR 中的作用

包括计算机视觉、传感器和机器学习在内的各种技术共同创造出身临其境的增强现实体验。尤其是计算机视觉技术,它是通过增强现实技术将数字内容轻松集成到现实世界环境中的基础。下面将详细介绍计算机视觉对增强现实技术的不同贡献:

  • 物体识别利用计算机视觉技术(如物体检测图像分割物体跟踪),AR 系统可以通过分析物体的大小、形状和颜色来识别物体。一旦识别出来,就可以叠加三维模型或文本等虚拟内容。
  • 定位和映射:计算机视觉可用于同步定位和映射(SLAM),实时跟踪设备的位置和方向,确保虚拟元素与用户视图保持精确对齐,带来稳定的体验。
  • 手势和动作识别:视觉人工智能可用于跟踪用户的手势、面部表情和动作,从而实现与 AR 中虚拟内容的自然交互。 
  • 深度估计:图像分析可以帮助 AR 设备通过分析所看到的内容,了解物体在环境中的距离。这有助于将虚拟元素放置在合适的距离,使其与现实世界自然融合,改善整体 AR 体验。
  • 环境适应:计算机视觉可用于调整虚拟对象,以应对 AR 中的照明、反射和阴影等现实条件。 

例如,假设您正在使用 AR 应用程序观看客厅中的数字雕塑。当您移动手机或 AR 头显时,计算机视觉系统就会开始使用物体检测功能识别房间周围的物体,如沙发或茶几。 

与此同时,SLAM 技术会绘制房间布局图,并跟踪你的设备位置,确保雕塑固定在一个位置。当你走近时,深度估算会帮助应用程序调整雕塑的大小,使其看起来位置逼真。如果你挥手,手势识别功能可以让你旋转或调整雕塑的大小。该程序还可以调整雕塑的光影,使其与房间的光线条件相匹配,从而与您的客厅完美融合。

猎户座Meta 的增强现实眼镜

AR技术发展迅速,Meta公司最近于2024年9月25日在Meta Connect 2024活动上发布了Orion AR眼镜。据 Meta 公司首席执行官马克-扎克伯格(Mark Zuckerberg)介绍,Orion 是有史以来最先进的 AR 眼镜,集众多尖端功能于一身。它看起来像一副普通的眼镜,但具有沉浸式 AR 功能,提供迄今为止 AR 眼镜中最大的视野。 

这款眼镜重量很轻,镜框由镁合金制成,类似于F1 赛车中使用的材料,先进的冷却系统灵感来自美国宇航局的卫星,佩戴舒适。眼镜使用定制碳化硅制成的下一代显示屏,微型投影仪可以在你面前显示不同深度和尺寸的全息图像。

Orion AR 眼镜有语音控制、手部追踪、眼部追踪和腕带界面等选项,腕带界面可以接收来自肌肉的电脉冲,通过细微的动作控制 AR 元素。腕带可作为神经接口,让你通过简单的手势与眼镜互动,成为整体体验的关键部分。这款眼镜还配备了一个袖珍的小型处理球,可提供您外出时所需的计算能力。 

图 3.Meta 的 Orion AR 眼镜、神经腕带和处理球。

让 Orion 脱颖而出的是它与Meta AI 的集成,Meta AI 是一种智能助手,可以识别现实世界中的物体并提供有用的见解。例如,如果你看到一组食材,MetaAI 就能向你推荐食谱。您还可以将任何墙壁变成观看视频的屏幕,加入全息视频通话,或玩互动游戏,使 Orion 成为 AR 体验中令人兴奋的一步。

可穿戴 AR 技术的应用

与使用手机或平板电脑不同,可穿戴 AR 技术(如 Orion AR 眼镜或头盔)让您无需手持设备即可体验增强现实技术。让我们来了解一下可穿戴 AR 在不同应用中的作用。

AR 让教育更无障碍

许多学生都是动手型或视觉型学习者,而增强现实技术可以帮助教师创建更具互动性的课程。利用头戴式耳机或智能眼镜等可穿戴 AR 技术,教师和学生可以以更动态的方式参与教学内容,随时随地学习。 

这些可穿戴设备在偏远地区尤其有用,因为一旦下载了必要的数据,许多 AR 应用程序就可以离线运行或在连接性极低的情况下运行。发展中国家正在利用可穿戴 AR 为有需要的学生提供优质教育。在卢旺达、尼日利亚和南非等国,可穿戴 AR 正在帮助偏远地区的学生接受教育,仅在卢旺达就有超过 50 万名学生受益。

图 4.非洲偏远地区的一名学生使用 AR 技术学习。

用于游戏的 AR 眼镜

AR 最流行的应用领域是游戏。游戏行业开始认识到 AR 眼镜如何使游戏更具沉浸感和互动性。玩家可以通过 AR 看到现实世界中的虚拟元素,让他们感觉自己真正成为了游戏的一部分。例如,玩家可以免提探索周围环境并与之互动,使体验感觉更加自然。 

AR游戏最初是在移动设备上流行起来的,比如《口袋妖怪Go》(Pokémon Go),玩家使用手机摄像头捕捉口袋妖怪。Pokémon Go》是一个重要的里程碑,因为它在短短 7 天内就吸引了超过 2000 万活跃玩家,展示了AR 的潜力

图 5.玩家在游戏《口袋妖怪 Go》中使用 AR。

AR 如何帮助医生和外科医生

借助增强现实技术,医生和医疗专业人员可以访问和研究三维医学图像。事实上,支持 AR 的医疗成像工具可以帮助医生在三维环境中直观地观察病人的解剖结构。更清晰的可视化可带来更准确的诊断、更好的手术效果和更安全的手术过程。 

AR 还可以帮助医疗保健专业人员提供更加个性化和有效的护理,如确定疾病的位置和程度、规划手术程序以及让患者更好地了解自己的病情。例如,使用 AR 头显,外科医生可以在医疗过程中查看病人的生命体征,而无需同时使用多个设备和显示屏。这样,他们就不容易误读或曲解数据。

图 5.一名医务人员在手术过程中使用 AR 头显。

主要收获 

增强现实技术将改变我们与数字世界的互动方式。通过将虚拟元素与现实世界相结合,AR 创造了比传统屏幕更身临其境的体验。Meta 的 Orion AR 眼镜具有先进的功能、舒适的设计和人工智能功能,是 AR 技术的一大进步。随着 AR 在我们的日常生活中越来越常见,我们可以预见物理世界和数字世界之间的界限将变得越来越模糊,从而为创新和创造带来新的可能性。

想了解有关人工智能的更多信息?查看我们的GitHub 存储库,了解我们在人工智能和计算机视觉方面的贡献,同时不要忘记与我们的社区互动。了解我们如何利用尖端的人工智能技术重新定义制造业农业等行业。

Facebook 徽标Twitter 徽标LinkedIn 徽标复制链接符号

在此类别中阅读更多内容

让我们共同打造人工智能的未来

开始您的未来机器学习之旅