Meta 将利用 AR 智能眼镜数据开发机器人、汽车和医疗保健应用案例

就在 Meta 发布其 XR 教学解决方案并宣布一系列教育合作伙伴关系仅一周后,该公司再次强调与教育机构研究人员建立的一系列联盟,以新颖有趣的方式推动 XR 技术的发展。

在最新的合作中,Meta 与几所大学合作,推动对 Project Aria 的研究,Project Aria 是一款尚未开发的人工智能 AR 智能眼镜设备,也与 Meta Orion 项目保持一致。

与 Orion 设备一样,Project Aria 旨在进一步研究日常 AR 可穿戴设备和 AR 数据驱动服务。目前,Meta 正在通过 Ray-Ban 设备推出一款面向市场的 AR 产品。然而,与 Meta 的承诺相比,这款产品的 AR 可视化和 AI 集成相对基础,其面向未来的原型设备和框架提供了更深层次的技术集成和 BCI 功能。

Aria 框架似乎专注于如何将 AR 环境数据应用于机器人、医疗保健和汽车等一系列案例。最近的大学合作伙伴关系旨在通过与世界领先机构的研究部门合作,继续开展这项全公司范围的研究,这些机构利用 Aria 研究套件 (ARK) 来发现新形式的免提 XR 通信。

Meta 协助范式转换研究

首先,布里斯托大学(University of Bristol)正在与 ARK 合作,推进该团队在 Ego-Exo4D 方面的内部工作。该项目使用 Aria 传感器创建真实世界空间的 3D 模型。

Ego-Exo4D 希望利用 Meta 智能眼镜捕捉高技能人员(如运动员或厨师)与空间互动的方式,并将环境数据纳入机器人框架。

布里斯托大学计算机视觉教授 Dima Damen 博士解释说:

我创办研究实验室的初衷是纯粹地研究如何通过可穿戴相机、自我中心视觉和具有区域等多传感器的技术来理解行为,这些技术使我们能够进行更深入的感知。现在,自我中心相机拍摄的镜头正在成为我们所谓的预训练或准备设备的常态,然后机器人通过观看大量录像来理解这些录像,它们现在可以成功地复制动作。

Damen 指出,Aria“配备了一系列传感器,例如凝视传感器;它能让你了解人在环境中的位置。”这使研究人员能够对以人为中心的数据进行建模,为机器人项目等创造新的动力。

另一方面,爱荷华大学正在利用 Aria 框架为听力受损人群提供医疗保健服务。利用上述 Aria 环境数据,爱荷华大学的研究人员可以创建一种可以翻译声音来源的设备。

ARK 框架还帮助印度理工学院海得拉巴分校的研究人员开发驾驶员意图预测项目。该项目利用计算机视觉来预防汽车事故;通过使用 Aria 凝视数据(如布里斯托尔研究项目),印度理工学院海得拉巴分校的研究人员可以了解驾驶员正在寻找什么,以提高对机动车事故的认识。

印度海得拉巴理工学院计算机视觉专业博士生 Avijit Dasgupta补充道:

借助 Aria 眼镜,我们可以开发一个视频理解模型,帮助我们避免事故。Aria 的主要优势在于眼睛注视数据。您可以绘制出驾驶员注视的场景,看看他们是在注意前方的车辆,还是在转弯时看着后视镜。

Dasgupta 还指出,Aria 套件提供音频反馈,“这就是所有传感器协同工作的方式”,从而使数据收集“非常容易”。

“这大大提高了我们的工作速度;每年,有数百万人死于事故。如果我们能为此建立一个有效的模型,我们就能挽救数百万人的生命,”达斯古普塔评论道。

此外,Meta 还与卡内基梅隆大学机器人研究所合作,协助开发 Navcog,这是一款智能手机医疗保健应用程序,为视障人士提供音频寻路服务。

此次合作使研究人员能够减少对蓝牙的依赖,并利用 Aria 框架更有效地响应新的在线环境。

在 Meta 寻求提高 AR 数据在智能眼镜硬件之外的新用例的可转移性之际,国际大学研究合作伙伴关系应运而生。

值得注意的是,Meta 补充说,Aria 可应用于 具身人工智能、情境化人工智能、人机交互 (HCI) 和机器人等研究主题。 

尽管 Meta 在 Connect 2020 上宣布了 Aria,但 Aria 项目仍处于早期阶段,官方网站也处于起步阶段。随着 XR 技术在硬件之外的应用越来越广泛,即在有价值的空间数据的应用方面,其用例也将会增加。

Meta 为美国/英国教育机构带来 VR/MR 头显和元宇宙

Meta 还宣布推出 Meta for Education 测试版计划,这是一款专为高校设计的新产品,于 4 月首次亮相。该解决方案旨在通过 Quest 的 VR 和 MR 头戴设备产品组合,为教师、培训师和管理人员提供教育专用的 XR(扩展现实)服务。

该测试版本正在美国和英国各地的高校推出,包括亚利桑那州立大学、休斯顿社区学院、伦敦帝国理工学院、迈阿密戴德学院、莫尔豪斯学院、新墨西哥州立大学、圣地亚哥州立大学、萨凡纳艺术设计学院、格拉斯哥大学、爱荷华大学、利兹大学、迈阿密大学和密歇根大学。

参与的大学将与 Meta 合作,在测试版发布时提供反馈,以帮助在更广泛发布之前完善和改进 Meta for Education 产品。该产品旨在支持各种学科,例如科学、医学、历史和语言艺术。

与去年推出的 Meta Quest for Business 模型一样,新的教育解决方案旨在通过专为学术环境设计的 XR 应用程序和管理功能为教师、培训师和管理员提供支持。

更新后的管理功能允许教师在课堂环境中同时使用多台 Quest 设备。此外,先进的设备管理工具使教师无需单独更新每台设备,从而简化了入职流程。

有趣的是,Meta 强调教育套件包括 Metaverse 功能,这可能会重振其曾经被大肆宣传的技术承诺。Meta 解释了这些 Metaverse 解决方案如何通过数字实地考察和培训机会来增强课堂效果。

Meta 称早期成果“前景光明”,值得注意的是,伦敦帝国理工学院帝国理工 IDEA 实验室执行董事 Monica Arés也表示,“这是一个伟大的时刻,任何一家机构或一家公司都需要联合创作者、开发者、教育机构、研究组织和科技公司共同构建这个新的学习生态系统,因为它将使每个个人和行业受益。”

在首次发布和反馈期之后,Meta 计划在 2024 年的最后几周扩展其解决方案。该公司专注于 Quest 产品组合的教育和培训应用。几个月前,Meta Quest 3S 在 Connect 活动期间刚刚发布,该设备旨在作为将混合现实 (MR) 集成到各个领域的可访问切入点。

本文来自作者投稿,版权归原作者所有。如需转载,请注明出处:https://www.nxrte.com/zixun/53991.html

(0)

相关推荐

发表回复

登录后才能评论