近日，Meta宣布与宝马合作开展的车载MR研究取得新进展。
据悉，该联合研究项目于2021年宣布，旨在探索有朝一日将AR和VR集成到智能车辆中，以用于车载娱乐和驾驶员辅助。这项技术可能会彻底改变汽车、火车、飞机等的旅行，解锁新的免提通信、娱乐和实用形式。
VR头显配备了许多传感器，但移动的车辆带来了一个棘手的挑战，因为像OculusInsight这样的跟踪技术同时使用惯性运动传感器（IMU）和摄像头来精确估计头显的位置和运动。
在非惯性参考系中，这两种模式是冲突的，因为摄像头观察相对于汽车内部的运动，而IMU测量相对于世界的加速度和旋转速度。这种不匹配意味着像MetaQuest2这样的VR头显目前在车辆内转弯和/或加速时无法显示稳定的虚拟内容。
如今，Meta将宝马汽车传感器阵列的IMU数据实时整合到“Project Aria”研究头显的追踪系统中。这些附加信息允许系统计算头显相对于汽车的位置。不过，由于Aria眼镜没有任何形式的显示，因此研究人员将解决方案移植到Quest Pro以测试将虚拟物体实际锚定到汽车内部。
Meta认为这是车载MR功能的新突破。其表示，在新方案下即使汽车急转弯、快速加速或越过颠簸路段，虚拟内容也能保持稳定。
未来，Meta希望继续与宝马合作，进一步利用现代汽车不断增长的机器感知能力，以实现未来的用例，继续开展关于6DoF定位系统及地标识别等新功能的研究，例如识别地标和其他兴趣点。Meta预计这种能力对于未来的AR眼镜和个性化AI助手将是无价的。
