一种增强现实头戴设备（X-AR）可以让用户看到隐藏的物体
麻省理工学院（MIT）的研究人员制造了一种增强现实头戴设备，可以为佩戴者提供X射线般的视觉能力。
上图：增强现实头戴设备结合了计算机视觉和无线感知，可以自动定位隐藏在视线之外的特定物品，可能在盒子内或货堆下，然后引导用户取回。
这种头戴设备结合了计算机视觉和无线感知，可以自动定位隐藏在视线之外的特定物品，可能是在一个盒子里，也可能是在一堆东西下面，然后引导用户去取回它。
该系统利用射频（RF）信号，可以穿过纸箱、塑料容器或木制隔板等常见材料，以找到标有RFID标签的隐藏物品，RFID标签可以反射射频天线发送的信号。
当佩戴者穿过房间走向物品的位置时，头戴设备会引导佩戴者，物品会在增强现实（AR）界面中显示为一个透明球体。一旦物品在用户手中，这款名为“X-AR”的设备就会验证他们是否拿对了物品。
当研究人员在一个类似仓库的环境中测试 X-AR 时，该头戴设备平均可以将隐藏的物品定位在9.8厘米以内。它验证用户拿起正确物品的准确率为96%。
在实际应用中，X-AR 可以帮助电子商务仓库工作人员快速找到杂乱的货架上或被埋在盒子里的商品，或者当许多类似的物品在同一个箱子里时，可以识别出订单中的确切商品。它还可以用于制造设施，帮助技术人员找到正确的部件来组装产品。
上图：X-AR系统因其通过增强现实（AR）向用户提供X射线般的视觉而得名。
法德尔·阿迪布（Fadel Adib）是MIT电气工程与计算机科学系副教授、媒体实验室信号动力学小组主任，也是一篇关于X-AR的论文的资深作者，他说：“我们这个项目的整个目标是建立一个增强现实系统，让你看到看不见的东西（盒子里或角落里的东西），通过这样方式，它可以引导你找到它们，真正让你以以前不可能的方式看到物理世界。”
阿迪布的合著者包括研究助理塔拉·博鲁沙基（Tara Boroushaki），她是这篇论文的第一作者；梅西·林（Maisy Lam）；劳拉·多兹（Laura Dodds）；还有密歇根大学的助理教授艾琳·伊德（Aline Eid）。这项研究将在 USENIX 网络系统设计与实现研讨会上发表。
增强AR头戴设备
为了制造一款具有X射线视觉的增强现实头戴设备，研究人员首先必须在现有的头戴设备上安装一根可以与RFID标签物品通信的天线。大多数RFID定位系统使用多个相距数米的天线，但研究人员需要一种轻质天线，可以实现足够高的带宽来与标签通信。
艾琳·伊德表示：“一个很大的挑战是设计一种天线，既能安装在头戴设备上，又不会覆盖任何摄像头，也不会阻碍摄像头的工作。这一点非常重要，因为我们需要使用面罩上的所有规格。”
该团队采用了一种简单、轻便的环形天线，并通过将天线逐渐变细（逐渐改变其宽度）和增加间隙进行实验，这两种技术都可以提高带宽。由于天线通常在室外工作，研究人员还对其进行了优化，以便在连接到头戴设备的面罩时发送和接收信号。
一旦团队建立了一个有效的天线，他们就专注于使用它来定位带有RFID标签的物品。
他们利用了一种被称为“合成孔径雷达（SAR）”的技术，这种技术类似于飞机对地面物体的成像。当用户在房间里移动时，X-AR用天线从不同的有利位置进行测量，然后将这些测量结果结合起来。通过这种方式，它就像一个天线阵列，将来自多个天线的测量结果组合在一起，以定位设备。
X-AR 利用头戴设备自跟踪功能的视觉数据来构建环境地图，并确定其在该环境中的位置。当用户行走时，它会计算RFID标签在每个位置出现的概率。标签的确切位置的概率最高，因此它使用此信息来锁定隐藏的对象。
劳拉·多兹解释道：“虽然，我们在设计系统时遇到了挑战，但我们在实验中发现，它实际上可以很好地适应人体的自然运动。由于人体经常移动，它使我们能够从许多不同的位置进行测量，并准确地定位一件物品。”
一旦 X-AR 定位了物品，用户拿起它，头戴设备就需要验证用户是否抓取了正确的对象。但是，这一刻用户是站着不动的，耳机天线也不动，所以它不能使用SAR来定位标签。
然而，当用户拿起物品时，RFID标签也会随之移动。X-AR可以测量RFID标签的运动，并利用头戴设备的手部跟踪功能来定位用户手中的物品。然后它检查
然而，当用户拿起物品时，RFID标签也会随之移动。X-AR可以测量RFID标签的运动，并利用耳机的手部跟踪功能来定位用户手中的物品。然后，它会检查标签是否正在发送正确的RF信号，以验证它是否是正确的对象。
另外，研究人员利用头戴设备的全息可视化功能，以简单的方式为用户显示这些信息。一旦用户戴上该设备，他们就可以使用菜单从标记物品的数据库中选择一个对象。在对象被本地化后，它会被一个透明球体包围，这样用户就可以看到它在房间中的位置。然后，设备会以脚步的形式将导航轨迹投影到地板上，该轨迹可以随着用户的行走而动态更新。
梅西·林说：“我们抽象了所有的技术方面，所以我们可以为用户提供无缝的、清晰的体验，如果有人要在仓库环境或智能家居中使用它，这将尤其重要。”
测试头戴设备
为了测试X-AR，研究人员创建了一个模拟仓库，用纸箱和塑料箱填充货架，并在里面放置带有RFID标签的物品。
他们发现，X-AR可以以小于10厘米的误差引导用户接近目标物品，这意味着平均而言，该物品的位置距离X-AR引导用户的位置不到10厘米。研究人员测试的基线方法的中位误差为25至35厘米。
他们还发现，该设备在98.9%的时间里可以正确地验证用户拿起的正确物品。这意味着X-AR能够将拾取误差降低98.9%。当物品仍在盒子里时，准确率甚至达到了91.9%。
塔拉·博鲁沙基解释道：“系统不需要通过视觉来来验证你是否拿对了物品。如果你有10款包装相似的手机，你可能分不出它们之间的区别，但该设备可以指导你选择正确的那款。”
现在，他们已经证明了X-AR的成功，研究人员计划探索如何使用不同的传感模式，如WiFi、毫米波技术或太赫兹波，来增强其可视化和交互能力。他们还可以增强天线，使其范围超过3米，并扩展系统，以供多个协调的头戴设备使用。
法德尔·阿迪布表示：“因为目前没有这样的东西，我们必须弄清楚如何从零开始建立一个全新类型的系统。实际上，我们提出的只是一个框架。虽然有很多技术上的贡献，但它也将是未来如何设计具有X射线视觉的AR头戴设备的蓝图。”
微软行业研究董事总经理兰维尔·钱德拉（Ranveer Chandra）并没有参与这项工作，但他表示说：“这篇论文使AR系统在非视线场景下工作，为AR系统的未来迈出了重要一步。它使用了一种非常聪明的技术，利用射频传感来增强现有AR系统的计算机视觉能力。这可以推动AR系统应用到以前不存在的场景，如零售、制造业或新的技能应用。”
这项研究得到了美国国家科学基金会、斯隆基金会和麻省理工学院媒体实验室的部分支持。
如果朋友们喜欢，敬请关注“知新了了”！
- 发表于:
- 原文链接：https://kuaibao.qq.com/s/20230228A02F5N00?refer=cp_1026
- 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号（企鹅号）传播渠道之一，根据《腾讯内容开放平台服务协议》转载发布内容。
- 如有侵权，请联系 cloudcommunity@tencent.com 删除。
相关快讯
扫码
添加站长 进交流群
领取专属 10元无门槛券
私享最新 技术干货
腾讯云开发者
