Michael Abrash 和 Facebook Reality Labs 的目标是能够过滤噪音并将虚拟音频置于现实世界中的音频。Facebook未来的 AR智能眼镜计划仍在制定中，但很快就会看到曙光的等式之一是智能音频。空间音频和增强音频现实是 Facebook 积极感兴趣的两个领域，该公司最新的 Facebook Reality Labs 研究更新详细介绍了该公司计划如何制造可以调出现实世界并使虚拟对象听起来像是正确的设备在你旁边，即使他们并不真的在那里。
Facebook 称之为 Audio Presence 和 Enhanced Hearing 的两项独立技术都是该公司试图破解的音频难题的一部分。与此同时，更大的增强现实领域仍然是一个悬而未决的领域，包括苹果、谷歌、微软、Magic Leap等在内的玩家都致力于推动下一个十年的创新。
Facebook 最初计划在本月晚些时候即将举行的Facebook Connect 会议之前接待访客进行演示。相反，由于引起的社交距离问题，记者在与 Facebook Reality Labs 研究负责人 Michael Abrash 和音频研究团队的聊天中获得了虚拟简报。
智能音频 AR 并不新鲜：在今年早些时候其 AR 音频部门显然关闭之前，Bose 已经对其进行了多年的试验。Apple 的 AirPods Pro具有主动降噪和直通功能，并将在今年秋季增加3D 空间音频支持。空间音频已经是现实 VR 的一个关键功能，但 Facebook 的下一波计划更侧重于对话、注意力和音频保真度，包括将隐形扬声器 3D 放置在看起来像是在同一个房间的地方。对我来说，最了不起的事情是，一切(关于 Facebook 的新音频技术)在合理的时间内都是绝对可行的，亚伯拉什说。
根据 Abrash 的说法，音频技术最终可能会出现在像Oculus Quest这样的 VR 耳机 ，甚至其他 Facebook 设备上。
Facebook 目前使用空间音频进行的实验涉及使用消声室和带有扬声器阵列的机器人手臂来环绕一个人并计算他们耳朵的特定空间音频几何形状，这需要 30 分钟，因此它几乎不便携。下一步是将该过程缩小到拍摄耳朵照片以获得该测量值(Facebook 称之为与头部相关的传递函数，或 HRTF)。智能眼镜还有很长的路要走，Facebook 用于在进行测量后测试音频的设置更像是带有音频播放和聚焦麦克风的眼镜，还没有视觉元素。
Facebook Reality Lab Research 的音频小组也在寻求使这种音频技术具有辅助性，聆听和增强对话并提高语音清晰度，同时过滤背景噪音或其他人说话。
Facebook 的一些 3D 音频和音频感应超能力的概念让我想起了多普勒实验室几年前尝试过的工作，在它的 Here One 耳塞上使用各种环境噪声过滤器。Facebook 的研究使用波束成形来聚焦音频，还使用了具有定向麦克风的测试人员佩戴的空间感知原型。该公司制作了一个定制的入耳式监听器来创建这种音频，目的是最终将这项技术应用到未来的产品中。
多年来，我一直想知道音频增强现实是否可以成为让始终开启的 AR 眼镜工作的大门。音频可以是环境性的，人们已经一直戴着耳塞，并且已经学会让它在他们的生活中发挥作用。永远在线的全息视频是另一回事。在 2D 手机上，像谷歌地图这样的平视 AR 实验已经显示了现实世界中平视显示器的局限性，而音频方向的干扰性要小得多。也许音频可以作为信号提示来触发视觉效果。Facebook 尚未明确这一过程，但该公司周四发布的一篇博客文章承诺，这种未来的音频可以用于导航经过AR 优化的实时地图 Facebook目前正在组装空间映射世界。
Abrash 承诺，该公司在空间音频方面的进步已经产生了逼真的 3D 音频，看起来像是来自现实世界而不是耳机，但目前的研究涉及复杂的耳朵扫描和特定的空间映射房间。该公司正在开发可能与在家中进行简单的摄像头耳朵扫描一起使用的算法，从而使该技术更易于使用。
这可能意味着 Facebook 耳塞吗?手机上的AR应用程序?Oculus Quest 的未来发展方向?也许对所有这些都是肯定的。这表明沉浸式 AR 可穿戴设备中更大、更棘手的注意力和焦点问题仍然需要仔细考虑。但这也表明 Facebook Reality Labs 最终可能会致力于某种耳机技术。