域名频道资讯站
人类之所以能感知到 3D 空间的立体声，得益于双耳的独特结构。基于声音传播的时差，大脑才能够确定物体的距离和位置。这种 3D 音频体验，可以通过模拟双耳的立体声设备来录制和复现。
遗憾的是，大多数音频都是单声道格式的（录制时就只使用了单个麦克风）。虽然日常生活中已经“够用”，但它并不适合 VR 等追求沉浸式体验的应用场景。
2.5D Visual Sound（via）
有鉴于此，将单声道音频转换成双声道，就变得很有必要。好消息是，研究人员 Ruohan Gao 和 Kristen Grauman，已经找到了一种相当接近的方法。
该方法依赖于视频，在深度学习技术的加持下，通过分析画面中各个物体的空间位置，即可转换出更加立体的 2.5D 音频。
当然，这项方法也存在着一定的限制，尤其是存在一些让 AI 无法理解的对象的时候。感兴趣的朋友，可以观看上面这段演示视频。
本文素材来自互联网
