生物行移动版

主页 > 神经科学 > 脑机接口

大脑实时解码注意力:新型脑控听觉设备首次实现“鸡尾酒会”中的精准语音分离

在嘈杂的社交场合中,人们常能依靠大脑的天然能力聚焦于一个说话者,忽略周围的其他声音——这一现象被称为“鸡尾酒会效应”。然而,传统助听器却无法做到这一点,它们只会不加区分地放大所有进入麦克风的声音,导致用户在多人交谈环境中倍感吃力。如今,哥伦比亚大学祖克曼研究所的科学家们首次通过人体实验提供了直接证据,证明一种实时脑控听觉系统能够像“神经延伸”一样,利用大脑自身的过滤能力,动态地隔离并增强目标对话。

从脑电波到语音增强:实时闭环系统的核心机制

这项发表于《Nature Neuroscience》的研究,其核心在于将听觉注意力解码(Auditory Attention Decoding, AAD)从理论概念转化为可提供即时感知益处的功能原型。研究团队与神经外科医生合作,招募了因癫痫手术而预先植入了颅内电极的患者。这些电极能够以极高的时空分辨率记录大脑皮层活动,为系统提供了精确的神经信号输入。

系统的运作原理基于一个关键发现:当一个人专注于某个说话者时,其大脑电波的“波峰”和“波谷”的时序会与该说话者语音中的声音和沉默的节律同步。研究团队开发的实时机器学习算法能够持续监测这些脑电波模式,并将其与环境中分离出的多个独立语音流进行比对。一旦算法匹配到与听者脑电波同步的特定语音,系统便会立即调整音量,增强该目标语音,同时抑制其他干扰声音。这种闭环控制实现了“实时”的神经反馈调节。

“我们开发了一个作为用户神经延伸的系统,利用大脑在复杂环境中过滤所有声音的天然能力,动态地隔离他们想要听到的特定对话,”资深作者、哥伦比亚大学祖克曼研究所首席研究员兼电气工程副教授Nima Mesgarani博士解释道。“这项科学使我们能够超越传统助听器(它们只是简单地放大声音),展望一个技术可以恢复人脑复杂、选择性听觉的未来。”

实验验证:显著提升语音清晰度并降低听觉努力

在多项实验中,研究人员向志愿者同时播放两段重叠的对话,并记录他们专注于其中一段时的脑活动。系统不仅能在研究人员引导受试者关注特定说话者时准确工作,还能在受试者自由选择对话时同样稳定运行,这更贴近真实社交场景。结果显示,该系统正确识别了志愿者关注的对话,并即时调整了音量。

“为了让系统实时工作,它必须非常快速、准确且稳定,才能让听者感到舒适,”Mesgarani博士强调。实验数据表明,与未使用系统辅助的对话相比,该系统显著提高了志愿者所关注语音的清晰度(speech intelligibility),并明显降低了听觉努力(listening effort)。志愿者在主观偏好测试中一致选择了有系统辅助的对话。一位志愿者甚至难以置信地指责研究人员在“偷偷调整音量”,而另一位则感叹:“这听起来像是科幻小说。”

值得注意的是,该系统不仅处理了“引导式”注意力转移,还成功追踪了“自发式”注意力切换。第一作者、在Mesgarani实验室获得电气工程博士学位的Vishal Choudhari指出:“核心的未解问题是,脑控听觉技术能否超越渐进式进步,迈向一个能实时帮助人们听得更好的原型。我们首次证明,这种通过读取大脑信号来选择性增强对话的系统可以提供明确的实时益处。这使脑控听觉从理论走向了实际应用。”

临床意义与未来展望:对抗听力损失及其深远影响

根据世界卫生组织的数据,全球有超过4.3亿人患有致残性听力损失,其中许多人在嘈杂的社交环境中挣扎最为严重。未经治疗的听力损失是导致痴呆症的主要可改变风险因素之一,也是抑郁和社交隔离的主要原因。这项研究为未来可穿戴系统奠定了基础,这些系统有望将大脑感应与先进音频处理相结合,不仅帮助听力受损者,还能减轻任何人在餐厅、教室、繁忙工作场所和家庭聚会等日常挑战性环境中的听觉疲劳。

科学家们强调,在将该技术转化为微创、可穿戴形式并应用于更复杂的现实场景之前,仍有大量工作要做。例如,他们希望未来测试系统在更复杂的真实听力条件下的表现。Choudhari补充道:“这些结果标志着向新一代与听者意图一致的脑控听觉技术迈出了重要一步,有可能改变人们在嘈杂、多说话者环境中导航的方式。”


Journal Reference: Vishal Choudhari, Maximilian Nentwich, Sarah Johnson, Jose L. Herrero, Stephan Bickel, Ashesh D. Mehta, Daniel Friedman, Adeen Flinker, Edward F. Chang, Nima Mesgarani. “Real-time brain-controlled selective hearing enhances speech perception in multi-talker environments.” Nature Neuroscience, 2026. DOI: 10.1038/s41593-026-02281-5
(责任编辑:泉水)