人工智能耳机可以调成人群中的单个声音

人工智能耳机可以调成人群中的单个声音

领先品牌耳机和耳塞中嵌入的主动降噪 (ANC) 技术让世界变得更加安静。只需轻轻一按开关,咖啡店顾客和航空旅客就可以调低音量,或按下静音键,消除嘈杂的背景噪音和其他令人分心的闲聊。但是,当你在一片寂静的人群中听到一个人说话时,会发生什么?目前,耳机用户必须做出选择:继续静音整个声音环境或关闭降噪功能以进行对话。

这种在降噪和对话之间做出选择的情形有朝一日可能会成为过去,这得归功于华盛顿大学的研究人员设计的一种新型人工智能“目标语音听力”系统。在美国计算机协会最近发表的一篇论文中,研究人员声称,他们定制的概念验证耳机可以从人群中挑选出特定的声音,然后锁定该声音,同时消除周围的声音。耳机佩戴者只需直视说话者的脸,人工智能系统就会捕捉到充满其独特语音特征的声音信号。最终的结果是:耳机佩戴者可以与仍然配备降噪技术的人进行持续的对话。研究人员相信,这个系统有朝一日可以帮助部分听力受损的人,或者只是让在嘈杂环境中的交谈变得不那么混乱。

华盛顿大学保罗·G·艾伦计算机科学与工程学院教授、资深作者 Shyam Gollakota 在一份声明中表示:“在这个项目中,我们开发了人工智能来根据佩戴耳机的人的偏好来修改他们的听觉感知。有了我们的设备,即使你身处嘈杂的环境中,有很多人在说话,你现在也可以清楚地听到单个说话者的声音。”

改进后的耳机如何捕捉个人的声音

为了构建他们的系统,研究人员采用了一副现成的商用耳机,并为其配备了麦克风和板载 AI 神经网络。实际上,戴着耳机的人如果想单独辨别出某个说话者,只需直视该说话者,同时按下设备侧面的按钮即可。该按钮将启动一个称为“注册”的过程,在此过程中,耳机接收来自目标说话者的声音信号。该信号位于左右耳机上的麦克风中间,神经网络会实时分析该信号,以识别与该特定人相关的具体语音特征。然后,该数据被发送到另一个神经网络,该网络的任务是不断将目标说话者的信号与其他所有信号分离出来。

整个注册过程仅需三到五秒。一旦注册并专注于目标说话者,系统实际上会随着时间的推移而不断改进,因为它会不断接收越来越多的实时训练数据。耳机佩戴者也不需要尴尬地保持静止,盯着人的眼睛才能让系统工作。经过短暂的初始注册过程后,研究人员表示,人工智能耳机系统能够“锁定”语音信号,并在佩戴者转过头后继续跟踪它。这意味着佩戴耳机的人即使不再与说话者面对面,也可以听到孤立的声音。

“我们的方法的优势在于,佩戴者只需注视目标说话者几秒钟,在此期间我们就会识别目标说话者,”研究人员写道。“随后,佩戴者可以朝任何方向看,移动头部,或四处走动,同时仍能听到目标说话者的声音。”

在上面的视频中,华盛顿大学博士生马利克·伊塔尼演示了如何使用耳机在校园公共空间锁定一位同事,那里挤满了其他人。在注视同事几秒钟后,说话者略显低沉的声音突破了降噪雾,清晰可闻。两人在室外再次重复了测试,这次是在嘈杂的喷泉前,结果相似。一旦注册,耳机佩戴者便背对目标说话者,当他们漫步在大学校园时,可以继续听到他的声音。

华盛顿大学博士生、论文合著者 Bandhav Veluri 表示:“耳机系统利用人工智能技术提取马利克想要听到的声音,同时从那时起忽略环境中的所有声音。”

目标语音听力对于便利性和可访问性都大有裨益

以前,此类系统会首先尝试从扬声器捕捉干净、无噪音的音频,并将系统标识作为扬声器的特性。在这里,研究人员采用了不同的方法,选择构建一个即使在嘈杂环境中也能快速捕捉扬声器信号的系统。结果非常显著。研究​​人员声称,他们的系统使用不到五秒的训练数据就将信号清晰度提高了 7.01 dB。从更人性化的层面上讲,研究人员让 21 位不同的测试对象在现实世界的室外和室内环境中使用改进后的耳机,花费大约 420 分钟对信号清晰度进行评级。这些测试对象在使用系统时对目标说话者声音质量的平均评分几乎是不使用系统的两倍。

这个系统并不完美。目前,只有当目标说话者是房间中声音最大的人时,注册过程才会起作用。不过,研究人员乐观地认为,他们可以修改未来的系统来解决这个缺点。有朝一日,旅行者可以在人来人往的博物馆里使用这些耳机,专注于导游,同时屏蔽背景对话。一对在繁忙的城市街道上散步的朋友也可以使用这项技术继续交谈,而不会受到交通噪音的干扰。展望未来,研究人员表示,他们正在探索将这种新耳机柄嵌入品牌耳机和耳塞中的可能性。有朝一日,他们希望该系统可以作为助听器的辅助功能。

“人工智能,尤其是神经网络,在语音处理方面取得了巨大进步,”Veluri 说。“这个应用程序真的令人兴奋,对于有听力障碍的人来说尤其有用,因为他们想放大他们想听到的人的声音。”

伊塔尼补充道:“这可能会产生重大影响,可能会影响很多人。”

<<:  查看 B-21 核隐形轰炸机的首次官方飞行照片

>>:  谷歌的人工智能概览告诉你吃胶水。(别吃。)

推荐阅读

佐治亚州男子承认盗窃 30 多亿美元比特币

今天早些时候,美国司法部披露了当时美国历史上最大的加密货币扣押案(当时是有史以来第二大金融扣押案)。...

美国军方的热武器是真实存在的,而且很伤人。下面就是它的功效。

本周早些时候,美国国家公共广播电台 (NPR) 的一份报告披露了 6 月 1 日的一次对话,其中一名...

回顾《一起飞向天空》:每个人的歌曲都让人感动

“飞向天空吧”——《大家的歌》的魅力及其背景《飞向天空吧》是2018年2月在NHK《大家的歌》中播出...

瑞士创下最长客运列车世界纪录——而且是电动列车

公共交通是社会摆脱化石燃料的重要方面,虽然我们可能不会在美国短期内看到任何接近瑞士最新工程壮举的东西...

黑色星期五 AeroGarden 促销活动将全年种植绿色蔬菜和香草

AeroGarden 是一款自带生长灯的独立式台面水培花园,是送给家庭厨师、有园艺天赋的朋友或任何想...

反物质变得不再那么神秘

反物质是普通物质的孪生兄弟,性质相反,是一种非常棘手的物质。直到过去 20 年,科学家才能够制造出最...

你的现代厨房用具可能不会着火——是的,甚至连慢炖锅也不会着火

目前,互联网上部分人士非常担心慢炖锅可能会着火。这种强烈反应源于一部热门电视节目(出于剧透目的,我们...

“宇宙奇观”应用程序是你未来的太空教科书

平板电脑在改变我们学习方式方面有着巨大的潜力。我们在 iPad 上看到的第一个真正让人惊叹的应用程序...

城市猎人:百万美元阴谋——从现代视角全面回顾经典

城市猎人:百万美元阴谋 - 电影评论和细节概述《城市猎人:百万美元的阴谋》是一部于1990年8月25...

Ani x Para 第 15 集“第 15 集 Para 排球(坐姿)”的印象和评论

Ani x Para 的详细评论和推荐 - 谁是你的英雄?第 15 集“残疾人排球(坐姿)”概述An...

微小、有牙齿的早期哺乳动物的新化石可能是重要的缺失环节

现存哺乳动物家族树上充满了各种各样的物种——大蓝鲸、类人猿、蝙蝠、啮齿动物和人类,仅举几例。哺乳动物...

SF西游记的魅力与评价 Starzinger:宇宙冒险动画的杰作

SF 西游记 Starzinger - 太空冒险和友谊的故事概述《SF西游记:Starzinger》...

机动战士高达 THE ORIGIN Ⅵ 红色彗星的诞生 最终章观感与评价

终极高达体验——《机动战士高达 THE ORIGIN Ⅵ:红色彗星的诞生》 《机动战士高达 THE ...

《Patalliro!》的魅力与评价:独特的世界观与幽默的巅峰

帕塔利罗! - 80 年代喜剧动漫的杰作1982年至1983年播出的电视动画《Patalliro!》...

电视动画「K」第1集抢先放映!详细解释印象和评价

电视动画《K》的魅力与评价 —— 第1集先行放映感想及概要2012年9月29日至30日,电视动画《K...