腾讯会议的AI技术,被程序员拿去“提高听力”了

在鹅厂,有个做声音相关研究的团队,从日常工作中汲取到了灵感。

为了让用户在使用腾讯会议时,听得真切清晰,他们研发了新一代实时音频技术——腾讯天籁AI技术,并成功把它嵌入在了腾讯会议里。

之后,团队成员突发奇想——

在中国,有超过2780万人是听力障碍者。如果把这项技术用在人工耳蜗上,听障人士将获得更好的听觉体验。

去年9月,我们免费开放了腾讯天籁AI音频技术,让更多公益开发者、设备厂商、NGO及行业共享这项技术,一起帮助听障人群解决“听不清”难题。

一年过去,事情有了新进展。

有了这项技术,人工耳蜗的语音清晰度、可懂度能够提升40%。

此外,我们还帮助听障人士解决了远程康复服务难的痛点。

这项技术真用在了耳蜗里

听不见的人,往往会植入人工耳蜗或助听器,就像近视或远视的我们,要去配副眼镜。

区别在于,眼镜帮助我们清晰地看到了景物;

而听障人士,即使有了人工耳蜗作为辅助,他们听到的世界,也未必与你我一样。

人工耳蜗是一种电子装置,可将声音转为电子信号,通过刺激听神经来恢复或重建聋人的听觉功能。

不过,人工耳蜗绕过了外耳和中耳,直接刺激内耳,使得人的生理降噪能力无法派上用场,降噪能力有限。

对,这种感觉,就像我们走进澡堂子时候的视觉体验——雾气弥漫,要费老大劲才能看清楚。

因此,降噪问题一直都是人工耳蜗生产厂家所面临的技术困境之一。

从去年初开始,围绕“如何让听障人士听得清楚”这个问题,腾讯找到了国内最大的人工耳蜗厂商之一——诺尔康,一起讨论解决方案。

腾讯负责提供AI解决方案;诺尔康负责将这些技术装在自家产品上,并给出测试结果。

有问题,就接着改。

现在,天籁实验室与诺尔康联合推出的“人工耳蜗+手机伴侣”联合解决方案,能够使人工耳蜗的语音清晰度、可懂度提升40%。

一方面,方案让人工耳蜗使用者能够真实辨别环境“噪音”,获取“有效”声音;

另一方面,方案将人工耳蜗与手机伴侣间的通信延迟缩减至150毫秒内,降低使用者的听觉延迟感,极大程度提升了听力体验。

解决远程康复服务痛点

植入人工耳蜗后,要经历漫长的康复治疗。

然而,这条路不好走。

如果无人陪伴,自己出门、找康复医生,对听障人士而言,是件危险的事,甚至有可能引发交通事故。

尤其是居住在偏远乡村地区的听障人士,要定期前往医院康复,路途该有多艰辛?

那么,有没有可能在家完成康复?

于是,天籁实验室和全球头部人工耳蜗厂商美笛乐,开发了一款APP——美讯听宝。

这款APP有听力测试、AI辅听、远程调机支持、远程康复服务四项功能。

也就是说,有了这个APP,你在家就能测试自己的听力状态。

测听功能不仅适用于戴上人工耳蜗或助听器的听障人士,你也可以推荐长辈使用,让他们关注自己的听力健康,及时发现问题。

“AI辅听”功能,采用了腾讯会议中的AI降噪、AI语音增强技术。看剧、听音乐时,把手机放在电视边上,并打开这项功能——能帮助听障人士听得更清晰,并感受到更优美的旋律。

主观实验结果显示,对于听障且未配戴助听设备的用户,提升单音节识别率约66%。

此外,通过这个APP,听障人士还能远程连线康复医生,接受会诊调机和康复指导服务。

今天,中国聋人协会、腾讯公益慈善基金会、浙江省微笑明天慈善基金会、腾讯会议还共同发起了“悦耳行动”。

这项行动,将为听障人士提供人工耳蜗植入手术救助、康复训练支持、职业培训等服务内容。

我们希望,他们也能听见清晰的世界,就和你我一样。

相关文章