从「听得清」到「验得准」,天籁行动AI助听探索与实践

天籁行动 来源:腾讯会议2023-06-30

6月29日,《中华人民共和国无障碍环境建设法》颁布次日,腾讯与中国残联公益组织——中国助残志愿者协会、中国盲人协会、中国聋人协会、中国肢残人协会、中国残疾人事业新闻宣传促进会在京签署战略合作协议。未来五年,双方将在立法指引下,首批推进“成立无障碍联合创新实验室、建设国家无障碍云展馆、推出残疾人证电子二维码、助力腾讯深圳前海新总部建成国际一流无障碍环境示范基地”等事项,助推我国无障碍事业高质量发展。

会上,腾讯会议天籁实验室主任商世东发表以《AI,让天籁无界》为主题的演讲,分享了腾讯天籁行动在AI助力听障无障碍领域的系列探索。商世东表示,在AI助听方面,天籁行动通过开放腾讯会议背后的天籁音频AI技术,提升助听设备的降噪效果;同时,研发发布了“腾讯天籁远程听力服务平台”,致力于实现覆盖前期筛查、中期诊疗、后期验配的听力健康服务闭环。

数据显示,我国听力障碍残疾人数高达2780万,每年至少有2万新生儿患有先天性听力障碍,有1.2亿老人存在不同程度的听力损失。腾讯天籁行动的初衷,希望通过开放腾讯会议背后的天籁音频AI技术,解决听障、听损等社会问题;同时通过公益科普、天籁AI技术开放、公益救助等方式,帮助听障听损人群更好地融入数字社会。

去年,天籁实验室基于完全自研的助听器核心算法解决方案,帮助国产助听器将复杂场景下的语音清晰度和可懂度提升85%。并携手助听器厂商进行联合研发,推出了天籁inside助听器,在兼容IEC 60118和ANSI S3.22的测试环境下,这款助听器在六大关键指标上都已经达到、甚至部分指标超过了进口助听器的水平。

今年5月,依托天籁音频AI技术,以“天籁行动”为基础,推出了“腾讯天籁远程听力服务平台”。该平台由北京听力协会等机构提供专业指导,并联合专业验配师以及头部助听器厂商等合作伙伴共同研发,旨在为听障人士提供更加便捷、高效的远程听力服务。

商世东表示,作为线下验配方式的有益补充,远程听力服务平台借助AI技术,与专业的助听器厂商、NGO机构以及验配师共同着力解决助听器的线上验配难题,让更多听障人士能够获得听得真、验得准、少跑腿的优质服务。腾讯会议天籁实验室也将与更多伙伴一起,携手共创天籁inside解决方案,助推更多听障人士能够用得好、用得起助听器,为他们更好融入数字社会提供帮助。

自2020年发起以来,腾讯天籁行动面向听障社会责任领域,联合公益生态伙伴,已经帮助446万用户进行听力水平筛查、帮助35.1万畅听王卡用户提升语音通话和字幕识别效果、为超1.1万听障人士进行言语康复训练及发放耳蜗植入补贴、为韶关500位家庭条件困难的听障老人捐赠天籁inside助听器等,为听障群体更好地融入数字社会提供了力所能及的帮助。

腾讯会议天籁实验室主任 商世东

以下为演讲全文:

尊敬的各位嘉宾、媒体老师们,大家下午好!

我是腾讯会议天籁实验室的商世东。今天我的分享主题是《AI,让天籁无界》,在这里跟大家分享一下,腾讯天籁行动这几年,在AI助听,以技术助力无障碍建设方面的探索与实践。

有关数据显示,我国听力障碍残疾人数高达2780万,每年至少有2万新生儿患有先天性听力障碍,有1.2亿老人存在不同程度的听力损失,老年性耳聋,占据了我国听力残疾致残原因的首位,占比高达 51.61%。另外,听力损失也是引发认知障碍、跌倒、抑郁的高风险因素,亟需得到重视与关注。

我所在的腾讯会议天籁实验室,是腾讯会议旗下,专注做音视频通信处理和研发的团队,把AI技术用在腾讯会议的音频降噪处理、语音增强等场景,也通过腾讯云音视频为客户提供服务,目前已经服务了亿级的会议用户。

三年前,我们了解到,听障人士即使佩戴了助听器等设备,仍面临诸如噪音干扰、听不清等难题,于是联合各方合作伙伴,正式发起了“天籁行动”,面向开发者、设备厂商、NGO等,开放天籁音频AI技术,希望提升助听设备佩戴者的体验。

这几年,我们持续开放天籁AI助听解决方案,与国内外多家助听设备头部厂商、运营商展开了深入合作。例如,我们与MED-EL合作,推出了全球首个集成“听力测试+AI辅听+远程听力康复服务”的平台,单音节识别率提升了约66%;与诺尔康合作,在国内首个解决了人工耳蜗多复杂场景识别和动态实时噪音处理的难题,把人工耳蜗语言清晰度和可懂度提升了40%。我们希望通过天籁音频AI技术,真正提升人工耳蜗用户的使用体验。

助听器是听障人士进行听力补偿的有效手段,然而国内仅有5%-10%的中、重度听障老人佩戴了助听器,远低于欧美国家30%的水平。一来因为进口助听器价格昂贵,动辄万元起步;二来国产中低端助听器降噪效果、佩戴体验都难达预期,体验不佳。

所以,在人工耳蜗场景验证了天籁AI的技术价值后,去年9月,我们研发推出了自研的助听器算法解决方案,帮助国产助听器,将复杂场景下的语音清晰度和可懂度提升了85%,并联合合作伙伴智听推出了天籁inside助听器产品。

我们也围绕助听音质、运行功耗、端到端时延等持续优化相关的解决方案。相比去年,目前的方案,功耗降低了40%,算法延迟降低超30%。

我们坚持技术开放,联合权威机构、合作伙伴共同进行产品、应用创新。同时也联合腾讯公益慈善基金会、SSV银发科技实验室等团队,发起了面向听障老人的专项救助基金“天籁银发关爱基金”,并率先在广东韶关、重庆等地进行了试点落地。

“天籁银发关爱基金”首期已经在广东省韶关市试点落地,我们在当地民政部门的支持下,联合长益基金会、当地乡村助老社工团队、助听器厂商等合作伙伴的力量,为500位家庭条件困难的听障老人捐赠了天籁inside助听器。在这个过程中,打造了 “爱耳科普、公益测听、线下义诊、公益救助”的听障帮扶闭环,也逐步探索出了技术公益的长效模式。

助听器是听力补偿的重要辅具,和近视验光一样,验配是助听器佩戴非常关键的一环。但目前助听器的线下验配,仍面临很多挑战。比如出行带来的不便、会产生的时间、差旅成本。而且专业的验配门店、验配师资源少、分配不均,像我们去到的韶关,都是在小县城、乡镇或偏远农村地区,线下验配服务极为不便。这些因素都限制了助听器的普及。

作为助听器线下验配的有益补充,今年5月,我们正式发布了“腾讯天籁远程听力服务平台”。这个平台由北京听力协会等机构提供专业指导,联合专业验配师、头部助听器厂商、业内资深专家等共同研发。

依托天籁领先的音频AI能力,可以有效保障平台音视频连接的稳定、高质,让助听器远程验配效果更清晰、真实。基于腾讯会议一键连接,验配师操作简易,听障用户只需一部智能手机即可在家完成验配,实现筛查、验配、调参、听力干预在线一体化。

我们将为生态伙伴提供开放的技术接口和数据共享机制,通过开放共建,共同为听障人士提供专业、清晰、高效、便捷的远程听力服务。

天籁行动经过3年的持续耕耘,我们取得了一些成果,比如,已经帮助了446万用户进行听力水平筛查,在韶关定点救助了500位听障老人,为超过1.1万听障人士进行言语康复训练及发放耳蜗植入补贴,等等。未来,我们也将探索技术助力无障碍建设的更多可能性,为听障群体更好地融入数字社会,提供力所能及的帮助。

最后,远程听力服务平台,是腾讯天籁AI助听方案的重要一环,我们希望可以打通筛查、测听之后,腾讯“天籁行动”助力听障人士融入数字社会的“最后一公里”,实现覆盖前期筛查、中期诊疗、后期验配的听力健康服务闭环。让更多听障人士,听清世界的声音。

以上,就是我分享的全部内容,谢谢大家!

订阅获取最新咨讯

点击“订阅获取最新资讯”按钮即表示您已同意腾讯会议通过邮件向您推送最新产品信息。查看腾讯会议隐私政策

阅读更多新闻