更多

腾讯游戏GVoice NKF亮相ICASSP 2023

2023-06-09 14:46:33    来源:官方    编辑:第三卫    浏览量:加载中...

  6月4日-10日,国际声学、语音与信号处理会议ICASSP 2023(全称:International Conference on Acoustics, Speech and Signal Processing)在希腊罗德岛举办。在本次会议上,腾讯游戏公共研发运营体系(CROS)的GVoice携全球首次提出的混合架构的子带(subband)Neural Kalman滤波算法(GVoice NKF)亮相,目前该技术已成为Github 社区今年最受欢迎的回声消除算法之一。

游侠网1

  ICASSP是全世界规模最大、最全面的声学、语音和信号处理方面的国际会议,也是语音技术领域最具影响力的顶级国际会议之一。本次会议上,来自全球各地的学者、应用厂商代表共聚一堂,分享语音技术领域的最新研究成果,交流技术创新和落地场景应用,探讨全球语音技术发展趋势。

  在这一最前沿技术的国际舞台上,腾讯游戏GVoice内核算法负责人杨栋介绍了GVoice NKF算法的研究背景、研究过程及最新应用成果,吸引了众多与会者围绕算法展开讨论。其中,声学领域泰斗级专家Gerald Enzner教授对这一算法技术突破给予了高度评价,并与杨栋深入交流。杨栋表示,在工业界,好的回声消除算法需要满足非线性失真对线性模型的影响尽量小,双讲过程中尽量保持ERLE和SDR等指标,模型复杂度越低越好,现实环境下面具备较好的回声路径的跟踪能力,模型的泛化能力要好、做到无超参等要求。

游侠网2

  而GVoice NKF从学术角度首次提出并验证了Kalman滤波可以用数字信号处理(MB)和数据驱动(DD)混合架构完成回声消除任务,验证了数字信号处理框架指导数据驱动模型可以有效降低神经网络模型复杂度。这一算法用较少的数据就可以得到泛化能力超强的模型,并且系统性解决了贝叶斯类型自适应滤波器算法的重收敛的问题。

  目前,围绕GVoice NKF算法的论文《基于神经网络的低复杂度卡尔曼滤波器自适应回声消除算法》(Low-Complexity Acoustic Echo Cancellation with Neural Kalman Filtering)已被会议收录。同时在Github 社区中,GVoice NKF算法也受到极大关注与认可,短时间内已经获得116枚star,收藏数量名列第三,在原创算法中排名第二,且呈现出持续快速增长的状态,已成为Github 社区2023年最受欢迎的回声消除算法之一。多名行业人士表示,GVoice NKF未来将成为学术界工业研究的热点。

  GVoice NKF具有极强应用空间 助力制定及落地行业语音标准

  在实际应用中,GVoice NKF算法框架的扩展性和性能都优于其他传统类算法,能够解决更复杂的问题。例如,远端信号自相关矩阵病态导致non-uniqueness问题会让收敛速度变慢;基于MMSE传统算法的链路复杂且效果一般,面对干扰和突变信号的鲁棒性不强等。在这些问题中,GVoice NKF仅需改变两个向量维度,就可以沿用单通道NKF框架扩展成统一解决方案,仅需少量数据即可训练一个鲁棒性强的线性模型,因此多通道回声消除可以十分容易纳入到本框架下。

  近年来,移动游戏内的语音交流是玩家社交的刚需,从实时语音、语音消息到语音识别等功能,都已成为游戏厂商的关注重点。GVoice NKF算法可以提供小队语音、语音消息、语音转文字、语音同传、文明语音等功能,能够支持1万名玩家在同一个语音房间内互相交流,在UE4、Unity、Cocos、Native等平台均有不错的表现与反馈,目前已接入腾讯旗下的《王者荣耀》、《和平精英》、《天涯明月刀手游》、《英雄联盟手游》等多款游戏。

  除游戏领域外,GVoice NKF算法还被写入高通、联发科、Intel等多款CPU芯片,助力制定及落地行业的游戏语音标准。

  游戏科技亮相顶级学术会议,持续释放外溢价值

  此次,腾讯游戏GVoice NKF登上ICASSP 2023这一顶级学术会议,代表着其背后的游戏技术在学术领域进一步得到广泛认可。如今,游戏技术所拥有的可交互、高仿真、强沉浸、实时渲染等特性,已经成长为一个独立的技术新种群,并在更多领域中得以运用。这也使得游戏的技术创新和社会价值在全球范围内愈发被重视。

  而早在去年,中科院研究团队就发表了《游戏技术--数实融合进程中的技术新集群》报告。报告指出,电子游戏突出的趣味性掩盖了它的科学属性,游戏与前沿科技一直互相促进,在彼此共生中形成新的社会生产力。

  未来,伴随着游戏技术的不断进步,以及对游戏更多可能性的探索,游戏一定会融入更多经济发展与社会生活之中,成为“超级数字场景”,释放更大的科技力量和更为丰富的价值。

0
分享至
扫描关注游侠网
推荐阅读

推荐阅读

《无畏契约》删档测试今日开启 首发12名英雄+4张地图

《无畏契约》删档测试今日开启 首发12名英雄+4张地图
《无畏契约》国服正式上线前最后一次大规模删档测试现已开启,本次测试服务器24小时全天开放,并将分为三个阶段、陆续开放一系列游戏内容。
06-08 162409人已看过

《最终幻想16》优先推出PS5版 之后会认真对待PC版!

《最终幻想16》优先推出PS5版 之后会认真对待PC版!
SE《最终幻想16》首发只会推出PS主机版,PC版本还要多等半年以上。在最近一次采访中,制作人吉田直树表示:他们会认真对待《FF16》的PC版本,不过要等到PS版发布后才开始。
06-01 20005人已看过

后宫作品太受欢迎!盘点少年漫画中最受欢迎的恋爱漫

后宫作品太受欢迎!盘点少年漫画中最受欢迎的恋爱漫
日媒最近盘点了少年漫画中连载的恋爱漫画,上榜作品中有6部后宫作品,而且前三中也有两部是后宫作品,看来大家都有个后宫梦,一起来看看完整榜单。
06-03 68751人已看过

抽完烟的烟盒不要扔有大用处 囧图 辟邪剑谱的英文名

抽完烟的烟盒不要扔有大用处 囧图 辟邪剑谱的英文名
抽完烟的烟盒不要扔有大用处 囧图 辟邪剑谱的英文名
06-02 752126人已看过

主播连玩24小时《暗黑4》后睡着 角色被怪打死进度白费

主播连玩24小时《暗黑4》后睡着 角色被怪打死进度白费
太痛了!!!Twitch主播a.m. Valentine连玩24小时硬核难度《暗黑4》后太困睡着,角色被怪打死进度白费。
06-04 91064人已看过

曾被称女版乔布斯!"滴血验癌"创始人入狱:11年监禁

曾被称女版乔布斯!
血液检测公司Theranos创始人伊丽莎白·霍姆斯于美国当地时间周二正式入狱,她将迎来长达11年3个月的牢狱生涯。她曾被称为“女版乔布斯”。
05-31 21416人已看过

周润发《别叫我"赌神"》发布手绘版海报!怀旧风满满

周润发《别叫我
电影《别叫我“赌神”》发布一款怀旧风满满的手绘海报,海报通过漫画的形式展现了片中的人物关系。让我们一起来看看吧。
06-07 19854人已看过

41岁安妮·海瑟薇新写真 ​​​女神的颜值依旧顶格

41岁安妮·海瑟薇新写真 ​​​女神的颜值依旧顶格
近日,安妮·海瑟薇为宝格丽拍摄的广告写真公布,不得不说的是,虽然女神已经41岁了,但是颜值和身材依旧是天花板的存在,美得让人惊艳无比,一起来欣赏一下吧~
06-02 28078人已看过

《魔戒:咕噜》:这真的是答辩,快跑

《魔戒:咕噜》:这真的是答辩,快跑
超越《红霞岛》的大作来辣!
05-30 73293人已看过

要停更了?《怪猎崛起》6月7日将举行最终特别节目!

要停更了?《怪猎崛起》6月7日将举行最终特别节目!
《怪物猎人:崛起》发售于2021年,次年它推出了“曙光”大型DLC。现在该游戏可能即将步入尾声,卡普空昨日宣布:将在6月7日晚上10点举行最终特别节目“开发者访谈室”。
06-01 21245人已看过
返回首页 查看更多

热门美图

动漫壁纸
软萌小妹妹
二次元妹子
美腿软妹
关于游侠 | 广告合作 | 人才招聘 | 联系我们 | 网站地图 | 投诉建议 | 我要投稿 | 版权保护投诉指引
CopyRight © 1999-2023 ALi213.Net All Right Reserved 游侠网 版权所有 | 苏ICP备2023007791号