腾讯推新型AI游戏语音处理技术,在嘈杂环境也能开黑

越来越多玩家在游戏时需要团队作战,位于不同地点的玩家对实时传输语音质量的要求日渐提高。
而玩家在游戏时很可能身处嘈杂环境,因此手游语音通话面临着来自外界噪音、游戏内背景音乐及音效的降噪挑战。
一般情况下,手机上的语音算法往往会运行在手机的cpu上,这样会大量消耗cpu内存等处理计算资源。
为了让玩家体验优质语音,畅快开黑,腾讯游戏语音gvoice与vivo联手打磨出基于第五代qualcomm ai引擎的游戏语音处理技术,旨在从源头提升语音体验。
腾讯方面表示,gvoice算法针对游戏场景进行深度优化,在游戏场景下比传统im软件的语音处理算法有更加优异的音质表现。传统im软件(voip)算法的平均杂音时长比例为11.5% ,而gvoice的平均杂音时长比例为3.4%。
gvoice & voip杂音时常比例对比
利用qualcomm ai引擎上的dsp运行gvoice算法后,降噪效果更加明显。vivo深度优化运行在qualcommai引擎上hexagon处理器里面的gvoice参数,以针对游戏场景取得更佳效果。
如下图所示的某场景下:对比于传统的算法(左通道),vivo和腾讯游戏gvoice合作的腾讯游戏语聊定制优化通路(右通道)在语音还原(青色框内)和噪声压制(黄色框内)的表现上面都有提升,其降噪效果在部分场景可以提升10db左右。
vivo深度优化算法在噪声环境下,语音还原
开启游戏及gvoice语音后,gvoice中的降噪算法不再运行在cpu上,而是运行在qualcomm ai引擎的hexagon处理器上,整机耗电量下降20ma/s,gvoice所占的cpu资源在原有基础上减少约30%。
新一代游戏语音处理技术还对“发送语音效果”进行了优化。
传统将算法运行在cpu上面,手机端为了获取更好游戏背景音效,不得不牺牲部分场景下的发送语音效果,导致队友之间的聊天有时变得断续。
而gvoice的应用使手机端和游戏端的算法完全绑定,vivo仍然可以通过深度优化运行在qualcomm ai引擎hexagon处理器里面的语音算法参数,得到更好的语音聊天效果。
责编ajx

移远通信发布超紧凑Wi-Fi 6 蓝牙5.1模组FCM360W
爱立信推出全新三频三扇区无线系统
晶体定标与匹配负载驻波比测量
高通无线充电技术助力共享电动汽车时代来临
基于ARM Cortex-M4F内核的MAX32630和MAX32631微控制器
腾讯推新型AI游戏语音处理技术,在嘈杂环境也能开黑
手势感应技术的崛起 将是物联网设备最佳接口
2020年5G手机销量将突破1.99亿 将占据2020年智能手机出货量的15%
MPLS VPN行业揭秘
生物识别新方式:指纹认证和面部认证都不及汗液认证
美商务部长:将在数周处理华为出口许可申请
华为P10国行版明日发布:价格是最大看点!
一款可准确放大电压的单芯片解决方案
联想推出ThinkServer SE550边缘服务器,助力企业智能化转型
高速论坛讲座回放|​LVDS接口旧话新说&误码判定的逻辑
5G技术正在不断为老工业基地产业振兴而注入新活力
技术简介40 :了解可编程延迟线:概述DS1020,DS10
企业新闻 | 东科半导体与安徽工业大学举行共建联合实验室揭牌暨奖学金捐赠仪式
LED第四种驱动技术的分析与应用
原材料缺货,国外厂商交期过长,国产替代正当时