GVoice AI Codec语音技术落地和平精英，实现手游端“超音速”游戏语音体验
您有无试过如许的场景：当您“开黑”正酣，指挥着队友有条没有紊朝“仇人”后方挺进，忽然语音失落线，由于接洽没有到队友而堕入伶仃无援之境，进而痛失好局，不能不咽下败北的苦果……
跟着挪动端游戏产物的发作，让游戏内的语音交流成为天南海北的玩家交际的刚需，同样成为界说“高质量游戏”的首要身分之一，游戏内语音交互已经经成为比年来浩繁游戏厂商的关注意点。
近日，腾讯游戏公布了最新游戏语音技能方案，腾讯游戏光子S事情室以及平精英团队携手腾讯AI Lab、腾讯游戏CROS GVoice(腾讯游戏语音)团队，基于深度学习在语音编解码器上的不竭突立，将AI Codec运用于以及平精英游戏中，在行业内率先完成AI Codec 更低码率更高品质的语音编码，由此成为首个将AI Codec技能周全运用于游戏语音领域的产物。
弱网情况下的语音交流成“开黑”痛点
此前艾媒征询对挪动游戏交际相干数据的统计讲明，近 4神仙道% 的玩家由于交际身分抉择一款游戏;15.6% 的玩家由于一款游戏交际性差而抉择脱离。是以，提高游戏的交际属性已经成为各大游戏厂商的首要事情。
作为削减玩家“孤军奋战”感觉的有用手腕，游戏语音自降生起就深受玩家喜好，而且在手游期间，玩家们对挪动手机真个游戏语音传输的品质、延迟时间以及使用情况，提出了愈来愈高的请求。
究竟上，及时语音通讯技能在行业内早已经没有是一个新话题，但游戏内及时语音交流不单单是简略地完成及时通话便可。一个“好”的语音，最首要的是听感品质合适人的听觉请求，在这个条件下，传输码率越低，用户花费的流量就越少;占用算力越少，CPU的能耗就越少。
成长至今，游戏语音传输技能在两个方面寻觅突立。
起首是在弱网卑劣情况下，若何确保语音交流流利是游戏语音技能面对的一个首要课题。一样的听感品质，若是语音信息的码率越低，其传输的联贯性就越有保障，换言之，低码率更合用于弱网情况。
其次，算力的消耗也是游戏语音要斟酌的身分。因为重度游戏对CPU算力请求较高，是以，若何让语音功用尽量的削减对CPU的占用，在保障用户的交流休会的同时，不合错误游戏操纵以及计较资本进行过量的挤压，成为此中的重点。
人工智能为游戏语音加之“BUFF”
当语音开黑、游戏交际成为刚需，浩繁海内外的科技企业也起头涉足这一领域。
在确保语音品质的条件下，传统的音频解码技能Codec致力于使用较少的网络带宽资本、较低的传输码率去通报更保真的语音信息。跟着深度学习技能的成长，彻底基于神经网络的语音编码器逐渐替换了传统的基于旌旗灯号处置惩罚的方式，成了业内前沿的解决方案。在此根蒂根基上，基于人工智能技能退化的AI Codec也愈来愈遭到业界的关注。
为了给游戏内语音交互加之人工智能的“BUFF”，游戏界也进行了诸多测验考试。比方，业界经常使用的Opus声响编码花式在低码率语音信息传输方面浮现没有如人意。2神仙道19年，行业涌现了一些超低码率 AI Codec，可以或许以极低码率对语音进行压缩，可是还原出的语音品质没有太抱负。
Google一样将眼光对准了这一领域。2神仙道21年头，Google公布了基于自回归网络的AI Codec Lyra。Lyra可以或许在以低码率传输的同时包管声响效果，但不克不及提供高品质的及时通讯，算法存在延迟的环境。 半年后，Google再次公布了新的AI Codec模子SoundStream，相比于Lyra，SoundStream在语音传输品质方面有所晋升，但因为模子繁杂度较高，没法在大大都的手机上平稳运转。
首个游戏挪动端AI Codec语音技能落地以及平精英
与此同时，针对游戏内语音交互，海内厂商也在踊跃索求更好的解决方案。
作为海内头部战术竞技手游，以及平精英始终致力于晋升游戏质量优化玩家游戏休会。 此中游戏语音由于运用场景浩繁，使用率极高，语音质量的优劣对游戏焦点休会有着相当首要的影响，始终都是以及平精英团队最关注的功用。
2神仙道21年末，以及平精英团队携手腾讯AI Lab、CROS游戏语音GVoice团队一块儿正式破项GVoice AI Codec研发名目，基于腾讯音频与语音处置惩罚Oteam在语音编解码标的目的的技能堆集，新名目出力完成高品质、低码率以及低功耗的游戏内及时语音情况。经由过程针对游戏场景进行深度优化，GVoice AI Codec在游戏场景下的语音处置惩罚算法比传统即时通信软件有加倍优良的音质浮现，而且在弱网情况下，以低码率包管了音质浮现没有受损害，确保在挪动端患上以运用。
腾讯游戏语音GVoice是Tencent Games CROS为游戏打造的语音解决方案。资料显示，今朝GVoice服务已经经笼盖全世界跨越2神仙道神仙道个国度以及地域，日活泼用户超3亿，相干解决方案被运用于以及平精英iong/' target='_blank'>英雄联盟手游海角明月刀手游等数千款游戏。GVoice AI Codec技能也将慢慢拓展至其余游戏，晋升语音交流流利度，改善弱网情况下的用户休会。
据领会，GVoice AI Codec 经由过程自研编解码模子算法，传输带宽完成了压缩，并以 5-12kbps 的AI Codec替代了原来24kbps的Opus，用户在客观听觉上的休会不较着差异。这象征着，GVoice AI Codec在包管音效品质的同时，传输码率更低，流量也更少。
在算力损耗方面，GVoice AI Codec须要将这一运算繁杂度与资本占用极高的编解码方法，经由过程模子压缩、量化、并行运算、挪动端指令集适配等工程化措施，不竭下降运算与资本开消，到达挪动端落地请求。数据显示，GVoice AI Codec在手机OnePlus 3双工通话下测试，相比Opus花式 CPU占用率资本增加约为2.3%;在iPhone 6s下测试，接纳GVoice AI Codec后CPU占用率增加约1.3%。这讲明，GVoice AI Codec用极低的CPU使用率增幅，换来了手机端更低流量的高品质及时通话。
(左图为原始语音，右图为GVoice AI Codec 编解码后语音，从波形上看右图语音保真度高，客观听感濒临原始语音)
GVoice AI Codec技能在以及平精英中运用后，语音服务品质总体获得了进一步的晋升。起首，经由过程对语音流量的优化，GVoice AI Codec可以或许极大的晋升玩家在交通出行、户外勾当等弱网情况下的语音流利性，防止在剧烈战役时泛起卡麦、断麦的环境。其次，GVoice AI Codec因为使用AI模子算法，相比传统的语音算法在人声传输方面会有所晋升，在以及平精英中玩家间的语音沟通效果会加倍清楚，不管是战术共同仍是多人闲谈都有更佳的交际休会。名目组经由过程在不一样嘈杂情况、多种游戏情形下进行了多轮语音测试，成效显示均得到了更优秀的玩家反馈。
从游戏成长的角度而言，GVoice AI Codec在以及平精英上的胜利落地，为更多游戏语音技能的研发功效落地打下了根蒂根基，使患上相干技能拓展至更多游戏成为可能。
无交际，没有游戏。可以预感的是，跟着云游戏、VR/AR等更多游戏品类的萌生，GVoice AI Codec 技能也将在更多品类的游戏休会方面起到愈来愈大的作用，成为新的行业尺度。
