IT之家6月24日消息微软日前发布新一代深度神经网络HiFiNet声码器,与微软上一代语音技术相比,由HiFiNet声码器合成的神经网络版声音质量再创新高,主要体现在发音更准确、韵律更自然、高保真效果更完美,更受客户青睐。自推出以来,被广泛应用到有声读物、在线教育、车载语音助手等领域。
IT之家获悉,HiFiNet是微软神经网络版语音合成技术中最新的声音编码器,是决定音频质量的关键因素。根据专业评估语音自然度的MOS测试结果显示,由HiFiNet声码器合成的语音音质可与用于训练的真人录音样本相媲美,并同时改善毛刺、噪音等音频质量问题,输出的音质具备更高保真度,更大程度还原真人录音。
(微软上一代声码器合成声音)
(微软HiFiNet声码器合成声音)
语音质量的优劣会直接影响收听者的感受,为提升用户收听的舒适度,在Azure语音合成系统中,神经网络声学模型基于深度学习网络,使用真人录音作为原始数据进行迭代训练。首先,提取真人录音的声学特征。然后,利用真人录音的声学特征自动生成两组音频:一组真实声波(原始录音)和一组伪波(合成声波)。最后,由鉴别器区分真实声波和伪波。随着训练次数的增多,声波生成器也会愈发“聪明”,直至生成鉴别器也无法区分的伪波,这意味着机器合成的声音已经和原始录音相差无几,从而给用户带来更贴近自然的体验。
(真人原始录音)
(微软HiFiNet合作声音)
由微软HiFiNet声码器合成的音频质量更接近真人原始录音。
▲HiFiNet声码器训练示意图
采样率越高,声音还原越真实。Azure神经网络版语音合成声学模型默认每秒钟采样24,000次(24千赫兹),为还原特殊场景中更为复杂、细微的声音内容,HiFiNet声码器每秒钟采样48,000次(48千赫兹),满足用户对语音质量的严格要求,让用户尽享高清语音体验。
▲音频采样频率与保真度对比示意图
除语音质量外,HiFiNet合成速度较之其他模型也有显著的提升,进一步提升了语音合成的实时率。据RTF(RealTimeFactor,实时率,用来测量语音合成速度的工具)测试结果显示,HiFiNet在GPU设备上运行的速度是第一代高性能声码器的3倍,在CPU设备上运行的速度是第一代高性能声码器的2倍。
目前,内置HiFiNet声码器的Azure认知服务神经网络版语音合成服务已支持超过70多个国家和地区的语言,提供超过170个自然逼真的音色供开发者选择。
有关HiFiNet及语音合成的更多内容:
关于HiFiNet
关于语音合成试用版
关于语音合成的更多资料
关于示例代码
多倍效率提升!精灵4 RTK「一控多机」为国土航测按下加速键
目前,全域土地综合整治试点申报工作正在全国各地如火如荼开展。自然资源部印发的《关于开展全域土地综合整治试点工作的通知》明确要求:整治任务、指标和布局要落实到具体地块,确保新增耕地面积原则上不少于原有耕地面积的5%,确保新增永久基本农田面积原则上不少于调整面积的5%。因此,精准地获取地块使用及占比数据...
明志科技董事长吴勤芳:吸引高端人才,是中小型民营企业都头疼的问题
吴勤芳介绍经过20多年发展,明志科技从“我有什么,给客户提供什么”,到“客户需要什么,我们就能提供什么”,现在还会去研究,创造客户需求。从传统的制造业转型为综合的制造加服务,甚至具备创造客户需求,这个过程中有诸多挑战,他认为最重要的是人才问题。“中小型的民营企业吸引高端人才,不单单是薪酬、工作环境的...
不知道万用表怎么使用,没关系教你快速掌握方法
“万用表”无论作为一个电子爱好者还是一个小白我们都应该学会其使用方法,因为其使用范围实在是太广了,我们每个家庭都会用到电,接触到电器,既然有电器就说明难免有意外情况,如果某一天万一发生了意外情况,家里的线路断了,或者说电器不能正常使用了,这时候就需要我们用万用表去检测故障元件或者故障电路;还有时候我...
最新科技助力《远去的恐龙》
3覃晓梅《远去的恐龙》是“十年磨一剑”的成果我们现在看到的演出,遍及全国各个景点、很多城市,内容包括各种系列,歌舞、杂技、武术、动漫各种表现形式都表现到了极致。这一次我们不想再“炒旧饭”,一定要做新的形式。贺立德是做技术的,我们全世界去看去找,想了一个办法就是用机器人做演出。因为《印象•刘三姐》的演...