语音产品测试语音产品测试音音质测试和性能测试质测试和性能测试网易杭州研究院宾峥bz326@163.com•移动通信•电话会议•网络电话•游戏语音•。。。语音产品的范围低劣音质的悲剧•音质测试–语音过程的实现–什么在影响音质？–如何改善音质？–怎么测试音质？•服务器性能测试–测试需求–测试方法–测试数据–测试瓶颈概要语音过程的实现语音回放语音采集语音输入采集语音预处理回声消除噪声抑制自动增益编码器AAC发送缓存打包解码器AAC语音输出语音回放网络传输混音器接收jitter解包语音处理回声消除衡量语音质量的因素•延时•流畅•清晰•舒适•......什么在影响音质？•环境背景•客户端硬件–输入输出设备–cpu•语音引擎–有损压缩–采样率–语音处理技术•网络•服务器–服务器丢包网络对音质的影响•抖动–tcp抖动–udp抖动、乱序•udp丢包•网络延时延时的来源•网络延时•客户端–接收端jitter延时–发送端延时–采集、回放延时–编、解码延时•服务器延时如何改善音质？•语音引擎的优化–回声消除–噪声抑制–自动增益–静音检测和舒适噪音–......•适应网络环境•强大的服务器适应网络环境•对于延时–网络传输延时无法规避•对于抖动–jitterbuffer•对于丢包–发送端增加冗余数据–接收端增加丢包补偿策略–服务器端增加丢包补偿策略•极端情况下–发送端转成tcp–接收端转成tcp强大的服务器•分布式、可扩展•转发语音数据不做任何逻辑处理•确保硬件处理能力达到要求改善音质的悖论•语音引擎无法兼顾高音质、低延时、低带宽•使用jitter缓解抖动时，会增加延时•发送冗余数据缓解丢包，会增加延时和带宽占用•发送冗余数据会增加服务器压力•极差网络环境下，TCP连接虽能明显改善音质，但也会增加延时、带宽占用和服务器压力•......如何评价音质？•主观评价–平均意见分MOS（MeanOpinionScore）–下降的平均MOS（DegradationMeanOpinionScore）–诊断押韵测试DRT（DiagnosticRhymeTest）–满意度判断测试DAM（DiagnosticAcceptabilityMeasure）等•客观评价–建立一个人脑与耳朵的模型，模拟听众环境–通过这个模型模拟听觉失真–计算出一个质量指标，衡量原始语音与经过处理的语音之间音质下降的程度–这些指标通常都与主观测试有相似的值域，但没有严格的映射。•PSQM（PerceptualSpeechQualityMeasure，感知通话质量测量）--ITU-TP.861•PSQM+--荷兰KPN公司•PESQ（PerceptualEvaluationofSpeechQuality，感知评估通话质量测量）--ITU-TP.862客观评价算法音质评价方法比较•主观评价方法–是最终用户的感受，反映语音的真实质量–耗时、成本高，不可重复•客观评价方法–可以批量、自动进行–评估结果较为准确–操作复杂、成本高昂，适用于电信级别我们怎么测试？•语音引擎设置的影响•语音引擎对网络的适应性•产品对网络的适应性•与其它产品音质对比语音引擎设置的影响•语音样本输入到语音引擎•语音引擎输出到播放设备•排除网络因素•调整语音引擎参数和设置•多人次、多样本主观评价语音引擎语音样本采样率x采样率y音质评分延时音质评分延时引擎A对话样本歌曲样本引擎B对话样本歌曲样本语音引擎对网络的适应性•udp丢包时的音质语音引擎语音样本丢包率x丢包率y丢包率z引擎A对话样本歌曲样本引擎B对话样本歌曲样本引擎C对话样本歌曲样本•抖动&乱序时的音质语音引擎语音样本随机抖动区间x随机抖动区间y引擎A对话样本歌曲样本引擎B对话样本歌曲样本引擎C对话样本歌曲样本产品对网络的适应性•测试场景设计–上行or下行–tcporudp–抖动–udp丢包语音样本测试场景A测试场景B测试场景C音质评分延时音质评分延时音质评分延时对话样本歌曲样本与其它产品音质对比•测试场景设计–网络环境–软硬件环境–所在测试房间的人数、设置等语音产品语音样本测试场景A测试场景B音质延时音质延时产品A对话样本歌曲样本产品B对话样本歌曲样本•如何可重复•如何更客观•如何更精确•。。。怎样做得更好？除了音质...•还需要强大的服务器语音服务器架构•不同房间段的服务器隔离•同一房间段内服务器可扩展用户a用户b用户c用户n房间段A语音服务器语音服务器语音...
