2-蔡优笔-媒体视频&编解码性能质量评价.pdf

1、媒体视频&编解码性能质量评价蔡优笔OpenHarmony媒体子系统 媒体体验评测高级工程师蔡优笔加入华为11年+，深耕媒体音视频传输、编解码业务体验评测，具有非常丰富的实时音视频编解码、网络传输增强算法等主客观评测实践，深度参与OpenHarmony音视频编解码测试工作。华为-2012实验室-媒体技术院 多媒体体验评测高级工程师目录CONTENTS视频质量客观评价意义&挑战&解决方案01 视频编解码性能评价意义&挑战&解决方案02 01视频质量客观评价意义&挑战&解决方案视频质量评价测试介绍分类优点缺点主观质量评价评价结果可靠依靠大量的人力、时间，效率低、成本高客观质量评价速度快、费用低未充分

2、考虑人眼视觉特性，较主观评价结果不一致视频质量评价主要包括主观测试和客观测试，客观质量评价以其“高效”、低成本的优势而广泛应用；主客观测试优缺点主客观测试介绍类型维度方法说明主观测试清晰度主观MOS：参考ITU-R-BT.500-14建议：主观体验画面清晰模糊、块效应、噪点、细节、色彩、花屏，时域帧率，卡顿等MOS分范围1-5分；越大越好流畅度时延客观测试清晰度PSNR、SSIM、Vmaf越大越好流畅度帧率越大越好卡顿率区分小/中/大卡顿(常用100/200/600ms)卡顿率越小越好视频时延E2E时延越小越好画音同步时延音画同步时延越小越好面向业务的视频质量客观评价挑战具体视频业务开展中，普

3、遍面临着难度大、效率低等挑战挑战1：视频画面质量有源客观测试难度大画面帧对齐难度：实际视频业务中普遍存在丢帧、发送和接收客户端接入不同时，普遍面临降质画面难以找到对应的原始画面，无法开展画面有源客观质量评价(依赖相同帧对齐)画面内容非全屏：部分视频业务普遍存在非全屏显示场景，相同的原始画面和降质画面，部分区域(本地显示)不一致，影响有源客观测试的准确性画面帧对齐？画面帧对齐？原始画面接收画面挑战2：画面帧率、卡顿、时延测试困难且无法同时测试一、视频帧率/卡顿统计该业务视频帧率是多少？该业务视频中间卡顿多久？二、E2E时延无法统计本地显示T2本地秒表T1最终显示T3如下图业务：1、视频业务端到端

4、的时延 delay=T3-T1（采-编-传-解-显）2、视频业务屏到屏的时延delay=T3-T2 (编-传-解)挑战：拍照时钟重影，效率低，自动化识别错误率高，无法快速自动化精准、高效、自动、客观视频质量评价工具面向实际业务的视频质量评测工具视频质量评价工程，一站式自动完成画面内容无损采集，画面客观清晰度、流畅度、卡顿、时延结果准确、客观、高效、可视化；Type C转HDMIType C转HDMI高帧率视频采集卡+自动采集工程原始画面降质画面画面帧对齐客观PSNR计算画面帧率计算画面卡顿计算画面时延计算051015202530354045050010001500200025003000350

5、04000PSNRframeIDPSNR01020304050607005001000150020002500300035004000frameReteframeIDframeRete02040608010005001000150020002500300035004000timeDiffframeIDtimeDiff(ms)画面自动采集画面自动保存画面质量测试画面质量报告解决方案核心思路1-清晰度将二维码应用在画面帧ID对齐，解决业务上画面不对齐的痛点，通过广泛使用的客观质量评价指标PSNR/SSIM测试画面清晰度根据业务确定画面质量检测区域，避免部分业务部分区域不参与客观测试的问题时间轴接收

6、端采集画面：发送端采集画面：ROI检测帧：ROI区域即其中黑色部分根据ROI检测帧，分别识别ROI区域的位置信息，即橙色和绿色虚线的位置信息1、根据二维码信息将发送端和接收端同一帧进行匹配2、分别根据ROI区域截取，resize至统一区域后进行清晰度计算ROI区域检查作用：1、控制计算区域，避免本地回显窗口、弹窗等无关因素的影响2、解决发送端和接收端画面大小不一致的情况，如接收端无法全屏虚线为根据ROI检测帧识别的ROI区域边界ROI检测帧：ROI区域即其中黑色部分虚线为根据ROI检测帧识别的ROI区域边界相同二维码帧ID相同二维码帧ID解决方案核心思路