A2--王晓坤--云音乐AIGC生成音乐内容质量保障实践.pdf

1、数生智慧2023/9/22-23中国上海高质量发医新等第九届焦QECOn全球软件质量&效能大会云音乐AIGC生成音乐内容质量保障实践王晓坤网易云音乐内容质量负责人#page#95c王晓坤网易云音乐内容质量负责人先后负责云音乐营收、内容等业务质量管理与质量技术建设；数生智慧全球软件质量&效能大会富国量发园新家#page#9598001背景02方案设计目录03保障实践04落地效果CONTENTS05未来规划数生智慧全球软件质量&效能大会富国量发园新家#page#95c01背景数生智慧全球软件质量&效能大会商医量发园新#page#16:20进球背景介绍（2020网易GAIGC音乐在音乐内容生成上，得

2、到了广泛的应用，如创作、演唱及合成等；未来之歌云音乐天音一站式AIGC音乐内容生成平台，提供智能编曲、作词和成曲等功能；BAI辅助创作可触达大部分音乐人，辅助歌词、曲谱、演唱及混音等音乐创作，内容的质量至关重要；全球软件质量&效能大会#page#背景介绍QEC90AIGC音乐特点创作效率标准化创作门槛馆低高作词、作曲、编曲、演唱及合成等环节内容质量？除生器量全球软件质量&双能大会发新21#page#QECon前期保障流程音频算法工程开发需求分析线上走查需求评审开发联调线上题控需求阶段开发阶段上钱阶段天音早期上线流程设计阶段测试阶段交互设计平台功能测试技术方案生成内容效果测试（众包）测试方案存在

3、问题标准不统一验证效率低问题发现难除生器品，全球软件质量&双能大会发新21#page#存在问题QEC90验收依赖主观听感，导致不同人之间验收标准不一致；标准不统一测试人员长时间验收大量音频后，听觉上的倦感影响判断；算法模型更新影响范围难以评估，需要投入大量人力测试；投入成本高问题修复对于已有模版需要回归，相关回归验证投入人力大传统的web测试手段，难以发现内容本身问题；问题发现难问题从发现到修复链路长，难以评估整体影响；全球软件质量&双能大会）#page#解决方向QEC90针对上述标准不统一、验证效率低、问题发现难等挑战，核心需要解决以下问题：自动化标准化客观评价标准标准验证自动化监控召回问题

4、感知主观评价标准自动化流程集成问题召回建立客观和主观评估指标，并设置合理的准出标准，采用指标规则及算法模型对AIGC音乐内容进行大规模自动化验证，以保障其质量，通过业务链路分层监控，及时召回线上问题，提升用户的功能和使用体验。除生器量全球软件质量&双能大会发新21#page#95c02方案设计数生智慧全球软件质量&效能大会商医量发园新#page#QEC90解决思路制定统一的内容保底检测标准，让测试人员可以更专注于选代功能本身的验证，无需关系其他影响；F测试标准化从测试和回归过程中降低人工测试规模，从而减少验收自动化测试人力的投入；线上监控覆盖规范整体内容质量保障体系，打通整体测试-回归-线上监

5、控的完整质量保障链路；除生器量全球软件质量&双能大会设各3#page#QEC90内容质量标准化文件大小文件头音质吉他缺失基本属性弹性不在调上响度杂音不在调时长跑调鼓缺失音色少BPM不在终有天音内容质量测试太吉他缺失声音太大是否存在乐器缺失音色检测太糊钢琴声音太小是否存在杂音没有声音是否跑调音准检测派生属性和弦是否一致演唱歌词是否一致演唱识别演唱歌手是否一致A除生器品，全球软件质量&双能大会发新21#page#客观质量标准QEC90判断是否为有效音频的音频文件基本特征，包括文件大小，文件头，响度等方法检测项默认范围文件大小10kb 500mb读取生成文件大小文件头mp3，wav解析文件字节码格式

6、音质320k读取音频文件属性响度音频文件的累积响度-15 -5 lufs时长解析音频长度500ms 15minBPM40198解析音频BPM除生器量全球软件质量&双能大会设各3#page#QEC90主观质量标准音色检查音准识别演唱识别是否存在乐器缺失是否跑掉演唱歌词是否一致是否存在杂音和弦是否一致等演唱歌手是否一致问题反馈来源，众包效果测试的反馈线上客诉问题反馈除生器品，全球软件质量&双能大会发新21#page#内容质量流程QEC90内容客观质量测试内容自动化测试内容自动化回归算法提测平台功能测试较低置信度内容样本内容主观质量测试内容众包效果测试整体流程：，效果测试前进行内容自动化测试，前置过