陈超-脚本生成2.0-基于智能体的脚本生成与修复之道.pdf

1、脚本生成2.0基于智能体的脚本生成与修复之道陈超|中兴通讯股份有限公司陈超中兴通讯青年奖得主/数通产品测试经理数通产品测试经理、资深测试专家，近十年来一直从事数通产品软件测试的工作，牵头负责有线研究院自动化脚本AI生成方案制定与落地推广。2025年，数通产品自动化脚本累计生成代码行数82W+行，个人脚本开发效率提升43%目 录CONTENTSI.问题提出II.解决思路III.方案介绍IV.实践过程&效果V.总结与展望问题提出PART 01项目挑战24年新品切换UFP平台，多产品并行对测试交付能力挑战高24年挑战承接产品数增加83%（6-11）测试设计需求数：增加25%（1574-1965）；执

2、行用例数：增加104%（38031-77827）手工执行用例数：增加20%（6500-7783）；流水线执行用例数：增加122%（31531-70044）；人均脚本开发数：增加84%（2.6个/天4.8个/天）；流水线失败分析数：增加82%（550-1000）;路径分析类别23Q4（现状）24Q4（预计）效能提升目标可达路径说明测试设计需求数1574196525%存量用例复用提效14%探索AI辅助测试设计，基于本地知识库实现场景推荐后备TSE分担11%手工执行用例数6500778320%特性终结在领域提效15%/领域测试环境配置提效5%测试开发效率（人天）2.64.884%存量脚本复用提效25

3、%19%的提效路径未找到AI辅助脚本开发提效40%自动化执行用例数3153170044122%静态资源夜间纳管提效50%/每周产品差分运行提效39%补充1000核资源提效33%数通产品特点组网灵活多样、测试步骤多 测试开发最耗时B1版本B2版本B3版本B4版本需求手工测试需求测试开发需求手工回归测试自动化回归测试.B2B2版本需求回归依赖手工完成版本需求回归依赖手工完成测试开发工作流脚本编写环境准备脚本调试脚本入库工作量分布（单条平均）75分钟40%10分钟5%95分钟52%5分钟3%产品特点常见类型详细信息产品类型多 路由器 交换机主要测试对象是路由器和交换机，由于在网络中位置不同，有六大类

4、产品，每个产品还有多个型号。不同产品支持功能各不相同，测试需求和模块繁多。组网灵活多样 2台设备 3台设备 4台设备 .N台设备3台基础场景组网4台常见业务场景组网N台方案场景组网测试步骤多 场景配置 操作步骤 结果校验 流量校验 条件和数据多，场景配置复杂 功能复杂，操作步骤多 步骤结果校验多 多端口发流，流量校验多数据产品测试对象的特点：产品类型多、组网灵活多样、测试步骤多需求测试开发最耗时的活动是脚本编写、脚本调试方案1.0 基于RAG+FewShot技术实现从用例生成脚本 提升脚本编写和脚本调试的效率用例标准化脚本编写脚本调试入库测试开发流程AI应用应用系统用例标准化手工完成测试用例改

5、写脚本执行调试修正可执行脚本拆分命令行配置（与关键字1对1）命令行拆分生成脚本片段查找匹配关键字选择TOP1查找脚本示例动态组装提示词向大模型提问生成脚本片段脚本模拟执行校验准确率脚本片段合并和排序替换关键字参数为拓扑图变量名脚本组合自研星云通信大模型自研一体化测试平台查找关键字关键字参数编写合并关键字RAG+FewShotRAG+FewShot脚本入库脚本调试入库方案1.0应用效果项目脚本开发效率提升100%数通测试的底层逻辑：数通产品的测试动作的本质：设备命令、仪表命令的组合手工测试的本质：通过人脑将自然语言表述的文本用例进行设备命令组合的转义中台关键字的本质：建立了每一个设备命令到唯一原

6、子关键字的关联关系自动化测试的本质：将设备命令的组合通过原子关键字的组合实现对文本用例的脚本转义脚本开发效率提升AI脚本生成效率提升AI脚本生成准确率提升100%40倍50%2.6 3.0 5.2 3月6月9月脚本开发效率(个/人天)AI脚本生成时间(秒/个)AI脚本生成准确率2002053月6月9月55%80%90%3月6月9月关键技术：知识库：基于积累的6K+原子关键字，2.5W+存量脚本，低成本快速构建知识库确定性输入：手工测试完成对被测对象猜想的验证，确定性输入，结果可预期配置拆分：分割配置文件为原子配置，提升模型解析精度，突破长文本限制经验加速：存正确脚本于记忆库，重复任务快速调用，