A3--黄文昊--基于LLM的智能诊断分析实践.pdf

1、黄文昊OPPO 高级软件测试工程师黄文昊OPPO 高级软件测试工程师现任OPPO快应用质量保障负责人，牵头规划与实施客户端自动化测试体系与性能专项建设，通过设计分层质量保障方案及效能工具链开发，有效提升产品交付质量与测试效能；作为DTA成员深度参与部门技术工线建设，主导大模型在测试领域多场景的落地应用研究。从业期间先后任职于招银、腾讯、Shopee等企业，在金融科技领域具备丰富的质量保障经验，擅长通过精准测试、精准监控及DevOps体系建设实现研发效能持续优化。目录CONTENTS背景介绍0102 技术探索总结展望03背景介绍内因分析测试准备 需求评审 技术评审 用例编写及评审测试执行 数据准

2、备 用例执行 问题分析及定位发布监控 生产验证及巡检 线上问题定位 自动化问题定位分析设计 需求分析 技术方案设计 原型设计 技术评审开发实现 编码开发 代码审查 问题定位及修复发布监控 发布部署 发布监控 线上问题定位及修复30%50%20%40%50%10%开发测试工作项分析1月2月3月4月5月6月7月8月缺陷数20242025工作量分析内因分析技术债务累积加剧系统脆弱性AI驱动测试分析效率优化需求系统复杂度指数级增长代码膨胀引发缺陷数量指数级增长测试矩阵爆炸导致问题发现率激增现状分析外因分析技术预研当下能力日志分析平台专项工具平台历史文档积淀类型日志分析平台专项工具平台历史文档积淀优势

3、数据全面性 实时性强 检索效率高 可视化展示 告警机制 专业性强 集成度高 学习成本低 知识复用 模式识别 成本低廉 团队传承痛点 数据噪音大 格式不统一 分析复杂度 覆盖范围窄 工具割裂 维护成本高 依赖性强 时效性差 检索困难 更新滞后 质量参差 知识孤岛改进方向 智能过滤 格式标准化 自动化分析 平台化整合 插件化架构 自动化集成 智能推荐 知识图谱 智能检索 自动更新 质量管控痛点：尚无一体化诊断工具仅呈现数据及其发展趋势单一工具的功能性相对有限需要投入人力资源以支持其使用和维护缺少分析单一功能局限使用成本高技术选型诊断时间缩短80%：从小时级降低到分钟级准确率提升60%：基于AI分析

4、减少误判自动化ROI70%：减少人工干预全链路数据融合能力 多源数据集成 智能数据关联 统一数据模型智能分析能力 智能问题识别 根因分析引擎 自动化修复建议知识库能力 智能知识库 经验模式识别 智能问答系统数据融合与关联分析一体化智能诊断助手知识驱动的经验传承体系关键收益技术预研智能分析与决策支持能力预期技术探索业务架构应用层逻辑层数据层基础层智能运维分析平台专项诊断Agent集群知识管理Agent智能分析Agent领域知识图谱业务知识图谱工具知识图谱历史案例图谱业务知识库结构化日志存储日志关联分析库日志数据湖采纳统计分析统计标数据仓库工具版本控制工具依赖管理工具元数据管理工具注册中心模型服务

5、数据存储搜索引擎工具服务请求分类器任务转移器智能路由引擎智能提示工程RAGCoTFew-ShotReflexion工作流编排引擎并发处理条件判断兜底流程变量聚合智能诊断引擎问题识别器根因分析器专项诊断模型推理概览知识库工具链服务侧中台智能分析助手调度中台服务侧中台应用侧中台智慧中台阶段任务预处理服务端分析客户端分析N数据收集数据预处理与清洗问题识别与分类根因分析诊断排序聚合N回传结果领域知识补全Y回传结果Y基本面诊断专项诊断经验诊断日志源日志中台日志格式化多平台聚合链路全景图参数校验耗时分析异常匹配模型诊断工具链Function call结果展示新方案服务侧中台知识库提示词工程工具链概览知识库

6、工具链概览知识库工具链服务侧中台应用层问题诊断API知识管理API通知任务API数据源层缺陷库需求库代码库编排层数据层Elasticsearch日志检索Neo4j知识图谱Vector DB向量索引PromptsChainsAgents经验采集与预处理采集策略清洗策略标准化格式术语标准化知识抽取与结构化实体抽取关系提取属性提取知识图谱建模与入库核心实体类型关键关系类型关系权重计算图谱实施向量化与语义增强向量化策略语义标签体系概览知识库工具链服务侧中台LangChain+Neo4j技术栈复杂性知识体系分散实践经验要求高文档和教程不足01学习成本高03实操过程繁琐02上下文依赖广系统架构复杂性数据流