字节跳动-姜磊-系统化工程赋能万人研发效能度量.pdf

1、字节跳动 DevMind：系统化工程赋能万人研发效能提升系统化工程赋能万人研发效能提升姜 磊 DevMind 平台架构技术负责人个人简介个人简介姜磊姜磊字节跳动 DevMind平台架构技术负责人20172019201920202020至今至今评论中台评论中台 （OLTP系统）APMAPM端监控端监控 （OLAP系统）DevMind DevMind（AdHoc&研发效能）目录目录#CONTENTS010203业务与挑战效能度量建设中的生产力效能度量背后的算力体系Biz and Challenge Boosting Productivity While Building Measurement S

2、ystemComputing System Behind R&D Productivity Measurement 业务与挑战业务与挑战Biz and Challenge DevMindDevMind体系体系DevMindDevMind业务业务现状现状1万万+积累元指标数90%+一二级业务线深度使用率100+沉淀各级业务线最佳实践50+最大指标模型因子数40万万+MPVDevMind现状现状万人规模万人规模的挑战的挑战运营运营数据数据产品产品工程工程构建业务团队持续效能提升的氛围个性化适配不同业务形态的提升方案调动被动团队积极性满足不同层级角色产品诉求数字可视化表达能力提升产品易用性尤其是初次

3、上手门槛全领域数仓建设数据变更、业务配置变更 分钟级全局响应数据全局一致性和准确性特殊时间节点下高并发用户访问复杂模型指标对整体算力侵占2查询SQL字符数超过1010万万BIZCHALLENGE转动效能提升的转动效能提升的飞轮飞轮业务执行改进产出高质量洞察研发效能提升旺盛分析需求吸引更多领域专家完备数据源丰富表达能力迭代分析算法效能度量效能度量建设建设中的生产力中的生产力Boosting Productivity While Building Measurement System激发激发生产力生产力1重塑数据生命周期生产关系，让飞轮自发转动遇到的问题遇到的问题效能专家和效能专家和数据分析师数据

4、分析师广泛的业务用户广泛的业务用户业务定制化数据源、指标设计的边际成本高每个专项的精细化分析占据大量精力有限人力需要承接近乎无限业务需求深刻理解自身业务，但是不清楚如何着手分析。找不到适合自己的指标分析体系。因缺乏统计学培训，难于上手传统BI平台。原因原因探寻探寻直接原因：直接原因：数据分析的专业化门槛，导致数据工程师和分析师供给不足，而未受专业培训的业务同学却有心无力。本质原因：本质原因：数据产品专业性的僭妄，没有真正用同理心去感受普通用户的需求场景。工程工程数据工程师数据工程师数据源ETL数仓分层建设模型指标建设报告ADS表生产撰写报告即席分析数据分析师数据分析师业务业务易用性易用性专业性

5、专业性近乎空白亦或充斥着语音交互等伪需求BI，本质是用可视化交互形式组装SQLMatlab、SQL、Python公民数据科学家公民数据科学家(Citizen Data Scientist)，是指未受过高级数学和统计学正式培训的知识工作者，他们能够通过适配的应用产品从数据中提取高价值见解。专业化分工：亚拉文眼科医院专业化分工：亚拉文眼科医院2 25050台台 2 2600600台台一年完成手术在中国白内障手术只是一种非常普通的小手术在印度白内障手术费用远非底层穷人可以承受。学习麦当劳的模式印度亚拉文眼科医院流水线分工流水线分工提高整个流程效率提高整个流程效率主治医师重塑数据分析链路重塑数据分析链

6、路中的生产关系中的生产关系工程工程数据工程师数据工程师数据源ETL数仓DW层建设领域专家领域专家自助式数据准备元指标设计复合元指标设计交互式探查分享与协作工程工程数数据工程师据工程师数据源ETL数仓分层建设模型指标建设报告ADS表生产撰写报告即席分析数据分析师数据分析师业务业务公民数据科学家公民数据科学家业务业务生产关系背后生产资料：元指标模型生产关系背后生产资料：元指标模型核心思路：核心思路：以“元指标元指标+度量对象度量对象”二元形式对基础数据层进行高度封装，使其拥有完备业务含义且可独立执行。元指标模型：元指标模型：从物质世界到数学的转换。将数据可视化配置中分解为设计业务查询逻辑和配置可视