贝壳-王啸-多维分析数据库Druid在贝壳OLAP平台的应用之路.pdf

1、主办方： 多维分析数据库多维分析数据库DruidDruid 在贝壳在贝壳OLAPOLAP平台的应用之路平台的应用之路 王啸王啸 贝壳贝壳 技术专家技术专家 主办方主办方： 王 啸 “ 现贝壳基础平台中心-大数据平台部 负责OLAP平台查询引擎技术研发 曾经供职于中国电信、百度，负责多项大数据产品架构设计与研发 ” 请插入 您的照片 讲师简介 主办方主办方： 摘要 贝壳作为全国领先的房产交易和租赁在线服务平台，主要有四大业务：二手房交易、新房交易、租赁业务 以及装修业务。四大业务运营将产生大量实时和离线数据，这对数据分析和查询带来了巨大的挑战。原有 OLAP查询平台革新升级迫在眉睫。我们团队结合

2、贝壳业务数据特点，选择Apache Druid作为我们底层主 要查询分析数据库，这背后隐藏了哪些故事，今天将与大家一同分享。 主办方主办方： 多维分析数据库Druid应用之路 案例大纲案例大纲 1.贝壳OLAP平台经历那些发展阶段，我们面临过哪些问题 2.OLAP多维分析数据库产品众多，OLAP选型策略是怎样的 3.Druid怎样才能服务好各个业务方，降低技术门槛，提升工作效率，数据指标建模的流程是怎样的 4.结合公司自身的业务场景，对Druid做了哪些针对性改进和优化 5.未来规划 主办方主办方： 引入案例来源引入案例来源 原有业务情况：原有业务情况： OLAP平台支撑整个指标提建立，覆盖公

3、司所有的业务线 6000+指标 日均调用量3000w+ 调用3s内返回99.5% 底层引擎以Kylin为主，600TB的Cube存储量 主办方主办方： 痛点痛点 数据源构建时间长，不能完全满足业务方及时查询要求 数据源底层存储占用巨大 查询灵活性较差，可能需要构建多个cube适配 相较源数据膨胀率巨大，产生可怕的维度爆炸 调优门槛相对较高 使用使用KylinKylin存在的问题：存在的问题： 主办方主办方： 怎么做到的 我们需要的我们需要的OLAPOLAP数据库是什么样的数据库是什么样的 要求 亚秒级 响应 支持较高 的并发 灵活易用 查询接口 快捷的数 据导入 PB级别的 数据量 主办方主办方： 怎么做到的 能满足五项要求的开源能满足五项要求的开源MOLAPMOLAP数据库，做全面的对比数据库，做全面的对比 种类种类大数量支持大数量支持 查询性能查询性能高并发高并发实时数实时数 据摄入据