当前位置:首页 > 报告详情

2.美团OLAP引擎选型和实践优化后.pdf

上传人: 张** 编号:155563 2024-02-15 25页 4.76MB

1、曾林西美团-高级技术专家Apache Doris在美团的统一OLAP引擎实践Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 20

2、23Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023曾林西14年加入美团数据组,深度参与美团Hadoop集群规模从百到十万级的架构演进美团查询引擎团队负责人14年加入美团数据组,深度参与美团Hadoop集群规模从百到十万级的架构演进主要负责离线数仓生产、Adhoc查询、OLAP分析引擎与服务在美团业务场景的落地与演进Doris Summit Asia 2023Doris Summi

3、t Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Dor

4、is Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023目录2.美团OLAP引擎选型与实践3.当前挑战与未来规划1.美团OLAP场景特点Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 202

5、3Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 20231美团OLAP场景特点Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Do

6、ris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asia 2023Doris Summit Asi

word格式文档无特别注明外均可编辑修改,预览文件经过压缩,下载原文更清晰!
三个皮匠报告文库所有资源均是客户上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作商用。
本文主要介绍了美团高级技术专家曾林西在美团统一OLAP引擎实践方面的经验。美团OLAP场景特点是时延敏感,数据量大,业务丰富。曾林西于2014年加入美团数据组,深度参与美团Hadoop集群规模从百到十万级的架构演进,主要负责离线数仓生产、Adhoc查询、OLAP分析引擎与服务在美团业务场景的落地与演进。 美团OLAP引擎选型与实践经历了从基于Mysql的维度固定不支持大数据,到分治再统一,先解决时延敏感和数据量大,再解决场景丰富的过程。目前,美团基于Doris的统一OLAP引擎方案,解决了三高问题(使用成本高、资源浪费高、维护成本高),实现了多模态共存,支持全局字典批量导入,基于bitmap的倒排索引等优化手段。 未来规划方面,美团将存算分离,实现弹性扩缩容,采用CBO查询优化器,Pipeline执行框架,智能物化视图构建等策略。同时,美团也将面临挑战,如资源效率、读写稳定性、FE可扩展性、混合负载下的隔离以及查询性能等方面的问题。
"Doris如何优化OLAP查询性能?" "美团如何选择和实践OLAP引擎?" "Doris在美团业务中面临哪些挑战和规划?"
客服
商务合作
小程序
服务号
折叠