Zero-ETL+连接并分析您的所有数据.pdf

1、 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。zerozero-ETL ETL 连接并分析您所有的数据杨文辉A N T 3 0 7A N T 3 0 7Redshift Specialist SA 亚马逊云科技朱劲松Solutions Architect亚马逊云科技 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。1.zero-ETL 愿景2.应用场景及架构3.金融行业客户案例分享4.生成式 AI 助力数据分析AgendaAgen

2、da 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。将数据集成到分析系统非常复杂分析数据源运营数据库流式数据数据湖文件存储昂贵并繁琐去构建和维护 ETL 任务手工数据管道X XX XX X不完整，不一致，和过期的数据,限制数据洞察数据重建复杂，特别是 schema 演化 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。zero-ETL持 续 投 入 一 个未 来 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。6Zero ETLZero ETL无数据移动与拷贝安全和一致的数据共享

3、数据湖分析ML in SQLML in SQL使用您最喜爱的BI BI 工具Spark Spark 应用开发S3 S3 文件自动摄取Amazon Amazon RedshiftRedshift走向 zero-ETL 已有多年Amazon RedshiftAmazon S3 数据湖和文件运营数据库BI 和 分析应用Amazon Web Services Data Exchange 为三方数据机器学习和分析服务流式数据服务 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。7Amazon Aurora Amazon Aurora ZeroZero-ETL ETL

4、 到Amazon Amazon RedshiftRedshift提升分析查询性能A V A I L A B L EA V A I L A B L EZ E R OZ E R O-E T LE T L实时分析和机器学习事务数据无ETL ETL 管道联合洞察多个 Aurora 数据库 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。Amazon RedshiftAmazon KinesisData StreamsAmazon MSKKinesis 或者Kafka 生产者Amazon KinesisData StreamsAmazon Amazon Redshi

5、ft Redshift Streaming Streaming Ingestion Ingestion 摄取流式数据到你的数仓做实时分析Z E R OZ E R O-E T LE T L8 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。使用简单的 SQL 查询完成机器学习任务快速的预测不需要机器学习的经验在数仓中使用熟悉的 SQL 命令创建，训练，和部署机器学习模型Amazon Amazon Redshift ML Redshift ML 80 Billion+80 Billion+预测每周在数仓任 何 人 可 以 使 用 的 数 据 科 学9 2024

6、,Amazon Web Services,Inc.或其附属公司。保留所有权利。应用场景及架构 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。客户信息卡事务Amazon S3(数据湖-Redshift Spectrum)Redshift Spectrum)ZeroZero-ETL ETL 集成(s)s)Amazon KinesisRedshift Redshift 流式摄入Web server订单管理三方文件(订阅)订单明细事务AmazonAmazonRedshiftRedshift客户信息联邦查询(运营数据)Red