大模型时代下基于湖仓一体的数据智能新范式 .pdf

1、DataFunDataFun#20242024大模型时代下,基于湖仓一体的数据智能新范式陈茏久-阿里云-高级产品专家目录1.大模型爆发带来的数据行业变革3.阿里云AnalyticDB：在AIGC时代下，驱动企业架构升级2.对于企业数据平台的能力变革要求大模型时代来临2023.3.142023.3.162023.3.172022.112023.4.112023.2.25ChatGPT 3.5发布大语言模型的价值被初步证明Meta开源LLAMA开启GPT竞赛时代ChatGPT 4.0MidJourney V5Microsoft 365 Copilot通义千问2023.5.6Google模型模型PA

2、LM2行业模型Med-PaLM 2和sec-PaLM22023.3.23ChatGPT Retrieval Plugin2023.7.28阿里云模型服务灵积阿里云模型服务灵积支持商业化部署ChatGLM2，LLAMA2等模型企业知识增强企业知识增强模型即服务模型即服务（Model-as-a-Service)2024.2.15多模态大模型多模态大模型将语义与图像将语义与图像进行深度理解融合进行深度理解融合2023年底年底国家大模型评测标准阿里，百度，腾讯，3602023年年S2百模大战百模大战近近100大模型大模型覆盖基础大语言模型行业大模型多模态大模型2023.3.15深化产业影响，驱动全行业

3、能力升级（信息来源于艾瑞咨询发布的2023年中国年中国AIGC产业全景报告产业全景报告AIGC带来的产业变革趋势带来的产业变革趋势1.内容生产效率将带来快速变革内容生产效率将带来快速变革对于游戏，电商，广告等行业，大模型将带来50%70%的开发效率提升，同时门槛降低将引入新玩家，带来行业快速变革2.垂直领域随着大模型能力深入持续变革垂直领域随着大模型能力深入持续变革对于垂直领域企业，存在着线上+实体的结合趋势，更加依赖对于专业性的考量，会随着LLM能力升级，持续性进行产业能力升级；3.高度信息化安全的强监管部门的底层变革高度信息化安全的强监管部门的底层变革对于信息化安全等级较高的，对于数据具有

4、重政府监管企业，将会关注政策导向，数据安全及能力演进，这类企业需要自底向上的全盘思考，有序推进，最终实现全行业拥抱；数据规模大幅增长数据质量要求提升数据安全规范升级全行业拥抱AIGC的全新要求AIGC分层能力一览LLM 大语言模型医疗金融.安全fine-tune企业服务知识库模型服务商fine-tune知识库知识库知识库.企业知识增强企业知识增强(RAG+私有模型私有模型)fine-tunefine-tune零售企业专属知识企业专属模型行业模型通用大模型实时企业信息企业级特征公司当前最火产品行业特征泛化能力公司主售什么产品零售的定义零售行业业务流程模型模型领域能力领域能力可回答的问题可回答的问

5、题目录1.大模型爆发带来的数据行业变革3.阿里云AnalyticDB：在AIGC时代下，驱动企业架构升级2.企业数据平台的能力挑战自顶向下的体验变革+自底向上的能力变革应用层应用层1.内容服务的要求数据来源更加丰富2.在于用户交互过程中的数据覆盖面积提升3.智能化的数据在线加工能力更强平台工具层平台工具层1.智能开发效率进一步提升；2.面向垂直行业属性的开发链路更智能3.开发工具和大模型+加速降低技术使用门槛基础层基础层1.更高的数据质量用于赋能模型训练；2.更丰富数据类型处理能力；3.海量数据的存储和IT成本平衡（图片来源于艾瑞咨询发布的2023年中国年中国AIGC产业全景报告产业全景报告）

6、当前数据平台能力瓶颈企业知识图像视频音频对话地理时空传统数据平台AIGC应用智能数据分析智能决策海量多模数据生成大模型原生处理能力亟待增强原生处理能力亟待增强1.1.仅可处理结构化数据仅可处理结构化数据2.2.不支持海量多模数据处不支持海量多模数据处3.3.不支持异构算力不支持异构算力4.4.缺少大模型缺少大模型+AIAI结合能力结合能力向量数据半结构化数据非结构化数据多模数据.大数据+大模型能力大模型调优及部署应用层应用层 添加文字内容 添加文字内容 添加文字内容0101平台工具侧平台工具侧0202基础基础层层0303背景背景LLM能力增加了业务场景的数据需求范围，参与业务支持的数据量大幅膨