2.从意图识别到 UI 生成：构建实时智能交互闭环-念响+颢阳.pdf

1、从意图识别到 UI 生成：构建实时智能交互闭环蚂蚁终端体验科技大会念响 颢阳 2025.11分享人介绍从 意图识别 到 UI 生成：构建实时智能交互闭环徐奇昊 念响蚂蚁集团花呗体验技术负责人Guan 产品负责人蚂蚁集团支付宝智能体验算法负责人杨颢 颢阳付宝体验技术部业务挑战：精细化服务面临的问题和挑战标准版迪士尼联名青春版亿级用户 大量非标服务如何更好地理解用户，更好更快地服务花呗用户？服务供给效率低 用户理解不够深入表达方式模板化规模化个性化敏捷化 一次有趣的探索：大模型能读懂花呗用户吗？实验设计：基于用户行为回放和画像特征，尝试用大模型来解析用户的意图和服务偏好，提升用户体验AI 相比于传

2、统的专家经验，效果如何？效果惊人！AI 展现出巨大潜力，不只是模仿，它还能创造人次参加实验1W+有效意图类别100+识别准确率85%创意服务策划*20%跳出传统模板内容更进一步：花呗 AI 卡片助手人找服务 升级为 服务找人，精细化、智能化程度更高当用户访问花呗页面时，基于实时意图识别，策划并生成一张智能服务卡片自动化实时化个性化“感知 决策 生成”三位一体 Multi-Agent 架构 不是简单的 AI 取代人工而是构建一个能够实时感知、智能决策、个性化表达的完整闭环系统核心理念：实时行为动线、用户画像特征、业务线索数据03 生成式 UI Agent服务推荐、工具召回、原子能力调度多模态建模

3、、DSL 生成、实时渲染02 服务策划 Agent01 意图识别 Agent1 秒 内完成看 想 做把“做了什么”变成“想做什么”决定“能提供什么服务”把数据变成“情感化交互”用户反馈 用户来访如何让 AI 看懂无声行为？01 意图识别 Agent：让 AI 看懂无声行为年龄/职业/消费力等业务维度画像特征是否有账单？额度使用率？是否首次使用？.点击、滚动、反复输入.秒级延迟实时捕获 实时行为多维数据输入，构建完整上下文 用户画像 业务线索行为即语言 用户的每一步操作，都是对业务需求的隐性表达微调 Qwen3-0.6B采集 SDK日志服务时序数据库聚合&提纯精准度如何保障？RAG注入拒识机制可

4、审计RAG：Retrieval-Augmented Generation，通过检索外部知识增强生成准确性“服务太多，根本找不到！”02 服务策划 Agent：智能策划重组原子服务将产品服务解构为标准化、原子化、高质量的业务工具业产研需持续共建用户意图还款有压后端能力不再是固定接口，而是可被 AI 理解和调度的服务资产服务编码：string服务描述：string推荐原因：string服务寻址：endpoint落地页信息：url准入条件：boolean置信度：0.95标准化服务数据包服务策划引擎权益发放分期服务识别出意图 能够服务花呗金基础发奖皮肤发奖账单分期统筹分期预约分期解构重组账单分期&免息

5、权益服务“这个界面也太单调了！”03 生成式 UI Agent：把数据变成有温度的表达输出文案Design Token视觉素材高级组件信息输入引导用户意图&服务文案风格设计风格业务自定义标签信息输出引导UI DSL 定义UI DSL Demo动态数据流式渲染“数据 x DSL 大模型文案 Agent设计 Agent素材 Agent组件 Agent 生成式 UI AgentUI 渲染器 03 生成式 UI Agent：UI 生成能力蒸馏-“多快好省”的生成1.UI 生成数据集构造2.大模型微调3.偏好学习生成质量更好的 UI的概率增加 理解 DSL 范式，JSON 稳定生成 利用通用大模型构造海

6、量 UI 生成数据对“打造更小更专业的UI生成垂类视觉大模型”90%99%格式准确率20s 4s推理速度0.7 0.74生成质量（LLM-as-Judge X 6 维度）03 生成式 UI Agent：理解 生成-UI 智能的相互共鸣UI 生成需要大模型对 UI 的 类型、颜色、位置有先验知识UI 理解擅长 UI 检测、UI 分类OCR、颜色识别等任务Github，HuggingFace，Paper已开源UI-UG 大模型:A Unified MLLM for UI Unde