3-侯容-数字娱乐论坛.pdf

1、D Da at ta aF Fu un nC Co on n#2 20 02 24 4知知乎乎 DMP/CDP 平平台台的的应应用用和和实实践践侯容-知乎-舰桥平台研发LeaderD a t a F u n 上海站嘉宾专享讲讲师师介介绍绍侯侯容容知知乎乎-舰舰桥桥平平台台研研发发L Le ea ad de er r知乎舰桥平台研发 Leader，18 年入职知乎，曾担任社区、社交等业务高级研发和业务架构师，21 年加入平台团队担任用户理解&数据赋能组研发 Leader。带领团队从 0 到 1 从底层到业务层搭建实时数据基建和业务，同时整合资源完成用户理解工程及 DMP 的建设。22 年从 0

2、到 1 搭建知乎舰桥平台，知乎舰桥平台是：面向内容运营、用户运营、活动运营、创作者运营、场景运营（热点&热榜&话题&推送等）、生态分析等业务场景搭建的一站式平台。其中包含内容&用户管理和运营平台、内部营销平台（活动引擎&搭建&分析&投放平台）、内部投放和资源管理平台、创作者管理平台、DMP平台、内容池平台、经营分析平台、场景运营平台等等，全方位赋能业务运营和业务发展D a t a F u n 上海站嘉宾专享C Co on nt te en nt ts s目目录录背背景景介介绍绍架构和设计难点和挑战未来及展望D a t a F u n 上海站嘉宾专享0 01 1 背背景景介介绍绍D a t a

3、F u n 上海站嘉宾专享01-01 业务背景知乎社区产品系统，归根结底，是一个以推荐算法和搜索引擎相结合的方式来匹配用户与内容的平台。这样的平台经济是在市场经济模型上运作，具备灵活高效的优点，同时也存在一定的盲目性和滞后性。在这一系统中，推荐策略充当着市场调节器的角色。然而，单靠流通侧的调整，往往难以迅速和有效地使平台朝向我们期望的方向发展。因此，运营系统的加入至关重要。运营系统在产品系统之外工作，主要目标是构建和维护一个健康的内容生态。D a t a F u n 上海站嘉宾专享插曲-为什么叫舰桥？舰桥是军舰的大脑，是操控舰艇和指挥作战的地方D a t a F u n 上海站嘉宾专享01-0

4、2 舰桥平台的能力地图今天主要介绍CDPDMP社区CRM部分D a t a F u n 上海站嘉宾专享0 02 2 架架构构与与设设计计D a t a F u n 上海站嘉宾专享02-01 有哪些业务需求？D a t a F u n 上海站嘉宾专享02-01 业务架构设计业务解耦：提升对接效率，从 M*N-M+N资产共享：一方探索出来的资产，可以多方使用，提升利用效率信息广播：新资产产出后，会在各平台广播，避免漏掉D a t a F u n 上海站嘉宾专享02-01 业务流程站内业务闭环内容扶持兴趣探测活动策划站外向站内投放闭环广告业务站内向站外投放增长业务D a t a F u n 上海站嘉

5、宾专享02-02 有哪些功能和要求？D a t a F u n 上海站嘉宾专享02-02 架构设计不同模块的架构目标前台模块:操作简单，低使用成本 对外接口:高稳定性、高并发高吞吐 后台模块:开发和接入工作配置化，降低开发成本人群圈选:可扩展。新增标签和通用人群包 0 成本，新增规则低成本 人群洞察:可扩展。新增洞察维度 0 成本，新增洞察方式低成本。人群泛化:可扩展。新增泛化方式低成本。特征生产:接入特征配置化，与后台打通，0 成本接入ID Mapping:屏蔽 ID Map 打通逻辑，新类型 ID 低成本接入。计算任务运维:屏蔽机器资源和任务依赖存储:可扩展可持续，不因业务量增长，导致成本

6、大幅增加 D a t a F u n 上海站嘉宾专享02-02 特征处理链路设计特征链路离线：Hive-特征抽取-离线标签-实时：Kafka-特征抽取-实时标签-存储Doris用户 x 标签：用户有哪些标签（1100 亿）id mapping：id 转化宽表（8.5 亿）ElasticSearch标签枚举表：标签中文信息及搜索（300 万）D a t a F u n 上海站嘉宾专享02-02 人群定向流程人群定向流程很多，以下说几种典型的：1.普通标签圈人：标签加购物车-圈选。2.普通泛化：传种子人群-泛化。3.历史效果圈人：历史效果人群-泛化-叠加本次运营特点-圈选。4.复杂一些的历史效果圈