⼤众点评内容平台架构实践

1. 众点评内容平台架构实践

2. 录

3. 背景介绍 3

4. 背景介绍业务简介内容内容平台产内容消费推荐评价\笔记话题榜单频道活动演出免费试站外 4

5. 背景介绍建设标准化的内容存储、处理和分发的流线系统，实现内容的体化管理 5 平台定位

6. 背景介绍

7. 优化实践 7

8. 内容模型标准化初创期 8

9. 内容模型标准化

10. 内容模型标准化

11. 内容模型标准化

12. 内容模型标准化

13. 内容模型标准化逻辑模型星型模型：事实表（主体）+ 维度表（四刚），表达内容基础结构分类类标签 DDD：聚合根（主体）+ 实体（四刚）+ 值对象（属性） KEY1 : VALUE1 …… KEYn: VALUEn 位置属性合并：将含义相似且可能被同时使 Meta属性：图宽的属性做聚类，以便理解和应、视频码率、经纬度等原 KEY1 : VALUE1 …… KEYn: VALUEn 政区等分类：美等标签：、购物、亲时效 KEY1 : VALUE1 …… KEYn: VALUEn 主体属性图片同质属性：位置：城市、商圈、 KEY1 : VALUE1 …… KEYn: VALUEn 像、敏感、热点等 POI 视频文本 meta 其它 meta 其它 meta 其它 meta 其它 KEY1 : VALUE1 …… KEYn: VALUEn KEY1 : VALUE1 …… KEYn: VALUEn KEY1 : VALUE1 …… KEYn: VALUEn KEY1 : VALUE1 …… KEYn: VALUEn KEY1 : VALUE …… KEYn: VALUEn KEY1 : VALUE …… KEYn: VALUEn KEY1 : VALUE …… KEYn: VALUEn KEY1 : VALUE …… KEYn: VALUEn 时效：分发开始、分发结束等 Meta属性与维度表绑定，同质属性因其来不同维表，则建新的维表，与事实表关联，并可按需创建 13

14. 内容模型标准化

15. 内容模型标准化物理模型关系型数据库 ContentVideo n 视频维表关联 1 1 关联 n ContentCategory FA_HLModule 关联模块表类目属性集事实表（主体）+ 主维度表（四刚）+ 扩展维表结构化：可映射内容逻辑模型，易于理解 ContentPic n 图片维表 ContentText 关联 1 关联 1 ContentBase 内容事实表 1 关联关联 n ContentTag 标签属性集 n ContentGeoLocation 位置属性集 n ContentEﬀPeriod 时效属性集扩展性：维度表可扩展，执 DDL即可。 n POI维表 ContentRelation 内容关联内容表 1 1 n 文本维表 ContentComponet 关联 n 关联核心基础表 1 1 关联 1 关联属性集表扩展表 n ContentExt 扩展信息表 JSON Meta属性集、扩展字段灵活性：半结构，可记录个性化属性，解决异构内容存在的离散差异点，并扩展性：可持按需解析。需修改表结构，属性可按需扩展，并且持建索引优化查询。 15

16. 能模型标准化发展期 16

17. 能

18. 能模型标准化 HOW 拆解能：基于输流程：对能引采取某些处理进为得出输出的功能模块编排调度，输出处理结果的过程能封装静插件化架构思想 •定义契约，沉淀能实现不同程度的能复能引擎流程动 •按照契约调度和编排能编码实现流程的调度静能池拆动能组合动池能？静能过程式编码 x 解耦组合组合配置规则 •定义契约，配置能的组合规则实现流程的抽象和可配逻辑 18

19. 能

20. 能

21. 能引擎特点：记录中间状态、失败可恢复、异常可追踪适合场景：流程复杂，如内容处理流程，涉及多种组合关系，且执时间不可控的场景能模型：接扩展：封装接 + DSL + 引擎，修改DSL将其编流程维护：管理DSL即可流程扩展：编写DSL，配置能的组合关系 21

22. 稳定性优化成熟期 22

23. 稳定性优化

24. 稳定性优化减压-请求去重权衡：延时、吞吐压分内容类型采样 80 60 40 不同内容类型的可去重率 20 0 攻略、视频等均需要做安全审核 •短时间内，安全审核会返回多次审核结果，频次不可控 •系统吞吐需求被放 •每条内容，包括图、 60 可去重 80 20 评价分时间窗笔记话题短视频免费试采样不同时间窗 40 的可去重率 0 1s 2s 5s 10s 15s 20s 30s 24

25. 稳定性优化减压-请求去重权衡：延时、吞吐压时间窗应去重引擎定时器：延时队列定时功能，定时触发实际执执层：内容处理请求减少70%以上存储层：数据库读写压合并器：缓存待处理请求可配降低30%左右基础层：服务器资源节省约25%左右器：处理请求，并清理缓存 25

26. 稳定性优化隔离-分级处理权衡：延时、影响，“重点”内容优先处理分级原则核内容来源优先：户创作 > 其它来源核内容类型优先：评价、笔记 > 其它类型动态调配分配基本配额，并根据实际执未使优先级队列，防情况，第级队列第级队列调整低优先级饿死 26

27. 稳定性优化可观测能建设全链路可视化志链路定义：描述处理流程的DSL 链路染：定义链路某次执链路上报：构建的唯标识志组件，搜集上下链路存储：包括链路级、节点级和明细等三类志 27

28. 稳定性优化可观测能建设执 ①快速定位异常点（红） ③通过志明细定位根因 ②快速判断是否偶发异常 ERROR 28

29. 三总结展望 29

30. 总结展望

31. Q&A 31