Kubernetes多集群环境下数据组件的高可用

1. Kubernetes多集群环境下数据组件的高可用徐昕 Data Infrastructure

2. 目录 CONTENT 背景&挑战 03 状态管理 02 云原生架构 04 容错恢复 01

3. 01 背景与挑战

4. 数据组件

5. Kubernetes管理数据组件无状态应用状态 ❖ ❖ ❖ ❖ ❖ 分布式一致性数据持久化 I/O性能容错备份和恢复流量 ❖ ❖ ❖ 负载均衡限流降级有状态应用

6. Kubernetes多集群下管理数据组件容错分布跨数据中心/集群/机架资源管理物理机资源优化服务发现全局域名基础设施变动集群升级更新下架无感

7. 02 云原生架构

8. 云原生架构应用特点全量数据主从模式延迟不敏感

9. 云原生架构 ● FederatedStatefulSet 功能 StatefulSet FSS 跨集群管理 ✅ 原地升级 ✅ 灰度发布 ✅ 发布顺序 ✅ 生命周期定制 Pod PreStart/PostStart ✅ 应用保护机制单集群 ✅ 无缝迁移 ✅

10. 云原生架构应用特点数据分片难点如何分布数据

11. 云原生架构解决方案 ● ● ● 容器调度细粒度分组数据反亲和

12. 云原生架构应用特点数据分片多组件难点如何管理依赖关系

13. 云原生架构应用特点数据分片多组件延迟敏感

14. 云原生架构云原生数据组件管理平台标准化应用建模数据分析数据处理消息队列数据库存储 ● ● ● 跨集群管理统一部署自动运维资源调配故障演练标准化云原生接口安全合规 ● ● 基础设施层多组件依赖 HA模式 Sharding模式状态驱动多租户隔离

15. 03 状态管理

16. 状态转换 Controller Controller模式全局协作状态转换可插拔生命周期定制 SideCar模式自主选举状态监控闭环自愈

17. 应用保护 Pod中断预算保护pod disruption budgets VS 应用中断预算保护 application disruption budgets 跨集群保护控制范围

18. 04 容错恢复

19. 故障转移监测服务异常 DC1 Endpoint 客户端/代理层无缝迁移同步数据与校验 DNS Cache DataCenter1 DataCenter2 DC2 Endpoint

20. 备份恢复数据可靠性执行点故障转移数据同步状态检查 ● ● 可观测性 ● ● ● 执行引擎状态备份历史记录执行失败信息可定制 ● ● 备份策略数据过滤

21. 混沌测试故障模拟模拟容器故障模拟依赖组件故障模拟基础设施故障控制爆炸半径数据中心/Kubernetes集群/机架物理机/容器流程编排标准流程定制顺序沉淀案例

22. 非常感谢您的观看