邓瑞龙-化解多云转型带来的运维熵增.pdf

1、2023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站化解多云转型带来的运维熵增邓瑞龙 作业帮SRE负责人2019年中加入作业帮，负责多云多活建设，推动作业帮传统业务运维进行云原生转型和能力升级；此外，还负责RocketMQ/Kafka等中间件运维。曾就职于百度、滴滴、Cadence等。01多云选型背景02多云技术要点03多云运维熵增04多云管理实践目录Content01多云选型背景2023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站多云选型 需求背景BASE单云生于云、长于云。业务量级已达到数千个模块、数十个技术栈、数十万核计算资源，具备复杂化和规模

2、化特征稳定诉求单云基础设施故障时有发生。教学经营和供给场景下，用户服务时间特别集中，对服务稳定有极高要求，不能把所有鸡蛋放在同一篮子里成本诉求公司对云成本有严格的预算要求。单云部署被厂商锁定，成本优化手段乏善可陈，既无助，又无奈02多云建设要点2023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站优先南北向入口流量调度服务注册发现闭环在云内同城多云服务同构部署自建中间件避免云商锁定打通多云网络低延时互通多云模型 技术要点公网网关网关应用应用应用应用DBMasterDBSlaveDBSlaveMQMQ用户APP/FE应用应用ProxyProxyCloud-1Cloud-2Do

3、H/DNS03多云运维熵增2023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站熵增定律 普遍适用熵是热力学第二定律中的一个物理概念，用来描述热量不可逆转的过程。后来随着科学理论发展，熵逐渐被解释为系统内在的混乱程度。在孤立的系统内，系统从有序向无序的自发过程中，熵总是增加的。自然万物最终都趋向于从有序到无序发展。将熵维持在较小值，意味着系统需要吸收外在的能量。有序度高混乱度低有序度低混乱度高熵增放之四海皆准。运维作为信息技术体系的一个细分领域，其底层逻辑归根到底就是通过技术能力加持，通过架构化和工程化，维持信息系统的有序性，以延缓熵增，多云运维亦如此鲁道夫克劳修斯2023

4、 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站多云管理 熵增挑战资源管理服务管理流量管理多云观测多云演练多云操作运维熵增多云低延迟高稳定互通多云网段前瞻规划要求高云上资源选型太宽泛多云服务复杂度增加多云服务容量快速交付大中心式的ZNS运维介入大传统DNS生效慢业务域名多触发DNS限流业务域名增删改对流量管理入侵大多云运维观测对象成倍增加业务定制观测及数据分析诉求多运维/业务全局视角观测难业务新增服务或存量迭代故障演练投入大收益不可持续架构演进长尾不可控多云变更源多操作不规范多云变更源杂管控不到位业务类型多变更步调不一致04多云管理实践2023 DevOps 国际峰会 暨 B

5、izDevOps 企业峰会 北京站资源管理 熵增挑战多云低延迟高稳定互通在离线请求互相干扰，带宽时不时打满，延时抖动频繁排查成本高单根专线中断难止损01多云网段前瞻规划要求高前期网络规划跟不上业务及多云发展，IP段零零碎碎管理难度大，域控概念不清晰入侵安全组大02云上资源选型太宽泛云上资源选型太多，加上多云组合后规模变大，资源交付及管理链路运维容易失控032023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站专线供应商 1北京城域网专线供应商 2北京城域网云厂商 1云厂商 2云厂商 n带宽灵活扩容双供应商组网单线异常自动切换BGP ECMP跨云流量/延迟观测和管控CPE Q

6、oS，FullMesh新云接入成本低星型拓扑双环组网 多云互通在京/环京IDC2023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站网络分段 规划先行管理域生产域测试域办公域数据中心IDC-1IDC-2IDC-N网络分域部署环境ONLINETIPSTEST服务类型PaaS or 普通服务CIDR在离线做到网络隔离在离线专线调度/QoS子网划分更细粒度的网络管理按子网封禁管控应用层得到大域管控应用&组件网络行为差异大2023 DevOps 国际峰会 暨 BizDevOps 企业峰会 北京站规模场景特化RDS专用大磁盘机型Redis专用AEP机型网关场景AMD型普通计算专用机型