微博混合云极端流量下的峰值应对与架构挑战（32页）.pdf

1、极端流量下的峰值应对与架构挑战王关胜资深运维架构师微博混合云DCP目 录content一、业务背景及峰值应对二、DCP的架构设计挑战三、业务上云的标准姿势微博业务背景及峰值应对Part1微博业务场景 极端流量常见特点：瞬间峰值高互动时间短挑战：传统应对手段成本高设备成本时间成本123产品上：迭代快现状：功能多，依赖复杂挑战：发布&变更频繁运营上：大型活动&重要新闻的Push现状：站内外，活动，运营，大V均有Push场景挑战：全量极速下发，互动时间短技术上：突发的极端流量现状：热点多，#马航370#刘翔摔倒#王宝强#挑战：峰值应对，考验服务的弹性伸缩能力总结：面临的挑战峰值应对 关注点可伸缩的业

2、务利用公有云私有云内弹性部署标准化基础设施提高发布效率打通多语言环境全公司统一平台快速扩容及时回收峰值应对 传统手段Text in hereText in hereStep1 设备申请-设备申请，项目评审-入CMDB，上架装机Step2 机器初始化-设备录入资源池，初始化Step3 服务部署-环境部署-监控部署-服务部署（代码&confs）-流量引入Step4 自动报修&下架-服务自动上下线-设备置换或下架业务运维可控业务运维可控峰值应对 DCP的弹性伸缩混合云DCP公有云私有云虚拟化物理机业务A业务B业务C化零为整：冗余池多云对接OpenStackKVM资源整合：VM池阿里云AWSVPC按需

3、付费：VM池混合云DCP资源管理池业务可弹性伸缩基础设施可跨云Feature云化架构|基于docker业务服务化微服务化业务消息化多机房部署敏捷基础设施持续集成多租户&隔离弹性伸缩故障自愈峰值应对 DCP的弹性伸缩 私有云也弹性峰值服务保障 统一监控平台峰值服务保障 核心链路服务自动伸缩峰值服务保障 预案&干预手段 预案：100+日常&应急预案重大活动，三节等预案手册 服务降级：5000+开关 有效的干预手段Weibo DCP架构设计挑战Part2微博DCP整体架构介绍私有机房公有云主机资源AdapterDockerSwarmMesosDispatch扩缩容集群服务配置日志故障转移滚动发布业务

4、专线VPCJavaWebRPCPROCHadoopPHP大数据基础设施服务发现Nginx、motanSLB、DNS镜像中心Docker Registry监控中心容量评估编排调度主机Weibo DCP 架构设计挑战1镜像分发 镜像分发镜像优化分发速度 隔离设计平台层隔离部署/实例隔离 弹性伸缩自动扩缩容故障转移2隔离设计3弹性伸缩挑战一：镜像分发 镜像优化 仓库部署优化 Storage driver：Ceph 多机房部署：镜像缓存Mirror内网阿里云业务集群业务集群分布式存储RegistryRegistryRegistry镜像缓存Mirror 镜像制作优化 镜像分层，逐层复用 制作微镜像挑战一

5、：镜像分发 分发速度LVSNginxRegistryRegistryRegistryRegistryRegistry业务业务业务内网阿里云pullpullpullpullpullpull 部署模式 常规部署：最小化模式 弹性扩缩容：依赖模式 核心优势 镜像穿透：级联&预热 带宽优化：打散 分发速度：千台规模分钟级 未来方向 支持p2p挑战二：隔离设计 隔离模型集群服务服务服务服务池服务池ContainerContainerContainer.Container.平台上隔离部署上隔离实例上隔离NodeNodeNode.Node微博平台手机微博红包飞Feed评论用户Feed-dc1Feed-dc2

6、Feed-dc3CPUMEM资源池共享全局共享池集群Buffer池挑战二：隔离设计 平台层设计接入编排调度权限实例根容器用户容器用户容器用户容器模板定义原子型API任务实例环境变量模板定义原子型API任务实例环境变量模板定义原子型API任务实例环境变量用户A:产品线模块:集群/服务用户B:产品线模块:集群/服务用户C:产品线模块:集群/服务JAVAPHPGUIREST API大数据业务用户A操作域用户B操作域用户C操作域用户A用户B用户C平台层隔离实例隔离挑战二：隔离设计 平台用户操作范围1超级管理员集群管理员服务池管理员内网共享池管理阿里云ECS管理计