基于软件开发新理念的新一代的数据基础设施-曹伟.pdf

1、云原生的多云混合云数据基础设施Control Plane演讲者：曹伟前阿里云数据库总经理/研究员，云原生数据库PolarDB 创始人。中国计算机学会数据库专委会、开源专委会执行专委，获得 2020 年中国电子学会科技进步一等奖，在 SIGMOD、VLDB、ICDE、FAST、USENIX ATC 等数据库与存储国际顶级学术会议发表论文 20 余篇。云原生数据库领域的研究P u b l i c a t i o n s201420182019202020212022VLDBRealization of the low cost and high performance MySQL cloud da

2、tabaseVLDBPolarFS:an ultra-low latency and failure resilient distributed file system for shared storage cloud database SIGMODX-Engine:An Optimized Storage Engine For Large-Scale E-Commerce Transaction ProcessingSIGMODTimon:A Timestamped Event Database for Efficient Telemetry Data Processing and Anal

3、yticsFASTPOLARDB Meets Computational Storage:Efficiently Support Analytical Workloads in Cloud-Native Relational Database SIGMODPolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers LogStore:A Cloud-Native and Multi-Tenant Log Database ICDEPolarDB-X:An Elastic Distributed Relatio

4、nal Database in the Cloud-Native EraTcpRT:Instrument and Diagnostic Analysis System for Service Quality of Cloud Databases at Massive Scale in Real-time SIGMOD云数据库行业趋势ApeCloud适合小规模且难以预测的负载 不暴露数据库版本 不暴露数据库参数 不暴露数据库规格 超卖红利属于云厂商ServerlessServerless,全托管和自建的适用场景适合中小型规模且波动较为规律的负载 暴露数据库版本（强制维护）暴露数据库参数（部分）暴

5、露数据库规格 超卖红利属于云厂商全托管全托管适合中大型规模且波动较为规律的负载 暴露数据库版本（不强制维护）暴露数据库参数（几乎全部）暴露数据库规格 超卖红利属于客户BYOC/IDC 自建自建内核发展趋势(资源池化)管控发展趋势（AnyWhere）传统数据基础设施系统烟囱式架构体验不一致系统预期行为不一致引 擎运 维 操 作环 境业务引入新引擎成本高Conways LawDBPaaSDBPaaS API&PortalAPI&PortalMySQL管控PG管控MongoDB管控Redis管控OLAP管控ES,Kafka,ClickHouse,HA备份迁移监控审计扩缩容容灾资源调度云（虚拟机）物理

6、机本质是管理复杂度从过去十年软件开发新理念寻找解决方法云原生公共云私有云微服务中台低代码DevOps流计算Modern Data Stack数据湖湖仓一体HTAP平台工程多云IaC容器K8s编排流批一体DDDDevOps 和云原生带来的新范式 Pets v.s.CattleLesson 1：容器化不可变基础设施基础架构即代码(IaC)声明式 API容器编排App Layer用 K8s 作为业务与云之间的适配层APPAPPAPPAPPAPPInternal Developer Platform/平台工程平台工程K8s APIGKEEKSACKAKSOpenShiftDaoCloudSealOSR