《PolarDB-X 2.0 核心技术能力解读-云原生分布式数据库PolarDB技术与实践论坛(30页).pdf》由会员分享,可在线阅读,更多相关《PolarDB-X 2.0 核心技术能力解读-云原生分布式数据库PolarDB技术与实践论坛(30页).pdf(30页珍藏版)》请在三个皮匠报告上搜索。
1、PolarDB-X 2.0 核心技术能力解读楼江航(七锋)阿里云数据库资深技术专家Contents目录01PolarDB-X 整体介绍02分布式的技术挑战03总结PolarDB-X 整体介绍面向MySQL原生的分布式数据库产品01云原生数据库架构演进概述共享状态DBDBDB共享存储分布式DBDBDB本地磁盘本地磁盘本地磁盘scale up单节点DB本地磁盘传统单机数据库RDS 系列MySQL/MariaDB云上最强MySQL+高可靠+高安全scale outPolarDB 云原生数据库MySQL版(共享存储,一写多读)超强弹性+百TB级容量+快照备份PolarDB-X 云原生分布式数据库1.0
2、版(计算层DRDS+存储RDS/PolarDB2.0版(金融级一致性保障,透明分布式)PB级数据+大表过亿+高并发大促+混合负载,上不封顶稳定&成熟阿里集团业务以及多年双十一的沉淀分布式解决数据库的线性扩展性开源&生态MySQL原生分布式数据库PolarDB-X 产品特点PolarDB-X 技术架构CN ClusterCNCNCNCDC ClusterCDCCDCGMS ClusterGMSGMSGMSDN ClusterTSO/TopologyMetaDataTopologyApplicationviaMySQLProtocol生态数据库DevOpsDMS数据库备份DBS数据传输DTS数据仓
3、库BI大数据数据库自治DAS工具集数据应用迁移ADAMPolarDB-X!#$%&!#$%&Global Meta ServiceGMS()*+,-.$%(TSO)/0Table/Schema1Statistic2Meta34/05617829+34:;=:;?APaxosBCDEFGHI:;JKLMNMVCCO%FHPQRSTU=&TU?VWXFSQLYZ)*LMNTUJKLMNO%F2PCD1+,_Y/02a=&a=&Change Data CaptureCDC()*bcMySQLdXFbinlogDE#eN)*bcMySQL ReplicationfghiFjkDNpaxosDNpaxo
4、sDNpaxos 经历多年实战磨练,MySQL语法高度兼容 完整的SQL解析层,实现精准算子下推 Serverless无状态,弹性能力对业务透明 提供HTAP 并行计算能力,应对混合负载场景计算节点 基于AliSQL内核,历经多年考验,稳定可靠 基于Paxos强一致协议,高可用能力进一步提升 全局MVCC改造,满足持金融级一致性要求 RPC协议改造,提升节点间通讯性能数据节点执行器优化器优化器执行器MySQL 协议层SQL解析Plan CacheOutlineInformation schemaCascades Optimizer(RBO&CBO)Physical Plan For TPPhy
5、sical Plan For APHintData Placement(Rule)Transaction(TSO/2PC)AP OperatorsShuffle、DriverFunctionsSequenceTP OperatorsSessionUsersAdmin&ProfileOperatorsDDL OperatorsDCL OperatorsGSIData TypeRPC协议FunctionsMVCCData TypeRow StoreVector-based OperatorColumn StoreRow-based OperatorReplication(X-Paxos)Buffe
6、r PoolPlan CacheResoureManagement(thread/mem/dop)存储引擎CNDNPolarDB-X CN/DN组件 EX:并行采集所有DN的变更日志 MR:分布式事务日志/DDL排序重组 DP:全局日志落盘并提供标准Binlog服务CDC节点 兼容事务(分布式事务全局排序)例:基于TraceId、TSO信息对Binlog全局排序 兼容分布式DDL例:可支持DDL同步到下游,比如ADB 兼容分布式扩缩容例:屏蔽内部分片迁移、广播表、索引等数据干扰全局Binlog主备Replication 兼容MySQL生态的主备复制 兼容DTS的上下游生态CDCExtracto