02-深度揭秘POLARDB新版本-封仲淹（32页）.pdf

1、封仲淹阿里云智能资深技术专家封仲淹深度解密POLARDBPOLARDB新版本：MySQL 8.0MySQL 8.0Agenda技术解密用户场景基本介绍总结为什么做POLARDBMySQL DBA 的痛使用了读写分离，刚更新的数据，查询不到查询不到。活动上线，容量评估不足，压力陡增，数据库来不及升级来不及升级容量即将超过超过3T3T,没时间做分库分表改造1T1T数据备份或恢复数据备份或恢复,要十几小时十几小时容量超过超过500G500G,查询慢的如蜗牛主从复制经常中断中断，1236 1042错误添加一个字段，备库延迟备库延迟3 3小时小时POLARDB100%兼容MySQL 云原生数据库主物理机

2、虚拟机容器数据库A数据库B读物理机虚拟机容器数据库C数据库B读物理机虚拟机容器数据库D数据库B共享存储共享存储共享存储POLARDB 架构libpfsHost1POLARDBlibpfsPOLARDBHost2volume 1Volume 2chunk1chunk2chunk1chunk2PolarSwitchlibpfsPOLARDBvolume 1PolarSwitchchunk1chunk2ChunkServerChunkServerChunkServerChunkServerchunkchunkchunkchunkParallelRaftPolarCtrlmetadataKey Com

3、ponents:1.libpfs 2.PolarSwitch 3.ChunksServer 4.PolarCtrldata routecontrol route秒级备份跨 az 访问全链路监控性能内核解决管控需求容量 按需支付性能，水平/垂直任意升降级弹性RDMANVME/OptaneFPGA拥抱新硬件应用场景1:海量数据*商家数量以每年70%速度增长，峰值时刻经常出现数据库卡顿，交易等待时间一度上升到5秒。*业务发展速度快，平均3个月打满一个MySQL数据库，费时费力。*原计划保留40天数据，每天1TB日志，现在5天即满30T。*5秒一个话单，5分钟一个分表。*运行超过88个国家级资源库，5

4、6个国家级备选资源库，400余个省会级资源库，覆盖高职教育所有专业大类，课程超6000余门，习题120余万道，媒体资源近250余万条。*单库已超10TB。应用场景2:多库聚合法大大有4个数据中心分别存储不同客户的数据，随着客户的数量逐渐增加，数据的爆发式增长，传统的MySQL数据库无法满足存储存储海量的历史数据的需求。目前，POLARDB已经存储法大大超过6亿的电子合同数据，这些数据可以安全的存储在POLARDB，作为Elasticsearch的底层数据源提供给官网展示，解决了主业务库容量的瓶颈。场景：海量电子合同的归档及查询读写分离负载均衡 POLARDB 主节点 POLARDB 只读节点数

5、据中心1.电子合同应用服务集群数据中心3数据中心4 POLARDB 只读节点前端服务器数据中心1ETL历史数据查询历史数据查询实在在线数据查询实在在线数据查询SLBElasticsearch数据中心4ETLMySQL数据库服务群数据中心3数据中心2ETLETL数据中心2技术解密应用场景1:海量数据应用场景2:多库聚合海量存储libpfsHost1POLARDBlibpfsPOLARDBHost2volume 1Volume 2chunk1chunk2chunk1chunk2PolarSwitchlibpfsPOLARDBvolume 1PolarSwitchchunk1chunk2ChunkS

6、erverChunkServerChunkServerChunkServerchunkchunkchunkchunkParallelRaftPolarCtrlmetadataKey Components:1.libpfs 2.PolarSwitch 3.ChunksServer 4.PolarCtrldata routecontrol route Distribute File System并行查询（POLARDB for MySQL 8.0 新特性）1 active thread63 idle threadsThread 1:Scan,CountSQLSQLClientClientSELEC