作业帮基于 OceanBase 的 HTAP 实践_刘强.pdf

1、作业帮基于OceanBase 的HTAP 实践刘强作业帮DBA个人简介当前就职于作业帮基础架构-DBA 团队。主要的工作内容是负责分布式数据库的探索和使用，协同研发团队在公司内部推进分布式数据库在业务上的落地。近期的工作重点是测试 OceanBase4.0 的功能,期望能够在一定场景下将MySQL的业务迁移到OceanBase 中。作业帮-刘强Contents目 录01作业帮分布式数据库的探索02OceanBase4.0 对比MySQL5.703OceanBase4.0 HTAP 实践04OceanBase4.0 碎碎念作业帮对分布式数据库的需求1、海量数据存储 减少分库分表的复杂度 解决单机

2、存储瓶颈的问题2、提高响应速度 IO 密集型的SQL:扫描量大CPU 密集型的SQL:计算量大作业帮DB生态MySQL+OrchRedis-ClusrerMongoDBElasticSearchTiDDBOceanBase多云架构阿里云阿里云阿里云业务需求多样化大数据报表平台业务报表服务业务查询服务数据归档、汇总My SQLMy SQLMy SQLMy SQL线上MySQL集群节点多机房下的高可用架构多机房环境稳定的高可用架构探索双活架构的方案替代部分MySQL 业务,降低硬件成本010203高可用高可用机房A机房BSlaveMasterMasterSlaveDTS业务单元B业务单元ADTSC

3、ontents目 录01作业帮分布式数据库的探索02OceanBase4.0 对比MySQL5.703OceanBase4.0 HTAP 实践04OceanBase4.0 碎碎念2.1 性能对比测试规格:32C64G QPS CPU 使用率多租户模式充分利用CPU资源在较高的qps下保持较低的cpu使用率 磁盘占用OB 数据压缩比技术相对MySQL5.7 节约2/30.00%5.00%10.00%15.00%20.00%25.00%30.00%8163264128CPU 使用率OceanBase-4.0MySQL5.7.2402000040000600008000010000012000014

4、00001600008163264128QPSOceanBase-4.0MySQL5.7.24有利于降本增效2.2 兼容性对比DDL 性能&兼容性 mysql 有主从延迟的问题,需要使用审核工具控制延迟;OB 不存在 执行速度相差不大（期待OB4.1 的数据旁路导入功能）OB 对主键的操作语法不支持多个DDL 合并2.3 字符集对比OB 字符集、校验集支持种类有限：如不支持校验集 utf8mb4_unicode_ci2.4 架构对比高可用架构OB原生高可用,不需要额外的高可用组件多副本类型日志副本、只读副本leader 调度减少业务跨云写入LeaderFollowerReadOnlyLogOn

5、lyalibank0000-19alibank0020-39alibank0040-59alibank0060-79alibank0080-99alibankmisc00-99IDC5alibank0010-19alibank0030-39alibank0050-59alibank0070-79alibank0090-99alibankmisc00-99IDC3alibank0010-19alibank0030-39alibank0050-59alibank0070-79alibank0090-99alibankmisc00-99IDC4alibank0010-19alibank0030-39

6、alibank0050-59alibank0070-79alibank0090-99alibankmisc00-99IDC3alibank0010-19alibank0030-39alibank0050-59alibank0070-79alibank0090-99alibankmisc00-99IDC4城市1城市2城市3UID00-19UID20-39UID40-59UID60-79UID80-99UID00-99阿里云腾讯云百度云应用User-Ali应用User-Tx应用User-BdOB1OB2OB3OB4ZONE-1OB1OB2OB3OB4ZONE