高德异地多活最佳实践_孙蔚.pdf

1、OceanBase在高德的高可用最佳实践孙蔚2023/03异地多活Contents目 录01背景介绍-业务挑战我们业务中遇到的挑战介绍02解决方案思考为什么选择OB来解决我们的业务挑战03我们的实践经验分享OB落地过程中遇到的问题及解决方案分享04OB落地效果落地效果，性能情况背景介绍-业务挑战01 高德云同步项目背景及挑战高德云同步背景及挑战高德地图云同步：用户数据云端存储，多端设备数据同步的用户基础服务-异地多活手机pad车载系统云同步收藏点用户设置上传/下载张北上海深圳就近接入单元化DataBase读/写业务系统单元化DataBase业务系统单元化DataBase业务系统用户id路由多次

2、读写多次读写多次读写读/写就近接入就近接入读/写用户id路由1 多点写入 三机房部署 用户多点写入/读取2 海量数据 三单元数据5000亿+三单元数据量近70T（压缩后）3 成本压力 海量数据的存储成本高 在业务无损情况下降本增效挑战部署架构选型要求1 异地多活 多机房多活容灾 多机房扛量2 海量数据存储 支持弹性水平或垂直扩缩容 读写性能可线性扩展3 低成本 低存储成本 低迁移成本解决方案思考02 原生分布式数据库 异地多活 海量数据存储 低存储成本 低迁移成本原生分布式数据库架构OceanBase 原生分布式数据库，单机分布式一体化架构设计，弹性扩展、高可用、多活容灾云原生数据库-对应用开

3、发来说与单机无异Update增量 MemTable(WOS)MemoryDiskGETSmall-QueryScanBig-QueryRow-LevelIn-MemoryRedo/MVCCIn-MemoryHASHIn-MemoryHASH转储 SSTableRow CacheBlock Cache多个转储版本基线 SSTable(ROS)合并前合并后ReplicasLogs混合部署独立部署私有云公有云/混合云Zone 1OBServerOBServerOBServerOBServerOBServerOBServerOBServerOBServerOBServer多活多地多中心跨城高可用部署业

4、务应用数据库代理APPAPPProxyProxyAPPProxyZone 2Zone 3三地五中心多活架构是对“数据不丢失，业务不停机”的极致追求跨地域容灾单机房架构三地五中心多活架构两地三中心架构同城双机房架构异地多活架构广泛应用于金融业务国家标准定义的最高级别容灾标准海量数据存储数据一致性、高可用、平滑扩展Shared-nothing 集群部署，支持弹性水平或垂直扩缩容，读写性能可线性扩展。所有服务节点都支持 SQL 计算和数据存储，应用透明的水平扩展，自动负载均衡，集群规模可达数千节点弹性扩缩容数据库内置多种强校验机制，能够自动发现多副本数据的不一致、网络数据错误、磁盘静默错误、索引与主

5、表的不一致错误等，保证数据可靠。平滑扩展City 2Zone 7Zone 4Zone 5T2T2Zone 8Zone 6T3T4T4T3T3T4Zone 1Zone 2City 1Zone 3T1T2T3T4T1T1T2T2T3T4T3T4数据高可靠服务高可用超越 6级国标灾难恢复能力，同一中心数据库异常、跨数据中心中断时数据不丢失，业务不停机网络注册中心/消息/事务交易账务交易账务运营商网络/CDN网络注册中心/消息/事务交易账务交易账务网络注册中心/消息/事务交易账务机房 1 号负载均衡机房 2 号负载均衡机房 3 号负载均衡机房 4 号负载均衡机房 5 号负载均衡.00 0102 03.

6、00 0102 03.02 03.04 0502 03.06 0702 03低存储成本-高级压缩技术数据压缩是降低海量数据存储空间占用的关键手段。OceanBase高压缩比的分布式存储引擎，摒弃了传统数据库的定长数据块存储，采用基于 LSM-Tree 的存储架构和自适应压缩技术，创造性的解决了传统数据库无法平衡“性能”和“压缩比”的难题，并基于数据日志分离方法的分布式存储技术，进一步降低存储成本，实现了高性能和低存储成本。基于 LSM-Tree 的存储引擎，利用编码压缩大大降低存储成本。显著降低存储成本同一业务的数据存储量OceanBase 仅为 MySQL/Oracle 数据库的1/4-1/