海山数仓：移动云云原生 OLAP 数据库的技术演进与实践.pdf

1、海山数仓：移动云云原生OLAP数据库技术演进与实践陶捷中国移动云能力中心自主 创新 引领大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会移动云分析型数据库发展历程海山数仓的核心技术海山数仓的架构和理念实践与展望0 01 10 02 20 03 30 04 4目 录Contents大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技

2、术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会移动云分析型数据库发展历程Chapter 01大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会-启动云改,转型云计算服务商-海山数据库1.0发布-云原生进阶,发布海山数据库2.0-启动算力网络数据库探索和研究-基于开源启动商业版产品打造-集团内部推广和应用移动云数据库团队十年前正式诞生，以实现数据库核心技术自主可控为目标，目前已构建完整产品和市场体系，并实现大规模商

3、用。研发团队资源规模市场推广苏州研发中心云能力中心15+31 全国资源覆盖30万 vcore10+中移专业公司9大 重点行业突破规模 200+人内核研发 70+人202020242014移动云数据库的发展历程大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会201820142009Aurora ServerlessAuroraLog is Database开源托管云原生数据库的进化方向:更深层次的解耦、更灵活的感知调度我们 认为数

4、据库的下一阶段:从云计算到算力网络Serverless存算分离架构容器化部署无资源预占、全球分布、任务式服务L3L2L1资源预占、计算存储体扩展资源预占、计算存储分别扩展无资源预占、水平和垂直扩展算 存由云向算，云原生数据的四级进化大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会数据库统一云原生平台底座。移动云基于K8s构建云原生数据库底 座，全线产品达云原生L1级。自研海山数据库系列，采用存算分离 架构，并全面向Serverl

5、ess演进。在中国移动算力网络战略下，大力探 索算力网络数据库，积极推进相关技 术以及行业标准制定*海山数据库MySQL版和分布式版公测中,即将上线*多模数据库正处于研发阶段*算力网络数据库正处于前期调研阶段海山数据库 分布式版*L2移动云一站式云原生数据库服务事务型 分析检索OLAP NoSQL海山数据库 PostgreSQL版海山数据库MySQL版海山数据库数仓版算力网络 数据库*数据库传输数据库自治数据库管理L1缓存数据库L1文档数据库L1搜索数据库L1向量数据库数据库生态工具L3L2L1L4移动云数据库的布局大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据

6、技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会大数据技术标准推进委员会Oracle DB2 Netezza 2000年2003年2005年2016年2017年2021年2014年2021年FoxLakeTeradataGreenplumVerticaClickHouseApache DorisStarrocks、DatabricksSnowFlakeDataBendBC-Hadoop近十年来以Clickhouse、Doris为代表的新架构实时数仓,吸收开源大数研技术架构和能力,在分析实时 性、支撑数据规模上有了显著提升海山数仓