5-洪建辉-AntDB融合型数据库：实时流数据处理引擎揭秘.pdf

《5-洪建辉-AntDB融合型数据库：实时流数据处理引擎揭秘.pdf》由会员分享，可在线阅读，更多相关《5-洪建辉-AntDB融合型数据库：实时流数据处理引擎揭秘.pdf（26页珍藏版）》请在三个皮匠报告上搜索。

1、AntDB融合型数据库：实时流数据处理引擎揭秘洪建辉亚信安慧&AntDB-T 产品线负责人1 AntDB 流式数据库简介About AntDB streaming database 2 基于PG引擎的流处理进程模型AntDB stream processing process model 3 支持流表关联操作的执行计划生成Execution plan of flow table association operation4 流式窗口统计执行机制Streaming window statistics execution mechanismCONTENT01 AntDB流式数据库简介AntDB融合

2、数据库发展历程AntDB数据库，助力5G商用基础全域 全自主建设高可用、高性能第一代分布式AntDB 5.x原生代分布式架构（高度兼容Oracle特性)AntDB 3.x拥抱PostgreSQL生态拥抱MySQL生态AntDB 4.x自研内存数据库AntDB 7.X“超融合”架构流式实时数仓AntDB 6.x多模原生分布式数据库第二代第一代2022202120192016201420122008首先应用于运营商核心计费系统核心业务全线覆盖，包括CRM/计费等“全国首个”核心账务系统上线交通行业省级数据中心项目落地移动/联通/电信的多个省份应用落地助力广电全面进军5G，稳健放号满足海量数据分析秒

3、级业务响应的需求连续两年入选Gartner中国数据库管理系统市场指南报告入选Forrester中国数据管理生态系统导航报告荣获信通院2022大数据【星河】案例标杆优秀双料大奖电信行业数据库产品能力测评通过中国信通院数据应用创新实验室电信行业工作组“副组长单位”最早一批投入国产数据库研发的企业工信部技术创新单项奖金融电子化金融业突出贡献奖通过“可信数据库”性能专项评测AntDB 8.X“超融合”数据库多模态 多引擎 向量引擎2023AntDB融合数据库特性久多快稳应用时间久500+项目的选择ns级响应 us级响应15年产品稳定可靠10亿用户服务人数多执行性能快1000+运行节点数PB级数据规模A

4、ntDB数据库特点5AntDB 数据库超融合能力为用户建立连接，融合6大数据应用需求能力AntDB-T 交易型能力AntDB-TS 时序型能力AntDB-V 向量引擎能力AntDB-S 流处理能力AntDB-A 分析能力AntDB-M 内存计算能力可作为整体框架提供全部能力,也可以拆分为独立模块RDBMSKafkaBatchApache StormSpark StreamingFlinkEDWLakehouseHadoopAppSQL报表挖掘AI数据大屏实时告警数据湖业务场景传统流式处理业务场景RDBMSStreaming DataAntDB流式实时数仓ProcessingSQLAntDB 流

5、处理颠覆50年未变的数据库内核AntDB 流式实时数仓超融合DBDBAPPAPPPUSHPULLAPPDATA SHARINGAntDB-S一体流式处理引擎全流程SQL处理实时物化视图一站式性能提升易用性高AntDB 流式实时数仓是如何工作的？在AntDB数据库运行，提升3倍针对核心系统性能需求数据流转更实时处理引擎更简易处理模型更对应AntDB 流数据库特性优势(一)技术堆栈简化实时效率高传统业务逻辑设计AntDB业务设计流程分流处理消息汇总100%SQL定义Java/Scala实时推送自动触发AntDB 流数据库特性优势(二)流数据库核心功能和逻辑模块监控运维业务场景数据大屏实时告警实时报

6、表实时分析ad-hoc查询接口驱动层ODBCC APIJDBC数据字典元数据全局统计信息函数内置函数自定义函数优化器执行计划代价计算SQL解析流处理语法PG语法SQL语句DDLDMLDCLDQL执行引擎PUSH模式查询流式窗口分析存储引擎流对象外部数据源扩展插件实时性能监控自动优化分析自动化运维空间趋势预测实时拓扑结构多维度关联分析自定义监控告警SQL处理流式关联查询异步屏障快照流处理并发模型流对象约束流对象索引KafkaMySQLPostgreSQLOracleHDFSHBaseES接入服务文件.外部数据源流数据库功能架构拆解流式数据库是把流处理引擎的能力合并到数据库内核，与数据库SQL引擎