阿里云ADB-PG技术架构及展望-印才华.pdf

1、PostgreSQL中文社区第13届PostgreSQL中国技术大会聚焦云端创新汇聚智慧共享印才华阿里云ADB-PG技术架构及展望PostgreSQL中文社区整体架构核心技术03未来展望04产品介绍0102PostgreSQL中文社区目录contents01产品介绍PostgreSQL中文社区PostgreSQL中文社区产品介绍02整体架构PostgreSQL中文社区PostgreSQL中文社区整体架构协调节点工作节点1工作节点N存储弹性集群OSSESSD协调节点工作节点1工作节点NServerless集群LocalCacheColdDataTable|PartitionBackup Data

2、Base|WALForeign Table DataORC|Parquet|CSV|JSONRemote DataLocalCacheADB-PG Cluster冷热分层备份恢复批量导入外表访问存算分离水平扩缩容垂直升降配实例启停OperationalDatabasesHadoopMessage StreamingMySQLPostgreSQLSQL ServerOracleHDFSHiveKafkaDTS实时同步PXF外表访问批量同步SS流式写入模型服务通义千问ChatGPTVectorEmbeddingChatGLM向量特征提取模型推理Dataworks任务调度数据同步FlinkPolar

3、DBApplicationBI ReportDoc UploadChatbotLaser执行引擎Beam存储引擎Orca优化器ESSDLaser执行引擎Beam存储引擎Orca优化器IMVIMV03核心技术PostgreSQL中文社区PostgreSQL中文社区核心技术实时化智能化高性能PostgreSQL中文社区高性能 行列混存实时引擎BeamPostgreSQL中文社区高性能 向量化执行引擎Laser技技术亮亮点点算子向量化按批处理数据行列模式自适应SIMD加速优化扫描延迟物化表达式向量化&JIT融合执行并行化分布式并行节点内并行t1(Beam)t2(Beam)Seq ScanVector

4、izationRedistribute MotionVectorizationHashVectorizationSeq ScanVectorizationHash JoinVectorizationHash AggregateVectorizationSortVectorizationGather MotionVectorizationCPU HazardsFunction CallsCPU IO Prefetch&流水线执行工工作作节点点Orca优化器Laser执行引擎Beam存储引擎IMV实时物化视图PostgreSQL中文社区高性能 Top-Down Cascades优化器Orca技技术

5、亮亮点点面向复杂分析代价模型自顶向下字典加速执行加速文本过滤聚合最优关联顺序多表Join关联优化关联子查询动态关联过滤减少网络传输动态分区裁剪分布式并行HashScanHash JoinScanMotionBloom filterBloom filterBeam with dictScan filter by dict Agg by dictDict Decode查询优化特性(Orca+Laser+Beam)动态关联过滤字典加速执行TPC-HSSB 3X工工作作节点点Orca优化器Laser执行引擎Beam存储引擎IMV实时物化视图PostgreSQL中文社区高性能 标准Benchmark测试

6、对比同等配置下TPC-H场景ADB-PG7为ADB-PG6和开源Greenplum7 4倍倍综合性能同等配置下SSB场景ADB-PG7为开源Greenplum7 18倍倍综合性能，为ADB-PG6 5倍倍综合性能PostgreSQL中文社区实时化 实时增量物化视图PostgreSQL中文社区实时化 一站式实时数仓PostgreSQL中文社区智能化 基于向量&全文检索的RAG解决方案ADB-PGIDInputInference1xxxxxxxxxxxxxxx2xxxxxxxxxxxxxxxChunkEmbedding