阿里云大数据计算产品与解决方案全新发布-大数据平台技术论坛（9页）.pdf

《阿里云大数据计算产品与解决方案全新发布-大数据平台技术论坛（9页）.pdf》由会员分享，可在线阅读，更多相关《阿里云大数据计算产品与解决方案全新发布-大数据平台技术论坛（9页）.pdf（9页珍藏版）》请在三个皮匠报告上搜索。

1、#高雪峰阿里云智能计算平台产品与解决方案总经理阿里云大数据计算产品与解决方案全新发布阿里云大数据计算产品能力持续演进全频谱智能数仓01湖仓一体2.002数据安全与隐私计算03新一代云原生离线实时一体化数仓升级发布 MaxCompute和Hologres10X性能高速原生互访，深度集成 实时计算Flink版加工Hologres Binlog，ODS-DWD-DWS-ADS 全链路事件驱动数仓开发 原生支持OSS/DLF数据湖，高速数据入湖、入仓 支持标准SQL协议，对接19款主流BI，第三方开发工具DataHub数据总线运营看版数据大屏MaxCompute离线数仓服务分析Hologres实时数仓

2、实时计算Flink版OSS/DLF 数据湖在线应用DataWorksHologres：服务（Serving）能力大升级混合负载、统一服务计算资源基于资源组隔离，实现多租户多负载细粒度隔离，支持导入、加工、建模、服务多种负载隔离，支持OLAP、点查多场景统一数据服务出口。企业级在线服务不停机热升级；硬件故障10 x加速恢复；丰富的在线慢查询诊断能力。索引创新，性能突破存储升级，行列共存，一张表同时支持高性能OLAP(列存)和高QPS点查（行存）两种能力；支持JSON索引，原生支持、半结构化数据。原生Binlog，支持端到端事件驱动开发高可用架构通过共享存储的多实例部署，满足高可用需求，支持读写分

3、离、实时热备等多种场景；支持单实例进程级多副本服务，支持更高吞吐云原生数据湖构建DLF升级发布元数据共享化服务化元数据，满足单表百万分区元数据管理。支持超过10万DB，1亿Table，10亿Partition统一的数据权限对接多引擎，支持库/表/列等细粒度数据访问控制数据入湖多数据源一键入湖，支持离线/实时入湖方式，用户自定义数据预处理过程数据探索提供便捷的数据探查能力，快速对湖内数据进行探索和分析E-MapReduceDatabricksMaxComputeHologresPAI数据湖计算跨平台高速网络元数据管理元数据服务元数据发现元数据迁移数据入湖多种数据源MySQL、Kafka、SLS、

4、OTS 等.离线/实时入湖支持全量、增量的入湖场景数据湖格式支持Delta Lake/Hudi/Iceberg格式OSS数据湖存储访问访问权限访问日志审计数据探索数据探查权限控制数据湖构建（Data Lake Formation）异构数据平台融合:湖仓一体2.0 升级发布统一元数据视图跨平台高速网络湖仓统一开发平台湖仓统一数据管理与治理湖仓集成共享数据DataWorks统一任务调度数据仓库数据湖智能Cache+查询加速内置存储HologresMaxComputeE-MapReduceData Lake FormationOSSHDFS湖仓智能数据分层 更快的业务洞察-从提交工单开通湖仓一体升级

5、为 DataWorks 自助开通，实现分钟级打通数仓与数据湖 更广泛的生态对接-从支持 HDFS 数据湖扩展到支持阿里云 DLF+OSS数据湖方案，全新支持Delta Lake、Hudi 等主流数据湖格式-与 Hologres 存储打通与高速互访-支持更多外部联邦数据源(RDS、HBase Upcoming！)更高的性能-全新支持智能 Cache 配合 MaxCompute 查询加速(MCQA)功能，使数据湖查询性能提升 10+倍以上 更好的综合数据开发与治理-整合并简化湖仓一体的开发和管理流程-支持 MaxCompute 与 EMR/CDH 任务混合调度-支持跨湖仓的元数据采集，构建湖仓统一

6、元数据视图无缝衔接数据开发流程隐私计算任务与日常数据生产调度任务无缝衔接轻松支持日常联合营销、联合训练等综合场景隐私计算平台不再是孤立系统大规模分布式隐私安全计算能力云原生超大规模分布式，支持弹性扩展，实现高性能隐私计算能力内置MPC/FL/TEE技术基础算力在10-30s内完成百万条隐私数据求交（带宽达150Mbps）自研飞天分布式架构赋能隐私计算全栈数据安全体系从底层（数据中心/网络/供电）至交互界面（权限管理/隐私保护）超20项安全能力满足监管合规基于数据仓库安全能力构建隐私计算数据分享可追溯、数据可用不可拿