您的当前位置:首页 > 报告分类 > PDF报告下载

蚂蚁基于Paimon数据湖实践.pdf

编号:157225 PDF 25页 2.82MB 下载积分:VIP专享
下载报告请您先登录!

蚂蚁基于Paimon数据湖实践.pdf

1、DataFunSummitDataFunSummit#20242024蚂蚁基于蚂蚁基于PaimonPaimon数据湖实践数据湖实践闵文俊-蚂蚁集团-技术专家自我介绍毕业于南京理工大学,毕业后一直从事大数据方向的工作.目前在蚂蚁负责Flink实时计算和数据湖相关的开发工作.应用场景应用场景未来规划未来规划目录目录 CONTENTCONTENT功能改进功能改进PaimonPaimon介绍介绍DataFunSummitDataFunSummit#202420240101PaimonPaimon介绍介绍什么是Paimon?什么是Paimon?实时更新 LSM Tree Changelog Produc

2、er Merge Engine流批一体 支持流读 支持批读 支持Time travel 支持维表点查 全增量一体消费OLAP友好 列式存储 Manifest Statistics Z-Order丰富生态 Hive Flink Spark Trino Presto Starrocks Doris DataFunSummitDataFunSummit#202420240202业务场景业务场景长周期去重累计长周期去重累计极速核对极速核对实时宽表构建离线查询加速1.小时分区周期性Sort Compaction2.BloomFilter 索引难点:1.数月历史数据回溯2.响应时效要求高DataFunSu

3、mmitDataFunSummit#202420240303功能改进功能改进Lookup Join:Full CacheLookup Join:Partial CacheLookup Join:Bucket hash joinLookup Join:Bucket hash join毫秒级维表关联What is More?PIP-10:Introduce Paimon QueryServiceLookup BloomFilter Index Lookup Join Lookup Changelog Producer Lookup BloomFilter IndexChangelog LifeCycle Decouple如何解决实时计算中常见的回刷的需求?Changelog LifeCycle DecoupleDataFunSummitDataFunSummit#202420240404未来规划未来规划未来规划 增强流读功能 增强Flink查询Paimon表的性能 拓展离线场景的应用和现有的离线生态融合 增强表管理,运维,自优化服务感谢观看感谢观看谢谢观看

友情提示

1、下载报告失败解决办法
2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。
3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。

本文(蚂蚁基于Paimon数据湖实践.pdf)为本站 (stock) 主动上传,三个皮匠报告文库仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知三个皮匠报告文库(点击联系客服),我们立即给予删除!

温馨提示:如果因为网速或其他原因下载失败请重新下载,重复下载不扣分。
会员购买
小程序

小程序

客服

专属顾问

商务合作

机构入驻、侵权投诉、商务合作

服务号

三个皮匠报告官方公众号

回到顶部