星云零售信贷基于Doris的OLAP演进之路(2).pdf

编号:135168 PDF 16页 1.82MB 下载积分:VIP专享
下载报告请您先登录!

星云零售信贷基于Doris的OLAP演进之路(2).pdf

1、DataFunSummit2023演讲人:刘建波-腾梭科技-研发总监 数据需求的产生 OLAP选型困扰 Apache Doris实践 业务场景落地产品演进1、互联网网贷业务2、助贷+联合贷导流3、纯自营业务II)、技术架构单体应用-分布式应用-微服务 I)、业务架构网贷-联合贷-新零售 OLAP选型困扰1、生态复杂且门槛高、技术劝退2、投入产出比极低、成本劝退1、诉求:需要的不是大数据平台,而是一套高性能的OLAP工具2、原则:数据规模、灵活性、成本可控演进之路第一阶段:基于kettle 离线ETL插件丰富、链路长、难管理第三阶段:基于doris的存储分析简单易用、极速查询、实时统一第二阶段:

2、基于trino的统一查询异构数据源、联邦查询、大内存Apache Doris实践1、并发查询加速2、数仓底座建设运行架构业务模型业务场景及技术方案1、风控大数据报表平台2、统一日志存储与分析3、用户行为日志存储分析任务编排XX银行-风控大数据报表平台1、T+1离线跑批ETL2、分钟级准实时ETL3、Flink CDC实时ETLXX银行-统一日志存储与分析1、自定义Flume Sink采集2、未使用倒排索引3、基于大文本模糊匹配XX银行-用户行为日志存储与分析1、自定义Flume Sink采集2、基于JSONB存储与分析3、存储极致压缩、降本增效架构收益取数导数:业务人员或者开发人员,可以进行自定义的导数和纬度数据分析运维成本:集群节点做进程保活、几乎自运维查询延迟:简单查询毫秒级,复杂查询秒级响应资源节省:Doris极致压缩,将数据压缩了70%,存储成本降低后期规划1、智能数据网关2、统一数据归档DataFunSummit2023感谢观看

友情提示

1、下载报告失败解决办法
2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。
3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。

本文(星云零售信贷基于Doris的OLAP演进之路(2).pdf)为本站 (2200) 主动上传,三个皮匠报告文库仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知三个皮匠报告文库(点击联系客服),我们立即给予删除!

温馨提示:如果因为网速或其他原因下载失败请重新下载,重复下载不扣分。
客服
商务合作
小程序
服务号
折叠