《Kyligence:端到端准实时多维分析方案(2023)(18页).pdf》由会员分享,可在线阅读,更多相关《Kyligence:端到端准实时多维分析方案(2023)(18页).pdf(18页珍藏版)》请在三个皮匠报告上搜索。
1、端到端准实时多维分析案联系电话:400 8658 757电邮箱:infokyligence.io更新期:2023.3.10案介绍挑战:传统离线数据加法达到数据时效性要求,数据变更难以做到准实时同步随着各各业对于数据的使越来越深,传统数据链路中数据时效性差成为数据赋能业务的瓶颈。在些特定数据应场景,如银动账分析(需要在分钟内追踪个账幅余额变更)、保单动账分析(追踪异常保单赔付)等,更需要数据分析引擎能够及时体现出数据变化后的统计结果。在这样的场景中,如果依然遵循传统 ETL 进离线数据加,造成的数据延迟会影响业务部对于异常情况的响应能。管控难 传统数据库到流式数据的转化链路法做到对于任务的管理、
2、跟踪、监控效率低 传统流式数据计算框架对于开发员技术要求,整体开发效率法跃升场景受限 传统多维数据库对于数据变更持较弱,在数据变更频繁的业务场景中,法发挥作技术架构图DatabaseAPIApache KafkaOracle/Hive/GaussDBHistory DataBatch/StreamETLTAL DaHaQIeFL&eCHeF SIEEDFHBIAHiDaHaSDIFceDaHaSeFJiceDataAppBatch/StreamAEache HiJeADSDWDDWSHiveAiFfA DKStreamADSDWDDWSKafkaAI增强引擎受治理的数据集市OLAP引擎企业级
3、OLAP 平台RT实现端到端、全链路、指标驱动的数字化转型策略统一的语义层AI 增强的智能自动化建模高性能全场景 OLAP 引擎复杂场景下的数据融合能力云原生大数据大数据分析应用分析应用实时反欺诈实时异常检测BI产品/可视化工具Web/AppOpen APIExcel管理层/数据分析师/数据科学家业务人员/外部客户标准 SQL(JDBC)第三方应用访问 REST API指标体系接口服务指标管理指标应用指标调度领导驾驶舱领导驾驶舱多维自助分析多维自助分析用户画像用户画像标签分析标签分析 大额动账分布式存储智能引擎智能建模智能路由智能优化明细索引聚合索引查询下压高可用监控SQL引擎语义层API接口
4、安全性查询服务运维管理智能数据融合分析实时数据处理链路KafkaFlinkHudi计算引擎GaussDBOracle核心业务系统核心业务系统ODSODS离线数据湖离线数据湖精准营销智能数据融合分析能数据仓库指标体系专题场景KPI分析体系智能多维分析体系智能多维分析体系优势优势跨领域数据融合跨领域数据融合扩展分析粒度扩展分析粒度统一数据标准统一数据标准大数据可扩展架构大数据可扩展架构提高数据整合后的整体分析性能。支持多个领域,存款、基金、理财等之间的数据关联;实现部门间口径一致提供统一的数据模型,避免各层级的统计混乱。支持从汇总数据到明细数据的穿透分析存款、理财、基金、私募等明细数据存款、理财、
5、基金、私募等明细数据交易次数交易金额期初余额期末余额机构账户渠道汇率时间客户产品币别指标指标维度维度实时风控、大额动账、实时反欺诈、实时风控、大额动账、实时反欺诈、精准营销、精准营销、.场景场景客户风险预警资产保全分析客户行为分析可视化报表可视化报表管理驾驶舱管理驾驶舱监管部门追踪决策分析风险监控风险状况IT技术人员支公司管理人员各模块业务分析人员业务部分负责人/分支公司领导公司决策层l分布式的构建/预计算引擎(Spark),具有稳定、高效的运算速度l全新的 Kyligence Tiered Storage 不仅突破了传统 OLAP 引擎仅能查询聚合数据的局限,全面地支持了明细数据的查询,并且
6、还可以根据查询类型,提供多种存储介质,更好地服务数据探索式分析场景l查询、构建分离,按需灵活调整资源分配,达到最优利用率l基于 AI 增强引擎的智能数据建模、优化、管理能力分布式OLAP、提供 PB 级数据集上亚秒级响应高性能下的高性能下的OLAPOLAP多维分析场景:多维分析场景:覆盖聚合分析、明细分析、灵活分覆盖聚合分析、明细分析、灵活分析等多类场景,支持海量数据、超析等多类场景,支持海量数据、超多维度的数据探索多维度的数据探索屏蔽底层不同引擎的组件技术,提屏蔽底层不同引擎的组件技术,提供供统一的数据访问入口统一的数据访问入口返回数据返回数据智能的查询下压智能的查询下压,把不同业务场景,把