Apache Doris + 第三代指标平台的 NoETL 最佳实践 - 杜雪芳 Aloudata 大应科技.pdf

1、A Ap pa ac ch he e D Do or ri is s +第第三三代代指指标标平平台台N No oE ET TL L 最最佳佳实实践践A Al lo ou ud da at ta a 大大应应科科技技 首首席席业业务务架架构构师师 杜杜雪雪芳芳Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia

2、 2024Doris Summit Asia 2024目目录录企企业业数数据据体体系系建建设设面面临临的的挑挑战战0 01 1第第三三代代指指标标平平台台，实实现现集集市市层层 N No oE ET TL L0 02 2第第三三代代指指标标平平台台的的场场景景价价值值0 03 3第第三三代代指指标标平平台台案案例例实实践践0 04 4Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024

3、Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024 杜杜雪雪芳芳 首席业务架构师分分享享嘉嘉宾宾 -A Al lo ou ud da at ta a 大大应应科科技技Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024

4、Doris Summit Asia 2024企企业业数数据据体体系系建建设设面面临临的的挑挑战战数据工程师难以深度参与数据洞察,无暇顾及模型优化与数据产品开发，沦为“开发工具人”；快速满足业务需求会导致重复开发和数据冗余，既推高存算成本，又带来数据治理压力，数据治理的业务价值不凸显。数据中台体系前期投入大，建设周期长，开发与运维成本高且持续增长；管理层与业务部门用数需求满足度挑战大，数据体系 ROI 难以量化。数据分析需求响应周期长，影响快速决策与运营迭代；分析维度和粒度固化，探索性分析无法灵活开展，发现问题又难以快速下钻归因；指标口径不透明不统一，数据的可信度存疑。业业务务满满意意度度挑挑战

5、战C CE EO O 满满意意度度挑挑战战团团队队价价值值感感挑挑战战Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024新新思思路路：管管研研用用一一体体的的 N No oE ET TL L 自自动动化化指指标标平平台台指指标标定定义义与与物物理理数数据

6、据隔隔离离，改改变变指指标标生生产产、管管理理与与协协作作模模式式，企企业业数数据据体体系系的的必必备备新新基基建建数数据据资资产产沉沉淀淀语语义义资资产产沉沉淀淀管：统一指标口径管理研：应用层自动化生产用：灵活一致指标消费BI 工具 AI 工具 自建应用 经营分析 营销分析 AB 实验应用场景指标平台数据仓库指标管理指标标准规范生命周期管理审批管理指标开发数据模型关联指标定义物化加速指标应用指标目录指标应用指标服务贴源层公共层DIM用户维度物料维度店铺维度DWD主题域 1主题域 2主题域 3主题域 4主题域 业务系统业务系统业务系统业务系统业务系统业务系统Doris Summit Asia