8、水务数据治理探索与思考.pdf

1、水务数据治理探索与思考水务数据治理探索与思考 阿里云 水务与环境行业总监 周朔（利泽）数据治理的目标万物皆数万物皆数-毕达哥拉斯毕达哥拉斯数字驱动的阿里巴巴电商阿里巴巴是一家数据的公司阿里巴巴大数据，在双十一之前即可根据大数据预测结果，提前布局全国菜鸟仓货物分配，在双十一活动期间，实时洞察流阿里巴巴大数据，在双十一之前即可根据大数据预测结果，提前布局全国菜鸟仓货物分配，在双十一活动期间，实时洞察流量转化、订单、库存、物流等业务动向量转化、订单、库存、物流等业务动向2020年双十一是人类历史上规模最大的社会化协同和机器智能的大范围应用全球交易额4982亿元，产生的物流订单量达到23.21亿单，峰

2、值交易达到58.3万笔/s，AI调用量超51万亿次，核心系统100%上云，端侧AI驱动个性化导购3.7万亿次阿里云One Data数据中台全局决策中心数据化运营业务流程数据植入数据业务化面向应用开发统一数据服务中间件以以“业务业务/然对象然对象+萃取标签萃取标签”为架构构建为架构构建 消费者数据体系 企业数据体系 商品数据体系 地理位置数据体系交易营销物流金融出行社交以以“业务板块业务板块+业务过程业务过程+分析维度分析维度”为架构构建为架构构建销售业务营销业务供应来链业务官网运营生产数据天气 垂直采集垂直采集 购买购买数据资产管理数据资产管理智能数据开发智能数据开发资产概述资产地图资产治理资

3、产应用资产运营数仓规划模型构建指标规范数据同步数据开发任务调度监控告警垂直垂直数据中心数据中心公共公共数据中心数据中心萃取萃取数据中心数据中心大数据存储和计算平台企业互联网架构企业互联网架构I-I-PaaSPaaSEDASMQDRDSCSBARMS盒马鲜生优酷高德淘宝天猫聚划算天猫超市会员中心营销中心交易中心资源中心发票中心支付中心结算中心物流中心Ali-Ware 业务中台商业商业智能智能阿里双中台战略协同打造阿里“智能商业”阿里数据中台方法论OneDataOneID数据资产化OneService统一数据建设&数据资产化管理能力标准统一、资产而非成本统一实体(如：客户、企业、商品、设备等)连接

4、识别与标签画像高效生产能力数据融通而非孤岛存在统一数据服务能力复用而非复制数据 数据规范：数据标准化，指标体系数据建模：数据域，逻辑模型，物理模型数据管理：主数据，元数据、数据质量，数据安全数据共享：数据地图，数据接口自助交互式分析：智能报表，整合分析丰富的算法库：数据预处理，分类、聚类，关联，预测标签体系管理：静态、动态标签（算法标签），标签生命周期管理全景洞察：用户画像，商品画像，商圈画像精准营销：人群筛选，智能推荐，广告投放规则管理：业务规则配置，预警监控多来源：RDBMS，Hadoop，文本、接口.多结构：结构化、半结构化、非结构化多方式：批量、实时整合打通：IDMapping，整合统

5、一阿里数据中台建设理念数据使用评估数据质量评估数据汇聚评估数据治理数据治理 成成果评估果评估评评互联网 分析数据垂管部门数据公有单位采集数据物联网 感知数据委办 业务数据政务数据物联网 感知数据应用数据工况数据汇聚全汇聚全量量异构异构数数据据汇汇业务人员数据管理员数据 开发者算法开发者运维 人员各级领导业务人员数据管理员数据开发算法开发运维 人员各级领导数据智能数据智能应用服务应用服务用用深度治理全面融合统一标准质量保障预处理数据治理数据治理融合贯通融合贯通通通全链路监控标准管理数据模型管理算法管理ETL过程管理标签管理业务模型管理全量数据全量数据资产管理资产管理管管互联网数据数据服务 算法模

6、型平台算法模型平台数据集成汇汇通通管管用用搭建2大平台工具针对XX个数据域实施8项数据治理任务XX万远传水表XX块监测表计数千台设备XX座水厂XX座泵站XX km管网每天上传XX万条实时数据实时物联营收服务类：营销系统热线系统工单系统协同办公类：OA、人力系统财务、采购系统合同、法务系统生产运维类：管网巡检、厂站生产泵站调度、二供管理设备资产、工程建设接入XX个业务系统业务系统化验数据污泥数据车辆数据手工填报XX个表单接入XX个系统：XX类官方互联网数据：气象数据、高德地址外部数据XX个局委办系统：水务局、交通、城管、GIS数据遥感测绘三维模型空间信息XX个对象建设1个数据资产管理平台大数据计