03华为数智融合的理念与实践--龙江.pdf

1、华为云 江2023年317ArchSummit全球架构师峰会华为数智融合技术分享个介绍进数字经济时代，数据成为重要产资料，激发数字经济发展N:地L:劳动K:资本T:技术D:数据Y=F(N,L,K,T,D)Y:经济产出F:产函数产资料产具产农业经济业经济数字经济地/畜锄/犁/锹煤/油/矿热/电机械数据算/络云、5G、AI数据：数字经济时代的重要产资料2025年产业数字化机会 23万亿$Source:Huawei GIV 20251.7万亿5 万亿1.5万亿 零售融0.5万亿 公共事业2.9万亿 服务6.4万亿 制造1.1万亿 其他3.0万亿 咨询服务0.9万亿 交通信息科技释放数据价值，需要企业

2、从数据管理向数据智能数据智能体验每天亿级数据标签智能匹配数据智能决策数据智能流程垂直的深度和厚度同样重要50年油历史数据智能挖掘每天10万+次数据碰撞智慧新闻，精准户体验油开采，智慧决策钻井深度智慧差旅：智能流程合并临三难题，数据价值很难得到充分挖掘数据质量低，取数难、找数难、计算难、数难数据处理到AI开发，到最终实现业务价值，涉及道序，技术槛，协作难度如何借助数据与模型，模拟、验证、预测、控制业务的全命周期数据治理难技术槛业务仿真难向：研究下代数据智能基础设施，Data Intelligence Infrastructure，打造站式、全链路的数据智能平台，通过对海量复杂数据问题的业务抽象与

3、有效分析，帮助户专注于解决现实世界的问题；愿景：数据智能驱动决策，Provide right data to right person in right time；业务对象、规则、过程数字化数据联接数据透明数据采集/处理动化、智能化数据领域由企业扩展到态伙伴极致萃取数据价值安全共享、数据合规动算法模型（AutoML）实时可，智能洞察数据清洁数字业务化华为云数据智能创新愿景全链路No-code 都是数据科学家动数据处理（AutoETL）DIaaSDaaSDLaaSMaaSData Intelligence as a Service在AI的辅助下，户需专家技能也可以进数据治理、提升数据质量、进可视

4、化分析与设计;持续智能，AI能我持续增强;可解释的AI，让户理解AI推荐的结果。Data Lake as a Service.需编码即可构建数据湖.集成任何格式、结构和规模的数据，增强数据管理.持实时、批量数据处理.定义、可编辑的数据模型，将数据表示为业务对象.数据、元数据、模型和代码的版本控制能Data as a Service数据即服务，按需助提供数据服务，所搜即所得，所得即可视化，户需关数据的位置、数据的结构、数据的处理逻辑；户可以发现他所不知道的异常、或者预测业务未来发展。Metadata as a Service 提供企业数据资产内容的统视图与唯真相来源，包括技术资产与业务资产；户可

5、以很便的发现、描述、使数据资产；给户智能化的资产搜索、推荐体验，帮助户发现他所不知道的数据价值与数据关系；华为云数据智能核技术理念数据智能基础设施整体架构与技术研究向智能应构建码化应开发、决策智能对接应智能分析与洞察增强分析、根因分析、what-if决策、因果推断、标签动成与智能匹配智能数据治理数据+元数据体化的企业知识图谱；指标探索的可视分析；全链路性能与成本监控；智能分级、加密脱敏技术；智能质量评分与质量修复智能数据准备CDC实时湖、AutoML、AutoETL、NL2SQL、Auto API产智能内核层元数据治理内核：元数据联邦、全链路缘、关系图谱、profiling；智能数据治理算法、

6、智能可视分析算法、计算任务智能编排调度算法等多元化计算层多引擎统元数据存储、版本管理、权限、接服务；计算任务跨引擎调度；SQL+AI融合计算统存储层memarts缓存加速、shuffle加速、速索引、动数据优化（格式转换、预读、化、冷热数据识别）、计算下推（数据缩减,推理，训练，特征匹配）关键技术业务应华为内部统数据智能底座 数百PB数据、百万级任务、万级报表、数场景的智能辅助决策资产录对海量资产进动资产编，提升资产完整性和准确性数据标准.对已发布的数据标准进去重，提升数据标准质量；对未发布资产推荐和动成数据标准，提升资产发布效率数据模型 根据数据结构和数据内容智能识别主外键、建模型，厘清海量