《一站式在线数据管理平台DMS-企业级云原生数据库最佳实践分论坛(29页).pdf》由会员分享,可在线阅读,更多相关《一站式在线数据管理平台DMS-企业级云原生数据库最佳实践分论坛(29页).pdf(29页珍藏版)》请在三个皮匠报告上搜索。
1、一站式在线数据管理平台DMS天羽阿里云智能资深技术专家技术解读及最佳实践Contents目录01企业数据管理的痛点02云原生2.0-一站式数据管理DMS03解决方案与最佳实践企业数据管理的痛点01数字化转型是企业发展的战略重点2015-2019年中国数字经济规模及占GDP比重18.622.627.231.335.820152016201720182019数字经济规模(万亿元)27.5%30.3%32.9%34.8%36.2%占GDP比重(%)政策导向企业需求数据价值化企业向精细化运营信息化经营决策改进产业数字化演进升级从单点应用向协同发展演进成为企业面临的核心挑战数字化转型成为企业核心发展战略
2、From 中国信通院数据在业务中的全生命周期数据生产与存储核心业务系统横向支撑系统边缘端数据第三方数据数据采集与集成数据处理与分析数据处理与分析数据清洗数据加工数据挖掘数据建模数据应用数据应用数据可视化交互式分析业务消费数据交易数据服务企业要求数据传输、分析从离线到实时化趋势明显,预计2025年实时数据占比 30%,2022 年新业务超过50% 将会采用实时分析From IDC企业数据价值化过程中遇到的痛点数据孤岛管理复杂度高数据库种类繁多、最佳实践各不相同。设计开发及维护门槛高,容易出现质量、性能及稳定性问题。加工复杂“让数据用起来”成为难题异构数据集成,数据加工架构复杂,依赖专业的数据开发
3、团队,链路诊断、运维门槛极高。数据治理缺乏安全问题凸出零安全管控的数据开发应用环境,安全问题凸显,难以满足众多安全合规诉求。010203云原生2.0-一站式数据管理DMS02数据管理服务DMS一站式数据管理平台DMS,提供全域数据资产管理、数据库设计开发、数据集成与开发的全链路能力,致力于帮助企业快速挖掘数据价值,助力企业数字化转型。数据处理与加工全生命周期数据管理解决方案国产化迁移数据安全容灾多活实时数据集成T+1 无限快照定时数据报表数据资产AnalyticDBPolarDBPolarDB-X 数据源ApsaraDBHBaseRDSMySQLRDSPostgreSQLRDSSQL Serv
4、erMyBaseApsaraDBClickHouseApsaraDBRedisApsaraDBMongoDBApsaraDBCassandraElasticsearchKafkaOSS统一数据目录DBDWLog/File数据血缘DBDWLog/File数据治理DBDWLog/File数据脱敏数据安全研发协同任务编排OLTPOLTPOLAP数据集成10万级周活开发者,支持27种数据源,服务24万企业全域数据资产,60万+数据库实例, 65万+数据集成链路数据库设计数据库开发数据集成数据开发数据服务一站式数据管理DMS 技术架构数据安全数据库DevOps精准赋权数据脱敏库表设计SQLReview数
5、据集成与开发任务编排并发/条件/依赖数据编排数据处理算子安全规则引擎稳定变更执行引擎队列引擎任务调度SQL/工单任务引擎增量同步增量抓取全量同步数据处理ETL联邦查询引擎数据库网关开发运维:数据变更、资源部署、网络探测、性能监控、安全管理、日志管理数据安全体系:统一鉴权中心、安全审计、分级分类、数据脱敏、安全代理全域数据资产:统一元数据中心、数据质量、数据血缘、资产打标、数据标准、数据版本管理一站式全链路生命周期管理业务功能支撑引擎基础服务DMS核心技术特性全域数据统一安全管理安全高效快速创新企业数据价值化数据资产与安全数据库DevSecOps数据集成与开发数据源PolarDBPolarDB-
6、X AnalyticDBDLAMyBaseMyBaseApsaraDB HBaseClickHouseApsaraDB CassandraElasticsearchKafkaOSSDMS数据资产中心1. 资产准备数据目录数据检索资源大盘数据收藏夹2.查找数据3.用好数据元数据自动采集数据类目业务元数据元数据图谱自动构建安全管控配置质量治理安全治理成本治理数据血缘支持27种数据源,包括OLTP/OLAP/NoSQL/对象存储;支持跨IDC、云厂商的数据源基于图谱能力,可快速搜索发现可用数据快速查找数据全链路端到端血缘能力基于数据质量规则,进行数据质量监测与校验数据质量治理数据安全治理敏感数据自动