AI 大模型技术在数据库 DevOps 的实践-叶正盛.pdf

1、AI大模型技术在数据库DevOps的实践叶正盛 NineData创始人&CEO2024-04叶正盛资深数据库与云计算领域专家曾担任阿里云数据库产品管理与解决方案部总经理，阿里云技术架构与产品决策委员会核心成员。阿里巴巴去 IOE、异地多活、云计算多次技术变革核心成员构建阿里巴巴&蚂蚁集团数据库DevOps体系创立了云计算数据传输DTS、数据管理DMS、数据库备份DBS、数据库自动驾驶服务DAS等多款云计算数据库产品NineData创始人&CEO1.AI大模型与数据库能力简介2.数据库与DevOps简介3.NineData在AI大模型技术结合实践4.DevOps新挑战5.NineData客户实践

2、目录AI大模型与数据库能力评估8603302702371906327221012102.60.960.710.010.00011 0.000005601002003004005006007008009001000人类大猩猩非洲象抹香鲸海豚猴猪狗猫乌鸦长颈鹿麻雀金鱼小白鼠蜜蜂蜗牛水母https:/en.wikipedia.org/wiki/List_of_animals_by_number_of_neuronshttps:/ law)大模型比拼（2024.02.27）AI大模型数据库考试评测（2024.04）7069676256545351494901020304050607080GPT4(20

3、24-04)千问-plusGPT4(2023-03)智谱GLM4文心一言4月之暗面GPT3.5(2024-04)百川2GPT3.5(2023-03)星火3测试方法：中国数据库系统工程师测试方法：中国数据库系统工程师20212021年考试试题，总共年考试试题，总共7575题，每题题，每题1 1分，分，共共7575分，分，4545分及格分及格数据库与DevOps概览数据库系统分类大图大大小小SQLSQL强强弱弱数据量NoSQL大数据OLTPOLAP数据库与生态产品数据库引擎OracleMySQLPolarDBMongoDBClickhouse数据库DevOpsSQL IDE、CI/CD、性能优化、

4、安全NineData、Navicat、Flyway数据流(复制/集成)数据迁移、同步、ETL、订阅、分享NineData、DTSDBPaaS资源调度、安装配置、备份恢复、监控告警、HARDSBI数据分析、挖掘、大屏PowerBI、帆软安全稳定开发效率为什么需要数据库DevOps应用开发者DBA（OPS）变更发布监控告警诊断优化慢SQL治理漏洞修复没权限需求紧急不了解规范流程慢SQL开发用户体验差javapythonmybatisOracleMySQLMongoDB备份恢复安全安全规范规范流程流程数据库研发协同问题没有没有Ops(DBA)Ops(DBA)数据库由开发人员管理数据库由开发人员管理1

5、DBADBA负责变更发布负责变更发布开发人员有只读权限开发人员有只读权限3DBADBA负责变更发布，数据提取负责变更发布，数据提取开发人员没有权限开发人员没有权限2数据安全风险数据安全风险数据库故障数据库故障协同效率低协同效率低数据泄露风险数据泄露风险Dev&OpsDev&Ops（DBADBA）数据库DevOps开发工具：Navicat、DBeaver、pgAdmin、SSMS、阿里云DMS、NineDataCI/CD：Flyway、Liquibase、Goose、Bytebase、Yearning、Archery、阿里云DMS、NineData诊断监控：Datadog、SolarWinds、

6、Prometheus数据库DevOps解决数据库在开发、测试、运维过程中的研发协同效率与数据安全问题，核心能力包括：数据开发工具、CI/CD（版本管理、审核与发布）、诊断监控NineData AIGC实践NineData云原生智能数据管理平台应用开发者DBABI开发数据开发业务运营系统管理丰富的数据源、平台支持:RDBMS、NoSQL、数据仓库、大数据自建 IDC云厂商A自建 IDC数据仓库/大数据平台应用消息队列搜索平台托管数据库（开源/自研/国产）自建数据库托管数据库结构迁移数据复制SQL IDESQL审核与发布性能优化数据库DevOps开发规范实时同步ETL全量数据增量数据DDL同步On