2018年金融级分布式数据库的技术现状和趋势.pdf

《2018年金融级分布式数据库的技术现状和趋势.pdf》由会员分享，可在线阅读，更多相关《2018年金融级分布式数据库的技术现状和趋势.pdf（12页珍藏版）》请在三个皮匠报告上搜索。

1、金融金融级级分布式数据分布式数据库库技技术现术现状和状和趋势趋势黄黄东东旭旭|PingCAP关于我关于我 黄东旭,CTO PingCAP MSRA/网易/豌豆实验室/PingCAP 分布式系统工程师/架构师/开源爱好者 Codis/TiDB/TiKV/TiSpark Email: Wechat:huangdongxu当我当我们谈论们谈论分布式数据分布式数据库库 是在是在谈论谈论什么？什么？分布式分布式 OLTP 数据数据库库技技术术路路线线 Sharding(分片技术，分库分表)Shared-everything(共享存储)Shared-disk(共享磁盘)Shared-log(共享日志)Sh

2、ared-nothing（纯分布式架构）Sharding-分片分片优势优势：技术简单 对于简单查询的读写性能尚可劣劣势势：对业务端的侵入性很大 可运维性差 弹性不足 适用场景受限Sharding-分片分片在传统单机数据库上进行数据分片，通过业务层或者一个中间路由层(Proxy)将不同的请求发送给不同的数据库实例。代表的方案：业务层拆分,分库分表 基于 Proxy 的各类数据库中间件 Shared Disk-共享磁共享磁盘盘直接将 MySQL 实例部署在分布式文件系统之上 MySQL on Ceph MySQL on ClusterFS缺陷：写入瓶颈并没有解决，仍然是的单机写入 依靠文件系统的多

3、副本复制及高可用 写放大问题 缓存同步Shared Log-基于日志复制的共享存基于日志复制的共享存储储日志即存储The log is the database日志落地，其余的皆缓存代表方案：Amazon AuroraMySQL Group Replication(*)缺陷：缺陷：仍然有单点写入的问题Scale 仍有上限复杂SQL计算很难利用多机的计算资源优势优势：相比共享磁盘的方案，极大减小了读写放大对公有云的使用场景友好兼容性Shared Nothing-纯纯分布式架构数据分布式架构数据库库无单点/无中心/无限平滑扩展自动分片，无关联的请求没有公共的依赖路径代表系统：Google Span

4、ner/F1TiDB优势优势：真正能做到无限的水平扩展无单点，整体可用性强业务侵入性小NewSQL可以利用分布式计算技术加速复杂查询劣劣势势：实现较为复杂在某些场景下需要重新思考业务设计金融金融级级数据数据库发库发展展趋势趋势(1/2)Shared nothing 成为主流小机下移 重新定义可用性和可运维性故障无法避免自恢复能力是关键 不同场景百花齐放，互金、电商、社交、在线客服、风控等等业务场景不同，数据结构和适用的系统也不同金融金融级级数据数据库发库发展展趋势趋势(2/2)云化的趋势不可逆私有云？公有云？HTAP(Hybrid Transactional/Analytical Processing)混合交易分析型数据库将会大放异彩HTAP 是什么？解决了什么问题？轻前台-大中台微服务化是架构云化带来的必然结果 测试测试和和评测标评测标准需要革新，技准需要革新，技术术架构架构标标准化工作刻不容准化工作刻不容缓缓金融分布式数据金融分布式数据库库白皮白皮书书 分布式事务数据库定义分布式事务数据库发展历程常见的分布式数据库技术架构及与传统架构的对比金融行业事务型数据库业务需求分析以及对数据库技术上的具体需求已有业务迁移和实施建议