当前位置：首页 > 报告详情

2019年京东流数据平台的设计与实践.pdf

上传人：云闲编号：96977 2021-01-01 PDF PDF 23页 5.30MB

该报告所属合集： 2018-2019年中国软件技术大会嘉宾演讲PPT资料合集

打包下载报告合集

文档加载中……请稍候！
如果长时间未打开，您也可以点击刷新试试。

下载报告到电脑，查找使用更方便

VIP专享文档

书签

已收藏

版权投诉

/23

立即下载

word格式文档无特别注明外均可编辑修改，预览文件经过压缩，下载原文更清晰！

三个皮匠报告文库所有资源均是客户上传分享，仅供网友学习交流，未经上传用户书面授权，请勿作商用。

《2019年京东流数据平台的设计与实践.pdf》由会员分享，可在线阅读，更多相关《2019年京东流数据平台的设计与实践.pdf（23页珍藏版）》请在三个皮匠报告上搜索。

?2?3?1?3?A?L?L?StreamingStorage?-?f(x)?2?3?1?3?APIAppend(partition,logs ):indexGet(partition,index,size):logs?Raft?ClientClient?WAL?WAL file?WAL file?I?.?.?.?GD?JK?L?Q?C?Raft+RocksDB=Distributed KV StoreRaft+H2=Distributed SQL Database?ACID?2?3?1?3?Raft?JournalKeeper?FOLLOWER?LEADER?:=?E?)?)?)?x:4y:5FOLLOWER?)?)?x:3y:5FOLLOWER?)?)?)?x:4y:5Client?-?14?.1?43?(?-?14?.1?43?(?-?14?2?5?301?(?.1?43?2?5?301?(?.,.?-?14?2?5?301?(?.1?43?2?5?301?(?(?S?LDV?O?LDV?E?R?W?/F?A?DB?/?CA?6/?/9?/9?:?/9?9/?62?1?:?89/?:?/9?2/?/9?:?89/?088?/:.?8./?99/?/?./9?3?

报告速读

本文主要探讨了分布式存储和数据库技术。文章提到了StreamingStorage和Raft结合RocksDB或H2实现的分布式KV存储和分布式SQL数据库。其中，Raft是一个分布式系统中的共识算法，用于实现系统的高可用性和一致性。文章还涉及了WAL（Write-Ahead Logging）文件，这是Raft用于保证操作原子性和持久性的重要组件。此外，文章描述了Raft中的角色，包括LEADER、FOLLOWER和Client，并讨论了它们在分布式系统中的通信和协作方式。最后，文章还提到了分布式系统中的ACID特性，强调了在分布式环境中保持数据一致性的重要性。