开放数据中心标准推进委：2024年智能文件存储跨域传输关键技术报告（36页）.pdf

1、智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 版权声明版权声明 ODCC（开放数据中心委员会）发布的各项成果，受著作权法保护，编制单位共同享有著作权。转载、摘编或利用其它方式使用 ODCC 成果中的文字或者观点的，应注明来源：“开放数据中心委员会 ODCC”。对于未经著作权人书面同意而实施的剽窃、复制、修改、销售、改编、汇编和翻译出版等侵权行为，ODCC 及有关单位将追究其法律责任，感谢各单位的配合与支持。智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 编写组编写组 项目经理：储琴琴 中国移

2、动通信集团公司 贡献专家：肖爱元 中国移动通信集团公司 程宇 中国移动通信集团公司 方瑞 中国移动通信集团公司 冯汀 中国移动通信集团公司 阮前 中国移动通信集团公司 祁肖贺 中国移动通信集团公司 冯轶 中国移动通信集团公司 董少杰 中国移动通信集团公司 许豪豪 中国移动通信集团公司 宋健 中国移动通信集团公司 房梽斅 中国移动通信集团公司 覃小娜 中国移动通信集团公司 高从文 中国移动通信集团公司 管振明 华为技术有限公司 郭葆福 华为技术有限公司 李兆龙 曙光信息产业股份有限公司 王灯殿 曙光信息产业股份有限公司 王瑞祥 新华三技术有限公司 罗成凤 新华三技术有限公司 何营 浪潮电子信息产

3、业股份有限公司 肖国栋 浪潮电子信息产业股份有限公司 张宁 中国信息通信研究院 智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 前前 言言 2021 年 2 月中共中央国务院印发 “十四五”数字经济发展规划明确指出数字经济是继农业经济、工业经济之后的主要经济形态，是以数据资源为关键要素，以现代信息网络为主要载体，以信息通信技术融合应用、全要素数字化转型为重要推动力，促进公平与效率更加统一的新经济形态。数据已经成为国家基础性战略资源和重要生产要素。数据的需求规模决定了存力的规模。国家发改委也相继出台关于加快构建全国一体化大数据中心协同创新体系的指导意见、全国一体化大数据中心协同

4、创新体系算力枢纽实施方案，要求构建数据中心、云计算、大数据一体化的新型算力网络体系，打通数据孤岛，提升数据资源的利用效率，促进数据要素流通应用。释放海量数据的活力，深度挖据数据的潜在价值，就需要强大的存力支持。构建面向广域的大规模数据低成本存储、灵活调度的存储基础设施底座，对于推动数据中心、云计算和大数据的深度融合具有重要意义，已经成为全国一体化基础设施基于数据驱动和演进的关键因素。智能文件跨域传输技术通过在广域网络环境下，构建具有自主管理和智能化的分布式文件系统，按照策略智能调度存储任务，将存储和计算的资源进行全方位整合，通过对异构存储资源的统一管理，实现东西部存力的统筹调度、均衡和优化使用

5、，提高数据中心的存算效率，降低成本和能耗。智能文件跨域传输技术还面临分布式协调管理、异构环境适配、智能自主管理等问题和挑战。因此开展该方面的研究，对于推进面向海量数据的存储系统建设，提升存储服务质量具有重要智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 意义。为了更好的推动面向广域的智能文件存储基础设施的相关技术快速高质量健康发展，特编写本白皮书，详尽介绍面向广域的智能文件存储基础设施的的应用方案及技术特点，为行业相关人士提供借鉴和参考。由于时间仓促，水平所限，错误和不足之处在所难免，欢迎各位读者批评指正。智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 目目

6、 录录 一、数据存储技术现状与挑战.1(一)技术发展现状.1(二)数据存储行业挑战.2 二、智能文件存储跨域传输介绍.3 三、智能文件存储跨域传输关键技术.6(一)数据管理.6 1.元数据统一管理.6 2.数据冷热分级.7 3.数据智能调度.8(二)数据存储.9 1.主从共享目录.9 2.数据压缩技术.11 3.数据无感迁移.13(三)数据传输.14 1.加速传输.14 2.数网协同.15 四、智能文件存储跨域传输应用场景.16(一)运营商海量数据存储.16 智能文件存储跨域传输关键技术报告 ODCC-2024-0A002 (二)政企数据安全备份.17(三)多媒体内容的分发与存储.19(四)科