华为&amp超级计算创新联盟：2023数据密集型超算发展白皮书（48页）.pdf

1、数据密集型超算发展白皮书20232023年8月超级计算创新联盟 数据密集型超算工作组数据是对客观世界状态变化的数字化记录，在数字经济和数字中国的大战略下，数据已成为国家基础性战略资源和关键生产要素，是数字化、网络化、智能化的基础。今年发布的数字中国建设整体布局规划进一步强调夯实数字基础设施和数据资源体系“两大基础”。众所周知，高性能计算是国家综合国力和信息化建设能力的一个重要体现，被誉为“国之重器”。数据密集型超算，是高性能计算与人工智能、大数据等新一代信息技术融合后围绕数据价值，而产生的一个重要新增类型，是在高性能计算领域的一次有益的创新探索，在一定程度上代表了高性能计算的未来发展趋势。我们

2、很欣喜地看到，在过去两年中数据密集型超算在产业各界的多方合作下持续创新，相继在商业应用、标准规范等取得了显著的进展。如文中所述，数据密集型超算在国家超算中心、高校等场景、基因测序、AI大模型等行业应用中产生了很多优秀实践。与此同时，我们也看到中国高性能计算所面临的挑战和机遇：应用层面，随着数据爆炸，高性能计算从重计算模型，衍生到重IO，大带宽包括混合负载的数据模型；算力层面，通过AI赋能，科学研究正迈向科学智能新阶段，推动AI 异构加速；连接层面，随着超算互联作为国家战略，需要实现更高效的网络互联和跨域全局管理。另外，在新的复杂国际安全形势和低碳化全球趋势下，超算安全、绿色节能、自主创新也成为

3、高性能计算业内人士关注的问题。白皮书结合高性能计算在数据密集型场景的发展趋势给出了分析和建议，值得深思。面向未来，以ChatGPT为代表的AI大模型兴起，数以千亿的参数投入训练，产生对算力和数据的双重需求。HPC与AI逐步走向融合，将成为数据密集型超算的典型应用场景。数据的准备至关重要，数据的质量和规模决定AI的精度。为了更好应对诸如新应用带来的生态复杂性变化、新业务催生的混合业务负载压力、新数据与算力协同带来的数据跨地域访问等挑战，白皮书中创新性地提出新型数据密集型超算5A架构，以应用为中心，较好地支撑HPDA(HPC+大数据+AI)多系统融合业务发展。长风破浪会有时，直挂云帆济沧海！HPD

4、A正在加速提升科研创新及生产效率，在新的趋势和发展机遇下，期待产业各方深化合作和持续创新，数据密集型超算在推动科研和数字经济发展上发挥更大作用，扬帆远航！顾问陈国良 张云泉 周跃峰主编金钟 林新华 唐卓 张兴军 王毅 肖利民 王怡东 庞鑫 顾雪军 副主编潘景山 李少波 韦建文 王继彬 高巍 苏亮 徐恩松 张洋 李亚子 贾海鹏 韩振兴 王旭东编委（排名按姓氏拼音不分先后）陈阳 陈振华 柴旭清 戴奇志 段芳成 丁江波 樊春 范靖 龚斌 高亦沁 高芬 郭武郭洪星 胡俊 胡广超 李会民 李昕伟 刘畅 李斌杰 鲁蔚征 郄军利 宋平 宋天宇孙晓艺 孙敏淮 唐小勇 王青 王成伟 王继彬 王炳强 万林 魏旗鹏

5、 姚舸 曾帆曾令仿 张凯丽 张震 邹有 赵顺存责任编辑王世葆感谢以下机构参编支持（排名不分先后）：北京大学 北京航空航天大学 长沙理工大学 贵州大学 河南师范大学湖南大学 兰州大学 南京大学 上海交通大学 山东大学 深圳大学 西安交通大学中国人民大学 中国医学科学院 中国科学技术大学 中南大学超级计算创新联盟 国家超算济南中心 国家超算长沙中心 华为技术有限公司科大讯飞 崂山实验室 联科中国 鹏城实验室 青岛国实科技有限公司中科院科学计算所 中国信息通信研究院 之江实验室数据是对客观世界状态变化的数字化记录，在数字经济和数字中国的大战略下，数据已成为国家基础性战略资源和关键生产要素，是数字化、

6、网络化、智能化的基础。今年发布的数字中国建设整体布局规划进一步强调夯实数字基础设施和数据资源体系“两大基础”。众所周知，高性能计算是国家综合国力和信息化建设能力的一个重要体现，被誉为“国之重器”。数据密集型超算，是高性能计算与人工智能、大数据等新一代信息技术融合后围绕数据价值，而产生的一个重要新增类型，是在高性能计算领域的一次有益的创新探索，在一定程度上代表了高性能计算的未来发展趋势。我们很欣喜地看到，在过去两年中数据密集型超算在产业各界的多方合作下持续创新，相继在商业应用、标准规范等取得了显著的进展。如文中所述，数据密集型超算在国家超算中心、高校等场景、基因测序、AI大模型等行业应用中产生了