在生成式AI时代高性能计算加速研发创新.pdf

1、 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。在生成式AI时代高性能计算加速研发创新张强资深解决方案架构师亚马逊云科技 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。?研?研?研?研?商业数据库内部知识库其他第三方数据库OpenData on Amazon外部公开数据业务数据库项目文档 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。生成式 AI AI 应用程序基础模型、分析、数据库和数据集

2、成数据是生成式 AI AI 的战略资产 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。海量数据中求解生命科学问题 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。?HPCHPC?有限且固定的算力容量任务需要排队性能瓶颈及工具限制弹性架构可靠与性能优化海量同构、异构算力资源不断更新、发展的服务生态系统CoresCores保证业务时效性更高效资源利用架构适应业务业务适应架构 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。?HCLSHCLS?HPCHPC?WorkflowWorkfl

3、ow任务编排HPCHPC平台构建及海量资源公开数据集于可视化工具Clustered(Tightly coupled)Distributed/Grid(Loosely coupled)2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。chr1 vcf注释chr2 vcf注释chr3 vcf注释chrX vcf注释Workflow任务编排工作流调度概要示例 单个基因组样本分析计算密集型内存密集型通用型原始数据处理结果数据质控数据比对/去重/排序数据导入IGV-Web染色体数据拆分数据汇总Serial JobFiles inFiles outchr1变异识别chr

4、2变异识别chr3变异识别chrX变异识别vcf合并/过滤Parallel JobRetry JobHours.MinsJoin Job 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。WorkflowWorkflow?SnakemakeSnakemakeAWS Step Functions 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。丰富的实例类型满足不同业务场景需求2017750+采Nitro系统前采Nitro系统2023200670一般用途爆发性的计算密集型内存密集型存储(高I/O)密集存储GPU计算图形密集

5、型处理器的选择(亚马逊云科技,Intel,AMD,Apple)快速处理器(高达4.5 GHz)高内存占用率(高达24TiB)实例存储(硬盘和NVMe)加速计算(GPU,ASICs,Video,FPGA)联网(高达1,600 Gbps)裸金属规模(纳米级到112倍大)亚马逊云科技EBS亚马逊云科技弹性推理750750适用于几乎所有的工作负荷和业务需求实例类型 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。一站式HPCHPC部署集成方案AWS AWS ParallelClusterParallelCluster集成您所需的AWSAWS服务全托管批处理服务AW

6、S Batch高性能文件存储Amazon FSx for Lustre高性能网卡EFA计算资源Amazon EC2 instances虚拟图形工作站NICE DCV一站式部署您的HPC群集Intel认证解决方案https:/ 2024,Amazon Web Services,Inc.或其附属公司。保留所有权利。Private subnet应用案例 某医药企业结合云HPC与本地工作站构建Schrdinger分析平台亚逊云科技Public subnetInternet Gateway(IGW)动扩展队列(GPU)SD-WAN CPE运维管理终端堡垒机SD-WAN挂载主节点MasternodeVPC