《杨滔-OSCAR开源生态建设沙龙-MindSpore社区.pdf》由会员分享,可在线阅读,更多相关《杨滔-OSCAR开源生态建设沙龙-MindSpore社区.pdf(19页珍藏版)》请在三个皮匠报告上搜索。
1、昇思MindSpore开源社区运作实践杨滔华为昇 思 MindSpore开源生态技术专家议程02昇思MindSpore生态创新运作03昇思大模型平台全新升级构筑AI全栈,亲和昇腾性能最优MindSpore 正式开源MindSpore 1.0全场景AI框架MindSpore 1.5原生支持大模型MindSpore 2.0AI融合框架全场景AI框架昇思MindSpore,使能科研创新与产业应用MindSpore 1.8全面提升易用性跨域大规模协同高效联邦学习,支持大模型跨域并行加密训练;千万端侧设备协同学习融合计算统一微分科学计算加速库,支持250+科学计算API自动并行,开发效率提升2倍+自动微
2、分引擎,自持高阶高维混合微分,性能加速5倍+机翼气动仿真效率流体仿真套件米级阵列天线仿真速度电磁仿真套件自然界蛋白质预测范围分子模拟套件New端边云全场景部署统一API,模型格式免转换,支持 7种主流OS,16种硬件动态图全面支持动态图优先,兼顾灵活性与性能,性能提升25倍升级升级昇思MindSpore原生支持AI大模型训练,使能大模型应用落地原生支持大模型训练并行代码量模型结构数(5种 vs 2 种)并行维度最多且通用,实现计算和通信整体迭代时间最短(7 种维 vs 5 维)串行代码量单机到多机,代码量不变自动搜索最佳并行策略,降低系统调优时间调优时间并行支持多模型类型切分:Transfor
3、mer(稀疏/稠密)、卷积、高维稀疏等支 持 并 行 维 度 最 多数据切片预处理业界唯一数据并行算子级并行NV、微软只支持Transformer,TF支持TPU优化器并行微软支持Transformer结构,TF支持TPUPipeLine并行NV、微软只支Transformer结构MoE并行TF支持,微软支持Transformer支 持 模 型 切 分 结 构 最 全稠密TransformerAI框架类型稀疏MOE Transformer卷积结构卷积+Transformer高维稀疏 盘古、GPT3鹏程.神农、悟道武大遥感鹏程.大圣推荐类网络PyTorchTensorFlow模型实例提供产品化设
4、计,助力产业落地前期准备(数据集等)模型预训练下游任务微调模型转换/优化模型部署ModelArts微调工厂单租户专用微调环境大模型对外服务平台代码开发/调试微调训练(百亿以下)模型剪枝模型量化多租户微调训练共享平台微调训练(百亿以上)大模型在线推理MindXDLAPI 汇聚行业、科研及开源力量,发展昇思MindSpore生态圈昇思MindSpore 行业生态昇思MindSpore开源生态11000+贡献者昇思MindSpore技术生态400+开发者遍及全球MSG国内22座城市、海外7个国家成立(俄罗斯、新加坡等):举办开发者线上、线下活动;联合启智社区已举办31场校园行师资培训、企业行在遍布深
5、圳、武汉、上海等下载量435万+Gitee AI开源项目综合排名TOP15500+服务企业金融、医疗、制造、数字政府等模型600+顶会论文已发布紫东.太初、鹏程.神农等10个创新大模型数据截止至2023.01月生态足迹走进国内大中城市北京上海鹏城成都西安武汉海南厦门广州长沙杭州南京青岛河南太原天津重庆廊坊沈阳济南大连人工智能计算中心京津冀长三角中西部粤港澳成渝重点区域算力网络与高校、科研院所及企业进行全方位合作 大模型合作 论文基金项目合作 众智项目合作 行业方案合作为开源社区贡献代码、提交issue/合入PR28 Sig组议程01昇思MindSpore生态进展03昇思大模型平台全新升级分层级
6、社区活动,助力开发者全面成长2022年,昇思亮相CNCF年度旗舰峰会KubeConEU2022,作为CNCF欧洲峰会历史上首个来自中国的技术性Keynote演讲,首次推出的华为首个开源云原生AI卫星应用方案。昇思社区每半年举办一次开发者狂欢活动MindCon极客周,科普开源知识,引导开发者加入社区,参与社区贡献。截止目前,3万+开发者参与社区贡献。自2020年5月昇思成立MSG小组以来,广受开发者关注,截止2022年,MSG足迹遍布海内外30个城市。面向各层级开发者,开设MSG系列活动:MSG城市行、MSG区域行、MSG暴走校园、MSGWomen in Tech,以及公益活动MSG在行动。开展