PANTONE 186C
RGB 200/16/46
PANTONE 185C
RGB 199/0/11
品牌色
RGB 234/90/79
RGB 120/0/15
辅助色
RGB 248/181/60
RGB 235/92/1
RGB 137/137/137
RGB 35/24/21
RGB 221/221/221
RGB 233/140/128
RGB 159/0/1
RGB 245/220/87
RGB 240/133/0
RGB 181/181/181
RGB 89/87/87
RGB 255/255/255
HuaweiConfidential
2
课程总览
MindSpore Transformers 大模型使能套件赋能培训系列一览
课程
时间 讲师
简介
第一期《MindFormers套件之架构讲解与使用入门》
20230810周四
19:00-20:30
何青林
介绍MindFormers大模型套件现状，讲解套件架构及高阶接口设计，走读工程架构模块代码，学习基
本使用方式。
第二期《MindFormers套件之大模型预训练和并行特性》
20230815周二
19:00-20:00
何青林/张又文/张森镇
1． 介绍MindFormers大模型套件分布式并行特性；
2． 讲解LLM大模型预训练（Llama为例）流程；
3． 讲解大规模分布式切片权重切分转换特性设计与使用（离线切分和在线切分）；
第三期《MindFormers套件之大模型Lora微调》
20230817周四
19:00-20:00
苏海波/黄欣靓/张浩勇
1． 介绍MindFormers大模型套件适配MindPet架构设计；
2． 讲解LLM大模型适配Lora微调算法流程和SFT数据集制作流程（Llama为例）；
3． 介绍MindFormers大模型套件恢复训练特性和使用方式；
第四期《MindFormers套件之在线推理和文本生成》
20230822周二
19:00-20:00
张浩勇/黄磊
1． 介绍LLM大模型在线分布式推理(Llama为例)特性，讲解增量推理、流式推理等原理和用途，走
读代码；
2． 演示Chat Web功能；
第五期《MindFormers套件之大模型调试调优》
20230824周四
19:00-20:00
邀请中软MindSpore大模
型专家
介绍MindSpore2.1版本及特性，讲解大模型训练、推理等各类性能优化和debug技巧；
第六期《MindFormers套件之大模型开发实践》
20230829周二
19:00-20:00
李臻皓 介绍如何使用MindFormers已有架构和高阶API开发新的大模型，适配Lora微调、评测、推理等；
