课程简介
本课程包括大模型基础,大模型指令微调,常用的开源模型微调,大模型对齐,垂直领域大模型应用 5 个阶段,内容涵盖大模型微调应用场景,大模型基座,LoRA 参数微调,模型压缩,QLoRA 参数微调,DeepSpeed 训练框架解析,Megatron-LM 训练框架解析,Flash Attention 技术应用,微调模型 Benchmark,ChatGLM,LLaMA,Mistral,MoE,大模型对齐,RLHF,DPO,垂直领域大模型应用等前沿技术等全方位知识讲解,并结合 8 个实战项目,帮助同学们实现学以致用。