AI 大模型正在构建颠覆性的影响力。为了更好地入局 AI 大模型，本文复盘并整理了大模型学习脉络，涵盖大模型理论、论文带读以及企业项目实战。
AI 大模型系列课程目录
第一课：NLP 大模型基础、前沿与学习路径
第二课：基于模型量化的大模型压缩进展
- 压缩技术中量化优于剪枝、蒸馏的原因
- 搜索裁剪阈值用于裁剪 outlier 的方法
- 包含异常值 outlier 的特征量化方案
第三课：基于模型剪枝的大模型高效计算和应用
- 模型剪枝的技术背景
- 模型剪枝具体方法
- 模型剪枝前沿方法
- 语言模型剪枝实例
第四课：扩散模型基础知识及拓展应用
- AI 作画：以文生图
- 扩散模型原理
- 扩散模型工作拓展
- 扩散模型带来的机遇
第五课：大语言模型的 RLHF
- RLHF 的优点和挑战
- RLHF 如何改善大模型性能
- RLHF 的实际应用案例
- RLHF 在大模型的未来趋势
第六课：LLM + 微调——大模型的高效微调
- 常用的高效微调方法介绍
- 针对领域数据集根据高效微调方法创造大语言模型
- 未来挑战与研究方向
第七课：大模型医疗
- 医疗领域的数据特点、挑战和机遇
- 大模型的定义和特点（预训练、微调、指令学习等）
- ChatGLM 模型微调实践
- 代码实践以及模型微调
第八课：大模型基本概念以及应用场景
- 发展线路与技术手段
- 应用场景
- 缺点与局限
- 未来展望
第九课：LLAMA2 中文大模型
- 理论介绍
- 代码实践
第十课：大模型前沿论文带读训练营（NLP 方向）
- LLaMA 训练营（精读、代码讲解）
- GLM-130B 训练营（论文泛读、精读、代码讲解）
- Alpaca 训练营（论文泛读、精读、代码讲解）
第十一课：掌握大模型领域前沿，跑通三套企业级项目代码
- 开发基于大模型的聊天机器人
- 实战基于大模型的对话系统
- 大模型模型原理及综述
- 精读大模型 -3 论文、Instruct 论文
- 精读谷歌 PaLM 论文、脸书 LLaMA 论文
- 实战微调 LLaMA 模型
大模型岗位需求
大模型时代，企业对人才的需求发生变化，AIGC 相关岗位人才难求，薪资持续走高。AI 运营薪资平均值约 18457 元，AI 工程师薪资平均值约 37336 元，大模型算法薪资平均值约 39607 元。
掌握大模型技术可拥有更多可能性：
- 成为全栈大模型工程师，包括 Prompt、LangChain、LoRA 等技术开发、运营、产品方向
- 拥有模型二次训练和微调能力，完成智能对话、文生图等热门应用
- 薪资上浮 10%-20%，覆盖更多高薪岗位
- 为未来创新创业提供基石
AI 大模型学习路线汇总
大模型学习路线图整体分为 7 个大的阶段：
第一阶段： 从大模型系统设计入手，讲解大模型的主要方法； 第二阶段： 通过大模型提示词工程从 Prompts 角度入手更好发挥模型的作用； 第三阶段： 大模型平台应用开发，借助云平台构建电商领域虚拟试衣系统； 第四阶段： 大模型知识库应用开发，以 LangChain 框架为例，构建物流行业咨询智能问答系统； 第五阶段： 大模型微调开发，借助大健康、新零售、新媒体领域构建适合当前领域大模型； 第六阶段： 以 SD 多模态大模型为主，搭建文生图小程序案例； 第七阶段： 以大模型平台应用与开发为主，通过星火大模型、文心大模型等成熟大模型构建大模型行业应用。
大模型实战案例
光学理论是没用的，要学会跟着一起做，要动手实操，才能将自己的所学运用到实际当中去。建议搞点实战案例来学习。
学会后的收获
- 基于大模型全栈工程实现（前端、后端、产品经理、设计、数据分析等），通过课程可获得不同能力；
- 能够利用大模型解决相关实际项目需求：大数据时代，越来越多的企业和机构需要处理海量数据，利用大模型技术可以更好地处理这些数据，提高数据分析和决策的准确性；
- 基于大模型和企业数据 AI 应用开发，实现大模型理论、掌握 GPU 算力、硬件、LangChain 开发框架和项目实战技能，学会 Fine-tuning 垂直训练大模型（数据准备、数据蒸馏、大模型部署）一站式掌握；
- 能够完成时下热门大模型垂直领域模型训练能力，提高程序员的编码能力：大模型应用开发需要掌握机器学习算法、深度学习框架等技术，这些技术的掌握可以提高程序员的编码能力和分析能力。