书生·浦语大模型实战营学习总结
- 实战营课程内容
- 个人笔记汇总
- 个人作业汇总
- 个人大作业
- 总结
实战营课程内容
为了推动大模型在更多行业落地开花,让开发者们更高效的学习大模型的开发与应用,上海人工智能实验室重磅推出书生·浦语大模型实战营,为广大开发者搭建大模型学习和实践开发的平台,两周时间带你玩转大模型微调、部署与评测全链路。以下是相关内容:
课程时间 | 课程内容 | 讲师 | 资料 |
---|---|---|---|
第 1 节 | 书生·浦语大模型全链路开源体系 | 陈恺 上海人工智能实验室青年科学家 | 视频 |
第 2 节 | 轻松玩转书生·浦语大模型趣味 Demo | 宋志学d2l-ai-solutions-manual 开源项目负责人 | 文档、视频 |
第 3 节 | 基于 InternLM 和 LangChain 搭建你的知识库 | 邹雨衡prompt-engineering-for-developers 开源项目负责人 | 文档、视频 |
第 4 节 | XTuner 大模型单卡低成本微调实战 | 汪周谦XTuner 社区贡献者 | 文档、视频 |
第 5 节 | LMDeploy 大模型量化部署实践 | 长琴HuggingLLM开源项目负责人 | 文档、视频 |
第 6 节 | OpenCompass 大模型评测 | 曹茂松OpenCompass 核心开发者 | 文档、视频 |
第 7 节 | 彩蛋环节 | 神秘嘉宾 | 文档、视频 |
个人笔记汇总
- ch1-书生浦语大模型全链路开源体系介绍
- ch2-轻松玩转书生浦语大模型趣味Demo
- ch3-基于InternLM大模型和LangChain搭建自己的知识库
- ch4-XTuner大模型单卡低成本微调实战
- ch5-LMDeploy大模型量化部署实践
- ch6-OpenCompass大模型评测
个人作业汇总
- ch2-homework-轻松玩转书生浦语大模型demo实践
- ch3-homework-基于InternLM和LangChain搭建自己的知识库
- ch4-homework-基于Xtuner的大模型单卡低成本微调作业
- ch5-homework-基于LMDeploy的大模型量化部署实践
- ch6-homework-OpenCompass大模型评测
个人大作业
正在搞,还没搞定,等满意了再放上来,嘿嘿~
先放几个班里比较有意思的参考:
高等数学大模型
AM (Advanced Mathematics) chat 是一个集成了数学知识和高等数学习题及其解答的大语言模型。该模型使用 Math 和高等数学习题及习题解析融合数据集,基于internlm2-math-7B模型,通过 xtuner 微调,专门设计用于解答研究生入学考试(考研)数学题目。
Chat-嬛嬛
Chat-甄嬛是利用《甄嬛传》剧本中所有关于甄嬛的台词和语句,基于InternLM2进行LoRA微调或全量微调得到的模仿甄嬛语气的聊天语言模型。
(ITCWM)中西医结合诊疗方案大模型
使用中医诊疗的数据进行微调,将西医的诊疗数据以外挂知识库加入,训练一个以中医为主西医为辅的提供诊疗方案的语言模型。
总结
感谢上海人工智能实验室组织的 书生·浦语实战营 学习活动~
感谢 OpenXLab 对项目部署的算力支持~
感谢 浦语小助手 对项目的支持~