一、大模型介紹
1.大模型核心結束介紹
1)Transformer
2)指令精調
3)CoT
4)RLHF
2.ChatGPT發展歷程和簡介
3.國內外主流大模型對比
1)GTP-3
2)BLOOM
3)Alpaca
4)Chinchilla
4.垂直化落地
1)縮放法則Scalling Laws
2)計算利用率最優
3)不同訓練方式對比
二、ChatGLM原理
1.通用模型GLM算法
1)背景
2)架構
2.基座模型GLM-130B
3.對話機器人ChatGLM、ChatGLM-6B介紹
1)模型架構
2)支持配置
3)常見名詞解釋
4.ChatGLM2-6B介紹
1)優化點
2)訓練方式
三、ChatGLM2-6B微調
1.環境搭建
2.準備模型和數據
3.模型參數、微調方式介紹
4.答疑
四、ChatGLM2-6B模型導出、部署、服務提供
1.環境準備
2.微調后的模型導出
3.微調后的模型部署
4.提供服務
5.答疑
課程周期:
18小時(45分鐘/課時)
