大模型項目實戰

高強文，互鏈高科（北京）技術發展有限公司總經理，銀川方達電子系統工程有限公司董事長，寧夏回族自治區勞動模範。專註於人工智能大語言模型應用開發、開源社區開發與運營。參加工作20多年來，一直從事醫療健康領域信息化、人工智能等產品研發與管理工作，近年來致力於開源事業，開發運營aliendao.cn、gitclone.com和opendao.cn等開源社區，在GitHub上貢獻了20多個開源代碼庫。

前言
基礎篇
第1章 大語言模型的基礎知識
1.1 大語言模型概述
1.1.1 基本情況
1.1.2 發展歷史
1.1.3 發展現狀
1.1.4 發展趨勢
1.2 基本原理
1.2.1 Transformer架構
1.2.2 編碼器與解碼器
1.2.3 自註意力機制
1.3 應用開發技術
1.3.1 Python
1.3.2 React.js
1.4 訓練方法
1.4.1 FFT
1.4.2 RLHF
1.4.3 P-Tuning
1.4.4 LoRA
1.5 常見現象
1.5.1 幻覺
1.5.2 災難性遺忘
1.5.3 湧現
1.5.4 價值對齊
第2章 大語言模型應用架構
2.1 整體架構
2.2 基礎設施
2.2.1 硬件部分
2.2.2 操作系統
2.3 基礎軟件
2.3.1 CUDA
2.3.2 PyTorch
2.3.3 Anaconda
2.3.4 Nginx
2.4 應用軟件
2.4.1 大語言模型文件
2.4.2 Transformers庫
2.4.3 服務程序
2.4.4 API
2.4.5 客戶端程序
……
操作篇
開發篇