现代大模型:做模型、跑模型、改模型¶
面向懂深度学习、希望系统补齐现代大模型技术的工程师。从 Transformer 架构出发,走到训练推理系统、后训练与智能体。
BOOK 01 · 做模型
现代大模型架构
Transformer、稠密模型、MoE、长上下文、混合架构与 Qwen3.8。
BOOK 02 · 跑模型训练与推理系统
分布式训练、推理引擎、量化、Kernel、生产服务与端侧部署。
BOOK 03 · 改模型后训练与智能体系统
SFT、蒸馏、偏好对齐、RLVR、评测、RAG、Agent 与 Harness。
阅读路径¶
三册不是相互独立的术语手册,而是一条完整工程链:
第一册定义模型如何计算 → 第二册解释计算如何高效运行 → 第三册说明如何改变模型行为并证明改对了。
如果你已经熟悉其中一部分,可以直接从对应册开始;每册都会在边界处回指另外两册。