crashAI 学习地图

24 主题 · 从数学基础到 LLM 部署 · 完整 AI 转行知识体系

Phase A · 基础夯实

数学 + Python + 核心概念

Phase B · LLM 全栈

Transformer + 训练 + 评估

Phase C · 应用部署

Agent + RAG + 产品化

Phase D · 安全领域专项

汽车安全 AI · 4 大训练路径

26

D1. Transformer 数学原理(自底向上)

从线性代数到 Self-Attention,3 小时彻底搞懂 Transformer 数学

26

D1.1 Self-Attention 公式(必背)

理解 Attention(Q,K,V) = softmax(QK^T / sqrt(d_k)) V 的每个符号

26

D1.2 20 行 PyTorch 手写 Self-Attention

从公式到代码,亲手实现一个可运行的 Self-Attention 层

26

D1.3 Multi-Head Attention(多头)

为什么不是 1 个注意力而是 8/16/32 个?

26

D1.4 LayerNorm + 残差连接

为什么训练 100 层不崩?

26

D1.5 Causal Mask(因果掩码)

GPT 必须用,理解单向语言模型的训练机制

27

D2.1 PyTorch Tensor + 自动求导

PyTorch 两大基石:Tensor 和 Autograd

27

D2.2 nn.Module + 标准训练循环

背下来的 PyTorch 训练循环模板

27

D2.3 GPU 显存计算(必会)

7B 模型要多少显存?24GB 消费级显卡能跑什么?

27

D2.4 混合精度训练(AMP)

省 50% 显存,提速 1.5-3 倍

27

D2.5 Gradient Checkpointing

用时间换空间,训练时省激活值显存

27

D2.6 DDP 分布式训练

单机 8 卡 / 多机多卡加速训练

28

D3.1 LoRA 原理(低秩适应)

只训练 0.1% 参数实现微调

28

D3.2 QLoRA(量化 + LoRA)

6GB 显存微调 7B 模型,笔记本也能跑

28

D3.3 DPO 直接偏好优化

RLHF 的简化版,效果等同或更优

28

D3.4 数据准备(质量 > 数量)

100 条 vs 10 万条,哪种更好?

28

D3.5 评估(如何知道微调有效?)

Loss 降但效果变差怎么办?

28

D3.6 实战:用 QLoRA 微调 Qwen2.5-7B

3 步实操,做出你的第一个微调模型

29

D4.1 汽车安全 AI 真实需求场景

4 大场景 + 对应技术栈

29

D4.2 RAG 入门:让 LLM 读你的 PDF

5 行代码做 RAG

29

D4.3 数据采集:C-NCAP / C-IASI 公开数据

爬虫 + 清洗 pipeline

29

D4.4 vLLM 部署模型

把模型变成 OpenAI 兼容 API

29

D4.5 中国 AI 合规 3 大法规

在中国部署 AI 必须知道的法规

29

D4.6 商业化路径

从 demo 到 ¥1000 万 ARR