LLM 工程
从分词器到 RAG 评测，从地基开始
중급 · 课时 13 · 实验 3
课程大纲
分词器与嵌入
- 分词器 — 模型看到的不是文字 reading
- 嵌入 — 把语义变成坐标的最简单办法 reading
- 从零做出 BPE 分词器 lab
- TF-IDF 嵌入与余弦检索 lab
- 测验：分词器与嵌入 quiz
提示与上下文
- 提示与上下文 — 窗口变宽了，但不免费 reading
- 测验：提示与上下文 quiz
RAG 的结构
- RAG — 先分清是三个零件里的哪一个坏了 reading
- 分块 — 定下检索单元就占一半 reading
- RAG 流水线与评估 lab
- 测验：RAG 的结构 quiz
评估与幻觉
- 评估 — 靠数字判断，不靠体感 reading
- 测验：评估与幻觉 quiz