概述
本模块介绍 LLM 中**上下文(Context)**的概念,包括 Token、分词、上下文窗口等核心知识点。
学习路径
01-Token 与分词
↓
02-上下文窗口
核心笔记索引
| 笔记 | 描述 | 状态 |
|---|---|---|
| 01-Token 与分词 | Token 定义、中英文 Token 差异、词向量表示 | ✅ 完成 |
| 02-上下文窗口 | 上下文窗口定义、作用、扩展技术 | ✅ 完成 |
核心概念速查
| 概念 | 说明 | 参考 |
|---|---|---|
| Token | LLM 处理文本的基本单位 | 01-Token 与分词 |
| 分词(Tokenization) | 将文本切分为 Token 的过程 | 01-Token 与分词 |
| 上下文窗口 | 模型能处理的最大 Token 数量 | 02-上下文窗口 |
| 词向量 | Token 的数学表示 | 01-Token 与分词 |
与其他模块的关联
- 01-大语言模型概述 - LLM 基础:了解 Transformer 架构
- 提示词 Prompt - Prompt 工程
更新记录
| 日期 | 内容 |
|---|---|
| 2026-03-17 | 初始版本 |
| 2026-04-09 | 标准化 MOC 结构 |