概念词汇表:N¶
本页整理拼音首字母为 N 的中文概念词条。词条正文由单词源文件 include 生成。
最近邻¶
- 含义:最近邻是在距离或相似度规则下,最接近查询向量或基准向量的候选。
- 为什么重要:它说明检索和案例推理中,哪个已有对象会成为最近的依据。
- 相关概念:
相似度搜索,距离,top-k 检索(top-k) - 中心 Section:
P1-13.2 - 出现 Section:
P1-13.4,P4-12.1,P6-3.4,P7-2.1,P7-2.2
下一 token 预测¶
- 含义:下一 token 预测会根据当前上下文计算下一个 token 候选,并逐 token 继续生成。
- 为什么重要:它是理解 LLM 文本生成以及采样、temperature、上下文窗口等设置的直接基础。
- 相关概念:
词元(token),语言建模,采样 - 中心 Section:
P1-10.2 - 出现 Section:
P5-15.1,P5-15.2,P6-4.1,P6-5.1,P6-7.1,P6-7.2
噪声¶
- 含义:噪声是观测数据中的变动或错误,可能遮蔽当前问题真正相关的信号。
- 为什么重要:它让读者不把每个观测值都当成有用信号,并支持输入质量诊断。
- 相关概念:
不确定性,部分可观测性,误差 - 中心 Section:
P1-6.1 - 出现 Section:
P4-5.1,P4-7.1
非确定性¶
- 含义:非确定性指同一输入或状态不一定导向唯一固定结果。
- 为什么重要:它把多个可能结果和随机性区分开,帮助解释搜索、生成和系统执行。
- 相关概念:
随机,随机过程,不确定性 - 中心 Section:
P1-6.2
数值稳定性¶
- 含义:数值稳定性指重复计算时,值和梯度保持在机器可以处理的范围内。
- 为什么重要:数学上成立的公式在有限机器上也可能失败,因此初始化、归一化和学习率有实际意义。
- 相关概念:
初始化,批归一化,反向传播 - 中心 Section:
P5-8.3 - 出现 Section:
P5-8.4