第5课|文字为什么要变成向量,向量里表示了什么?
本课介绍
Token编号进入模型后,怎样对应到一组数值?本节从嵌入表查找开始,区分词元的初始向量、结合上下文后的表示,以及用于检索的文本向量。通过简化计算说明向量相似度的用途,也解释为什么相似度较高,不能直接证明内容正确。
GEOBOK《生成式AI是怎么工作的》 · 第5课 · 主讲:无风即风
Token编号进入模型后,怎样对应到一组数值?本节从嵌入表查找开始,区分词元的初始向量、结合上下文后的表示,以及用于检索的文本向量。通过简化计算说明向量相似度的用途,也解释为什么相似度较高,不能直接证明内容正确。
GEOBOK《生成式AI是怎么工作的》 · 第5课 · 主讲:无风即风