AI 原理学习笔记（七）：文字怎样变成 Token、Embedding 与向量 2026 年 10 月 20 日 AI 技术与原理 区分字符、词、Token ID、静态词向量和上下文表示，并手算一次余弦相似度。 Token Embedding 向量检索