词嵌入表示方法：应用 NLP 技术，将单词/Token 转化为向量的数值表示形式
随着 LLMs 的进步和发展，该技术也逐渐应用到图像、音频等非文本领域
传统嵌入表示
One-hot（独热）编码
One-hot（独热）编码过程：
- 用 $N$ 维仅包含 0、1 值的向量去唯一地表示 $N$ 种词
- 每个词编码后的向量包含 $N-1$ 个 0 和 1 个1
算法分析：
- One-hot 编码简单实用，是很多进
发表评论
1761 views
