什么是嵌入？AI是怎么"理解"文字含义的

作者：程序员晚枫

AI是怎么理解"苹果"既是水果又是手机的？程序员晚枫用大白话揭秘嵌入技术，让你了解AI是怎么"理解"文字的！

👋 先问个扎心的问题

你有没有遇到过这种情况：

  • 搜索"便宜的手机"，结果里没有"平价"、"实惠"的
  • 想找相似文章，只能靠人工对比
  • 听说AI能"理解"语义，但不知道怎么做到的

别慌，嵌入（Embedding）技术是关键！

🎯 一句话先说清楚

::: tip 核心结论
嵌入 = 把文字变成数字，让AI能"理解"意思

Embedding就是把"苹果"和"iPhone"、"水果"变成一串数字，这样AI就能知道它们之间的关系。苹果和iPhone虽然都是苹果，但意思完全不一样，Embedding让AI分得清。
:::

🤔 为什么要把文字变数字？

计算机的局限

计算机只认识数字，不认识文字。

1
2
"苹果" → 计算机：这是什么？我不认识
"iPhone" → 计算机：这是什么？我不认识

传统方法：简单对应

1
2
3
4
5
6
7
8
"苹果" → 数字1
"香蕉" → 数字2
"iPhone" → 数字3
"华为" → 数字4

问题：计算机只知道这些是不同的数字
      不知道"苹果"和"香蕉"都是水果
      不知道"苹果"和"iPhone"虽然都叫苹果，但意思不同

现代方法：Embedding

1
2
3
4
5
6
7
8
9
10
"苹果（水果）" → [0.2, 0.8, 0.1, 0.5, ...]
"香蕉" → [0.3, 0.7, 0.2, 0.5, ...]  ← 数字很接近！

"苹果（手机）" → [0.9, 0.1, 0.8, 0.1, ...]
"华为" → [0.8, 0.2, 0.9, 0.1, ...]  ← 数字很接近！

计算机看数字：
- 水果苹果和香蕉 → 数字接近 → 都是水果
- 手机苹果和华为 → 数字接近 → 都是手机
- 水果苹果和手机苹果 → 数字差别大 → 不是一类！

📍 Embedding是什么？

定义

Embedding就是把每个词/句子/图片变成一长串数字（向量）。

这串数字不是随便编的，而是根据语义生成的。

类比：地址坐标

1
2
3
4
5
北京：坐标（116.4，39.9）
上海：坐标（121.5，31.2）

距离近的城市，气候/文化也相似
同样，Embedding中距离近的词，意思也相似

词语的Embedding例子

1
2
3
4
5
6
7
"苹果（水果）" → [0.2, 0.8, 0.1, 0.5, 0.9]
"香蕉" → [0.3, 0.7, 0.2, 0.5, 0.8]  ← 离水果苹果很近！

"苹果（手机）" → [0.9, 0.1, 0.8, 0.1, 0.2]
"华为" → [0.8, 0.2, 0.9, 0.1, 0.3]  ← 离手机苹果很近！

"汽车" → [0.1, 0.2, 0.1, 0.9, 0.2]

AI通过对比数字距离，就能理解词语的关系！

🎨 Embedding能做什么？

1. 🔍 语义搜索

不用关键词，用意思搜索。

1
2
3
4
5
6
7
8
9
10
11
你搜："便宜的手机"

传统搜索（关键词匹配）：
只认"便宜"+"手机"这两个词
"实惠的手机" → 搜不到（没有"便宜"这个词）

Embedding搜索（语义匹配）：
找到所有意思相近的内容
"实惠的手机" → 搜到了！（意思相近）
"平价的手机" → 搜到了！（意思相近）
"性价比高的手机" → 搜到了！（意思相近）

优势： 搜得更全，不用猜用户用什么词。

2. 📦 相似推荐

找到相似的东西。

1
2
3
4
5
6
7
8
9
你买了一个耳机
Embedding帮你找到：
- 同价位的其他耳机
- 同品牌的其他产品
- 你可能喜欢的周边

原理：
耳机Embedding = [0.1, 0.2, 0.8, ...]
找到Embedding距离近的 = 相似商品

应用场景：

  • 电商推荐
  • 内容推荐
  • 好友推荐

3. 📝 去重/查重

判断两篇文章是否相似。

1
2
3
4
5
6
7
8
9
传统：
逐字对比，慢且不准

Embedding：
文章A Embedding = [0.1, 0.2, ...]
文章B Embedding = [0.1, 0.2, ...]
距离 = 0.01（很小）

结论：两篇文章内容很相似

优势： 更快，更准，能理解语义。

4. 📂 分类

自动把内容分类。

1
2
3
4
5
6
7
8
9
10
文章："今天天气真好，阳光明媚..."

文章 Embedding = [0.1, 0.2, 0.8, ...]

和这些分类对比：
- 新闻 [0.9, 0.1, 0.1, ...] → 距离远
- 天气 [0.1, 0.2, 0.8, ...] → 距离近
- 科技 [0.1, 0.9, 0.1, ...] → 距离远

结论：这是天气类文章

⚖️ Embedding vs 关键词搜索

对比项关键词搜索Embedding搜索
原理匹配字面匹配意思
"苹果"找出所有含"苹果"的内容分辨是水果还是手机
"便宜的手机"只找含"便宜"和"手机"的找意思相近的
理解能力字面意思语义理解
准确度低（容易漏）高（更全）
速度快稍慢（要计算）
例子百度搜索ChatGPT的回答、推荐系统

🔧 Embedding在哪里用？

几乎所有AI应用都用Embedding：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
RAG（检索增强）
  ├── 把文档切成小块
  ├── 每块转成Embedding
  ├── 存到向量数据库
  └── 搜索时
      ├── 问题转Embedding
      └── 找最相似的文档块

推荐系统
  ├── 商品转Embedding
  ├── 用户行为转Embedding
  └── 找相似商品推荐

AI客服
  ├── FAQ转Embedding
  └── 用户问题转Embedding
      └── 找最匹配的FAQ回答

语义搜索
  ├── 文档转Embedding
  └── 搜索时找最相似的

可以说，Embedding是现代AI的基础设施！

🔥 新闻里那些Embedding术语，到底是什么意思？

"向量（Vector）"

= Embedding的另一个名字

两个词其实是一回事！

  • Embedding = 中文叫法
  • Vector = 英文叫法
  • 都是一长串数字

"向量数据库"

= 存储Embedding的数据库

为什么专门叫向量数据库？

  • 普通数据库存不了向量
  • 向量数据库专门支持向量搜索
  • 能快速找到最相似的向量

常见向量数据库：

  • Pinecone
  • Chroma
  • FAISS
  • Milvus

"语义搜索"

= 用Embedding做的搜索

和关键词搜索的区别：

  • 关键词：匹配字面
  • 语义：匹配意思

⚠️ 常见误区避坑

❌ 误区1："Embedding就是把词映射到数字"

❌ 不完全对！

  • Embedding是映射到向量（多个数字）
  • 这些数字有语义含义
  • 不是简单的一对一映射

❌ 误区2："Embedding就是翻译"

❌ 完全错！

  • 翻译：中文→英文
  • Embedding：任何语言→向量（数字）
  • Embedding能跨越语言

❌ 误区3："Embedding只适用于文字"

❌ 错！

  • 图片也有Embedding
  • 音频也有Embedding
  • 视频也有Embedding
  • 任何数据都能转成Embedding

🎓 为什么要懂Embedding？

  1. 理解AI原理：AI是怎么"理解"的
  2. 技术基础：RAG、推荐系统都用Embedding
  3. 应用开发：想做AI应用，必须懂Embedding
  4. 职场机会：Embedding是AI工程师必备知识

✨ 总结

::: success 核心要点回顾

  • Embedding = 把文字变成数字，AI才能理解
  • 数字不是随便编的，而是根据语义
  • 距离近的词，意思也相似
  • Embedding支持语义搜索、推荐、去重、分类
  • Embedding是现代AI的基础设施
    :::

💬 互动时间

看完这篇文章，是不是觉得AI没那么神秘了？

你现在能搞明白：

  • ✅ Embedding和简单的数字映射有什么区别？
  • ✅ 语义搜索是怎么实现的？
  • ✅ Embedding还能做什么？

如果这篇文章对你有帮助：

  • 👍 点个赞让更多人看到
  • 💬 评论区说说你平时搜索遇到过什么问题？
  • 🔄 转发给朋友，让TA也了解Embedding

📚 课程导航

👆 上一讲：什么是微调？ - 定制专属AI

👇 下一讲：什么是Copilot？ - 你的AI编程助手

📢 程序员晚枫专注分享：程序员副业、AI工具、Python办公自动化

关注公众号【程序员晚枫】，回复【AI词汇】，获取全套课程原文

进群

嗨，扫码 进群

微信

扫一扫，分享到微信

微信分享二维码
本站总访问量次

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置：

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

编程博主，全网粉丝30w+，开源项目：python-office，我的微信：python-office