嵌入模型
嵌入模型把文本、图像或其他数据转换成一串能够表达其含义的数字,使意思相近的内容在空间中彼此靠近。
嵌入支撑着语义搜索、推荐和检索增强生成。你把文档先嵌入一次,再把每个问题也嵌入,然后返回数字上最接近的文档。嵌入模型不会写文字,它的输出是一个向量。
与聊天模型相比,嵌入模型很小。Qwen3-Embedding 的规模从 0.6B 到 8B,EmbeddingGemma 2 不到 10 亿参数,所以两者在普通笔记本上都能运行。
相关术语
- 检索增强生成(RAG) 检索增强生成让模型能够根据你自己的文档来回答问题:先检索出相关段落,再把它们加入提示词。
- 多模态模型 多模态模型能处理不止一种类型的数据,例如文本、图像、音频或视频,可以作为输入、输出,或两者兼有。