向量数据库是一种专门用于存储嵌入向量(将文本、图像、音频等转换成的数值向量)并快速查找与给定向量最相近的条目的数据库。与查找精确匹配的传统数据库不同,它基于余弦相似度等距离度量进行相似性检索,在大规模数据上则依靠近似最近邻(ANN)索引保证速度。
在AI领域,它是检索增强生成(RAG)的核心组件,负责找出与提问相关的文档并提供给大语言模型。它也用于语义搜索、推荐和重复检测。专用产品包括Pinecone、Weaviate、Milvus、Chroma和Qdrant,另有pgvector等为现有数据库添加向量检索能力的扩展。