VIP20

本课程属于：039-向量数据工程 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

工程师的向量数据库选型指南

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

向量数据库概述

什么是向量数据库、为什么需要向量数据库、与传统数据库的对比、核心应用场景（RAG、推荐系统、图像检索）。

向量化技术基础

Embedding模型简介、文本向量化（/开源模型）、图像向量化、向量维度与精度权衡。

Embedding预处理

近似最近邻搜索（ANN）、精确搜索 vs 近似搜索、常用索引算法（IVF、HNSW、PQ）、距离度量（余弦、欧式、点积）。

主流产品对比（上）

Pinecone（全托管SaaS）、Weaviate（云原生）、Qdrant（Rust高性能）、Milvus（分布式）。

主流产品对比（下）

Chroma（轻量级嵌入）、Elasticsearch（向量插件）、Faiss（底层库）、Vald（云原生）。

选型决策矩阵

性能指标（QPS、延迟、召回率）、成本模型（存储/计算/网络）、运维复杂度、生态兼容性。

注册与、创建Index、插入向量数据、相似度查询、元数据过滤、性能调优。

Docker部署、Schema设计、数据导入、混合搜索（向量+关键词）、多租户支持。

本地部署、Collection管理、Payload过滤、批量写入、Snapshot备份。

集群部署（K8s）、Collection与Partition、索引构建、监控与告警、数据迁移。

Python客户端、内存模式与持久化、Collection操作、集成LangChain。

Elasticsearch向量搜索

安装插件、Mapping配置、script_score查询、KNN搜索、聚合分析。

Faiss底层使用

安装与编译、IndexFlatL2、IndexIVFFlat、IndexHNSW、GPU加速。

数据预处理

文本清洗与分块、图像特征提取、批量向量化Pipeline、数据版本管理。

索引类型选择（Flat/IVF/HNSW）、参数调优（nlist/nprobe/efConstruction）、内存与磁盘权衡。

Top-K选择、批量查询、异步请求、缓存策略、查询超时处理。

元数据过滤

Filter设计模式、标量索引（倒排/B-tree）、过滤性能影响、复合查询。

过滤元数据

向量+关键词融合、RRF（倒数排名融合）、加权评分、业务场景适配。

混合搜索RRF

高可用与容灾

主从复制、分片策略、故障转移、数据备份与恢复、跨区域部署。

高可用容灾

性能基准测试

测试方法论（数据集/查询模式）、工具选型（VectorDBBench）、指标解读、报告生成。

安全与权限

API认证、TLS加密、RBAC（基于角色的访问控制）、审计日志、数据脱敏。

存储成本（量化/标量）、计算成本（索引构建/查询）、冷热数据分层、预留实例。

监控与运维

Prometheus集成、Grafana面板、慢查询日志、资源利用率、自动扩缩容。

RAG应用集成

LangChain集成、LlamaIndex集成、文档问答系统、知识库构建。

推荐系统集成

用户向量生成、物品向量生成、实时召回、A/B测试框架。

图像检索系统

CLIP模型应用、特征提取Pipeline、大规模图像搜索、去重与聚类。

多模态搜索

文本+图像联合检索、跨模态对齐、应用场景（电商/设计）。

多模态搜索

迁移与升级

数据导出格式、跨产品迁移（Pinecone→Milvus）、版本升级策略、回滚方案。

Serverless向量数据库、GPU原生加速、向量+图数据库融合、AI原生数据库。

总结与最佳实践

选型Checklist、常见陷阱、团队能力建设、技术演进路线图。

总结最佳实践