VIP20

本课程属于：039-向量数据工程 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

向量索引构建与参数调优实战

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

向量索引基础

什么是向量索引、为什么需要向量索引、核心挑战：维度灾难与精确度‑速度权衡。

维度灾难权衡

向量距离度量

欧氏距离、余弦相似度、曼哈顿距离、点积、Jaccard、汉明距离的适用场景与数学原理。

暴力搜索与线性扫描

KNN暴力搜索实现、时间复杂度分析、何时该用暴力搜索、Python代码实战。

构建原理、分割轴选择、最近邻搜索算法、高维数据下的退化问题。

空间划分退化

Ball Tree索引

超球体划分、搜索剪枝策略、与KD‑Tree的对比实验。

LSH局部敏感哈希

基本原理、哈希函数族设计、多表哈希与AND/OR组合策略、相似文本检索应用。

哈希文本检索

IVF倒排文件索引

K‑means聚类构建码本、粗量化+重排序、nprobe参数对召回率的影响。

子空间拆分、码本训练与编码、非对称距离计算(ADC)、SQ标量量化对比。

IVF+PQ混合索引

Faiss IVFPQ实现、参数配置(nlist, m, nbits)、索引文件大小与压缩比分析。

HNSW分层导航小世界图

跳表启发、多层图结构、插入与搜索算法、efConstruction与efSearch调优。

小世界efSearch

NSG导航小世界图

KNN图构建+导航点、与HNSW异同、搜索性能对比实验。

导航点对比

基于图的索引对比

HNSW vs NSG vs Vamana(DiskANN)架构差异、内存占用、构建速度、召回率。

图索引DiskANN

Faiss框架入门

安装编译、IndexFlatL2/IndexFlatIP、search()与add()接口详解。

Faiss索引工厂模式

index_factory字符串配置(如IVF100,Flat)、常见组合模式、参数解析与验证。

Faiss GPU加速

GPU版本安装、GpuIndexFlat/GpuIndexIVFFlat、多GPU并行搜索配置。

Milvus向量数据库实战

架构概览(Proxy/Coordinator/DataNode/QueryNode)、Collection与Partition设计。

Milvus索引类型选择

FLAT/IVF_FLAT/IVF_SQ8/HNSW/DISKANN、各索引适用场景与参数。

索引类型DISKANN

Milvus参数调优

index_param(nlist, M, efConstruction)、search_param(nprobe, ef, metric_type)、性能调优实践。

Elasticsearch向量检索

dense_vector字段、script_score与knn搜索、与文本检索混合搜索(RRF)。

Pinecone与云向量数据库

Pod与Serverless模式、索引创建与配置、自动缩放与成本优化。

PineconeServerless

召回率与性能评估

Recall@k计算、QPS与延迟测量、AUC‑PR曲线、ann‑benchmarks工具。

参数调优方法论

网格搜索/随机搜索、贝叶斯优化(Optuna)、参数敏感度分析、最佳实践。

Optuna贝叶斯

维度灾难与降维

PCA、t‑SNE与UMAP可视化、随机投影、降维对索引性能的影响。

数据分布与索引选择

均匀/聚类/长尾分布、不同分布下索引表现、数据预处理策略。

分布预处理

大规模索引构建

分布式构建(数据分片)、增量更新、索引合并与压缩、内存管理技巧。

分布式增量

混合搜索（向量+标量）

过滤感知搜索、预过滤与后过滤策略、Milvus与ES混合查询实现。

多模态向量检索

文本‑图像跨模态(CLIP)、音频向量检索、多模态对齐与索引挑战。

实时向量检索

流式数据索引更新、删除与修改、实时性vs索引质量、Kafka+Milvus管道。

生产环境部署

高可用架构、监控指标(构建时间/内存/召回率)、A/B测试、故障恢复。

部署高可用

前沿趋势与总结

Delaunay图、学习型索引(LSH+NN)、Serverless向量数据库、学习路径。