Qdrant 发布全新过滤策略:为何摒弃预过滤与后过滤?

ADK Qdrant官方 / ADK编译 2026-08-07 5 分钟 135 次浏览
速览导读 / Summary

Qdrant 正式宣布不再采用传统的预过滤(Pre-Filtering)或后过滤(Post-Filtering)策略,而是将过滤逻辑内嵌于搜索过程中。通过引入 Filterable HNSW 图结构及 ACORN 算法,Qdrant 实现了在遍历图结构时实时剔除不匹配点,显著提升了复杂过滤场景下的召回率与性能。新架构支持动态路由,根据查询负载自动选择最优执行路径,解决了传统方法在宽泛过滤或组合过滤时的性能瓶颈。

召回率恢复 100% 复杂 AND 过滤场景下召回率从 39.7% 提升至 100%
路由优化 471/500 低匹配率查询中,98% 的请求直接命中 Payload 索引
核心算法 ACORN + Filterable HNSW 双重机制保障图结构连通性与搜索效率

Key Insights / 核心看点

  • 1 摒弃传统预过滤与后过滤策略,创新采用‘内嵌过滤’机制,在 HNSW 图遍历过程中实时剔除不匹配点。
  • 2 引入 ACORN 算法修复图遍历断裂问题,结合 Filterable HNSW,确保复杂过滤场景下召回率可达 100%。
  • 3 部署智能查询规划器,根据过滤条件动态选择四种执行路径(图遍历、ACORN、Payload 索引或全量扫描),实现性能最优。
  • 4 解决宽泛过滤与组合过滤(AND 条件)的性能瓶颈,显著降低计算成本并提升响应速度。

Qdrant 发布全新过滤策略:为何摒弃预过滤与后过滤?

在向量数据库的搜索优化中,如何高效处理元数据过滤(Metadata Filtering)一直是开发者面临的挑战。传统的做法通常局限于两种策略:预过滤(Pre-Filtering)和后过滤(Post-Filtering)。然而,Qdrant 团队在其最新技术文章中指出,这两种策略在中间地带均存在明显缺陷,因此 Qdrant 选择了一条全新的道路——将过滤逻辑内嵌于搜索过程之中(In-Place Filtering)。

传统策略的局限性

预过滤的代价

预过滤策略要求引擎在向量搜索前,先计算出一组通过过滤条件的点集(通常作为掩码)。虽然这保证了结果的精确性,但其成本随数据量线性增长。对于宽泛的过滤条件,预过滤会退化为全量扫描(Brute Force),导致性能急剧下降。

后过滤的困境

后过滤策略先执行最近邻搜索,再对返回结果进行筛选。为了弥补这一点,引擎通常需要进行“过度获取”(Over-fetching),即请求比实际需求更多的结果。然而,如何确定请求数量是一个难题:请求过少会导致结果不完整,请求过多则意味着浪费了计算资源,重新回到了全量扫描的低效状态。

Qdrant 的解决方案:内嵌过滤

Qdrant 的核心创新在于在搜索过程中直接应用过滤。其工作流程如下:

  1. 图遍历与实时过滤:查询在 HNSW(Hierarchical Navigable Small World)图结构中遍历,每到达一个候选点,立即检查其是否满足过滤条件。不满足的点直接跳过,无需计算相似度分数。
  2. Filterable HNSW (2019):在索引构建阶段,为共享相同元数据值的点之间添加额外的边。这使得过滤后的图结构依然保持连通性,确保搜索路径不会断裂。
  3. ACORN (2024):针对上述架构的补充,ACORN 算法在查询时修复遍历路径,允许搜索通过那些虽然不满足过滤条件但能通往有效结果的邻居节点,从而解决“死胡同”问题。

智能路由与性能突破

Qdrant 引入了查询规划器(Query Planner),它会根据过滤条件的具体特征,动态选择四种执行路径之一:

  • Filterable HNSW 图:适用于大多数通用过滤场景。
  • ACORN 增强图:处理复杂或边缘情况。
  • Payload 索引直接查询:当过滤条件非常明确且匹配点较少时,直接读取预计算的索引,成本极低。
  • 全量扫描:作为最后的兜底方案。

在基准测试中,对于两个宽泛值的 AND 过滤组合,传统方法导致召回率降至 39.7%,而启用 ACORN 后,召回率恢复至 100%,同时保持了极低的延迟。对于匹配率仅为 1% 的复杂过滤查询,Qdrant 能够智能地将 471 次请求路由至高效的 Payload 索引路径,仅 29 次请求才需要遍历图结构。

“过滤属于搜索的一部分,引擎需要足够的上下文来做出最佳路径选择。” —— Qdrant 技术团队

核心价值总结

  • 消除性能瓶颈:彻底解决了宽泛过滤导致的性能退化问题。
  • 动态自适应:不再依赖固定的预/后过滤策略,而是根据查询负载实时调整执行计划。
  • 高召回率保障:通过 ACORN 算法,确保在复杂过滤条件下不丢失有效结果。

对于追求极致搜索体验的开发者而言,Qdrant 的这一架构革新标志着向量检索从“静态索引”向“动态智能路由”的重大演进。

“Filtering belongs inside the search, where the engine has enough context to pick the path.”

— Qdrant 技术团队

同主题深度资讯

查看更多 →
模型发布 2026-10-14

Qdrant Edge 赋能机器人 Reachy:实现本地语义记忆与零断网交互

Qdrant 发布 Qdrant Edge,为开源机器人 Reachy 赋予本地语义记忆能力。该系统将向量数据库直接嵌入机器人进程,无需联网即可毫秒级检索图片与文本记忆。通过优化工具调用描述与向量检索阈值策略,解决了机器人“看什么”与“如何回答”的幻觉问题,实现了从上下文窗口溢出到长期记忆管理的完整闭环。

Qdrant官方 / ADK编译 4 分钟
AI 工具 2026-10-13

首创集团 2027 秋招解读:北京国企金融平台,算法与产品岗投递策略

首创集团 2027 秋季校园招聘启动,作为北京国企金融平台,其算法工程师与产品经理岗位成为关注焦点。本文深度解析该秋招的确定性机会与信息缺口,指出企业性质为央企国企,业务横跨环保、基础设施及金融板块。核心建议为:目标明确且接受国企节奏的应届生可将其纳入秋招清单,但需警惕信息缺失(如薪资、学历门槛),避免将单一机会作为唯一押注。文章详细对比了算法与产品岗的差异化准备路径,并提供了针对国企场景的简历优化策略。

超级简历官方 / ADK编译 5 分钟
模型发布 2026-10-13

Qdrant TurboQuant 1 位压缩技术突破:Perplexity 视觉检索向量体积缩减 21 倍且保持 96.5% 召回质量

针对 Perplexity 新发布的 pplx-embed-v2-late 视觉检索模型(单页约 856KB 向量)存储体积过大问题,Qdrant 推出 TurboQuant 1 位压缩技术。该技术将单页向量体积从 856KB 压缩至 40KB,实现 21 倍缩减,同时保留 96.5% 的检索质量(配合重评分可达 99.9%)。此举推动文档检索从“文本优先”转向“视觉优先”,大幅降低亿级文档索引的内存占用,为 PDF 及图表检索提供低成本高能效方案。

Qdrant官方 / ADK编译 5 分钟
AI 工具 2026-10-13

Erase.bg 2025 评测:AI 背景移除工具的免费新标杆

Erase.bg 作为 2025 年领先的免费透明背景制作工具,凭借极简的 AI 驱动架构和跨平台支持,重新定义了电商与营销领域的图像编辑标准。本文深度解析其核心功能,对比 PhotoScissors 与 Clipping Magic 等竞品,突显其在处理复杂背景时的优势,并展示从上传图片到秒级处理的全流程体验,为开发者与创作者提供实用指南。

Erase.bg官方 / ADK编译 3 分钟