小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
Qdrant中的内存层级:何时使用何种配置

Qdrant支持将向量、HNSW图、量化向量等分配到不同内存层级(固定、缓存、冷存储),以平衡速度与成本。建议在RAM紧张时固定量化向量,冷存储时配合量化减少磁盘读取,避免缓存全精度与压缩副本共存。HNSW内联存储需测试,并随扩展持续检查RAM余量。

Qdrant中的内存层级:何时使用何种配置

Qdrant - Vector Database Qdrant - Vector Database · 2026-08-28T08:00:00Z
向量嵌入与语言:模型如何将词语转化为几何空间

本文介绍向量嵌入如何将文本转化为高维空间中的点,使语义相近的内容距离更近,从而解决关键词搜索的语义匹配问题。文章回顾了从word2vec、GloVe到BERT等模型的发展,强调上下文建模和池化技术的重要性,并指出向量搜索需结合高效索引(如HNSW)和实时数据平台(如Redis)以支持生产应用。

向量嵌入与语言:模型如何将词语转化为几何空间

Redis Blog Redis Blog · 2026-08-10T00:00:00Z
预过滤与后过滤(以及为什么Qdrant两者都不用)

Qdrant在向量搜索中采用过滤内置于搜索的方式,而非预过滤或后过滤。预过滤成本高,后过滤可能返回不足。Qdrant通过HNSW图遍历时检查过滤条件,并用Filterable HNSW和ACORN修复严格过滤导致的路径断裂。查询规划器按过滤匹配度选择路径,如过滤索引或全扫描,确保高效准确。

预过滤与后过滤(以及为什么Qdrant两者都不用)

Qdrant - Vector Database Qdrant - Vector Database · 2026-08-07T00:00:00Z

本文介绍近似最近邻搜索(ANN)在向量检索中的应用,涵盖暴力搜索、KD-Tree、LSH、HNSW及量化方法,并讨论FAISS索引选型、向量数据库架构及RAG场景实践。强调高维向量检索需平衡精度与速度,常用HNSW或IVF-PQ索引,并注意基准测试陷阱,以Recall@K评估质量。

【存储工程】向量存储与 ANN 索引

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-08-03T00:00:00Z
Christopher Winslett:Postgres与pgvector的混合搜索模式

本文介绍Postgres与pgvector实现混合搜索(向量相似度+标量过滤)的模式。核心问题是向量索引返回近似排序结果,无法直接与WHERE过滤结合。pgvector 0.8提供迭代索引扫描,但需权衡召回率与性能。其他方案包括:部分HNSW索引(适合低基数稳定过滤)、过采样后过滤(适合高基数)、缓存响应(适合重复查询)。文章还提供EXPLAIN诊断方法和选择指南。

Christopher Winslett:Postgres与pgvector的混合搜索模式

Planet PostgreSQL Planet PostgreSQL · 2026-07-30T15:00:00Z

pgvector v0.8.0将HNSW索引作为PostgreSQL索引访问方法实现,向量以varlena存储于8KB页中,与业务表共享WAL、缓冲区和VACUUM。相比Milvus,它支持同进程事务和SQL,但受限于页装箱、默认后过滤和资源争用。选型应基于隔离需求与生命周期管理,而非单纯比较ANN算法性能。

【向量检索引擎】pgvector 内核对照:同进程 SQL 扩展与专用引擎差在哪一层

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-07-25T00:00:00Z

本文讨论了向量检索引擎Knowhere的架构与索引类型,包括HNSW、DiskANN和IVF-PQ等算法的应用。强调了在训练、构建、加载和查询四个阶段的参数管理,指出Flat索引是金标准但不应作为默认选择。文章还探讨了索引生命周期与段的关系,以及插件契约的实现步骤,提出了多索引参数组合的开放问题。

【向量检索引擎】ANN 算法工程接口:从 HNSW/IVF 到 Knowhere 契约

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-07-12T00:00:00Z

本文讨论了向量检索引擎Milvus的架构与功能,重点介绍了HNSW、DiskANN、IVF-PQ等算法的应用,以及向量库的选型与RAG召回机制。内容涵盖写路径、读路径和索引内核,适合RAG和AI平台工程师、数据平台工程师等专业人士阅读。

【向量检索引擎】Milvus · Segcore · Knowhere · Qdrant · Lance · pgvector

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-07-12T00:00:00Z
HNSW与LSH:Elasticsearch如何在每秒15,000个查询下实现0.99的召回率@10——以及其成本

Elasticsearch使用HNSW算法在每秒15,000个查询下实现0.99的召回率@10。通过量化技术,DiskBBQ在55,000 QPS下达到0.97的召回率,内存占用减少8倍。HNSW通过多层图结构提高查询效率,适合高维数据的近似最近邻搜索。量化方法如标量量化和产品量化进一步压缩内存,提升性能。

HNSW与LSH:Elasticsearch如何在每秒15,000个查询下实现0.99的召回率@10——以及其成本

Elastic Blog - Elasticsearch, Kibana, and ELK Stack Elastic Blog - Elasticsearch, Kibana, and ELK Stack · 2026-06-09T00:00:00Z

HNSW是主流向量数据库默认的近似最近邻索引算法,通过分层图结构实现高效搜索。文章从NSW图出发,详细推导HNSW设计,给出C语言实现,讨论参数调优、距离计算优化,并对比Vamana等竞品。HNSW在精度、速度、内存间取得平衡,搜索复杂度为O(log N),但内存消耗大,动态更新和过滤搜索仍是挑战。

HNSW:图索引如何击败树索引

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-05-30T00:00:00Z
Postgres开发者的向量索引权衡指南

本文讨论了Postgres中的向量搜索及其索引设计,强调在不同工作负载下选择合适索引的重要性。介绍了HNSW、IVFFlat和DiskANN等算法,并分析了它们在内存、召回率和写入成本等方面的权衡。建议根据实际数据和查询模式进行基准测试,以优化检索质量和性能。

Postgres开发者的向量索引权衡指南

Timescale Blog Timescale Blog · 2026-05-26T14:23:55Z

pgvector 0.8.2 fixes CVE-2026-3172, a heap buffer overflow in parallel HNSW index builds that can leak data or crash the server.

Christophe Pettus: pgvector 0.8.2 and the Trouble With Parallel HNSW

Planet PostgreSQL Planet PostgreSQL · 2026-05-22T15:00:00Z

本文探讨了RAG(检索增强生成)中的存储与检索层,重点介绍向量索引算法的选择和量化方法,以及2024-2026年工业界的趋势。文章分为四部分:算法底层、产品选型、工程实操和图RAG与趋势,提供实用的参数和代码示例。向量检索主要使用近似最近邻(ANN)算法,推荐HNSW作为工业标准,并结合量化技术以降低内存占用。最后,GraphRAG结合知识图谱与向量检索,提升多跳推理能力。

【大模型基础设施工程】18:向量库与图 RAG

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-04-22T00:00:00Z
MySQL的MyVector插件的范围向量搜索 - 第二部分

本文介绍了MyVector插件的实现,包括向量搜索模式设计、嵌入工作流、混合搜索及性能权衡,重点在于嵌入的存储与索引、工作流设计,以及HNSW与暴力搜索的比较。MyVector支持SQL过滤,确保搜索的相关性与安全性,适用于多租户应用。

MySQL的MyVector插件的范围向量搜索 - 第二部分

Planet MySQL Planet MySQL · 2025-11-03T19:33:20Z
Qdrant 1.15 - 更智能的量化与更好的文本过滤

Qdrant 1.15.0版本发布,新增非对称量化及1.5、2位量化,提升精度。文本索引改进支持多语言分词、停用词和词干提取。HNSW优化加速索引构建,Gridstore迁移提高存储效率,MMR重排序增强搜索结果多样性。

Qdrant 1.15 - 更智能的量化与更好的文本过滤

Qdrant - Vector Database Qdrant - Vector Database · 2025-07-18T08:00:00Z
层次可导航小世界(HNSW)算法如何提升搜索效率

六度分隔理论表明人与人之间的社交联系紧密。HNSW是一种高效的近似最近邻算法,适用于高维数据搜索,结合了可导航的小世界和层次结构,提供快速搜索,广泛应用于图像识别、自然语言处理和推荐引擎。尽管HNSW在性能和实用性上优于其他算法,但也面临高内存消耗和构建开销的挑战。

层次可导航小世界(HNSW)算法如何提升搜索效率

Redis Blog Redis Blog · 2025-06-10T00:00:00Z

Weaviate是一个开源向量数据库,专为高维向量数据设计,支持高效的相似性搜索。它采用先进的索引技术(如HNSW)实现快速查询,易于使用,并支持多种编程语言。与微软的Semantic Kernel集成后,增强了智能应用的构建能力,适用于语义搜索和推荐系统等场景。

.NET 原生驾驭 AI 新基建实战系列(七):Weaviate ── 语义搜索的智能引擎创新者

dotNET跨平台 dotNET跨平台 · 2025-05-14T00:00:48Z
汉斯-尤尔根·肖宁:在PostgreSQL中对向量进行索引

本文讨论了使用pgvector创建索引以提升效率。HNSW索引查询速度快但创建时间长;IVFFLAT索引创建快但查询性能差。选择合适的索引类型对性能影响显著。

汉斯-尤尔根·肖宁:在PostgreSQL中对向量进行索引

Planet PostgreSQL Planet PostgreSQL · 2025-04-15T05:00:00Z

本研究解决了HNSW算法在近似最近邻搜索中的局部最优和群体断连问题,以及在高维数据集中未能实现对数复杂度的问题。提出的双分支HNSW结构结合LID驱动的插入机制和桥接技术,有效提升了算法的准确性和速度,实验结果显示在自然语言处理任务中召回率提高了18\%,计算机视觉任务中提高了30\%,同时构建时间减少了20\%。

具有跳跃桥和基于LID优化的双分支HNSW方法

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-01-23T00:00:00Z
为什么 HNSW 不是最终的答案

本文指出HNSW算法在大规模向量搜索中内存开销大且不适合磁盘环境,而IVF结合量化技术(如RaBitQ)更高效、可扩展,能减少距离计算并降低内存需求,更适合大规模数据集,建议实践者采用IVF替代HNSW。

为什么 HNSW 不是最终的答案

高策 高策 · 2024-12-24T16:00:00Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 1tok 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator 模力方舟 Gitee AI

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码