Zilliz MemSearch Milvus 混合检索与向量数据库驱动

Zilliz MemSearch Milvus 混合检索与向量数据库驱动

@zilliztech/memsearch·v1.2.0·storage

为超大规模十亿级向量检索打造的工业级 Milvus / Zilliz Cloud 连接驱动。支持标量过滤与向量相似混合查询、分布式向量索引分区管理与极低延迟流式写入。

Milvus · Zilliz · 海量向量检索 · 分布式存储

GitHubNPM
快速安装与集成
bash
manager:
$ pnpm add @zilliztech/memsearch

架构解析

「Zilliz MemSearch」为企业级智能体提供无限扩张的向量底座。当知识库与记忆规模从万级飙升至千万乃至十亿级别时,本地轻量向量库会迅速面临内存耗尽(OOM)、索引构建超时与查询延迟失控等严峻挑战。 本驱动深度整合了全球领先的开源分布式向量数据库 Milvus 及 Zilliz Cloud 托管云服务。支持在单一查询中将“强类型标量过滤”(如用户租户、创建日期、组织权限)与“高维向量语义相似度”深度融合,在毫秒级内从数十亿级数据海洋中精准打捞最相关的记忆碎片,是构建超大规模企业级 RAG 系统的黄金选择。

核心特性

01

十亿级向量平滑扩展:依托分布式 Milvus 架构,向量容量与查询 QPS 线性横向扩展

02

复合标量过滤与向量融合:一次检索同时完成权限 ACL、日期过滤与语义相似度计算

03

支持硬件 GPU 检索加速:原生适配 NVIDIA GPU 向量索引引擎,搜索耗时缩减至亚毫秒

04

动态集合分区(Partitions):支持物理隔离不同部门或客户的向量索引,安全合规

核心机制

01

流式切片与向量生成

批量处理输入文本并生成高维嵌入,附加详尽的租户与元数据标签。

02

分区异步批量插入

通过 gRPC 长连接向目标 Milvus 集合分区执行高吞吐异步写入。

03

标量与向量复合检索

下发带有复杂布尔表达式(如 `tenant_id == 'corp' && score > 0.8`)的混合查询。

04

重排与多租户隔离交付

执行第二阶段精准重排,严格按安全权限边界向智能体交付相关切片。

配置参数参考 (YAML / JSON)

参数名类型默认值说明
milvusEndpointstringhttps://in01-xyz.serverless.gcp-us-west1.cloud.zilliz.com连接的 Milvus 或 Zilliz Cloud 集群服务地址
collectionNamestringdsh_agent_memories存放向量与元数据的默认集合名称
metricTypestringCOSINE向量距离相似度计算方式 (COSINE / L2 / IP)