Zilliz Cloud 再发新版本!
本次新版本的次要内容包含:大幅晋升的向量搜寻性能(性能晋升 10 倍以上)、企业级数据安全和无缝数据集成。新版本公布后,用户无需自定义代码,便可疾速顺畅地实现非结构化数据处理和索引。此外,Zilliz Cloud 将无效帮忙用户节省成本,简化领取和洽购流程。
以下为本次公布的新个性一览:
- Cardinal 搜索引擎
- 正式上线了与 Milvus 2.3 雷同的性能
- 基于角色的访问控制和权限治理(RBAC)
- Databricks Connector
- 反对 Google Cloud Marketplace 订阅
- 其余数据安全方面更新
01. Cardinal 搜索引擎:搜寻速度晋升 10 倍,数据容量晋升 50%
Cardinal 是用古代 C++ 语言和实用的近似最近邻搜寻(ANNS)算法构建的多线程、高效率向量搜索引擎。它同时可能解决暴搜申请和 ANNS 索引批改申请;解决各种数据格式,包含 FP32、FP16 和 BF16。Cardinal 搜索引擎强调速度和效率,可能在无限的资源内解决更多用户申请。
在推动 Cardinal 引擎翻新的过程中,咱们始终保持推动异构计算的准则。团队对算法进行调优,采纳了针对计算密集型操作优化的 low-level 内核,并确保反对多种硬件,包含 x86 和 ARM。Cardinal 利用 x86 的 AVX-512 扩大和 ARM 的 NEON 及 SVE 指令集等尖端技术,提供针对高效计算优化的代码。这些改良保障了 Cardinal 可能时刻全力运行,是行业内最快的向量搜索引擎。
有了 Cardinal 搜索引擎的加持,Zilliz Cloud 实现了 10 倍性能晋升(与开源 Milvus 相比),可能实现超快的查问速度外加高召回率。无论是解决大型数据集还是对疾速响应有高要求,Cardinal 都能为此保驾护航,晋升用户体验,晋升 AI 利用的竞争力。
“Zilliz Cloud 的性能给咱们留下了粗浅的印象,它在数据负载大的状况下尤为杰出!”Picdmo 的 CEO 兼创始人 Alex Alexander 称誉道,“采纳 Cardinal 搜索引擎后,Zilliz Cloud 性能比上一个版本晋升了 2 倍,搜寻查问的速度和效率更惊人!此外,Zilliz Cloud 还提供加强数据安全保障。得益于 Zilliz Cloud,咱们搭建的以图搜图利用性能变得更弱小了。”
02. 开箱即用的 Milvus 2.3:生产就绪的高级向量搜寻性能
通过为期 4 个月的 Beta 阶段后,Zilliz Cloud 正式上线了和 Milvus 2.3 雷同的性能。目前,Zilliz Cloud 用户能够在生产环境中应用全新的高级向量搜寻和数据管理性能。新版本性能包含:
- Cosine 类似度类型:无需向量归一化,简化数据搜寻流程。
- Upsert 数据:晋升更新和删除数据的治理流程效率,实用于频繁更新数据且谋求数据一致性和原子性的场景。
- 范畴搜寻(Range Search): 通过限度查问向量与其余向量之间的间隔,范畴搜寻可能实现对搜寻后果的无效细化,实用于搭建举荐引擎的场景。
- 反对 Parquet 文件:晋升数据处理能力,反对 Parquet 文件,通过其高效的列式存储格局,提供更好的查问性能,实用于具备简单数据集的场景。
- 反对 Array 数据类型:反对在搜寻过程中基于多个属性进行准确的元数据过滤。在电商畛域中,该性能反对依据不同产品标签进行搜寻,为用户返回相干的搜寻后果。
03. RBAC: 对数据拜访进行细粒度的管制
Zilliz Cloud 的 RBAC(角色权限访问控制)性能提供了一种结构化和可扩大的办法来治理数据拜访权限,保障数据安全。在过来的几个月中,咱们新增了多项相干性能,进一步打磨了 Zilliz Cloud 的 RBAC 零碎,使其比市面上所有向量数据库都更加粗疏和全面。
RBAC 分为两层:管制层和数据层。在管制层,角色治理集群、我的项目、用户和计费等资源的操作权限。Zilliz Cloud 在管制层设有 4 种角色,其中组织管理员、我的项目所有者和我的项目成员是 3 种罕用角色:
- 组织管理员:领有组织管理权限,包含治理组织设置、领取形式、账单、组织 API 密钥等。此外组织管理员还具备所有组织下资源(如:我的项目)的管理权限。
- 我的项目管理员:领有项目管理权限,包含我的项目设置、我的项目内所有集群、我的项目 API 密钥等资源。
- 我的项目成员:领有我的项目读写权限,包含读写我的项目下所有集群、查看我的项目下所有集群详情、治理 Collection 和索引等。
在数据层面,角色权限是指在集群中增加、删除、批改和拜访数据的能力。Zilliz Cloud 在数据层级提供了 3 种内置角色:管理员(Admin)、只读(Read-Only)和读写(Read-Write),不同角色对集群数据的读写和管理权限不同。此外,Zilliz Cloud 容许用户创立自定义角色,针对特定 Collection、Partition 或操作调配相应权限,确保数据安全。
通过 RBAC 性能,企业用户能够实现对数据拜访进行细粒度的管制,进步数据安全性和合规性,同时促成团队间的合作,并确保用户依据其角色和职责领有对应的拜访权限和级别。
04. Databricks Connector:简化 AI 利用的开发过程
Zilliz 始终致力于为用户提供开箱即用的数据集成解决方案,近期,咱们便通过引入 Confluent 和 Airbyte Connector,扩大了 Zilliz Cloud 数据对接和转换能力。本次版本更新,Zilliz Cloud 再次放大招,集成 Databricks Connector,为 Zilliz 向非结构化数据平台的倒退打下了松软的根底。
具体来看,Databricks Connector 提供了一套简略的数据迁徙和转换解决方案,简化了 AI 利用的开发过程。无论是你的团队在钻研 ML 并心愿更新 Embedding 模型,还是作为个人用户心愿间接将 data frame 记录从 Spark 上传至 Milvus,灵便的 Databricks Connector 都能一一满足。
此外,通过 Databricks Connector,用户就能够通过两种形式将数据导入到 Zilliz Cloud:流式解决(实用于实时更新)或批处理(实用于大型数据集)。拜访链接(https://zilliz.com/databricks_zilliz_demos)理解更多细节。
05. 反对 GCP Marketplace 订阅: 简化领取和洽购流程
Zilliz Cloud 现已集成 GCP Marketplace,为开发者提供无缝的体验。用户能够间接用 Google Cloud 账号在 Marketplace 中购买 Zilliz Cloud,并依据本人的我的项目停顿状况,按需扩大本人的集群并领取费用。此外,大家能够在 Zilliz Cloud 的操作界面中设置 GCP Marketplace 作为领取形式,或间接通过 GCP Marketplace 订阅。
06. 其余数据安全方面更新
Zilliz Cloud 曾经通过了 SOC 2 Type II 和 ISO 27001 数据合规认证。咱们始终致力于维持最高数据安全规范,为用户在 Zilliz Cloud 的体验保驾护航。
立刻注册 Zilliz Cloud(https://cloud.zilliz.com.cn/signup)即可享受 30 天收费试用。如果在应用过程中遇到任何问题,欢送通过 Zilliz Cloud 反对核心(https://support.zilliz.com.cn/hc/zh-cn)分割咱们。
本文由 mdnice 多平台公布