全球 GPU加速向量数据库诞生 这家中国公司联手英伟达推出

图灵汇官网

标题:全球GPU加速向量数据库新纪元:中国公司携手NVIDIA引领创新

在GTC 2024盛会上,NVIDIA宣布全球GPU加速向量数据库的重大突破——中国公司Zilliz与NVIDIA共同发布全新Milvus 2.4版本。

向量数据库作为专门处理向量数据的数据库系统,广泛应用于机器学习与人工智能领域,如推荐系统、图像识别与自然语言处理等。GPU凭借其强大的并行处理能力,成为加速复杂计算任务的理想选择,尤其在处理大量数据时表现出色。

作为国内新兴力量,Zilliz,即上海徐毓智能科技有限公司,自2016年成立以来,总部设在上海,致力于向量数据库系统的研发,特别是针对AI生产的向量数据库系统。其产品和技术已被全球逾千家企业采纳。

Milvus是Zilliz的核心产品,提供简便的接口,使开发者和数据科学家能够迅速部署并扩展向量搜索服务。该产品以其卓越的性能与可扩展性著称,能够高效处理海量向量数据,实现毫秒级查询响应,并支持多种编程语言的API,包括Python、Java、Go和C++。

Milvus 2.4版本通过集成NVIDIA GPU的高效并行处理能力和RAPIDS cuVS库中最新CAGRA(CUDA-Accelerated Graph Index for Vector Retrieval)技术,显著提升了向量搜索性能。对比基于CPU的索引技术,该版本性能提升可达50倍,为实时决策与复杂数据分析提供了强大支持。

向量数据库:AI大模型的基石

向量数据库以其快速检索、混合存储与向量嵌入的能力,有效解决了AI大模型面临的知识时效性低、输入限制与回答准确性不足的问题,成为构建与应用AI大模型不可或缺的软件基础。

实际应用表明,向量数据库在AI大模型的训练与推理中展现出显著的效能提升。例如,ChatGPT插件集成向量数据库,不仅扩大了与用户的交互信息范围,同时也保障了用户隐私。Qdrant与Pienso的合作,展示了在开源AI大模型基础上开发私有大模型的可能性。

广发证券指出,随着Transformer模型的兴起,AI模型训练所需数据量增大,数据类型增多,对向量数据库的需求随之增长。随着Microsoft 365 Copilot及ChatGPT企业版等标志性产品的推出,AI应用正逐渐普及。预计生成式AI大模型的开发与使用将推动向量数据库市场的快速增长。

当前,向量数据库行业仍处于市场培育阶段,Zilliz、Pinecone与腾讯云等公司提供了免费试用版本,吸引用户体验。华为云与星环科技等企业凭借在非结构化数据处理方面的技术积累,亦相继推出向量数据库产品。

作为国内较早涉足向量数据库领域的公司之一,星环科技与英特尔合作,共同发布向量数据库解决方案,进一步推动了该领域的技术创新与发展。

本文来源: 快科技 文章作者: 张珂珂