Milvus AI 벡터 데이터베이스를 만든 Zilliz가 Vector Lakebase를 출시했습니다. 클라우드 네이티브 솔루션은 외부 데이터 레이크 연결, 배치 분석 및 대화형 데이터 검색을 통해 실시간 벡터 검색을 강화합니다.
Milvus는 Zilliz의 핵심 제품으로 LLM 및 AI 에이전트 RAG 워크플로우를 위한 벡터 임베딩 스토리지를 지원합니다. 오픈 소스 데이터베이스는 44,000개 이상의 GitHub 스타와 1억 개 이상의 Docker 풀을 통해 1,000억 규모의 벡터 검색을 지원합니다. MiniMax, Salesforce 및 Read AI를 포함하여 10,000개 이상의 글로벌 기업 및 AI 스타트업에 서비스를 제공합니다.
Zilliz CEO Charles Xie는 Milvus와 Zilliz Cloud 전반에 걸쳐 지속적인 속도와 비용 효율성 업그레이드를 통해 생산 벡터 검색이 회사의 핵심 역량으로 남아 있다고 말합니다. Vector Lakebase는 데이터 복제나 마이그레이션 없이 생산 쿼리, 데이터 탐색 및 페타바이트 규모 모델 교육을 위한 공유 벡터 데이터를 가능하게 하는 통합 데이터 계층을 제공하는 차세대 기술 도약을 나타냅니다.
S3 호환 통합 스토리지를 기반으로 구축된 Vector Lakebase는 개방형 Vortex 엔진을 활용합니다. Zilliz 제품 담당 부사장이자 Milvus 핵심 설계자인 Robert Guo는 이 제품이 계층형 서비스 및 주문형 컴퓨팅 리소스를 통해 실시간 에이전트 메모리 처리 및 오프라인 의미 중복 제거를 포함하여 분리된 워크로드를 통합한다고 설명합니다.
이전에 SpiralDB였던 Linux Foundation 프로젝트인 Vortex는 AI 및 분석을 위한 고성능 컬럼 형식입니다. Parquet 및 Lance에 비해 우수하거나 동등한 압축으로 훨씬 더 빠른 무작위 액세스, 스캐닝 및 쓰기 성능을 제공합니다.
현대 AI는 반복적인 서비스 제공-학습-개선 주기로 작동합니다. LLM 및 AI 에이전트는 운영 피드백 데이터를 생성하여 배치 분석, 교육 데이터 세트 개선 및 에이전트 행동 최적화를 지원합니다. AI 팀은 서비스 품질 문제를 진단하고, 대규모 데이터 중복 제거 및 클러스터링을 실행하고, 새로 크롤링된 데이터 세트에서 고가치 교육 데이터를 식별하기 위해 원시 및 피드백 데이터를 심층적으로 탐색해야 합니다.
기존 아키텍처는 벡터 데이터베이스 생산 데이터와 분석 피드백 데이터를 분리합니다. Vector Lakebase는 이러한 워크플로우를 무복사 시맨틱 데이터 플레인으로 통합하여 5가지 핵심 기능을 통해 실시간 검색, 대화형 검색 및 배치 분석을 동시에 지원합니다.
계층형 서비스 솔루션: 대규모 데이터 세트에 대한 고성능, 운영 효율성 및 탄력적인 확장의 균형을 유지하는 다중 계층 실시간 워크로드 아키텍처입니다.
주문형 검색: 리소스 활용을 최적화하기 위한 데이터 탐색 및 일괄 처리를 포함하여 우선순위가 낮고 대기 시간을 허용하는 워크로드를 위한 유연한 컴퓨팅입니다.
외부 데이터 레이크 검색: 기존 고객 데이터 레이크에 고급 인덱싱 및 대규모 벡터 검색 기능을 제공합니다.
전체 스펙트럼 검색: 포괄적인 다중 모드 분석을 위한 하이브리드 검색, 필터링 및 순위 재지정 기능을 통해 벡터, 텍스트, JSON 및 지리공간 쿼리를 지원합니다.
통합 레이크 네이티브 스토리지: 유연한 형식 지정과 강력한 데이터 모델링을 통해 Vortex 기반 스토리지에 제공 및 분석 워크로드를 통합합니다.
성능 최적화, 용량 최적화, 계층형 스토리지 등 3계층 서비스 시스템은 맞춤형 인덱싱 및 데이터 배치 전략을 채택하여 다양한 기업 시나리오에 대해 유연한 성능-비용 절충안을 제공합니다.
Vector Lakebase는 Zilliz Cloud에서만 사용할 수 있습니다(온프레미스 배포 없음). 외부 컬렉션 기능은 고객 데이터 레이크와의 무복제 논리적 매핑을 구축하여 고성능 인덱싱 및 전체 스펙트럼 검색을 지원합니다.
증분 동기화 및 주문형 데이터 새로 고침 기능을 통해 Lance, Iceberg, Parquet 및 Vortex를 포함한 주류 테이블 및 파일 형식을 지원합니다.
이제 공개 미리 보기로 제공되는 Vector Lakebase는 AWS, Google Cloud 및 Azure의 30개 이상의 클라우드 지역에서 서버리스, 전용 및 BYOC 배포를 지원합니다. 신규 업무용 이메일 사용자는 공식 웹사이트에서 $100 Zilliz Cloud 크레딧을 요청할 수 있습니다.
베이징 Qianxing Jietong Technology Co., Ltd.
양샌디/글로벌 전략 이사
WhatsApp/위챗: +86 13426366826
이메일: yangyd@qianxingdata.com
웹사이트: www.qianxingdata.com/www.storagesserver.com
사업 초점:
ICT 제품 유통/시스템 통합 및 서비스/인프라 솔루션
20년 이상의 IT 유통 경험을 바탕으로 당사는 선도적인 글로벌 브랜드와 협력하여 신뢰할 수 있는 제품과 전문 서비스를 제공합니다.
“기술을 활용한 지능형 세상 구축” 신뢰할 수 있는 ICT 제품 서비스 제공업체!