2023년 벡터 데이터베이스 시장은 대형 언어 모델의 맥락과 장기 기억의 필요성이 증가함에 따라 활발히 성장했습니다. 이는 검색 보강 생성(RAG) 기법의 효율성과 정확성을 높이는 데 기여하며, AI 환각 현상을 완화하는 방향으로 발전하고 있습니다. 뉴욕에 본사를 둔 스타트업 Pinecone이 이 경쟁 시장을 선도하며 지난해 4월 1억 달러의 자금을 확보했습니다.
Pinecone은 최근 '혁신적인' 서버리스 벡터 데이터베이스 아키텍처를 공개했습니다. 이 솔루션은 기업이 보다 통찰력 있고 비용 효율적인 AI 애플리케이션을 개발할 수 있도록 지원합니다. 보도 자료에 따르면, Pinecone의 서버리스 모델은 최대 50%의 비용 절감 효과를 제공하며, 인프라 복잡성을 제거하여 기업이 우수한 생성 AI 애플리케이션을 신속하게 출시할 수 있게 합니다.
회사는 주요 혁신사항으로 다음을 강조했습니다:
- 읽기, 쓰기, 저장을 분리하여 작업 부담 비용을 절감.
- 방대한 데이터셋에서 낮은 대기 시간과 비용 효율적인 벡터 검색을 지원하는 기업 최초의 벡터 클러스터링 아키텍처.
- 맞춤형 인덱싱 및 검색 알고리즘.
- 수천 명의 사용자를 위한 온디맨드 검색을 지원하는 다중 사용자 컴퓨팅 계층.
Pinecone CEO 에도 리버티는 이 새로운 서버리스 아키텍처의 중요성을 강조하며 “이 프로젝트에 1년 반을 투자해왔고, 우리의 가장 야심찬 노력”이라고 밝혔습니다. 그는 단순히 최고의 벡터 데이터베이스를 만드는 것을 넘어, “이전에는 불가능했던 새로운 세대의 생성 AI 애플리케이션을 가능하게 하는 것이 목표”라고 설명하며, Pinecone이 고객 중심의 생성 AI 솔루션 출시를 저해해온 AI 환각 현상 해결에 중요한 역할을 할 것이라고 확신했습니다.
Notion, Blackstone, Canva, Domo, Gong과 같은 기업들이 이미 Pinecone의 서버리스 기술을 활용하고 있습니다. 리버티는 이 신제품이 수십억 개의 벡터를 인덱싱할 수 있는 강력한 인프라를 갖추고 있어, 수천에서 수십만 사용자에게 확장 가능한 RAG 및 지식 관리를 지원한다고 언급했습니다. “그들은 이전 시스템보다 10배에서 100배 낮은 비용으로 이를 간편하게 수행할 수 있습니다”라고 그는 덧붙였습니다.
Pinecone의 서버리스 솔루션 출시는 생성 AI 기술 스택의 성숙을 반영합니다. 이번 출시에서는 Anthropic, Anyscale, Cohere, Confluent, Langchain, Pulumi, Vercel과 같은 AI 분야의 다른 선도 기업과의 통합도 포함되었습니다. 리버티는 “이러한 주요 플레이어 간의 협업은 기술 스택의 발전을 의미하며, 개발자들이 원활하게 작동하는 강력한 제품을 개발할 수 있게 합니다”라고 말했습니다.