싱글스토어 CEO, 목적 기반 벡터 데이터베이스의 제한된 미래 예고

싱글스토어, 생성 AI 워크로드를 위한 데이터베이스 기능 강화

싱글스토어가 오늘 새로운 릴리스를 발표하며 생성 AI, 트랜잭션 및 분석 워크로드를 위한 데이터베이스 플랫폼의 기능을 크게 향상시켰습니다. 업데이트된 싱글스토어 프로 맥스 데이터베이스, 즉 싱글스토어 8.5는 고급 인덱스 벡터 검색 기능을 도입하여 조직이 생성 AI 애플리케이션과 검색 증강 생성(RAG) 사용 사례를 효과적으로 구축하고 지원할 수 있도록 합니다.

벡터 기능의 역사적 배경

이번 인덱스 벡터 검색 기능 향상은 싱글스토어 데이터베이스에서 벡터 기능을 처음 도입한 것이 아닙니다. 이 기술은 2017년, 회사가 MemSQL로 알려졌던 시절부터 포함되어 있었습니다. 2020년에 리브랜딩한 싱글스토어는 이후 온라인 분석 처리(OLAP)와 온라인 트랜잭션 처리(OLTP)를 통합하여 단일 데이터베이스 플랫폼으로 발전했습니다.

생성 AI 워크로드의 증가와 함께 벡터 데이터베이스 기능에 대한 수요가 급증하고 있습니다. Pinecone과 같은 네이티브 플랫폼이 등장했으며, DataStax, Neo4j, MongoDB, PostgreSQL, Oracle과 같은 기존 데이터베이스 공급업체들도 벡터 기능을 통합하기 시작했습니다. 싱글스토어 CEO인 Raj Verma는 단순히 전용 벡터 데이터베이스를 제공하는 것으로는 조직의 요구를 충족할 수 없다고 강조하며 기존 데이터베이스 기능의 통합 중요성을 강조했습니다.

Verma는 "우리는 벡터를 포함하는 생성 AI 스택을 제공하여 생성 AI 애플리케이션을 구축하고 모델링할 수 있게 합니다. 벡터 전용 데이터베이스는 단순한 기능일 뿐 장기적인 해결책이 아니며, AI 스택에 불필요한 복잡성을 추가합니다."라고 말했습니다.

다양한 데이터 유형에 대한 하이브리드 검색

싱글스토어는 하이브리드 트랜잭션 및 분석 처리(HTAP) 데이터베이스로서 다양한 데이터 유형을 저장, 처리 및 쿼리할 수 있는 이중 기능을 제공합니다. 프로 맥스 릴리스는 구조적 및 비구조적 데이터 모두를 위한 벡터 검색 기능을 향상시킵니다. 싱글스토어는 2017년부터 벡터 검색을 지원해왔지만, 최신 버전은 더 빠르고 정밀한 검색 결과를 위한 제품 양자화(PQ), 계층적 내비게이션 스몰 월드(HNSW), 근사 최근접 이웃(ANN) 인덱싱 등의 고급 알고리즘을 포함합니다.

향상된 벡터 검색 기능은 조직이 싱글스토어에 저장된 모든 데이터를 활용하여 효과적인 검색과 생성 AI 애플리케이션 개발을 가능하게 합니다. Verma는 벡터 중심 데이터베이스가 생성 AI로의 진입을 간소화할 수 있지만, 조직의 전체 데이터 환경의 복잡성을 간과하는 경우가 빈번하다고 강조했습니다.

"단순히 벡터를 추가한다고 해서 조직의 데이터 상태 복잡성이 감춰지지는 않습니다."라고 그는 주장했습니다.

Verma는 모든 필요한 데이터 유형을 포함하는 간소화된 데이터 생태계 내에서 포괄적인 벡터 데이터베이스 역할을 하려는 싱글스토어의 비전을 설명했습니다. "단순화와 데이터 통합을 통해서만 조직은 번창하는 생성 AI 데이터 환경에 필요한 속도와 효율성을 달성할 수 있습니다."라고 그는 말했습니다.

아파치 아이스버그를 통한 향상된 변화 데이터 캡처

오늘날의 데이터 환경에서는 조직이 모든 데이터를 단일 데이터베이스에 중앙 집중화하는 경우가 드뭅니다. 대신 데이터 파이프라인은 여러 저장소와 애플리케이션에 걸쳐 분산되는 경우가 흔합니다. 데이터베이스 내에서 외부 소스의 데이터를 수집하는 일반적인 방법은 변화 데이터 캡처(CDC)를 사용하는 것입니다.

싱글스토어 프로 맥스는 MySQL, MongoDB, 아파치 아이스버그 기반 데이터 레이크의 데이터를 중앙 집중식 데이터베이스로 통합할 수 있는 개선된 CDC 기능을 제공합니다. 아파치 아이스버그는 IBM과 Snowflake와 같은 주요 벤더들 사이에서 인기가 있는 오픈 소스 데이터 레이크 테이블 형식으로, 이에 대한 지원은 매우 중요합니다. Verma는 싱글스토어가 IBM과 Snowflake와 지속적으로 파트너십을 맺고 있으며, 아이스버그 지원이 통합 문제를 크게 완화할 것이라고 언급했습니다.

"CDC 기능은 고객들이 다양한 출처에서 데이터를 싱글스토어로 집계할 수 있게 해주며, 이는 전체 검색 증강 생성 워크플로우에 필수적입니다."라고 Verma는 말했습니다.