OpenAI, 데이터 검색 기능 강화를 위해 Rockset 인수, AI 성능 향상 목표

OpenAI는 실시간 분석 데이터베이스를 제공하는 Rockset를 인수하여 기술 스택을 강화합니다. 인수의 재정적 세부사항은 공개되지 않았지만, OpenAI는 Rockset의 “세계적 수준의 인덱싱 및 쿼리” 기능을 제품 전반에 통합하여 검색 인프라를 강화할 계획을 확인했습니다. 또한 Rockset의 전체팀이 이 전환의 일환으로 OpenAI에 합류합니다.

이번 인수는 OpenAI가 뉴욕의 Global Illumination, Inc.를 인수한 이후 1년 내에 이루어진 두 번째 주요 인수입니다. 이는 생성적 AI 시장에서의 경쟁이 심화되는 가운데 이루어진 움직임으로, 예를 들어 Anthropic은 최근에 OpenAI의 GPT-4o를 다양한 벤치마크에서 초월하는 대형 언어 모델인 Claude 3.5 Sonnet을 출시했습니다. OpenAI의 공동 창립자이자 전 수석 과학자인 Ilya Sutskever도 AI 스타트업 Safe SuperIntelligence를 시작했습니다.

Rockset는 어떻게 OpenAI를 향상시킬까요?

2016년에 설립된 Rockset는 클라우드 기반의 실시간 분석 데이터베이스를 제공하여 개발자들이 개인화 및 IT 자동화를 위한 데이터 집약적인 애플리케이션을 대규모로 구축할 수 있도록 합니다. Rockset는 Kafka, MongoDB, DynamoDB, S3 등의 플랫폼에서 지속적으로 데이터를 수집 및 인덱싱하여 실시간 정보의 가용성과 원활한 쿼리를 보장합니다. 사전 정의된 스키마 없이 반초의 SQL 쿼리를 지원하는 기능도 제공합니다.

Rockset의 핵심 기술은 Meta(구 Facebook)에서 개발한 오픈 소스 RocksDB 영속 키-값 저장소를 기반으로 합니다. 이는 온라인 거래 처리(OLTP) 데이터베이스, 데이터 레이크 및 스트리밍 플랫폼의 외부 보조 인덱스로 작동하여 실시간 분석 쿼리를 향상시키고 주요 거래 시스템의 성능을 격리합니다. 2023년 동안 Rockset은 AI 애플리케이션을 더욱 잘 지원하기 위해 자사의 서비스를 개선해왔습니다.

OpenAI의 인수로 Rockset의 고급 인덱싱 및 쿼리 기능이 OpenAI의 검색 프레임워크를 향상시킬 것입니다. 통합에 대한 구체적인 세부 사항은 아직 공개되지 않았지만, Rockset은 OpenAI의 제품이 더욱 신속하고 관련성 높은 정보를 제공할 수 있도록 할 것입니다. 이는 사용자의 질문에 정확한 데이터를 기반으로 응답할 수 있는 엔터프라이즈 버전의 GPT를 가능하게 할 것입니다.

“Rockset의 인프라는 기업들이 데이터를 실행 가능한 정보로 변환할 수 있도록 돕습니다. Rockset의 기능을 OpenAI 제품에 통합함으로써 이점을 고객에게 제공하게 되어 기쁩니다,”라고 OpenAI의 COO인 Brad Lightcap가 말했습니다.

OpenAI 모델을 활용하는 조직과 스타트업은 이미 2020년 Meta, University College London, New York University의 연구 논문에서 소개된 “검색 강화 생성”(retrieval-augmented generation) 기법을 탐색하고 있습니다. 이 접근법은 생성적 AI와 외부 지식 기반을 연결하여 특정 쿼리를 처리하는 능력을 향상시키고 잘못된 응답의 가능성을 낮춥니다—예를 들어, 직원들에게 기업 문서에서 추출한 정확한 비용 정책 정보를 제공하는 것입니다.

Rockset의 기존 고객에 대한 인수 후 영향은 아직 확실치 않습니다. 이 회사는 이전에 Klarna, Meta, Whatnot, Windward 등 여러 산업 파트너와 협력해왔습니다. 작성 시점에서 언론 문의에 대한 응답은 없었습니다.

“우리는 OpenAI에 합류하여 사용자, 기업 및 개발자가 강력한 검색 기능을 AI에 통합하여 데이터를 최대한 활용할 수 있도록 지원하게 되어 기쁩니다,”라고 Rockset의 CEO인 Venkat Venkataramani가 밝혔습니다.