매년 Snowflake는 데이터 클라우드 서밋을 개최하여 플랫폼의 발전을 선보이고, 팀들이 데이터 자산을 효과적으로 활용할 수 있도록 지원합니다. 2024년 서밋의 주요 주제는 팀이 데이터를 활용해 강력한 AI 애플리케이션을 구축하도록 힘을 실어주는 것이었습니다.
CEO Sridhar Ramaswamy가 이끄는 Snowflake는 혁신적인 AI 기능 및 파트너십을 발표하고, 플랫폼의 데이터 기반을 강화하기 위한 오랫동안 기다려온 기능들을 출시했습니다. 주요 내용은 Iceberg Tables와 내부 마켓플레이스의 일반 제공입니다.
2024 Snowflake 데이터 클라우드 서밋 주요 발표 내용:
1. Iceberg Tables 및 Polaris 카탈로그
Snowflake는 Iceberg Tables를 일반 제공하여 기업의 전체 저장소 상호 운용성을 제공합니다. 이 테이블은 기본 Snowflake 테이블처럼 작동하지만 고객 제공 저장소 내에서 메타데이터를 Apache Iceberg 형식으로 저장합니다. 이 혁신은 외부 저장된 Iceberg 데이터에 대한 Snowflake의 사용성, 성능, 관리 및 협업을 향상시킵니다. 또한, 개방형 데이터 카탈로그인 Polaris의 출시는 개방형 테이블 형식의 데이터 인덱싱 및 조직을 지원하며, Apache Flink, Apache Spark, Dremio, Python, Trino를 포함한 다양한 쿼리 엔진과의 상호 운용성을 제공합니다.
2. Cortex AI 및 Snowflake ML 개선
Snowflake의 완전 관리형 대규모 언어 모델(LLM) 애플리케이션 구축 서비스인 Cortex AI는 코드 없는 인터페이스를 갖춘 AI 및 ML 스튜디오 등 크게 업그레이드되었습니다. 새로운 기능에는 LLM 챗봇 개발 및 검색 보강 생성(RAG) 애플리케이션을 위한 분석 및 검색 서비스가 포함됩니다. 안전성을 보장하기 위해, Cortex Guard는 챗봇이 유해한 콘텐츠를 생성하지 않도록 방지하며, Snowflake ML에서 MLOps 기능도 강화되었습니다.
3. Snowflake Horizon의 새로운 마켓플레이스
Snowflake는 컴플라이언스, 보안, 개인 정보 보호 및 데이터 거버넌스 기능을 포함한 Horizon을 소개하며, 새로운 내부 마켓플레이스를 추가했습니다. 이 마켓플레이스는 사용자가 팀에 맞춤화된 데이터 제품을 큐레이션하고 게시하며, 민감한 콘텐츠에 대한 접근을 제어할 수 있게 합니다. AI 모델, Iceberg Tables 및 동적 테이블을 공유할 수 있으며, 데이터 발견을 개선하기 위한 AI 기반 객체 설명도 지원합니다.
4. Snowflake Trail을 통한 관찰성 향상
Snowflake는 데이터 품질, 파이프라인 및 애플리케이션에 대한 가시성을 높이는 관찰 도구인 Trail을 출시했습니다. Trail은 Snowpark 및 Snowpark Container Services를 위한 텔레메트리 신호를 제공하여 사용자가 수동 데이터 전송 없이 오류를 진단하고 디버깅할 수 있도록 돕습니다. OpenTelemetry 표준을 활용하여 Datadog, Grafana, Metaplane, PagerDuty, Slack과 같은 관찰 플랫폼과 원활하게 통합됩니다.
5. 강화된 데이터 거주지
Snowflake는 규제 및 주권 시장으로의 확장을 발표하며, 데이터 거주지를 향상시켜 고객이 규정을 준수할 수 있도록 지원하는 새로운 EU 전용 데이터 경계를 소개했습니다. 국방부 고객을 위한 전용 환경은 보안과 네트워킹 통합을 더욱 강화합니다.
6. Nvidia와의 파트너십
Snowflake는 Nvidia와 파트너십을 체결하여 Nvidia AI Enterprise 소프트웨어를 도입하고 Cortex AI에 NeMo Retriever 마이크로서비스를 통합했습니다. 이 협업을 통해 조직은 비즈니스 데이터와 맞춤형 모델을 연결하여 보다 정확한 응답을 얻을 수 있습니다. 오픈 LLM Arctic는 Nvidia TensorRT-LLM 소프트웨어를 지원하여 성능과 접근성을 최적화합니다.
2024 Snowflake 데이터 클라우드 서밋은 6월 3일부터 6일까지 진행됩니다.