Jedes Jahr veranstaltet Snowflake den Data Cloud Summit, um Fortschritte auf seiner Plattform zu präsentieren und Teams dabei zu helfen, ihre Datenressourcen effektiv zu nutzen. Im Jahr 2024 lag der Schwerpunkt auf einem entscheidenden Aspekt: Teams zu befähigen, robuste KI-Anwendungen mit ihren Daten zu entwickeln.
Unter der Leitung von CEO Sridhar Ramaswamy kündigte Snowflake mehrere innovative KI-Funktionen und Partnerschaften an und stellte lang erwartete Features vor, die darauf abzielen, die Datenbasis der Plattform zu verbessern. Zu den Höhepunkten gehören die allgemeine Verfügbarkeit von Iceberg Tables und ein interner Marktplatz.
Wesentliche Ankündigungen vom Snowflake Data Cloud Summit 2024:
1. Iceberg Tables und Polaris Catalog
Snowflake machte Iceberg Tables allgemein verfügbar, die eine vollständige Speicherinteroperabilität für Unternehmen bieten. Diese Tabellen funktionieren wie native Snowflake-Tabellen, speichern jedoch Metadaten im Apache Iceberg-Format innerhalb der vom Kunden bereitgestellten Speicher. Diese Innovation verbessert die Nutzbarkeit, Leistung, Governance und Zusammenarbeit mit extern gespeicherten Iceberg-Daten. Darüber hinaus erleichtert der Launch von Polaris, einem offenen Datenkatalog, die Indizierung und Organisation von Daten in offenen Tabellenformaten und unterstützt die Interoperabilität mit verschiedenen Abfrage-Engines wie Apache Flink, Apache Spark, Dremio, Python und Trino.
2. Cortex AI und Verbesserungen bei Snowflake ML
Cortex AI, Snowflakes vollständig verwalteter Service zur Entwicklung von Anwendungen für große Sprachmodelle (LLMs), erhielt bedeutende Upgrades, darunter ein AI & ML Studio mit einer No-Code-Oberfläche zur einfachen Anwendungsentwicklung. Neue Funktionen umfassen Analyst- und Suchangebote für die Entwicklung von LLM-Chatbots sowie für retrieval augmented generation (RAG)-Anwendungen. Um die Sicherheit zu gewährleisten, wird Cortex Guard verhindern, dass Chatbots schädliche Inhalte generieren, während die MLOps-Funktionen in Snowflake ML verbessert wurden.
3. Neuer Marktplatz von Snowflake Horizon
Snowflake stellte Horizon vor, das Funktionen für Compliance, Sicherheit, Datenschutz und Daten governance beinhaltet und mit einem neuen internen Marktplatz ergänzt wurde. Dieser Marktplatz ermöglicht es Benutzern, Datenprodukte für ihre Teams zu kuratieren und zu veröffentlichen, während der Zugriff auf sensible Inhalte kontrolliert wird. Er unterstützt das Teilen von KI-Modellen, Iceberg Tables und Dynamic Tables sowie KI-gestützte Objektbeschreibungen zur Verbesserung der Datensuche.
4. Snowflake Trail für Observability
Snowflake launchte Trail, ein Observability-Tool, das die Sichtbarkeit in Datenqualität, Pipelines und Anwendungen verbessert. Trail bietet Telemetriesignale für Snowpark und Snowpark Container Services, sodass Benutzer Fehler mühelos diagnostizieren und beheben können, ohne manuelle Datenübertragungen. Es nutzt OpenTelemetry-Standards und integriert sich nahtlos in Observability-Plattformen wie Datadog, Grafana, Metaplane, PagerDuty und Slack.
5. Erweiterte Datenresidenz
Snowflake kündigte eine Expansion in regulierte und souveräne Märkte an, einschließlich einer neuen EU-Only-Datenobergrenze zur Verbesserung der Datenresidenz und zur Unterstützung der Compliance der Kunden. Eine spezielle Umgebung für Kunden des Verteidigungsministeriums wird erhöhte Sicherheit und Netzwerkintegration mit dem Boundary Cloud Access Point (BCAP) bieten.
6. Partnerschaft mit Nvidia
Snowflake bildete eine Partnerschaft mit Nvidia, um die Nvidia AI Enterprise-Software zu übernehmen und NeMo Retriever-Microservices in Cortex AI zu integrieren. Diese Zusammenarbeit ermöglicht es Organisationen, benutzerdefinierte Modelle mit Geschäftsdaten zu verbinden, um genauere Antworten zu erhalten. Das offene LLM Arctic unterstützt die Nvidia TensorRT-LLM-Software und optimiert die Leistung und Zugänglichkeit durch NVIDIA NIM-Inferenz-Microservices.
Der Snowflake Data Cloud Summit findet vom 3. bis 6. Juni 2024 statt.