Heute kündigte Snowflake seine Investition in Metaplane an, ein in Boston ansässiges Startup, das Unternehmen dabei unterstützt, Datenqualitätsprobleme mithilfe einer KI-gestützten Plattform zu beheben. Obwohl die genaue Investitionssumme nicht bekannt gegeben wurde, betonte Snowflake, dass diese Partnerschaft die Integration zwischen den Datenobservabilitätstools von Metaplane und der Snowflake Data Cloud verbessern wird. Diese Integration ermöglicht es Snowflake-Nutzern, die für ihre nachgelagerten Projekte, einschließlich KI-Anwendungen, entscheidenden Informationen effektiver zu überwachen.
Metaplane betritt ein wettbewerbsintensives Umfeld und tritt gegen gut finanzierte Akteure wie Monte Carlo und Acceldata an. Snowflake hat bestätigt, dass Metaplane ebenfalls eine native App für seine Plattform einführen wird. Dies ist bereits die fünfte Investition von Snowflake in diesem Jahr und die zweite im Bereich Observabilität; zuvor im März unterstützte das Unternehmen Observe, ein Tool, das Telemetrie aus Unternehmensanwendungen analysiert, um relevante Einblicke für eine schnelle Problemlösung zu bieten.
Metaplane unterstützt Snowflake-Kunden dabei, die Herausforderungen bei der Datenqualität zu bewältigen. Daten sind entscheidend für moderne Geschäftsanwendungen, einschließlich auf RAG basierenden KI-Chatbots. Viele Organisationen haben jedoch Schwierigkeiten, die Datenqualität aufgrund der überwältigenden Menge an Informationen, die über isolierte Systeme, Datenbanken und Anwendungen verteilt sind, aufrechtzuerhalten. Die Verwaltung komplexer Datenpipelines lässt Teams oft mit Hunderten oder Tausenden von Datenquellen kämpfen.
Gegründet von dem MIT-Absolventen Kevin Hu, dem ehemaligen HubSpot-Ingenieur Peter Casinelli und dem ehemaligen Appcues-Entwickler Guru Mahendran, nutzt Metaplane KI über den gesamten Daten-Stack, von der ingestion bis zur Konsumierung, um diese Herausforderungen anzugehen. Die Plattform integriert sich mit Tools wie Fivetran, Snowflake, BigQuery, dbt, Airflow und Tableau. Mithilfe eines Machine-Learning-Modells analysiert sie das gesamte Datenprofil, einschließlich historischer Metadaten, Herkunft und Protokolle. Nach der Einrichtung kennzeichnet sie automatisch Datenanomalien wie Schemaänderungen, basierend auf benutzerdefinierten Überwachungsparametern.
Hu gab an, dass die Einrichtung dieser Überwachungen nur 15 Minuten in Anspruch nimmt, sodass Teams Kennzahlen zur Datenqualität wie Aktualität, Zeilenanzahl, Einmaligkeit und Nullwerte verfolgen können. Warnungen werden direkt an die relevanten Datenteams über ihre bevorzugten Kommunikationskanäle gesendet.
Dank der Investition von Snowflake wird Metaplane seine Integration mit der Snowflake Data Cloud verbessern und erweitern, um umfassende Telemetrie und Metadaten aufzunehmen. Diese Integration wird vollständige Datenpipelines abdecken und mit Anwendungsfunktionen wie Snowpark, Snowpark Container Services, Snowflake Native Apps und Streamlit interagieren.
Letztendlich wird diese Zusammenarbeit es Snowflake-Kunden ermöglichen, die Qualität ihrer Datenressourcen während des gesamten Prozesses genau zu überwachen und sie über Probleme sowie mögliche Ursachen und Lösungen zu informieren. Zwar steht der Zeitrahmen für diese Integration noch festzulegen, doch Snowflake bestätigt, dass Metaplane eine native App innerhalb der Data Cloud einführen wird. Dies erleichtert es den Nutzern, Metaplane direkt in ihrer Snowflake-Instanz bereitzustellen und zu verwalten, ohne dass eine separate Verbindung wie bei anderen Tools erforderlich ist.
„Diese Entwicklung eröffnet neue, reichhaltige Erfahrungen und ermöglicht es den Kunden, Metaplane vollständig zu nutzen, ohne ihre Daten außerhalb der sicheren Umgebung ihres Snowflake-Kontos zu bewegen oder zu kopieren“, erklärten Ashwin Kamath und Harsha Kapre aus dem Produktmanagement-Team von Snowflake.
Snowflakes Fokus auf KI
Unter der Leitung von CEO Sridhar Ramaswamy hat Snowflake KI aggressiv angenommen, um besser mit Databricks konkurrieren zu können, einem Unternehmen, das seit seiner Gründung im Bereich KI etablierte. Im vergangenen Jahr startete Snowflake während seiner Snowday-Veranstaltung Cortex, einen vollständig verwalteten Service zum Erstellen von generativen KI-Anwendungen mit Daten aus der Snowflake Data Cloud.
In den folgenden Monaten ging das Unternehmen Partnerschaften mit mehreren Anbietern von Open-Source-KI ein, darunter Mistral und Reka, um ihre Modelle auf Cortex anzubieten und Teams die Entwicklung von Anwendungen für verschiedene Anwendungsfälle zu ermöglichen. Snowflake trainierte außerdem Arctic, sein internes großes Sprachmodell, das für komplexe Unternehmensaufgaben wie SQL und Codeerstellung optimiert ist, und führte ein Co-Pilot-Erlebnis ein, um die Datenexploration zu erleichtern.
Vor der Investition in Metaplane hatte Snowflake bereits vier andere Unternehmen – Coda, Coalesce, Observe und Landing AI – unterstützt, um seine Daten- und KI-Initiativen zu verstärken.