Cerebras Systems und Core42 haben die zweite Phase ihres bahnbrechenden Projekts gestartet: den Aufbau der weltweit größten vernetzten AI-Supercomputer, bekannt als Condor Galaxy 2. Diese Supercomputer wurden entwickelt, um generative AI zu beschleunigen und erreichen in Zusammenarbeit mit Core42, einer Tochtergesellschaft der in den VAE ansässigen Technologieholding G42, eine Rechenleistung von bis zu 36 exaFLOPs.
Die Partner haben den Beginn dieser ehrgeizigen Phase bekannt gegeben, die aus neun vernetzten Supercomputern besteht, die gemeinsam eine Rechenkapazität von 36 exaFLOPs anstreben. Auf den erfolgreichen Abschluss der Condor Galaxy 1 aufbauend, wird Condor Galaxy 2 (CG-2) voraussichtlich vier exaFLOPs und 54 Millionen AI-optimierte Rechenkernen liefern. Nach Fertigstellung wird das Netzwerk insgesamt acht exaFLOPs und 108 Millionen Kerne umfassen, was das Engagement von Cerebras und Core42 zur Schaffung eines neuen Standards im Bereich AI-Supercomputing unter Beweis stellt.
Cerebras verfolgt einen einzigartigen Ansatz, indem es komplette Siliziumwafer – vergleichbar mit der Größe von Pizzen – herstellt, die mit hunderten von Chips bestückt sind. Diese Methode ermöglicht die Realisierung von beeindruckenden 54 Millionen Kernen innerhalb eines einzelnen Supercomputers.
Talal Alkaissi, Chief Product and Global Partnerships Officer bei Core42, erklärte: „Unsere Partnerschaft mit Cerebras treibt uns in Richtung unseres gemeinsamen Ziels, die größten und schnellsten AI-Supercomputer zu bauen. Mit umfangreichen Datensätzen in den Bereichen Gesundheitswesen, Energie und Klimaforschung erweitern wir die Grenzen der aktuellen AI-Kapazitäten und ermöglichen fortschrittliche Forschung in verschiedenen Sektoren.“
Diese Partnerschaft adressiert drei entscheidende Elemente, die für das Training großer AI-Modelle notwendig sind: umfangreiche Rechenleistung, vielfältige Datensätze und spezialisierte AI-Expertise. Gemeinsam demokratisieren sie den Zugang zu erstklassigem AI-Computing und ermöglichen es Nutzern, wegweisende Grundmodelle zu entwickeln.
Andrew Feldman, CEO von Cerebras, hob den Erfolg der Partnerschaft hervor und stellte fest, dass die Fortschritte zu einer Verdopplung der Rechenkapazität von Condor Galaxy 1 und einer Verbesserung der Trainingsleistung um 50 % dank Software-Updates geführt haben.
„Wir freuen uns, die Fortsetzung dieser außergewöhnlichen Partnerschaft bekannt zu geben“, sagte Feldman. „Nachdem wir neun Supercomputer gestartet und die zweite Phase initiiert haben, trainieren wir Modelle, die das gesamte Feld vorantreiben, einschließlich der Entwicklung eines generativen Werbemodells für 400 Millionen arabische Sprecher.“
Andrew Jackson, Chief AI Officer von Core42, bemerkte die gesteigerte Effizienz und Innovation, die durch die Zusammenarbeit mit Cerebras' CS-2-Systemen möglich wurde. Die Anwendungen des Condor Galaxy-Netzwerks erstrecken sich über lebenswichtige Sektoren wie Gesundheitswesen, Energie, Klimawandel und AI-Forschung. Zu den bemerkenswerten Entwicklungen zählen Med42, ein generativer AI- medizinischer Assistent, und Jais 30B, ein führendes Arabisch-Sprachmodell, die beide den signifikanten Fortschritt, der mit CG-1 erzielt wurde, demonstrieren.
Obwohl Cerebras noch nicht auf der Liste der Top 500 Supercomputer erscheint, die einen Standard verwendet, der nicht für AI optimiert ist, betonte Feldman, dass ihre Maschinen zu den größten der Welt zählen. „In Bezug auf flops gehören wir zu den Größten, und während wir diese Systeme vernetzen, wächst unsere Kapazität weiter“, erklärte Feldman. „Wir sind gespannt auf die innovativen Möglichkeiten, die diese Maschinen eröffnen.“
Das Unternehmen trainiert derzeit AI-Modelle, die erhebliche Aufmerksamkeit auf sich gezogen haben, darunter ein Modell mit über einer Milliarde Downloads auf Hugging Face und Anwendungen in der medizinischen Assistenz sowie in der seismischen Verarbeitung an einer saudischen Universität. Zudem wies Feldman darauf hin, dass ihre Errungenschaften nicht nur Rechenleistung umfassen; sie haben bemerkenswerte Geschwindigkeiten gezeigt und behauptet, dass ihre Systeme in bestimmten Tests 130-mal schneller als Nvidia-GPUs arbeiten.
Core42 wird 2024 sieben weitere Supercomputer – CG-3 bis CG-9 – einführen und trägt somit zu einer erwarteten Gesamtrechenleistung von 36 exaFLOPs bei. Dieses umfangreiche Netzwerk, bestehend aus 576 Cerebras CS-2-Systemen und über 654.000 AMD CPU-Kernen, steht bereit, um die globale AI-Forschung und -Entwicklung zu transformieren.
„Mit CG-1 abgeschlossen, erleben wir greifbare Auswirkungen unserer Partnerschaft“, bestätigte Feldman. „Gemeinsam mit Core42 gestalten wir die Landschaft des AI-Computings neu und treiben unsere Fähigkeiten im Training führender Modelle rapide voran.“
Diese Initiative stellt die erste Partnerschaft dar, in der Cerebras nicht nur einen speziellen AI-Supercomputer konstruiert, sondern auch dessen Betrieb und Management übernimmt. Die Condor Galaxy ist darauf ausgelegt, Core42 und seinen Cloud-Kunden die Entwicklung robuster, bahnbrechender Modelle zu ermöglichen und das Tempo der Innovation zu beschleunigen.
Die Zusammenarbeit zwischen Cerebras und Core42 hat bedeutende Fortschritte bei AI-Anwendungen im Gesundheitswesen mit Med42 erzielt und generative Modelle für über 400 Millionen arabische Sprecher mit Jais 30B zugänglich gemacht. Die pionierhaften Entwicklungen bei CG-1 umfassten zudem innovative Forschungen zum Klimawandel und Fortschritte im Bereich High-Performance-Computing.
Die Pläne für CG-3 bis CG-9 schreiten voran, mit einer erwarteten Gesamtrechenleistung von 36 exaFLOPs nach Abschluss. Der Zugang zu CG-1 ist bereits jetzt verfügbar. Feldman sprach auch die Exportbestimmungen an und betonte die Notwendigkeit, mit dem US-Handelsministerium für den Versand von Ausrüstung in den Nahen Osten zusammenzuarbeiten, und stellte fest, dass das Unternehmen derzeit nicht nach China exportiert.