Cerebras Systems y Core42 han lanzado la fase dos de su innovador proyecto, construyendo los superordenadores de IA interconectados más grandes del mundo, conocidos como Condor Galaxy 2.
Diseñados para acelerar la IA generativa, los superordenadores de Cerebras tienen como objetivo alcanzar hasta 36 exaFLOPs, en colaboración con Core42, una subsidiaria del grupo tecnológico G42 con sede en los Emiratos Árabes Unidos. Los socios anunciaron el inicio de esta ambiciosa segunda fase, que consistirá en nueve superordenadores interconectados que en conjunto buscarán una capacidad de computación de 36 exaFLOPs.
Tras la exitosa finalización de Condor Galaxy 1, se espera que Condor Galaxy 2 (CG-2) entregue cuatro exaFLOPs y 54 millones de núcleos de computación optimizados para IA. Al finalizar, la red totalizará ocho exaFLOPs y 108 millones de núcleos, demostrando el compromiso de Cerebras y Core42 por establecer un nuevo estándar en la supercomputación de IA.
Cerebras utiliza un enfoque único al fabricar obleas de silicio enteras, comparables en tamaño a pizzas, repletas de cientos de chips. Este método permite lograr 54 millones de núcleos dentro de un solo superordenador.
Talal Alkaissi, Director de Producto y Alianzas Globales de Core42, afirmó: “Nuestra asociación con Cerebras nos impulsa hacia el objetivo compartido de construir los superordenadores de IA más grandes y rápidos. Con grandes conjuntos de datos en salud, energía y estudios climáticos, estamos desafiando los límites de las capacidades actuales de la IA, facilitando la investigación avanzada en diversos sectores”.
Esta colaboración aborda tres elementos críticos necesarios para entrenar grandes modelos de IA: poder de computación extensivo, conjuntos de datos diversos y experiencia especializada en IA. Juntos, democratizan el acceso a la computación de IA de primer nivel, permitiendo a los usuarios desarrollar modelos fundamentales de vanguardia.
Andrew Feldman, CEO de Cerebras, destacó el éxito de la asociación, señalando que los avances han duplicado la capacidad de computación de Condor Galaxy 1 y mejorado en un 50% el rendimiento del entrenamiento gracias a actualizaciones de software. "Estamos emocionados de anunciar la continuación de esta extraordinaria asociación", dijo Feldman. "Hemos lanzado nueve superordenadores y hemos iniciado la segunda fase, entrenando modelos que están avanzando todo el campo, incluida la creación de un modelo publicitario generativo para 400 millones de hablantes de árabe".
El Director de IA de Core42, Andrew Jackson, comentó sobre la eficiencia mejorada e innovación posible gracias a su colaboración con los sistemas CS-2 de Cerebras. Las aplicaciones de la red Condor Galaxy abarcan sectores vitales como salud, energía, cambio climático e investigación de IA. Desarrollos notables incluyen Med42, un asistente médico de IA generativa, y Jais 30B, un destacado modelo de lenguaje árabe, que demuestran el progreso significativo logrado con CG-1.
Aunque Cerebras aún no ha aparecido en la lista de los 500 superordenadores, que utiliza un estándar no optimizado para IA, Feldman enfatizó que sus máquinas están entre las más grandes del mundo. "En términos de flops, estamos entre los más grandes, y al conectar estos sistemas, nuestra capacidad sigue creciendo", afirmó Feldman. "Estamos ansiosos por explorar las innovadoras posibilidades que desbloquean estas máquinas".
La empresa está entrenando modelos de IA que han captado gran atención, incluyendo uno con más de mil millones de descargas en Hugging Face y aplicaciones en asistencia médica y procesamiento sísmico en una universidad saudí. Además, Feldman destacó que sus logros no se limitan a la potencia de cálculo, ya que han demostrado una velocidad notable, afirmando que sus sistemas funcionan 130 veces más rápido que las GPU de Nvidia en ciertas pruebas.
Core42 tiene previsto introducir siete superordenadores más—CG-3 a CG-9—en 2024, contribuyendo a una capacidad computacional total anticipada de 36 exaFLOPs. Esta extensa constelación, compuesta por 576 sistemas CS-2 de Cerebras y más de 654,000 núcleos de CPU de AMD, está lista para transformar la investigación y desarrollo de IA en todo el mundo.
“Con CG-1 completado, estamos presenciando impactos tangibles de nuestra asociación”, afirmó Feldman. “Junto a Core42, estamos redefiniendo el panorama de la computación en IA y avanzando rápidamente nuestras capacidades en el entrenamiento de modelos líderes”.
Esta iniciativa es la primera vez que Cerebras se asocia no solo para construir un superordenador de IA dedicado, sino también para gestionarlo y operarlo. El Condor Galaxy está diseñado para empoderar a Core42 y sus clientes en la nube a desarrollar modelos robustos e innovadores que aceleren el ritmo de la innovación.
La colaboración entre Cerebras y Core42 ha avanzado significativamente las aplicaciones de IA en salud con Med42 y ha hecho accesibles modelos generativos a más de 400 millones de hablantes de árabe con Jais 30B. Los esfuerzos pioneros en CG-1 también han incluido investigaciones innovadoras sobre el cambio climático y avances en computación de alto rendimiento.
Los planes para CG-3 a CG-9 avanzan, con una capacidad computacional total esperada de 36 exaFLOPs al finalizar. El acceso a CG-1 ya está disponible. Feldman también abordó las regulaciones de exportación, destacando la necesidad de trabajar con el Departamento de Comercio de EE. UU. para el envío de equipos a Medio Oriente, señalando que la empresa actualmente no exporta a China.