xAI de Elon Musk utiliza 100.000 GPU NVIDIA H100 para entrenar el modelo de IA de Grok 3; Grok 2 se lanzará en agosto

xAI de Elon Musk utiliza 100.000 GPU NVIDIA H100 para entrenar el modelo de IA de Grok 3; Grok 2 se lanzará en agosto

Elon Musk reveló que el modelo Grok 3 LLM de próxima generación se entrenó en hasta 100.000 GPU NVIDIA H100 AI. La startup de IA de Elon Musk planea lograr un gran avance con los modelos Grok LLM y mejora el juego utilizando 100.000 GPU de IA NVIDIA H100. Bueno, parece que todas las demás empresas centradas en la IA están luchando entre sí para lanzar versiones avanzadas de sus modelos LLM para satisfacer la creciente necesidad de chatbots de IA. Una nueva empresa que se ha sumado a la carrera es la startup de inteligencia artificial de Elon Musk, xAI, que anunció previamente el desarrollo del conjunto de modelos LLM «Grok», diseñado específicamente para su integración como asistente de inteligencia artificial para usuarios premium en X. La compañía tiene más nuevos Se han lanzado versiones del modelo original y xAI se está preparando actualmente para Grok 2; Sin embargo, Elon, en su último tweet, comenzó a promocionar el modelo Grok 3 de próxima generación, afirmando que será mucho más grande que sus predecesores. Grok 3 a fin de año después del entrenamiento en 100k H100 realmente debería ser algo especial: Elon Musk (@elonmusk) 1 de julio de 2024 La divulgación del hardware utilizado para entrenar Grok 3 es algo sorprendente y emocionante al mismo tiempo porque utiliza 100.000 unidades de GPU AI H100 de gama alta de NVIDIA para entrenamiento de modelos producirán un resultado que los mercados aún no han visto. Para respaldar esta afirmación, se dice que el modelo GPT-4 LLM de OpenAI se ha entrenado en 40.000 GPU de IA A100 de NVIDIA, que son relativamente obsoletas en comparación con las H100 y también en menor cantidad; Entonces, puedes imaginar las capacidades que tendrá el modelo de IA de Grok 3 en sí mismo. En un tweet anterior, Elon Musk dijo que la formación de LLM a través de datos de Internet es rápida y requiere “mucho trabajo”, especialmente cuando se trata de recursos informáticos. Dijo que el modelo Grok 2 AI, previsto para agosto, representa una mejora en este sentido y que el modelo Grok 3 LLM de próxima generación se basará en modelos anteriores y, en última instancia, será un gran producto xAI. Además de esto, Elon Musk ya ha anunciado anteriormente que también tiene la intención de adquirir los aceleradores de IA Blackwell B200 de NVIDIA para xAI, aparentemente valorados en 9 mil millones de dólares, una cifra gigantesca considerando la dinámica de los mercados. Con Grok 3 usando 100.000 unidades de NVIDIA H100, se espera que el modelo cueste alrededor de 3.000 millones de dólares sólo en entrenamiento, lo que justifica el hecho de que Elon está maximizando todo con xAI. Será interesante ver cómo xAI y sus iniciativas contribuyen al entusiasmo por la IA y, por lo que parece, la puesta en marcha de IA de Elon podría ser la próxima gran novedad. Comparte esta historia Facebook Twitter

About Carlos Carraveo Jimenez

Check Also

Caos global de TI: Microsoft y CrowdStrike enfrentan una reacción violenta mientras los vuelos y los bancos luchan

Caos global de TI: Microsoft y CrowdStrike enfrentan una reacción violenta mientras los vuelos y los bancos luchan

Compartir en Facebook Compartir en Twitter El viernes se produjo una importante interrupción mundial de …

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *