Récemment, le lancement du modèle d'IA nouvelle génération Grok3, initialement prévu pour fin 2024 par xAI, la société d'IA fondée par Elon Musk, a été retardé, suscitant une attention considérable de l'industrie. Grok3 était considéré comme le principal concurrent de GPT-4 d'OpenAI et de Gemini de Google, doté de capacités d'analyse d'images et de réponses aux questions, et déjà utilisé sur le réseau social X de Musk.
L'été dernier, Musk avait déclaré sur X que Grok3 serait une « percée majeure attendue après un entraînement de 100 000 H100 ». Mais au 2 janvier, après le Nouvel An, Grok3 n'était toujours pas disponible, et aucun signe ne laissait présager une sortie imminente. Des informations suggèrent qu'une version intermédiaire, « Grok2.5 », pourrait être lancée en premier.
Ce phénomène n'est pas isolé. De nombreuses entreprises du secteur de l'IA ont connu des situations similaires. Anthropic, une start-up spécialisée en IA, n'a pas pu lancer Claude3.5Opus, le successeur de son modèle Claude3Opus, comme prévu l'année dernière. Elle a même fini par abandonner le lancement du modèle après avoir annoncé sa sortie pour fin 2024. De plus, Google et OpenAI ont également subi des retards dans le lancement de leurs modèles phares.
Ces retards successifs reflètent peut-être les limites actuelles des méthodes d'entraînement de l'IA. Auparavant, les entreprises pouvaient obtenir des améliorations de performances significatives grâce à une puissance de calcul massive et à des ensembles de données plus importants. Mais comme l'amélioration des performances de chaque génération de modèles diminue progressivement, les entreprises cherchent des technologies alternatives pour surmonter les obstacles actuels. Lors d'une interview avec l'animateur de podcast Lex Fridman, Musk a exprimé ses attentes élevées pour Grok3, tout en reconnaissant qu'il pourrait ne pas atteindre ses objectifs.
De plus, la petite taille de l'équipe xAI pourrait être une cause importante du retard de Grok3. Par rapport à ses concurrents, xAI dispose de ressources et de personnel relativement limités, ce qui pose sans aucun doute des défis supplémentaires au développement de nouveaux modèles.
En résumé, le retard de Grok3 n'est pas qu'un simple contretemps pour xAI, mais il illustre une tendance générale dans le secteur de l'IA face aux limites technologiques.