L'industrie de l'intelligence artificielle connaît un tournant majeur : les entreprises leaders modifient leur stratégie, passant de la poursuite de modèles linguistiques toujours plus grands à une focalisation sur l'amélioration des capacités de réflexion des modèles. Ce changement va remodeler le paysage de l'IA.
Selon Reuters, les principaux laboratoires d'IA sont confrontés à des difficultés. Le développement de grands modèles linguistiques nécessite non seulement des dizaines de millions de dollars d'investissement, mais aussi la résolution de problèmes techniques tels que des pannes système, et l'évaluation des performances d'un modèle peut prendre plusieurs mois.
Ce goulot d'étranglement du développement affecte les géants du secteur. Des informations suggèrent que le nouveau modèle Orion d'OpenAI présente des améliorations limitées par rapport à GPT-4, et que Gemini 2.0 de Google rencontre des difficultés similaires. Chez Anthropic, le PDG Dario Amodei a déclaré qu'il repense la feuille de route du développement d'Opus 3.5.
Source : Image générée par IA, fournie par Midjourney
Ilya Sutskever, ancien co-fondateur d'OpenAI et actuel responsable de Safe Superintelligence (SSI), a déclaré : « Les années 2010 ont été l'ère de l'expansion, et nous entrons maintenant dans une nouvelle phase d'exploration et de découverte. » Cette déclaration est particulièrement remarquable, car Sutskever était auparavant un fervent défenseur du principe « plus c'est grand, mieux c'est ».
La nouvelle orientation du secteur vise le « calcul au moment de l'exécution », consistant à donner aux modèles d'IA plus de temps pour réfléchir et résoudre les problèmes de manière progressive. Cette approche met l'accent sur le développement des capacités de raisonnement des systèmes d'IA, leur permettant de générer et d'évaluer plusieurs solutions, plutôt que de fournir simplement des réponses rapides.
Ce changement pourrait également avoir un impact sur le paysage du marché du matériel. Bien que Nvidia occupe une position dominante dans le domaine du matériel d'entraînement IA traditionnel, ce nouveau paradigme de calcul offre des opportunités à d'autres fabricants de puces, comme Groq. Cependant, le secteur s'attend à ce que les méthodes traditionnelles et les nouvelles méthodes soient utilisées simultanément à l'avenir afin d'optimiser les coûts.
De nombreux experts du secteur estiment que, bien que le développement de modèles linguistiques traditionnels se poursuivra, le centre de gravité du secteur a commencé à se déplacer. Cela marque l'entrée de l'IA dans une nouvelle phase axée sur la qualité et les capacités de réflexion.
