Le 20 décembre dernier, OpenAI a révélé que son modèle o3 a atteint un score de 88 % dans le benchmark exigeant ARC-AGI, dépassant largement le précédent record de 55 % et se situant au niveau de la moyenne humaine. La grande avancée de l’entreprise soulève la possibilité que l’intelligence artificielle générale (AGI) soit plus proche que beaucoup ne l’imaginaient. Cependant, la communauté scientifique reste sceptique quant à la véritable portée de ce progrès.
Le benchmark ARC-AGI évalue la capacité de généralisation des systèmes d’IA, en mesurant combien d’exemples sont nécessaires pour s’adapter à de nouvelles situations. Contrairement à des modèles comme GPT-4, qui dépendent de millions de données pour des tâches courantes, o3 démontre une remarquable “efficacité d’échantillon”. Cela implique qu’il peut apprendre avec très peu de données, une compétence cruciale pour résoudre des problèmes nouveaux et peu communs (une approche considérée comme un élément fondamental de l’intelligence).
Les tests ARC-AGI présentent des problèmes visuels sous forme de grilles, où l’IA doit déduire des motifs qui transforment une grille initiale en une grille finale. Le modèle doit généraliser des règles à partir de seulement trois exemples pour les appliquer correctement dans un quatrième cas, d’une manière similaire aux tests de quotient intellectuel utilisés dans les écoles, mais à un niveau beaucoup plus complexe et abstrait.
Bien que les détails techniques sur le fonctionnement de o3 soient limités, on spécule que son succès réside dans la découverte de « règles faibles », c’est-à-dire des normes générales et simples qui maximisent son adaptabilité à de nouvelles situations. Certains chercheurs comparent cette stratégie à la méthode utilisée par AlphaGo, le modèle de Google qui a battu le champion du monde de Go, un ancien jeu de société qui nécessite une habileté subtile et instinctive.
Pour l’instant, o3 reste un mystère. OpenAI a partagé peu de détails au-delà des tests initiaux et des présentations privées. Une fois le modèle disponible au public, on pourra évaluer son impact économique et son potentiel réel pour révolutionner des secteurs entiers. S’il démontre une capacité d’adaptation comparable à celle d’un humain moyen, o3 pourrait marquer le début d’une nouvelle ère dans l’intelligence artificielle.
