Le modèle Astra d'OpenAI suscite la controverse sur des revendications mathématiques

OpenAI a annoncé le 1er août que son nouveau modèle Astra avait résolu 10 problèmes de longue date en mathématiques et en informatique théorique. Cependant, la réaction de la communauté mathématique a été rapide et critique.

Des chercheurs de renom ont accusé OpenAI de minimiser les travaux antérieurs, de ne pas attribuer correctement les contributions existantes et de surestimer la nouveauté de ses résultats générés par l'IA. Selon OpenAI, le modèle Astra a abordé des problèmes tels que les limites de l'emballage de sphères en haute dimension et les avancées en théorie du codage, affirmant qu'il n'y avait eu aucun progrès sur ces questions depuis au moins une décennie.

Des chercheurs comme Steven Miller de l'Université Yeshiva et Francesco Fournier-Facio de l'Université de Cambridge ont réagi, soutenant que les résultats d'Astra s'appuyaient sur des travaux antérieurs que OpenAI avait soit ignorés, soit sous-représentés. Notamment, des recherches pertinentes menées par Andreas Thom et Miller lui-même remontent à 2016, informant directement le domaine que Astra prétendait avoir conquis.

Le 6 août, Scientific American a qualifié la gestion des annonces par OpenAI de « faute de recherche » et de plagiat, poussant l'entreprise à réviser certaines de ses déclarations.

Cet incident n'est pas la première controverse d'OpenAI concernant des revendications mathématiques. Dans des cas précédents, l'entreprise a fait face à des critiques pour des problèmes similaires, soulevant des préoccupations persistantes sur la manière dont les modèles d'IA synthétisent les connaissances existantes.

En fin de compte, le coût de 2 000 dollars pour les 10 résultats soulève des questions sur la nature des contributions de l'IA en recherche, suggérant que si Astra a synthétisé des décennies de travail humain sans crédit approprié, le coût reflète moins la capacité de l'IA et plus le recyclage de connaissances existantes.

Nouveaux développements sur le modèle Astra d'OpenAI

• Le modèle GPT-6 Astra d'OpenAI a été lancé le 3 septembre, atteignant un score remarquable de 97,6 % sur FrontierMath Tier 4 (v2).
• Une version interne antérieure d'Astra n'a obtenu que 17 % lors des évaluations de capacité mathématique, soulignant une amélioration significative.
• Astra a obtenu un score de 99,9 % sur ARC-AGI-3 et un score parfait de 100 % sur ExploitBench.
• Il a obtenu 96,0 % sur le benchmark GPQA Diamond et 64,6 % sur Terminal-Bench Science 0.1.
• Le score de 97,6 % d'Astra sur FrontierMath représente une amélioration de 14,6 points de pourcentage par rapport à son prédécesseur, GPT-5.6 Sol, qui avait obtenu 83,0 %.
• Le modèle a fourni de nouvelles perspectives sur les écarts premiers, un domaine difficile en théorie des nombres.
• Le déploiement d'Astra a été progressif, avec un accès initial accordé à certaines organisations, suivi d'une disponibilité plus large pour les abonnés ChatGPT Plus, Pro, Business et Enterprise.
• L'accès à l'API est disponible via OpenAI, Azure et AWS Bedrock.
• Des évaluations indépendantes classent Astra parmi les modèles d'IA les plus performants, bien que certaines variantes de Claude d'Anthropic obtiennent de meilleurs résultats dans des tests d'intelligence plus larges.