L'IA d'Anthropic progresse deux fois plus vite qu'il y a un an, selon METR

Anthropic améliore ses systèmes d'IA environ deux fois plus vite qu'il y a un an. C'est la conclusion d'une analyse indépendante publiée jeudi, et elle tombe mal : le PDG de l'entreprise demande lui-même au secteur de ralentir.

Que s'est-il passé ?

Anthropic a invité Model Evaluation and Threat Research (METR), une organisation à but non lucratif basée à Berkeley, en Californie, à examiner ses données internes et à interroger ses équipes. L'examen a couvert environ 11 semaines, de la mi-août à la fin octobre.

METR estime qu'Anthropic améliore la capacité de ses modèles à accomplir des « tâches bien définies » environ deux fois plus vite qu'un an plus tôt. Selon son rapport, l'entreprise a fait autant de progrès sur les benchmarks (tests de référence) cette année qu'entre octobre 2023 et octobre 2025.

Le groupe affirme pouvoir exclure « avec confiance » que cela vienne d'une puissance de calcul accrue. Sa meilleure hypothèse : l'IA aide elle-même à construire une meilleure IA. Anthropic a indiqué que son chatbot Claude participe de plus en plus au développement de ses propres nouvelles versions.

Pourquoi tout le monde en parle ?

L'essentiel de ce que l'on sait des risques de l'IA vient des entreprises qui la construisent. L'administration Trump les a encouragées à s'autoréguler sur la sécurité, si bien qu'un accès extérieur de ce type est rare.

METR dit avoir obtenu un « accès sans précédent ». Il ajoute que le rapport public d'Anthropic sur les risques, publié en août, « sous-estime globalement le niveau d'accélération » en cours.

Les chercheurs n'ont trouvé aucun « goulot d'étranglement », comme des limites de puissance de calcul ou de données, qui freinerait les progrès. Ils craignent que l'IA qui améliore l'IA n'entraîne une accélération cumulative. Ils précisent que l'IA ne peut pas encore contribuer de façon totalement autonome aux parties les plus importantes de l'entraînement, même si les chercheurs d'Anthropic ont décrit des « signes de vie » laissant penser que ce pourrait être bientôt le cas.

Il y a des réserves. L'accélération pourrait ne concerner que les tâches faciles à noter, pas les tâches « floues ». Les progrès passés d'Anthropic ont aussi pu être sous-estimés, ce qui ferait paraître le nouveau chiffre plus grand. Enfin, les passages masqués par Anthropic ont limité ce que METR pouvait dire.

Et maintenant ?

Le cofondateur Sam McCandlish a écrit sur X que beaucoup de conclusions de METR rejoignent les siennes. « L'IA accélère notre recherche, mais il est difficile de dire de combien », a-t-il écrit. Anthropic prévoit de publier sa propre analyse dans les prochaines semaines.

Il a défendu les passages masqués : les détails de ce qui alimente l'accélération sont « commercialement sensibles » et pourraient donner aux autres « une feuille de route ». L'entreprise parle d'un compromis.

Pour le contexte, le PDG Dario Amodei écrivait dans un essai du 12 septembre que le secteur devrait « ralentir le rythme auquel nous améliorons les capacités des modèles d'IA ». Anthropic prévoit aussi son introduction en Bourse plus tard ce mois-ci, qui pourrait être la plus importante de l'histoire.