Analyse
METR estime que les modèles d'Anthropic progressent environ deux fois plus vite qu'en 2024-2025, environ 80 % de l'accélération étant liée à l'usage de l'IA
METR estime que les modèles d'Anthropic progressent environ deux fois plus vite, dont ~80 % dus à l'IA ; forte incertitude.
Le 5 novembre 2026, l'organisme d'évaluation à but non lucratif METR a publié une évaluation de l'accélération de la R&D en IA chez Anthropic. Son estimation : en octobre 2026, Anthropic améliore ses modèles sur les tâches bien définies à un rythme environ deux fois supérieur à celui de mars 2024 à octobre 2025. L'avis subjectif de METR est que « peut-être » 80 % de l'accélération actuelle vient de l'usage de l'IA. METR qualifie lui-même ce chiffre de très incertain, dit que son équipe n'est pas parvenue à un consensus et que Anthropic a expurgé l'essentiel des preuves qu'elle jugeait les plus informatives.
L'essentiel
- L'estimation : environ 2x. Le chiffre principal fondé sur les benchmarks est 1,9x, avec un intervalle à 95 % de 1,5 à 2,8x ; METR ne serait pas surpris par 1,3x ou 3x.
- Les 80 % : un jugement subjectif, « peut-être » 80 % de l'accélération actuelle, que METR juge très incertain. Ce n'est ni 80 % du progrès, ni 80 % de confiance.
- Ce qui est mesuré : l'AECI d'Anthropic, un indice composite construit sur de nombreux benchmarks à réponses vérifiables automatiquement.
- Les réserves : accès limité, preuves expurgées, désaccords au sein de l'équipe, et benchmarks qui peuvent surestimer l'accélération réelle.
Qu'a réellement mesuré METR ?
Depuis août, une équipe de METR a travaillé avec des informations internes d'Anthropic, lors d'une évaluation d'environ 11 semaines (AlphaSignal). La principale preuve quantitative est l'AECI, la version d'Anthropic de l'Epoch Capabilities Index, qui ajuste un score composite à de nombreux résultats de benchmarks. L'AECI couvre des tâches de maths, de génie logiciel, de sciences, multimodales et de langage à réponses vérifiables. METR note que cette focalisation sur des tâches propres et vérifiables peut surestimer l'accélération dans le monde réel.
Que vaut le chiffre « 80 % grâce à l'IA » ?
C'est l'avis subjectif de METR, que l'équipe juge très incertain. METR dit aussi que des facteurs non liés à l'IA ont probablement contribué à l'accélération fin 2025, et que la part cumulée de l'IA depuis octobre 2025 serait plus basse que la part instantanée actuelle. Entretiens et enquêtes sont compatibles avec un doublement dû à l'IA, mais le gain déclaré par les employés, qui atteint environ 12x en octobre 2026, est décrit comme une preuve très lâche.
Qu'est-ce qui n'est pas établi ?
METR dit ne pas avoir établi l'apport exact de l'IA à chaque étape de l'entraînement, ces estimations ayant été expurgées. Il n'a pas établi non plus si la croissance accélère encore, que l'AECI suit fidèlement le progrès réel de la R&D, ni qu'aucun goulot d'étranglement ne freinera les 12 prochains mois. Il ajoute que les contributions entièrement autonomes de l'IA aux travaux d'entraînement les plus importants ne sont pas encore grandes, même s'il a vu des « signes de vie ».
Tableau récapitulatif
| Point | Ce que dit METR au 5 novembre 2026 | Source |
|---|---|---|
| Accélération | Environ 2x par rapport à mars 2024 - octobre 2025, sur tâches bien définies | METR |
| Estimation par benchmarks | 1,9x, intervalle à 95 % de 1,5 à 2,8x | METR |
| Part due à l'IA | « Peut-être » 80 %, très incertain | METR |
| Mesure utilisée | AECI d'Anthropic, indice composite de benchmarks | METR |
| Preuves | Une grande part expurgée par Anthropic | METR |
| Avis de l'équipe | Pas de consensus chez METR | METR |
Questions fréquentes
Cela signifie-t-il que les modèles Claude sont deux fois plus capables ?
Non. C'est un rythme d'amélioration sur des tâches bien définies et mesurables par benchmark, pas un niveau de capacité, et il peut ne pas se transposer au travail réel.
Les 80 % sont-ils un résultat mesuré ?
Non. METR parle d'un jugement subjectif, très incertain.
Méthode et limites
Sources au 5 novembre 2026. Nous n'avons lu l'évaluation publiée par METR que via un résumé de sa page, et citons The Information, Runtimewire et AlphaSignal pour le contexte. Nous n'avons pas examiné les données sous-jacentes, que Anthropic a en grande partie expurgées. Nous n'avons rien testé.
Sources
- METR : Independent assessment of AI R&D acceleration at Anthropic in October 2026 (vérifié le 2026-11-05)
- The Information : Anthropic's R&D speed may have doubled due to AI, researchers find (vérifié le 2026-11-05)
- Runtimewire : METR says Anthropic's AI capability growth rate has roughly doubled (vérifié le 2026-11-05)
- AlphaSignal : METR finds Anthropic's AI-assisted R&D moving twice as fast (vérifié le 2026-11-05)
Une erreur dans cet article ? Signalez-la · Notre politique de corrections
