À quoi il sert
Aider Polyglot servait à noter la tâche Code. Archivé faute de modèle récent mesuré, il ne sert plus qu'à situer les modèles plus anciens sur l'échelle commune.
CodeFiche benchmark · Aider (Paul Gauthier) · aider.chat
Aider Polyglot
225 exercices de programmation difficiles d'Exercism, en six langages, à résoudre en modifiant directement les fichiers.
Comment c'est noté
Pourcentage d'exercices dont tous les tests passent après deux tentatives, la seconde avec le retour des tests.
Ce qu'il ne dit pas
Exercices publics et courts, loin d'un vrai projet. Les meilleurs scores approchent 90 % et les données d'Epoch s'arrêtent fin 2025.
Qui le tient
Aider (Paul Gauthier).
aider.chat/docs/leaderboards · tâche Code · 54 modèles mesurés
Comment lire le score
54 modèles mesurés · 72 mesuresSeuil de saturation : 95 % ↓
0 %50 %GPT-5 : 88 %100 %
En tête : GPT-5, 88 %
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 65. Le meilleur, GPT-5, atteint 88 %. Le benchmark est archivé, faute de modèle récent mesuré.
Ce que ce benchmark attend à chaque niveau
- Score IA 51niveau de GPT-4o (Nov 2024)
- 15 %
- Score IA 76niveau de Claude Sonnet 4.5
- 80 %
- Score IA 100niveau de Claude Opus 5.5
- 99 %
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
Son poids chez nous
0 %du score général. Aider Polyglot est archivé et ne compte plus : la tâche Code (15 % du score général) repose sur 13 autres benchmarks.
En couleur, la tâche Code dans le score général. Aider Polyglot n'y a plus de part.
Le classement du benchmark
Scores relevés auprès de 2 sources · édition duRangModèleRéflexionScore publiéSuggèreSource
54 modèles mesurés, chacun à sa meilleure configuration. « Suggère » : le score IA que cette seule mesure indique.Voir les 54 →Replier le classement ↑
En bref
- Que mesure Aider Polyglot ?
- 225 exercices de programmation difficiles d'Exercism, en six langages, à résoudre en modifiant directement les fichiers. Sur Quelle IA, il est rangé dans la tâche Code.
- Comment Aider Polyglot est-il noté ?
- Pourcentage d'exercices dont tous les tests passent après deux tentatives, la seconde avec le retour des tests. Un modèle qui obtient 50 % a un score IA d'environ 65.
- Qui est en tête sur Aider Polyglot ?
- GPT-5 (OpenAI) est en tête d'Aider Polyglot avec 88 %, dans l'édition du 28 septembre 2026. Suivent o3-pro (84,9 %) et Gemini 2.5 Pro (Jun 2025) (83,1 %). 54 modèles y sont mesurés.
- Quelles sont les limites d'Aider Polyglot ?
- Exercices publics et courts, loin d'un vrai projet. Les meilleurs scores approchent 90 % et les données d'Epoch s'arrêtent fin 2025. Au 28 septembre 2026, le benchmark est archivé.
- Combien pèse Aider Polyglot dans le score IA ?
- Aider Polyglot compte pour 0 % du score général, dans l'édition du 28 septembre 2026. Il est archivé et ne compte plus : la tâche Code (15 % du score général) repose sur 13 autres benchmarks.
- Qui maintient Aider Polyglot ?
- Aider (Paul Gauthier). Sa page de référence : aider.chat/docs/leaderboards.
Les autres benchmarks de la tâche Code
- Arena, questions de code275 modèles · 1,15 % du score
- WeirdML (v2)129 modèles · 1,15 % du score
- SciCode120 modèles · 1,15 % du score
- Terminal-Bench 2.045 modèles · 1,15 % du score
- FrontierCode37 modèles · 1,15 % du score
- SWE-bench Verified32 modèles · 1,15 % du score
- DeepSWE26 modèles · 1,15 % du score
- GSO26 modèles · 1,15 % du score
- GBAEval23 modèles · 1,15 % du score
- FrontierSWE16 modèles · 1,15 % du score
- CursorBench13 modèles · 1,15 % du score
- WeirdML v311 modèles · 1,15 % du score
- MirrorCode9 modèles · 1,15 % du score
- LiveBench, code48 modèles · hors scoreARCHIVÉ