À quoi il sert
Sur Quelle IA, SimpleBench sert à noter la tâche Raisonnement : c'est l'un de ses 9 benchmarks. Il départage surtout les modèles dont le score IA approche 82.
RaisonnementFiche benchmark · Équipe SimpleBench (chaîne YouTube AI Explained) · simple-bench.com
SimpleBench
213 questions pièges de bon sens, sur l'espace, le temps et les relations sociales, qu'un adulte réussit dans 84 % des cas.
Comment c'est noté
Part de bonnes réponses à six choix, en moyenne sur cinq passages ; le hasard donne 17 %.
Pour le calcul, ce score est ramené entre 0 et 1 : 17 %, le niveau du hasard, vaut 0 et 100 % vaut 1.
Ce qu'il ne dit pas
L'essentiel des questions est privé, ce qui limite les fuites mais interdit toute vérification. Les meilleurs modèles rejoignent le niveau humain mesuré.
Qui le tient
Équipe SimpleBench (chaîne YouTube AI Explained).
simple-bench.com · tâche Raisonnement · 82 modèles mesurés
Comment lire le score
82 modèles mesurés · 102 mesuresSeuil de saturation : 95,8 % ↓
0 %50 %Claude Fable 5 : 81,9 %100 %
En tête : Claude Fable 5, 81,9 %
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 58 % a un score IA d'environ 82. Le meilleur, Claude Fable 5, atteint 81,9 %. Le benchmark sera dit saturé quand un modèle atteindra 95,8 %.
Ce que ce benchmark attend à chaque niveau
- Score IA 51niveau de GPT-4o (Nov 2024)
- 25 %
- Score IA 76niveau de Claude Sonnet 4.5
- 50 %
- Score IA 100niveau de Claude Opus 5.5
- 82 %
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
Son poids chez nous
1,67 %du score général. SimpleBench porte 11 % de la tâche Raisonnement (15 % du score général), que se partagent 9 benchmarks.
En couleur, la tâche Raisonnement dans le score général. En noir, la part de SimpleBench.
Le classement du benchmark
Scores relevés auprès de 2 sources · édition duRangModèleRéflexionScore publiéSuggèreSource
82 modèles mesurés, chacun à sa meilleure configuration. « Suggère » : le score IA que cette seule mesure indique.Voir les 82 →Replier le classement ↑
En bref
- Que mesure SimpleBench ?
- 213 questions pièges de bon sens, sur l'espace, le temps et les relations sociales, qu'un adulte réussit dans 84 % des cas. Sur Quelle IA, il est rangé dans la tâche Raisonnement.
- Comment SimpleBench est-il noté ?
- Part de bonnes réponses à six choix, en moyenne sur cinq passages ; le hasard donne 17 %. Un modèle qui obtient 58 % a un score IA d'environ 82.
- Qui est en tête sur SimpleBench ?
- Claude Fable 5 (Anthropic) est en tête de SimpleBench avec 81,9 %, dans l'édition du 28 septembre 2026. Suivent Claude Opus 5 (80,6 %) et Gemini 3.1 Pro (79,6 %). 82 modèles y sont mesurés.
- Quelles sont les limites de SimpleBench ?
- L'essentiel des questions est privé, ce qui limite les fuites mais interdit toute vérification. Les meilleurs modèles rejoignent le niveau humain mesuré. Au 28 septembre 2026, le benchmark est actif.
- Combien pèse SimpleBench dans le score IA ?
- SimpleBench compte pour 1,67 % du score général, dans l'édition du 28 septembre 2026. Il porte 11 % de la tâche Raisonnement (15 % du score général), que se partagent 9 benchmarks.
- Qui maintient SimpleBench ?
- Équipe SimpleBench (chaîne YouTube AI Explained). Sa page de référence : simple-bench.com.
Les autres benchmarks de la tâche Raisonnement
- DTBench168 modèles · 1,67 % du scoreSATURÉ
- Chess Puzzles136 modèles · 1,67 % du score
- LMCA130 modèles · 1,67 % du score
- ARC-AGI-182 modèles · 1,67 % du scoreSATURÉ
- ARC-AGI-280 modèles · 1,67 % du scoreSATURÉ
- ForecastBench77 modèles · 1,67 % du score
- Mystery Game Puzzles69 modèles · 1,67 % du score
- EnigmaEval41 modèles · 1,67 % du score
- LiveBench, raisonnement48 modèles · hors scoreARCHIVÉ