À quoi il sert
Sur Quelle IA, Arena, questions de maths sert à noter la tâche Mathématiques : c'est l'un de ses 8 benchmarks. Il départage surtout les modèles dont le score IA approche 70.
Sur Quelle IA, Arena, questions de maths sert à noter la tâche Mathématiques : c'est l'un de ses 8 benchmarks. Il départage surtout les modèles dont le score IA approche 70.
Un score Elo calculé sur les seuls duels de mathématiques.
Pour le calcul, un Elo devient une probabilité de victoire face à un niveau de référence, ici 1 404 Elo. Un écart de 100 points donne environ 64 % de chances de l'emporter.
Le votant ne vérifie pas toujours la justesse du résultat.
Arena (ex LMArena).
arena.ai/leaderboard · tâche Maths · 269 modèles mesurés
En tête : Gemini 4 Argon, 1 528,2 Elo
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 1 404 Elo a un score IA d'environ 70. Le meilleur, Gemini 4 Argon, atteint 1 528,2 Elo.
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
1,25 %du score général. Arena, questions de maths porte 13 % de la tâche Mathématiques (10 % du score général), que se partagent 8 benchmarks.
En couleur, la tâche Mathématiques dans le score général. En noir, la part d'Arena, questions de maths.