Aller au contenu
EN 4 QUESTIONSTrouver mon modèle

FrançaisFiche benchmark · EuroEval · euroeval.com

EuroEval, ScaLA (grammaire)

Le modèle doit dire si une phrase française est correcte ou si elle a été abîmée.

À quoi il sert

Sur QUELLE IA, EuroEval, ScaLA (grammaire) sert à noter la tâche Français : c'est l'un de ses 10 benchmarks. Il départage surtout les modèles dont le score IA approche 66.

Comment c'est noté

Un score d'accord avec la bonne réponse, de 0 à 100, corrigé du hasard.

Ce qu'il ne dit pas

Juge la détection des fautes. La qualité de ce que le modèle écrit lui-même n'est pas notée.

Comment lire le score

153 modèles mesurés · 212 mesures

En tête : GLM-5.3-Flash, 78 %

Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 66. Le meilleur, GLM-5.3-Flash, atteint 78 %. Le benchmark sera dit saturé quand un modèle atteindra 95 %.

Ce que ce benchmark attend à chaque niveau

Score IA 51niveau de GPT-4o (Nov 2024)
43 %
Score IA 76niveau de Claude Sonnet 4.5
55 %
Score IA 100niveau de Claude Opus 5.5
65 %

Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche

Son poids chez nous

0,62 %du score général. EuroEval, ScaLA (grammaire) porte 6 % de la tâche Français (10 % du score général), que se partagent 10 benchmarks.

En couleur, la tâche Français dans le score général. En noir, la part d'EuroEval, ScaLA (grammaire).

Le classement du benchmark

Scores relevés sur euroeval.com · édition du
RangModèleRéflexionScore publiéÉquivaut à?Source
1GLM-5.3-FlashZ.ai (Zhipu AI) · poids ouverts · 2 configurationsNon précisée78 %136,1
2Gemini 3 ProGoogle DeepMindNon précisée75,6 %128,8
3GPT-6.1 SolOpenAINon précisée74,4 %125,3
4Gemma 4 31B ITGoogle DeepMind · poids ouverts · 2 configurationsNon précisée74,2 %124,7
5GPT-6 AstraOpenAINon précisée74,2 %124,6
6Ministral 3 14BMistral AI · poids ouverts · 2 configurationsÉlevée73,6 %123,0
7Gemini 3.1 Flash-LiteGoogle DeepMindNon précisée72,6 %120,2
8Gemini 3 FlashGoogle DeepMind · 2 configurationsSans72,4 %119,5
9Claude Sonnet 4.6AnthropicNon précisée72,1 %118,8
10Gemma 4 26B A4BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée70,8 %115,2
153 modèles mesurés, chacun à sa meilleure configuration. « Équivaut à » : le score IA que ce seul résultat donnerait au modèle.Voir les 153 →Replier le classement ↑
11Gemini 3.7 FlashGoogle DeepMindNon précisée70,5 %114,3
12Gemini 3.5 Flash-LiteGoogle DeepMindNon précisée69,8 %112,6
13Gemini 3.6 FlashGoogle DeepMindNon précisée69,3 %111,2
14Apertus v1.5 70BSwiss AI (EPFL, ETH Zurich) · poids ouvertsNon précisée69,1 %110,9
15Qwen 3.8 27BAlibaba · poids ouvertsNon précisée68,7 %109,7
16Ministral 3 8BMistral AI · poids ouverts · 2 configurationsNon précisée68,3 %108,7
17GPT-5.2OpenAINon précisée67,5 %106,6
18Gemma 4 12B ITGoogle DeepMind · poids ouvertsNon précisée67,1 %105,8
19GPT-5.4 MiniOpenAI · 4 configurationsFaible66,8 %105,0
20Llama 3.1-70BMeta AI · poids ouverts · 2 configurationsNon précisée66,6 %104,5
21GPT-5.4OpenAISans65 %100,6
22Nemotron 3 Nano 30BNVIDIA · poids ouverts · 3 configurationsNon précisée61,6 %92,5
23GPT-5.6 LunaOpenAINon précisée61,2 %91,4
24Qwen3.5-35B-A3BAlibaba · poids ouvertsNon précisée60,4 %89,6
25Qwen3.5-4BAlibaba · poids ouvertsNon précisée59,5 %87,7
26Qwen3.5-9BAlibaba · poids ouvertsNon précisée58,6 %85,6
27Granite 4.0 H SmallIBM · poids ouvertsNon précisée58,1 %84,4
28glm-4.7-flashZ.ai (Zhipu AI) · poids ouverts · 2 configurationsNon précisée58 %84,3
29Qwen3.6 27BAlibaba · poids ouvertsNon précisée57,6 %83,2
30EXAONE 4.0 32BLG AI Research · poids ouvertsNon précisée56,9 %81,7
31Ministral 3 3BMistral AI · poids ouverts · 2 configurationsNon précisée56,7 %81,3
32EuroLLM 22B InstructEuroLLM · poids ouverts · 2 configurationsNon précisée56 %79,7
33granite-4.0-microIBM · poids ouvertsNon précisée55,9 %79,4
34Luciole 23B Instruct 1.1OpenLLM-France · poids ouvertsNon précisée55,1 %77,7
35Gemma 3n E4BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée54 %75,1
36EuroLLM 9B Instruct (2512)EuroLLM · poids ouvertsNon précisée53,6 %74,3
37Llama 3.1-405BMeta AI · poids ouverts · 3 configurationsNon précisée52,6 %72,2
38GPT-6 LunaOpenAINon précisée52,6 %72,1
39Qwen3.5-2BAlibaba · poids ouvertsNon précisée52,3 %71,5
40Gemma 3 4BGoogle DeepMind · poids ouvertsNon précisée50,6 %67,7
41OLMo 3.1 32B InstructAllen Institute for AI · poids ouvertsNon précisée50,4 %67,3
42GPT-6 SolOpenAINon précisée50,4 %67,2
43GPT-5.6 TerraOpenAINon précisée50,2 %66,8
43Grok 4.1 FastxAIÉlevée50,2 %66,8
45Qwen3-1.7BAlibaba · 2 configurationsSans49,2 %64,6
46GPT-5.4 NanoOpenAI · 4 configurationsFaible46,4 %58,5
47Qwen2.5-72BAlibaba · poids ouvertsNon précisée46,1 %57,8
48Gemma 4 E2B ITGoogle DeepMind · poids ouvertsNon précisée46 %57,5
49Mistral Small 3.2Mistral AI · poids ouvertsNon précisée45,9 %57,3
50Gemini 2.5 Flash (Jun 2025)Google DeepMind · 2 configurationsÉlevée45,6 %56,6
51GPT-5.6 SolOpenAINon précisée45,4 %56,1
52Qwen3-235B-A22B-Instruct (Jul 2025)Alibaba · poids ouvertsNon précisée45,3 %56,0
53Magistral Small 1.2Mistral AI · poids ouvertsNon précisée45,1 %55,6
54Gemma 4 E4B ITGoogle DeepMind · poids ouvertsNon précisée44,8 %54,9
55Claude Sonnet 4.5Anthropic · 2 configurationsSans44,7 %54,6
56chutes/Qwen3-Next-80B-A3B-InstructAlibaba · poids ouvertsNon précisée44,6 %54,4
57Gemma 3 27BGoogle DeepMind · poids ouvertsNon précisée44,4 %54,0
58Yi-1.5-34B01.AI · poids ouvertsNon précisée44,4 %53,9
59Llama 3.1-8BMeta AI · poids ouverts · 2 configurationsNon précisée44,3 %53,8
60Mixtral 8x7BMistral AI · poids ouverts · 2 configurationsNon précisée43,2 %51,4
61GPT-4.1OpenAINon précisée43 %50,7
62Nemotron Cascade 2 30B A3BNVIDIA · poids ouvertsNon précisée42,9 %50,6
63Llama 3-70BMeta AI · poids ouverts · 2 configurationsNon précisée42,9 %50,5
64Claude 3.7 SonnetAnthropic · 2 configurationsSans42,6 %50,0
65Gemini 2.5 Pro (Jun 2025)Google DeepMindNon précisée42,6 %49,8
66GPT-5OpenAI · 3 configurationsFaible42,5 %49,6
67Llama-3.1-Nemotron-70B-InstructNVIDIA · poids ouvertsNon précisée42,2 %49,1
68Qwen3-32BAlibaba · poids ouvertsSans42,1 %48,8
69gpt-oss-120bOpenAI · poids ouvertsNon précisée42 %48,5
70Gemini 2.5 Flash-Lite (Jun 2025)Google DeepMind · 4 configurationsÉlevée41,8 %48,2
70Llama 4 ScoutMeta AI · poids ouvertsNon précisée41,8 %48,2
72Gemma 2 27BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée41,7 %48,0
73Voxtral SmallMistral AI · poids ouvertsNon précisée41,6 %47,6
74Granite 4.0 H MicroIBM · poids ouvertsNon précisée41,1 %46,5
75Phi-4Microsoft · poids ouvertsNon précisée40,9 %46,1
76Magistral Small 1.0Mistral AI · poids ouvertsNon précisée40,9 %46,1
77Qwen3-14BAlibaba · poids ouverts · 2 configurationsSans40,8 %45,8
78c4ai-command-r-08-2024Cohere · poids ouvertsNon précisée40,7 %45,5
79Llama 3.3 70BMeta AI · poids ouvertsNon précisée40,6 %45,5
80GPT-4.1 miniOpenAINon précisée40,6 %45,3
81GLM-4.5-AirZ.ai (Zhipu AI) · poids ouverts · 2 configurationsÉlevée40,2 %44,4
81Mistral Small 3.1Mistral AI · poids ouvertsNon précisée40,2 %44,4
83Claude Haiku 4.5AnthropicNon précisée40,1 %44,3
84Grok 3xAINon précisée40 %43,9
85Qwen3-30B-A3BAlibaba · poids ouvertsSans39,9 %43,9
86Gemma 3 12BGoogle DeepMind · poids ouvertsNon précisée39,7 %43,2
87Gemma 2 9BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée39,5 %42,8
88o3-miniOpenAINon précisée39,1 %41,9
89Gemini 2.5 Flash (Apr 2025)Google DeepMindNon précisée39 %41,7
90Gemini 1.5 Flash (Sep 2024)Google DeepMindNon précisée38,7 %41,1
91Qwen1.5-14BAlibaba · poids ouverts · 2 configurationsNon précisée38,7 %41,0
92Aya Expanse 32BCohere · poids ouvertsNon précisée38,2 %39,7
93qwen3-4b-instruct-2507AlibabaNon précisée38,1 %39,5
94Qwen3-8BAlibaba · poids ouverts · 2 configurationsNon précisée38 %39,3
95Nemotron 3 Nano 4BNVIDIA · poids ouverts · 2 configurationsNon précisée37,7 %38,8
96OLMo 3 7B InstructAllen Institute for AI · poids ouvertsNon précisée37,7 %38,6
97Mistral NeMoMistral AI · poids ouvertsNon précisée37,1 %37,2
98Qwen3-4BAlibaba · 3 configurationsÉlevée37 %37,0
99Grok-3 minixAIÉlevée36,8 %36,5
100gpt-oss-20bOpenAI · poids ouverts · 3 configurationsFaible36,8 %36,4
101deepseek-r1-0528-qwen3-8bDeepSeek · poids ouvertsNon précisée36,6 %36,1
102Reka Flash 3Reka AI · poids ouvertsNon précisée35,9 %34,3
103Granite 4.0 H TinyIBM · poids ouvertsNon précisée35,4 %33,2
104o4-miniOpenAINon précisée35,4 %33,1
104Qwen3-235B-A22BAlibaba · poids ouvertsNon précisée35,4 %33,1
106Luciole 8B Instruct 1.1OpenLLM-France · poids ouvertsNon précisée35,4 %33,1
107QwQ-32BAlibaba · poids ouvertsNon précisée35 %32,1
108Apertus 70B InstructSwiss AI (EPFL, ETH Zurich) · poids ouvertsNon précisée34,5 %31,1
109o3OpenAINon précisée33,5 %28,4
110nvidia-nemotron-nano-9b-v2NVIDIA · poids ouverts · 2 configurationsNon précisée33,4 %28,4
111Qwen3-235B-A22B-Thinking (Jul 2025)Alibaba · poids ouvertsNon précisée33,1 %27,6
112Falcon 2 11BTechnology Innovation Institute · poids ouvertsNon précisée33,1 %27,6
113DeepSeek-R1-Distill-Llama-70BDeepSeek · poids ouvertsNon précisée32,6 %26,3
114Grok-2 (Dec 2024)xAINon précisée32,4 %25,9
115GPT-5 miniOpenAI · 3 configurationsÉlevée32,2 %25,4
116Apertus 8B InstructSwiss AI (EPFL · poids ouvertsNon précisée32,1 %24,9
117Mistral Small 3Mistral AI · poids ouvertsNon précisée32 %24,8
118GPT-5 nanoOpenAI · 3 configurationsÉlevée31,6 %23,8
119Llama 2-70BMeta AI · poids ouverts · 2 configurationsNon précisée31,4 %23,3
120OLMo 2 Furious 13BAllen Institute for AI · poids ouvertsNon précisée31,4 %23,2
121Reka Flash 3.1Reka AI · poids ouvertsNon précisée31,1 %22,6
122Llama 3-8BMeta AI · poids ouverts · 2 configurationsNon précisée30,2 %20,1
123SmolLM3 3BHugging Face · poids ouverts · 2 configurationsNon précisée28,5 %15,7
124Mistral 7B v0.1Mistral AI · poids ouverts · 2 configurationsNon précisée27,6 %13,3
125OLMo 3.1 32B ThinkAllen Institute for AI · poids ouvertsNon précisée27,1 %11,7
126DeepSeek-R1-Distill-Qwen-32BDeepSeek · poids ouvertsNon précisée26,3 %9,5
127Mistral 7B v0.3Mistral AI · poids ouvertsNon précisée26,1 %9,0
128DeepSeek-R1-Distill-Qwen-14BDeepSeekNon précisée25,4 %6,8
129EuroLLM 9B InstructEuroLLM · poids ouvertsNon précisée25,3 %6,6
130Qwen3-Next-80B-A3B ThinkingAlibaba · poids ouvertsÉlevée24 %2,7
131Mistral 7B v0.2Mistral AINon précisée23,4 %0,9
132OLMo 3 7B ThinkAllen Institute for AI · poids ouvertsNon précisée22,8 %-1,0
133Gemma 7BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée20,9 %-7,1
134Llama 2-13BMeta AI · poids ouverts · 2 configurationsNon précisée20,1 %-9,9
135Llama 2-7BMeta AI · poids ouvertsNon précisée16,3 %-23,9
136Llama 3.2 3BMeta AI · poids ouvertsNon précisée15,4 %-27,5
137Qwen2.5-1.5BAlibaba · poids ouvertsNon précisée14,8 %-30,4
138DeepSeek-R1-Distill-Llama-8BDeepSeekNon précisée14,7 %-30,7
139Salamandra 7B InstructBarcelona Supercomputing Center · poids ouvertsNon précisée13 %-38,5
140DeepSeek-R1-Distill-Qwen-7BDeepSeekNon précisée12,5 %-41,3
141Gemma 3 1BGoogle DeepMind · poids ouvertsNon précisée12,1 %-43,2
142Qwen3-0.6BAlibaba · 2 configurationsNon précisée10,4 %-52,8
143Qwen3.5-0.8BAlibaba · poids ouvertsNon précisée9,6 %-57,5
144Phi-4 MiniMicrosoft · poids ouvertsÉlevée8 %-68,7
145Ministral 8BMistral AI · poids ouvertsNon précisée7,8 %-69,8
146DeepSeek-R1-Distill-Qwen-1.5BDeepSeekNon précisée4,1 %-107,3
147Phi-4-Reasoning-plusMicrosoft · poids ouvertsNon précisée3,8 %-111,9
148Llama 3.2 1BMeta AI · poids ouverts · 2 configurationsNon précisée3,4 %-118,8
149Phi-2Microsoft · poids ouvertsNon précisée3,2 %-122,0
150Gemma 3 270MGoogle DeepMind · poids ouverts · 2 configurationsNon précisée2,7 %-131,0
151ALIA-40bBarcelona Supercomputing Center · poids ouvertsNon précisée2,2 %-144,1
152Gemma 2BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée0,8 %-187,2
153Phi-4 ReasoningMicrosoft · poids ouvertsÉlevée0,1 %-187,2

En bref

Que mesure EuroEval, ScaLA (grammaire) ?
Le modèle doit dire si une phrase française est correcte ou si elle a été abîmée. Sur QUELLE IA, il est rangé dans la tâche Français.
Comment EuroEval, ScaLA (grammaire) est-il noté ?
Un score d'accord avec la bonne réponse, de 0 à 100, corrigé du hasard. Un modèle qui obtient 50 % a un score IA d'environ 66.
Qui est en tête sur EuroEval, ScaLA (grammaire) ?
GLM-5.3-Flash (Z.ai (Zhipu AI)) est en tête d'EuroEval, ScaLA (grammaire) avec 78 %, dans l'édition du 9 novembre 2026. Suivent Gemini 3 Pro (75,6 %) et GPT-6.1 Sol (74,4 %). 153 modèles y sont mesurés.
Quelles sont les limites d'EuroEval, ScaLA (grammaire) ?
Juge la détection des fautes. La qualité de ce que le modèle écrit lui-même n'est pas notée. Au 9 novembre 2026, le benchmark est actif.
Combien pèse EuroEval, ScaLA (grammaire) dans le score IA ?
EuroEval, ScaLA (grammaire) compte pour 0,62 % du score général, dans l'édition du 9 novembre 2026. Il porte 6 % de la tâche Français (10 % du score général), que se partagent 10 benchmarks.
Qui maintient EuroEval, ScaLA (grammaire) ?
EuroEval. Sa page de référence : euroeval.com/leaderboards/Monolingual/french.

Les autres benchmarks de la tâche Français

Tous les benchmarks →Comment le score IA est calculé →