Aller au contenu
EN 4 QUESTIONSTrouver mon modèle

FrançaisFiche benchmark · EuroEval · euroeval.com

EuroEval, INCLUDE (connaissances)

Des questions à choix multiples de connaissances, posées en français.

À quoi il sert

Sur QUELLE IA, EuroEval, INCLUDE (connaissances) sert à noter la tâche Français : c'est l'un de ses 10 benchmarks. Il départage surtout les modèles dont le score IA approche 41.

Comment c'est noté

La part de bonnes réponses, corrigée du hasard.

Ce qu'il ne dit pas

Mesure ce que le modèle sait, en français. Sa rédaction n'est pas évaluée.

Comment lire le score

74 modèles mesurés · 98 mesures

En tête : Gemini 3 Flash, 87,7 %

Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 41. Le meilleur, Gemini 3 Flash, atteint 87,7 %. Le benchmark sera dit saturé quand un modèle atteindra 95 %.

Ce que ce benchmark attend à chaque niveau

Score IA 51niveau de GPT-4o (Nov 2024)
57 %
Score IA 76niveau de Claude Sonnet 4.5
72 %
Score IA 100niveau de Claude Opus 5.5
83 %

Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche

Son poids chez nous

0,62 %du score général. EuroEval, INCLUDE (connaissances) porte 6 % de la tâche Français (10 % du score général), que se partagent 10 benchmarks.

En couleur, la tâche Français dans le score général. En noir, la part d'EuroEval, INCLUDE (connaissances).

Le classement du benchmark

Scores relevés sur euroeval.com · édition du
RangModèleRéflexionScore publiéÉquivaut à?Source
1Gemini 3 FlashGoogle DeepMind · 2 configurationsÉlevée87,7 %115,2
2Gemini 3.7 FlashGoogle DeepMindNon précisée84,9 %106,2
3GPT-5.6 SolOpenAINon précisée84,1 %104,1
4Gemini 3.6 FlashGoogle DeepMindNon précisée84 %103,7
5GPT-6.1 SolOpenAINon précisée81,8 %97,7
6GPT-5 miniOpenAINon précisée80,8 %95,2
7Grok 4.1 FastxAIÉlevée79,7 %92,6
8GLM-5.3-FlashZ.ai (Zhipu AI) · poids ouverts · 2 configurationsNon précisée79,2 %91,6
9GPT-6 SolOpenAINon précisée79,2 %91,5
10GPT-5.4 MiniOpenAI · 4 configurationsFaible79,2 %91,5
74 modèles mesurés, chacun à sa meilleure configuration. « Équivaut à » : le score IA que ce seul résultat donnerait au modèle.Voir les 74 →Replier le classement ↑
11GPT-6 AstraOpenAINon précisée78,8 %90,6
12GPT-4.1OpenAINon précisée76,9 %86,3
13GPT-5.6 TerraOpenAINon précisée75,6 %83,7
14Qwen3.6 27BAlibaba · poids ouvertsNon précisée75,4 %83,2
15Claude Sonnet 4.5Anthropic · 2 configurationsÉlevée75,2 %82,8
16Qwen 3.8 27BAlibaba · poids ouvertsNon précisée74,8 %82,1
17Claude Sonnet 4.6AnthropicNon précisée73,9 %80,1
18Qwen3.5-35B-A3BAlibaba · poids ouvertsNon précisée73,6 %79,7
19Mistral Small 3.2Mistral AI · poids ouvertsNon précisée72,8 %78,0
20GPT-5.4OpenAISans72,2 %77,0
21GPT-5.4 NanoOpenAI · 4 configurationsÉlevée72 %76,6
22Gemma 4 26B A4BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée72 %76,5
23gpt-oss-120bOpenAI · poids ouvertsNon précisée71,3 %75,3
24GPT-5.6 LunaOpenAINon précisée71,3 %75,3
25Mistral Small 3.1Mistral AI · poids ouvertsNon précisée70,5 %73,7
26Qwen2.5-72BAlibaba · poids ouvertsNon précisée70,4 %73,6
27Gemini 3.1 Flash-LiteGoogle DeepMindNon précisée69,2 %71,5
28Nemotron 3 Nano 30BNVIDIA · poids ouverts · 2 configurationsNon précisée69,2 %71,4
29gpt-oss-20bOpenAI · poids ouverts · 3 configurationsMoyenne67,9 %69,2
30Gemma 4 31B ITGoogle DeepMind · poids ouverts · 2 configurationsNon précisée67,8 %69,0
31GPT-6 LunaOpenAINon précisée67,7 %68,9
32Llama 3.3 70BMeta AI · poids ouvertsNon précisée67,4 %68,2
33Gemini 2.5 Flash-Lite (Jun 2025)Google DeepMind · 2 configurationsÉlevée66,9 %67,4
34Nemotron Cascade 2 30B A3BNVIDIA · poids ouvertsNon précisée66,2 %66,2
35Qwen3.5-9BAlibaba · poids ouvertsNon précisée64,5 %63,4
36Qwen3-32BAlibaba · poids ouvertsSans64,5 %63,3
37Qwen3-14BAlibaba · poids ouvertsSans63,8 %62,2
38Qwen3.5-4BAlibaba · poids ouvertsNon précisée63,1 %61,1
39Ministral 3 8BMistral AI · poids ouverts · 2 configurationsÉlevée62,6 %60,3
40Gemma 3 27BGoogle DeepMind · poids ouvertsNon précisée61,9 %59,1
41Qwen3-4BAlibaba · 2 configurationsÉlevée61,3 %58,2
42EuroLLM 22B InstructEuroLLM · poids ouvertsNon précisée60,8 %57,3
43Llama 3.1-70BMeta AI · poids ouvertsNon précisée59,9 %55,9
44GPT-5.2OpenAINon précisée59,9 %55,9
45GPT-5 nanoOpenAINon précisée59,4 %55,2
46Claude Haiku 4.5AnthropicNon précisée57,8 %52,6
47Gemma 3 12BGoogle DeepMind · poids ouvertsNon précisée57,5 %52,1
48glm-4.7-flashZ.ai (Zhipu AI) · poids ouverts · 2 configurationsNon précisée56,4 %50,5
49Qwen3-8BAlibaba · poids ouvertsSans54,3 %47,3
50Gemini 3.5 Flash-LiteGoogle DeepMindNon précisée54,3 %47,2
51Gemma 4 12B ITGoogle DeepMind · poids ouvertsNon précisée52,5 %44,5
52Gemma 4 E4B ITGoogle DeepMind · poids ouvertsNon précisée50,9 %42,1
53Ministral 3 3BMistral AI · poids ouverts · 2 configurationsNon précisée50,8 %41,9
54Ministral 3 14BMistral AI · poids ouverts · 2 configurationsNon précisée49,9 %40,5
55EXAONE 4.0 32BLG AI Research · poids ouvertsNon précisée45,9 %34,4
56EuroLLM 9B InstructEuroLLM · poids ouvertsNon précisée45,6 %33,9
57Luciole 23B Instruct 1.1OpenLLM-France · poids ouvertsNon précisée45,3 %33,5
58Nemotron 3 Nano 4BNVIDIA · poids ouverts · 2 configurationsNon précisée45,1 %33,3
59Llama 3.1-8BMeta AI · poids ouverts · 2 configurationsNon précisée42,9 %29,8
60SmolLM3 3BHugging Face · poids ouvertsSans39,9 %25,1
61Apertus v1.5 70BSwiss AI (EPFL, ETH Zurich) · poids ouvertsNon précisée38,8 %23,4
62EuroLLM 9B Instruct (2512)EuroLLM · poids ouvertsNon précisée37,9 %22,0
63Gemma 4 E2B ITGoogle DeepMind · poids ouvertsNon précisée36,9 %20,4
64Luciole 8B Instruct 1.1OpenLLM-France · poids ouvertsNon précisée36,8 %20,1
65Gemma 3 4BGoogle DeepMind · poids ouvertsNon précisée35,6 %18,1
66Llama 3.2 3BMeta AI · poids ouvertsNon précisée31,4 %10,9
67Qwen3-1.7BAlibabaSans29,4 %7,4
68Salamandra 7B InstructBarcelona Supercomputing Center · poids ouvertsNon précisée27,4 %3,7
69Qwen3.5-2BAlibaba · poids ouvertsNon précisée26,9 %2,6
70Qwen3-0.6BAlibabaSans11,5 %-36,7
71Qwen3.5-0.8BAlibaba · poids ouvertsNon précisée10,5 %-40,8
72Gemma 3 1BGoogle DeepMind · poids ouvertsNon précisée6,8 %-59,1
73Gemma 3 270MGoogle DeepMind · poids ouverts · 2 configurationsNon précisée5,6 %-66,4
74Llama 3.2 1BMeta AI · poids ouverts · 2 configurationsNon précisée2,3 %-101,2

En bref

Que mesure EuroEval, INCLUDE (connaissances) ?
Des questions à choix multiples de connaissances, posées en français. Sur QUELLE IA, il est rangé dans la tâche Français.
Comment EuroEval, INCLUDE (connaissances) est-il noté ?
La part de bonnes réponses, corrigée du hasard. Un modèle qui obtient 50 % a un score IA d'environ 41.
Qui est en tête sur EuroEval, INCLUDE (connaissances) ?
Gemini 3 Flash (Google DeepMind) est en tête d'EuroEval, INCLUDE (connaissances) avec 87,7 %, dans l'édition du 9 novembre 2026. Suivent Gemini 3.7 Flash (84,9 %) et GPT-5.6 Sol (84,1 %). 74 modèles y sont mesurés.
Quelles sont les limites d'EuroEval, INCLUDE (connaissances) ?
Mesure ce que le modèle sait, en français. Sa rédaction n'est pas évaluée. Au 9 novembre 2026, le benchmark est actif.
Combien pèse EuroEval, INCLUDE (connaissances) dans le score IA ?
EuroEval, INCLUDE (connaissances) compte pour 0,62 % du score général, dans l'édition du 9 novembre 2026. Il porte 6 % de la tâche Français (10 % du score général), que se partagent 10 benchmarks.
Qui maintient EuroEval, INCLUDE (connaissances) ?
EuroEval. Sa page de référence : euroeval.com/leaderboards/Monolingual/french.

Les autres benchmarks de la tâche Français

Tous les benchmarks →Comment le score IA est calculé →