Aller au contenu
EN 4 QUESTIONSTrouver mon modèle

FrançaisFiche benchmark · EuroEval · euroeval.com

EuroEval, ELTeC (noms propres)

Le modèle repère les personnes, les lieux et les organisations dans un texte en français.

À quoi il sert

Sur QUELLE IA, EuroEval, ELTeC (noms propres) sert à noter la tâche Français : c'est l'un de ses 10 benchmarks. Il départage surtout les modèles dont le score IA approche 11.

Comment c'est noté

Un score de 0 à 100 qui combine les entités trouvées et les entités manquées.

Ce qu'il ne dit pas

Tâche d'extraction, éloignée de l'usage courant d'un assistant.

Comment lire le score

151 modèles mesurés · 210 mesures

En tête : GLM-5.3-Flash, 84 %

Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 11. Le meilleur, GLM-5.3-Flash, atteint 84 %. Le benchmark sera dit saturé quand un modèle atteindra 95 %.

Ce que ce benchmark attend à chaque niveau

Score IA 51niveau de GPT-4o (Nov 2024)
62 %
Score IA 76niveau de Claude Sonnet 4.5
70 %
Score IA 100niveau de Claude Opus 5.5
76 %

Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche

Son poids chez nous

0,62 %du score général. EuroEval, ELTeC (noms propres) porte 6 % de la tâche Français (10 % du score général), que se partagent 10 benchmarks.

En couleur, la tâche Français dans le score général. En noir, la part d'EuroEval, ELTeC (noms propres).

Le classement du benchmark

Scores relevés sur euroeval.com · édition du
RangModèleRéflexionScore publiéÉquivaut à?Source
1GLM-5.3-FlashZ.ai (Zhipu AI) · poids ouverts · 2 configurationsNon précisée84 %140,4
2Qwen3.6 27BAlibaba · poids ouvertsNon précisée83,9 %140,1
3GPT-6 SolOpenAINon précisée83,7 %138,8
4Gemini 3.7 FlashGoogle DeepMindNon précisée83,1 %135,4
5GPT-6 AstraOpenAINon précisée82,5 %132,2
6Gemini 3.6 FlashGoogle DeepMindNon précisée82,5 %132,1
7GPT-6.1 SolOpenAINon précisée81,3 %125,8
8Claude Sonnet 4.5Anthropic · 2 configurationsSans80,7 %122,5
9Qwen 3.8 27BAlibaba · poids ouvertsNon précisée80,5 %121,6
10GPT-5.6 SolOpenAINon précisée80,4 %121,2
151 modèles mesurés, chacun à sa meilleure configuration. « Équivaut à » : le score IA que ce seul résultat donnerait au modèle.Voir les 151 →Replier le classement ↑
11GPT-5.6 LunaOpenAINon précisée80 %119,0
12GPT-5.6 TerraOpenAINon précisée78,8 %113,5
13Gemma 4 31B ITGoogle DeepMind · poids ouverts · 2 configurationsNon précisée77,9 %109,4
14GPT-5.4 MiniOpenAI · 4 configurationsÉlevée77 %105,2
15Gemini 3 ProGoogle DeepMindNon précisée76,7 %104,0
16Qwen3-235B-A22B-Thinking (Jul 2025)Alibaba · poids ouvertsNon précisée75,4 %98,6
17Qwen3-Next-80B-A3B ThinkingAlibaba · poids ouvertsÉlevée75,3 %98,1
18GPT-5.4OpenAISans74,6 %95,1
19Gemma 4 12B ITGoogle DeepMind · poids ouvertsNon précisée74,2 %93,3
20GPT-6 LunaOpenAINon précisée74 %92,5
21gpt-oss-120bOpenAI · poids ouvertsNon précisée73,7 %91,4
22Qwen3-4BAlibaba · 3 configurationsÉlevée73,4 %90,2
23Nemotron 3 Nano 30BNVIDIA · poids ouverts · 3 configurationsNon précisée73,3 %90,0
24Grok 4.1 FastxAIÉlevée73,2 %89,4
25Claude Sonnet 4.6AnthropicNon précisée73,1 %89,2
26GPT-5 nanoOpenAI · 3 configurationsNon précisée72,8 %88,0
27Gemma 4 26B A4BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée72,5 %86,8
28OLMo 3.1 32B ThinkAllen Institute for AI · poids ouvertsNon précisée72,1 %85,1
29Reka Flash 3.1Reka AI · poids ouvertsNon précisée71,9 %84,5
30Reka Flash 3Reka AI · poids ouvertsNon précisée71,3 %82,1
31QwQ-32BAlibaba · poids ouvertsNon précisée71,2 %81,9
32GPT-5OpenAI · 3 configurationsNon précisée71 %81,2
33Voxtral SmallMistral AI · poids ouvertsNon précisée71 %81,1
34Mistral Small 3.2Mistral AI · poids ouvertsNon précisée70,5 %79,0
35o3OpenAINon précisée70,2 %78,1
36Mistral Small 3Mistral AI · poids ouvertsNon précisée70,2 %78,1
37Gemini 3 FlashGoogle DeepMind · 2 configurationsÉlevée70 %77,1
38Gemini 3.1 Flash-LiteGoogle DeepMindNon précisée69,9 %76,8
39OLMo 3 7B ThinkAllen Institute for AI · poids ouvertsNon précisée69,7 %76,3
40Llama 3.1-70BMeta AI · poids ouverts · 2 configurationsNon précisée69,7 %76,1
41c4ai-command-r-08-2024Cohere · poids ouvertsNon précisée69,6 %75,6
42chutes/Qwen3-Next-80B-A3B-InstructAlibaba · poids ouvertsNon précisée69,3 %74,7
43Qwen3-14BAlibaba · poids ouverts · 2 configurationsNon précisée69,2 %74,3
44Magistral Small 1.0Mistral AI · poids ouvertsNon précisée69 %73,7
45o3-miniOpenAINon précisée68,9 %73,3
46Qwen3.5-35B-A3BAlibaba · poids ouvertsNon précisée68,8 %72,8
47Llama 3-70BMeta AI · poids ouverts · 2 configurationsNon précisée68,7 %72,4
48Claude Haiku 4.5AnthropicNon précisée68,5 %71,8
49Claude 3.7 SonnetAnthropic · 2 configurationsÉlevée68,4 %71,3
50Gemma 4 E4B ITGoogle DeepMind · poids ouvertsNon précisée68,2 %70,7
51Llama 3.3 70BMeta AI · poids ouvertsNon précisée68,2 %70,5
52o4-miniOpenAINon précisée67,9 %69,6
53Qwen3-235B-A22BAlibaba · poids ouvertsNon précisée67,8 %69,3
53Llama 3.1-405BMeta AI · poids ouverts · 3 configurationsNon précisée67,8 %69,3
55Gemini 2.5 Flash (Jun 2025)Google DeepMind · 2 configurationsSans67,5 %68,3
56GLM-4.5-AirZ.ai (Zhipu AI) · poids ouverts · 2 configurationsÉlevée67,5 %68,1
57Nemotron Cascade 2 30B A3BNVIDIA · poids ouvertsNon précisée66,9 %66,0
58gpt-oss-20bOpenAI · poids ouverts · 3 configurationsFaible66,6 %65,1
59Mistral Small 3.1Mistral AI · poids ouvertsNon précisée66,6 %64,9
60Magistral Small 1.2Mistral AI · poids ouvertsNon précisée66,4 %64,3
61Grok 3xAINon précisée66,4 %64,2
62glm-4.7-flashZ.ai (Zhipu AI) · poids ouverts · 2 configurationsNon précisée65,7 %61,9
63deepseek-r1-0528-qwen3-8bDeepSeek · poids ouvertsNon précisée65,7 %61,8
64Gemma 3n E4BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée65,3 %60,4
65Qwen3-235B-A22B-Instruct (Jul 2025)Alibaba · poids ouvertsNon précisée65,2 %60,3
66Gemma 3 12BGoogle DeepMind · poids ouvertsNon précisée65,1 %60,0
67Gemini 2.5 Flash-Lite (Jun 2025)Google DeepMind · 4 configurationsÉlevée64,8 %58,8
68Ministral 3 14BMistral AI · poids ouverts · 2 configurationsÉlevée64,6 %58,2
69Gemini 2.5 Pro (Jun 2025)Google DeepMindNon précisée64,6 %58,0
70GPT-5.2OpenAINon précisée63,9 %55,9
71Ministral 3 8BMistral AI · poids ouverts · 2 configurationsÉlevée63,9 %55,6
72nvidia-nemotron-nano-9b-v2NVIDIA · poids ouverts · 2 configurationsNon précisée63,7 %55,0
73DeepSeek-R1-Distill-Qwen-32BDeepSeek · poids ouvertsNon précisée63 %52,6
74Llama 4 ScoutMeta AI · poids ouvertsNon précisée63 %52,5
75Gemma 3 27BGoogle DeepMind · poids ouvertsNon précisée62,8 %52,1
76Qwen2.5-72BAlibaba · poids ouvertsNon précisée62,8 %51,9
77EXAONE 4.0 32BLG AI Research · poids ouvertsNon précisée62,2 %49,9
78Phi-4Microsoft · poids ouvertsNon précisée61,6 %47,9
79Mistral NeMoMistral AI · poids ouvertsNon précisée60,8 %45,4
80Gemini 3.5 Flash-LiteGoogle DeepMindNon précisée60,5 %44,4
81GPT-5 miniOpenAI · 3 configurationsÉlevée60,4 %44,1
82Nemotron 3 Nano 4BNVIDIA · poids ouverts · 2 configurationsNon précisée60,4 %44,1
83Qwen3-30B-A3BAlibaba · poids ouvertsSans60,1 %43,3
83Aya Expanse 32BCohere · poids ouvertsNon précisée60,1 %43,3
85DeepSeek-R1-Distill-Llama-70BDeepSeek · poids ouvertsNon précisée60,1 %43,2
86Granite 4.0 H SmallIBM · poids ouvertsNon précisée59,3 %40,6
87GPT-4.1OpenAINon précisée59,2 %40,2
88Ministral 8BMistral AI · poids ouvertsNon précisée59,1 %39,8
89Llama 2-70BMeta AI · poids ouverts · 2 configurationsNon précisée58,9 %39,2
90Qwen3.5-9BAlibaba · poids ouvertsNon précisée58,9 %39,1
91Grok-3 minixAIÉlevée58,7 %38,7
92ALIA-40bBarcelona Supercomputing Center · poids ouvertsNon précisée58,4 %37,6
93Mixtral 8x7BMistral AI · poids ouverts · 2 configurationsNon précisée58 %36,2
94GPT-5.4 NanoOpenAI · 4 configurationsÉlevée57,9 %36,1
95Yi-1.5-34B01.AI · poids ouvertsNon précisée57,7 %35,5
96Llama 3.1-8BMeta AI · poids ouverts · 2 configurationsNon précisée57,6 %35,1
97Qwen3-8BAlibaba · poids ouverts · 2 configurationsSans56,1 %30,3
98Gemma 4 E2B ITGoogle DeepMind · poids ouvertsNon précisée55,3 %28,0
99Qwen1.5-14BAlibaba · poids ouverts · 2 configurationsNon précisée54,9 %26,6
100OLMo 3.1 32B InstructAllen Institute for AI · poids ouvertsNon précisée54,1 %24,2
101GPT-4.1 miniOpenAINon précisée53,8 %23,0
102Granite 4.0 H TinyIBM · poids ouvertsNon précisée53,8 %23,0
103Llama-3.1-Nemotron-70B-InstructNVIDIA · poids ouvertsNon précisée53,7 %22,7
104Qwen3-32BAlibaba · poids ouvertsSans53,6 %22,5
105Apertus v1.5 70BSwiss AI (EPFL, ETH Zurich) · poids ouvertsNon précisée53,1 %21,0
106Gemma 3 4BGoogle DeepMind · poids ouvertsNon précisée53,1 %20,8
107Grok-2 (Dec 2024)xAINon précisée52,8 %20,0
108Llama 3-8BMeta AI · poids ouverts · 2 configurationsNon précisée52,2 %18,1
109Mistral 7B v0.3Mistral AI · poids ouvertsNon précisée51 %14,5
110qwen3-4b-instruct-2507AlibabaNon précisée50,6 %13,2
111Llama 2-13BMeta AI · poids ouverts · 2 configurationsNon précisée50,5 %12,7
112Mistral 7B v0.1Mistral AI · poids ouverts · 2 configurationsNon précisée50,3 %12,1
113Falcon 2 11BTechnology Innovation Institute · poids ouvertsNon précisée50,3 %12,0
114SmolLM3 3BHugging Face · poids ouverts · 2 configurationsNon précisée50,1 %11,7
115EuroLLM 22B InstructEuroLLM · poids ouverts · 2 configurationsNon précisée49,7 %10,4
116Qwen3.5-2BAlibaba · poids ouvertsNon précisée49,6 %10,1
117granite-4.0-microIBM · poids ouvertsNon précisée49,6 %9,9
118EuroLLM 9B Instruct (2512)EuroLLM · poids ouvertsNon précisée49,6 %9,8
119DeepSeek-R1-Distill-Qwen-14BDeepSeekNon précisée49,2 %8,9
120OLMo 2 Furious 13BAllen Institute for AI · poids ouvertsNon précisée48,7 %7,0
121Granite 4.0 H MicroIBM · poids ouvertsNon précisée47,4 %3,0
122Gemma 7BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée46,9 %1,6
123Qwen3.5-4BAlibaba · poids ouvertsNon précisée46,9 %1,6
123Apertus 70B InstructSwiss AI (EPFL, ETH Zurich) · poids ouvertsNon précisée46,9 %1,6
125OLMo 3 7B InstructAllen Institute for AI · poids ouvertsNon précisée45 %-4,5
126Qwen2.5-1.5BAlibaba · poids ouvertsNon précisée44,4 %-6,1
127EuroLLM 9B InstructEuroLLM · poids ouvertsNon précisée44,3 %-6,6
128Llama 3.2 3BMeta AI · poids ouvertsNon précisée44,2 %-7,1
129Luciole 23B Instruct 1.1OpenLLM-France · poids ouvertsNon précisée43,4 %-9,3
130Qwen3.5-0.8BAlibaba · poids ouvertsNon précisée42,4 %-12,7
131Apertus 8B InstructSwiss AI (EPFL · poids ouvertsNon précisée42,1 %-13,4
132Ministral 3 3BMistral AI · poids ouverts · 2 configurationsÉlevée42 %-14,0
133Llama 3.2 1BMeta AI · poids ouverts · 2 configurationsNon précisée41,9 %-14,2
134Gemma 2 27BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée41,7 %-14,7
135Qwen3-1.7BAlibaba · 2 configurationsSans41,5 %-15,4
136Luciole 8B Instruct 1.1OpenLLM-France · poids ouvertsNon précisée40,8 %-17,8
137Mistral 7B v0.2Mistral AINon précisée40,1 %-20,1
138Phi-2Microsoft · poids ouvertsNon précisée39,8 %-20,9
139Phi-4 MiniMicrosoft · poids ouvertsÉlevée39,7 %-21,4
140Gemma 2 9BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée38,3 %-25,8
141Llama 2-7BMeta AI · poids ouvertsNon précisée37,8 %-27,4
142DeepSeek-R1-Distill-Qwen-7BDeepSeekNon précisée37,4 %-28,9
143Qwen3-0.6BAlibaba · 2 configurationsSans36,4 %-32,1
144DeepSeek-R1-Distill-Llama-8BDeepSeekNon précisée36,3 %-32,5
145Gemma 3 270MGoogle DeepMind · poids ouverts · 2 configurationsNon précisée35 %-37,1
146Salamandra 7B InstructBarcelona Supercomputing Center · poids ouvertsNon précisée34,4 %-39,0
147Gemma 2BGoogle DeepMind · poids ouverts · 2 configurationsNon précisée33,9 %-40,8
148Gemma 3 1BGoogle DeepMind · poids ouvertsNon précisée29,9 %-55,0
149Phi-4 ReasoningMicrosoft · poids ouvertsÉlevée26,3 %-69,1
150DeepSeek-R1-Distill-Qwen-1.5BDeepSeekNon précisée20,5 %-94,6
151Phi-4-Reasoning-plusMicrosoft · poids ouvertsNon précisée2,9 %-262,3

En bref

Que mesure EuroEval, ELTeC (noms propres) ?
Le modèle repère les personnes, les lieux et les organisations dans un texte en français. Sur QUELLE IA, il est rangé dans la tâche Français.
Comment EuroEval, ELTeC (noms propres) est-il noté ?
Un score de 0 à 100 qui combine les entités trouvées et les entités manquées. Un modèle qui obtient 50 % a un score IA d'environ 11.
Qui est en tête sur EuroEval, ELTeC (noms propres) ?
GLM-5.3-Flash (Z.ai (Zhipu AI)) est en tête d'EuroEval, ELTeC (noms propres) avec 84 %, dans l'édition du 9 novembre 2026. Suivent Qwen3.6 27B (83,9 %) et GPT-6 Sol (83,7 %). 151 modèles y sont mesurés.
Quelles sont les limites d'EuroEval, ELTeC (noms propres) ?
Tâche d'extraction, éloignée de l'usage courant d'un assistant. Au 9 novembre 2026, le benchmark est actif.
Combien pèse EuroEval, ELTeC (noms propres) dans le score IA ?
EuroEval, ELTeC (noms propres) compte pour 0,62 % du score général, dans l'édition du 9 novembre 2026. Il porte 6 % de la tâche Français (10 % du score général), que se partagent 10 benchmarks.
Qui maintient EuroEval, ELTeC (noms propres) ?
EuroEval. Sa page de référence : euroeval.com/leaderboards/Monolingual/french.

Les autres benchmarks de la tâche Français

Tous les benchmarks →Comment le score IA est calculé →