Aller au contenu
EN 4 QUESTIONSTrouver mon modèle

CodeFiche benchmark · Arena (ex LMArena) · arena.ai

Arena, questions de code

Les duels à l'aveugle d'Arena sur des questions de programmation.

À quoi il sert

Sur QUELLE IA, Arena, questions de code sert à noter la tâche Code : c'est l'un de ses 12 benchmarks. Il départage surtout les modèles dont le score IA approche 71.

Comment c'est noté

Un score Elo calculé sur les seuls duels portant sur du code.

Pour le calcul, un Elo devient une probabilité de victoire face à un niveau de référence, ici 1 447 Elo. Un écart de 100 points donne environ 64 % de chances de l'emporter.

Ce qu'il ne dit pas

Le votant juge une réponse à l'œil, sans exécuter le code.

Comment lire le score

292 modèles mesurés · 333 mesures

En tête : Gemini 4 Carbon, 1 568,2 Elo

Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 1 447 Elo a un score IA d'environ 71. Le meilleur, Gemini 4 Carbon, atteint 1 568,2 Elo.

Ce que ce benchmark attend à chaque niveau

Score IA 51niveau de GPT-4o (Nov 2024)
1 361 Elo
Score IA 76niveau de Claude Sonnet 4.5
1 473 Elo
Score IA 100niveau de Claude Opus 5.5
1 578 Elo

Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche

Son poids chez nous

1,25 %du score général. Arena, questions de code porte 8 % de la tâche Code (15 % du score général), que se partagent 12 benchmarks.

En couleur, la tâche Code dans le score général. En noir, la part d'Arena, questions de code.

Le classement du benchmark

Scores relevés sur arena.ai · édition du
RangModèleRéflexionScore publiéÉquivaut à?Source
1Gemini 4 CarbonGoogle DeepMindNon précisée1 568,2 Elo97,8
2Gemini 4 ArgonGoogle DeepMindNon précisée1 553,4 Elo94,5
3Claude Fable 5AnthropicNon précisée1 551,5 Elo94,0
4Claude Opus 4.7Anthropic · 2 configurationsNon précisée1 551,0 Elo93,9
5GPT-6 AstraOpenAIMaximale1 547,8 Elo93,2
6Claude Opus 5.5AnthropicNon précisée1 547,5 Elo93,1
7Claude Opus 4.6Anthropic · 2 configurationsNon précisée1 546,9 Elo93,0
8Muse WonderMeta AINon précisée1 542,3 Elo92,0
9Muse Spark 1.2Meta AINon précisée1 542,2 Elo91,9
10GPT-6.1 SolOpenAIMaximale1 539,6 Elo91,4
292 modèles mesurés, chacun à sa meilleure configuration. « Équivaut à » : le score IA que ce seul résultat donnerait au modèle.Voir les 292 →Replier le classement ↑
11MiMo-V2.6 ProXiaomi · poids ouvertsNon précisée1 538,2 Elo91,0
12Kimi K3Moonshot · poids ouvertsNon précisée1 538,1 Elo91,0
13Claude Opus 4.8Anthropic · 2 configurationsÉlevée1 533,6 Elo90,0
13Muse Spark 1.3Meta AINon précisée1 533,6 Elo90,0
15Claude Fable 5.1AnthropicNon précisée1 533,5 Elo90,0
16GPT-5.6 SolOpenAIMaximale1 533,3 Elo89,9
16Muse Spark 1.1Meta AINon précisée1 533,3 Elo89,9
18Claude Opus 5Anthropic · 2 configurationsNon précisée1 532,0 Elo89,6
19Gemini 3.8 FlashGoogle DeepMindNon précisée1 530,7 Elo89,3
20Claude Opus 4.5Anthropic · 2 configurationsÉlevée1 530,4 Elo89,3
21Kimi K3.1 ProMoonshot · poids ouvertsNon précisée1 529,6 Elo89,1
22Muse SparkMeta AINon précisée1 529,2 Elo89,0
23Claude Sonnet 4.6AnthropicNon précisée1 528,3 Elo88,8
24GLM-5.3-FlashZ.ai (Zhipu AI) · poids ouvertsNon précisée1 526,3 Elo88,4
25DeepSeek V4.1 FlashDeepSeek · poids ouvertsMaximale1 525,4 Elo88,1
26Qwen3.7-MaxAlibabaMaximale1 524,9 Elo88,0
27Qwen3.8 Max (0902)AlibabaMaximale1 523,2 Elo87,7
28GLM-5.3Z.ai (Zhipu AI) · poids ouvertsMaximale1 522,0 Elo87,4
29GPT-6 SolOpenAIMaximale1 520,8 Elo87,1
30GPT-5.4OpenAI · 2 configurationsÉlevée1 520,6 Elo87,1
31Gemini 3.1 ProGoogle DeepMindNon précisée1 520,4 Elo87,0
32Gemini 3.7 FlashGoogle DeepMindNon précisée1 520,3 Elo87,0
32MiMo-V2.5-ProXiaomi · poids ouvertsNon précisée1 520,3 Elo87,0
34Claude Sonnet 5AnthropicÉlevée1 519,8 Elo86,9
35Claude Sonnet 4.5Anthropic · 2 configurationsÉlevée1 518,7 Elo86,6
36Gemini 3.6 FlashGoogle DeepMindÉlevée1 518,3 Elo86,5
37GPT-5.5OpenAI · 2 configurationsÉlevée1 518,2 Elo86,5
38Gemini 4 HydrogenGoogle DeepMindNon précisée1 517,8 Elo86,4
39GPT-5.6 TerraOpenAIMaximale1 517,4 Elo86,3
40Claude Sonnet 5.5AnthropicMaximale1 517,2 Elo86,3
41Gemini 3 ProGoogle DeepMindNon précisée1 517,0 Elo86,3
42Kimi K2.6Moonshot · poids ouvertsNon précisée1 516,1 Elo86,0
43GLM-5.2Z.ai (Zhipu AI) · poids ouvertsMaximale1 515,4 Elo85,9
44GPT-5.2 ChatOpenAINon précisée1 514,7 Elo85,7
45Grok 4.5xAINon précisée1 514,2 Elo85,6
46Seed 2.0 ProByteDanceNon précisée1 513,9 Elo85,6
47GPT-5.5 InstantOpenAINon précisée1 513,4 Elo85,4
48Qwen3.5 Max PreviewAlibabaMaximale1 513,0 Elo85,3
49GLM-5.1Z.ai (Zhipu AI) · poids ouvertsNon précisée1 512,3 Elo85,2
50ERNIE 5.1BaiduNon précisée1 511,9 Elo85,1
51MiMo-V2.6 FlashXiaomi · poids ouvertsNon précisée1 511,4 Elo85,0
51Claude Opus 4.1Anthropic · 2 configurationsÉlevée1 511,4 Elo85,0
53Grok 4.20 Beta (0309)xAIÉlevée1 510,9 Elo84,9
54Qwen 3.6 Max (Preview)AlibabaMaximale1 509,9 Elo84,6
55Grok 4.20 Multi Agent BetaxAINon précisée1 508,5 Elo84,3
56Grok 4.6xAIÉlevée1 508,4 Elo84,3
57Gemini 3.5 FlashGoogle DeepMind · 2 configurationsÉlevée1 508,0 Elo84,2
58Grok 4.20 Beta 1xAINon précisée1 507,8 Elo84,2
59Gemini 3 FlashGoogle DeepMind · 2 configurationsNon précisée1 505,2 Elo83,6
60BeamReflection AI · poids ouvertsNon précisée1 504,7 Elo83,5
61Step 5 PreviewStepFun · poids ouvertsNon précisée1 504,6 Elo83,5
61Kimi K2.5 InstantMoonshot · poids ouvertsNon précisée1 504,6 Elo83,5
63Hy3Tencent · poids ouvertsNon précisée1 504,0 Elo83,3
64DeepSeek-V4-ProDeepSeek · poids ouverts · 3 configurationsÉlevée1 503,4 Elo83,2
65MiMo-V2-ProXiaomiNon précisée1 503,0 Elo83,1
66GPT-5.6 LunaOpenAIMaximale1 502,5 Elo83,0
67Gemini 3.5 Flash-LiteGoogle DeepMindNon précisée1 502,1 Elo82,9
67Gemma 4 31B ITGoogle DeepMind · poids ouvertsNon précisée1 502,1 Elo82,9
69Kimi K2.5Moonshot · poids ouvertsÉlevée1 501,9 Elo82,8
70GPT-6 LunaOpenAIMaximale1 501,3 Elo82,7
71Qwen3.7-PlusAlibabaNon précisée1 500,3 Elo82,5
72Grok 4.1xAI · 2 configurationsÉlevée1 500,0 Elo82,4
73Claude Opus 4Anthropic · 2 configurationsÉlevée1 498,5 Elo82,1
74GLM-5Z.ai (Zhipu AI) · poids ouvertsNon précisée1 498,3 Elo82,0
75GPT-5.3 ChatOpenAINon précisée1 496,6 Elo81,6
76Qwen 3.6 PlusAlibabaNon précisée1 496,3 Elo81,6
77Qwen 3.8 27BAlibaba · poids ouvertsNon précisée1 496,1 Elo81,5
78GPT-5.4 MiniOpenAIÉlevée1 494,9 Elo81,3
79InklingThinking Machines · poids ouvertsNon précisée1 494,0 Elo81,1
80MiniMax-M3MiniMax · poids ouvertsNon précisée1 493,0 Elo80,8
81Grok 4.7xAIMaximale1 492,5 Elo80,7
82GPT-5.1OpenAI · 2 configurationsÉlevée1 491,7 Elo80,5
83MiMo-V2.5Xiaomi · poids ouvertsNon précisée1 491,1 Elo80,4
84Qwen3.5 397B-A17BAlibaba · poids ouvertsNon précisée1 490,2 Elo80,2
85Claude Haiku 5.5AnthropicNon précisée1 489,2 Elo80,0
85ERNIE 5.0Baidu · 3 configurationsNon précisée1 489,2 Elo80,0
87GPT-5.2OpenAI · 2 configurationsÉlevée1 489,0 Elo79,9
88MiMo V2 OmniXiaomiNon précisée1 488,0 Elo79,7
89Grok 4.3 BetaxAINon précisée1 487,3 Elo79,5
90Kimi K2 ThinkingMoonshot · poids ouvertsNon précisée1 486,4 Elo79,3
91Inkling 2 SmallThinking Machines · poids ouvertsNon précisée1 484,8 Elo79,0
92DeepSeek-V4-FlashDeepSeek · poids ouverts · 2 configurationsNon précisée1 484,1 Elo78,8
92GLM-4.7Z.ai (Zhipu AI) · poids ouvertsNon précisée1 484,1 Elo78,8
94Mistral Large 4Mistral AI · poids ouvertsNon précisée1 483,5 Elo78,7
95Gemma 4 26B A4BGoogle DeepMind · poids ouvertsNon précisée1 482,7 Elo78,5
96Claude Haiku 4.5AnthropicNon précisée1 481,5 Elo78,2
97Muse GlimmerMeta AI · poids ouvertsNon précisée1 480,7 Elo78,1
98Qwen3-MaxAlibaba · 2 configurationsMaximale1 480,4 Elo78,0
99MiniMax-M2.7MiniMax · poids ouvertsNon précisée1 479,9 Elo77,9
100Mistral Medium 3.5Mistral AI · poids ouvertsNon précisée1 478,1 Elo77,5
101DeepSeek-V3.2DeepSeek · poids ouverts · 2 configurationsÉlevée1 475,4 Elo76,9
102DeepSeek-V3.2-ExpDeepSeek · poids ouverts · 2 configurationsÉlevée1 474,9 Elo76,7
103Claude Sonnet 4Anthropic · 2 configurationsÉlevée1 474,5 Elo76,7
104Nemotron 3 UltraNVIDIA · poids ouvertsNon précisée1 473,7 Elo76,5
105Inkling-SmallThinking Machines · poids ouvertsNon précisée1 472,4 Elo76,2
106LongCat Flash ChatMeituanNon précisée1 472,0 Elo76,1
107Qwen3-235B-A22B-Instruct (Jul 2025)Alibaba · poids ouvertsNon précisée1 471,8 Elo76,0
108GPT-5OpenAI · 2 configurationsÉlevée1 471,3 Elo75,9
109Mistral Large 3Mistral AI · poids ouvertsNon précisée1 471,0 Elo75,9
110Kimi K2 (Sep 2025)Moonshot · poids ouvertsNon précisée1 468,2 Elo75,2
111ChatGPT-4o LatestOpenAINon précisée1 466,7 Elo74,9
112Gemini 2.5 Pro (Jun 2025)Google DeepMindNon précisée1 464,2 Elo74,3
113DeepSeek-R1 (May 2025)DeepSeek · poids ouverts · 2 configurationsNon précisée1 464,0 Elo74,3
114Qwen3 VL 235B A22B InstructAlibaba · poids ouvertsNon précisée1 462,8 Elo74,0
115Grok 4.1 FastxAIÉlevée1 461,4 Elo73,7
116Solar Pro 4UpstageNon précisée1 460,9 Elo73,6
117o3OpenAINon précisée1 460,2 Elo73,4
118Nemotron 3.5 Super VLNVIDIA · poids ouvertsNon précisée1 459,8 Elo73,3
119Kimi K2 (Jul 2025)Moonshot · poids ouvertsNon précisée1 459,7 Elo73,3
120GPT-5.4 NanoOpenAIÉlevée1 459,6 Elo73,3
121DeepSeek-V3.1-TerminusDeepSeek · poids ouverts · 2 configurationsÉlevée1 459,2 Elo73,2
122Qwen3.5-122B-A10BAlibaba · poids ouvertsNon précisée1 458,2 Elo73,0
122GLM-4.6Z.ai (Zhipu AI) · poids ouvertsNon précisée1 458,2 Elo73,0
124GPT-4.5OpenAINon précisée1 457,9 Elo72,9
125Grok 4 Fast ChatxAINon précisée1 457,5 Elo72,8
125Gemini 3.1 Flash-LiteGoogle DeepMindNon précisée1 457,5 Elo72,8
127Qwen3-Coder-480B-A35BAlibaba · poids ouvertsNon précisée1 457,1 Elo72,7
128GPT-4.1OpenAINon précisée1 455,8 Elo72,4
129DeepSeek-V3.1DeepSeek · poids ouverts · 2 configurationsÉlevée1 455,2 Elo72,3
130GLM-4.5Z.ai (Zhipu AI) · poids ouvertsNon précisée1 455,1 Elo72,3
131Mistral Medium 3.1Mistral AIMoyenne1 453,8 Elo72,0
132Hunyuan Hy3 PreviewTencent · poids ouvertsNon précisée1 452,8 Elo71,8
133Claude 3.7 SonnetAnthropic · 2 configurationsÉlevée1 452,2 Elo71,6
134Qwen3 VL 235B A22B ThinkingAlibaba · poids ouvertsÉlevée1 452,0 Elo71,6
135Qwen3.5-27BAlibaba · poids ouvertsNon précisée1 451,5 Elo71,5
136Step 3.5 FlashStepFun · poids ouvertsNon précisée1 448,6 Elo70,8
137MiMo-V2-FlashXiaomi · poids ouverts · 2 configurationsNon précisée1 446,9 Elo70,4
138MiniMax-M2.5MiniMax · poids ouvertsNon précisée1 446,7 Elo70,4
139Qwen3-235B-A22BAlibaba · poids ouverts · 2 configurationsSans1 444,4 Elo69,9
140chutes/Qwen3-Next-80B-A3B-InstructAlibaba · poids ouvertsNon précisée1 444,1 Elo69,8
141Trinity Large ThinkingArcee AI · poids ouverts · 2 configurationsNon précisée1 443,1 Elo69,6
142Grok 3xAINon précisée1 442,4 Elo69,4
143Qwen3-235B-A22B-Thinking (Jul 2025)Alibaba · poids ouvertsÉlevée1 441,9 Elo69,3
144Grok 4 FastxAIÉlevée1 439,1 Elo68,7
145Qwen3-30B-A3B-Instruct (Jul 2025)Alibaba · poids ouvertsNon précisée1 437,9 Elo68,4
146MiniMax-M2.1MiniMax · poids ouvertsNon précisée1 437,2 Elo68,2
147Hunyuan Vision 1.5TencentÉlevée1 436,4 Elo68,1
148Claude 3.5 SonnetAnthropic · 2 configurationsNon précisée1 435,7 Elo67,9
149Qwen 3.5 Flash (hosted 35B-A3B)AlibabaNon précisée1 435,4 Elo67,8
150Grok 4xAINon précisée1 435,3 Elo67,8
151Qwen3.5-35B-A3BAlibaba · poids ouvertsNon précisée1 434,5 Elo67,6
152o3-miniOpenAI · 2 configurationsÉlevée1 434,3 Elo67,6
153o4-miniOpenAINon précisée1 433,1 Elo67,3
154GPT-4.1 miniOpenAINon précisée1 433,0 Elo67,3
155o1OpenAINon précisée1 432,7 Elo67,2
156Mistral Medium 3Mistral AIMoyenne1 432,6 Elo67,2
157GPT-5 miniOpenAIÉlevée1 432,1 Elo67,1
158DeepSeek-V3 (Mar 2025)DeepSeek · poids ouverts · 2 configurationsNon précisée1 428,0 Elo66,2
159Nemotron 3.5 LightningNVIDIA · poids ouvertsNon précisée1 427,7 Elo66,1
160Gemini 2.5 Flash (Sep 2025)Google DeepMindNon précisée1 427,5 Elo66,0
161GLM-4.5-AirZ.ai (Zhipu AI) · poids ouvertsNon précisée1 427,0 Elo65,9
162Gemini 2.5 Flash (Jun 2025)Google DeepMindNon précisée1 423,7 Elo65,2
163glm-4.7-flashZ.ai (Zhipu AI) · poids ouvertsNon précisée1 422,9 Elo65,0
164Qwen3-Next-80B-A3B ThinkingAlibaba · poids ouvertsÉlevée1 420,9 Elo64,6
165GLM-4.6VZ.ai (Zhipu AI) · poids ouvertsNon précisée1 416,5 Elo63,6
166MiniMax-M1-80kMiniMax · poids ouvertsNon précisée1 416,4 Elo63,5
167o1-previewOpenAINon précisée1 415,4 Elo63,3
168INTELLECT-3Prime Intellect · poids ouvertsNon précisée1 414,9 Elo63,2
169Mistral Small 3.2Mistral AI · poids ouvertsNon précisée1 411,8 Elo62,5
170Step 3StepFun · poids ouvertsNon précisée1 409,0 Elo61,9
171Ling-flash-2.0Ant Group · poids ouvertsNon précisée1 408,9 Elo61,8
172Nemotron 3 SuperNVIDIA · poids ouvertsNon précisée1 407,1 Elo61,4
173Qwen3-32BAlibaba · poids ouvertsNon précisée1 406,0 Elo61,2
174Llama 3.3 Nemotron Super 49B v1.5NVIDIA · poids ouvertsNon précisée1 403,6 Elo60,6
175GLM-4.5VZ.ai (Zhipu AI) · poids ouvertsNon précisée1 402,7 Elo60,4
176Qwen2.5-MaxAlibaba · 2 configurationsMaximale1 401,4 Elo60,1
177Hunyuan-T1TencentNon précisée1 401,3 Elo60,1
178Hunyuan-TurboSTencent · 2 configurationsNon précisée1 398,6 Elo59,5
179Granite 4.2 30BIBM · poids ouvertsNon précisée1 398,2 Elo59,4
180Gemini 2.5 Flash-Lite (Sep 2025)Google DeepMindSans1 397,3 Elo59,2
181Nova 2 LiteAmazonNon précisée1 392,9 Elo58,2
182Grok-3 minixAI · 2 configurationsÉlevée1 392,5 Elo58,1
183Mercury 2Inception LabsNon précisée1 392,1 Elo58,0
184Llama 3.1 Nemotron Ultra 253BNVIDIA · poids ouvertsNon précisée1 390,6 Elo57,7
185Ring-flash-2.0Ant Group · poids ouvertsNon précisée1 390,2 Elo57,6
186gpt-oss-120bOpenAI · poids ouvertsNon précisée1 389,5 Elo57,5
187Cohere Command ACohere · poids ouvertsNon précisée1 388,5 Elo57,2
188Magistral Medium 1.1Mistral AIMoyenne1 387,3 Elo57,0
189o1-miniOpenAINon précisée1 385,7 Elo56,6
190Claude 3.5 HaikuAnthropicNon précisée1 385,5 Elo56,6
191GPT-5 nanoOpenAIÉlevée1 385,4 Elo56,5
192Qwen3-30B-A3BAlibaba · poids ouvertsNon précisée1 385,0 Elo56,4
193MiniMax-M2MiniMax · poids ouvertsNon précisée1 382,8 Elo55,9
194Gemini 2.5 Flash-Lite (Jun 2025)Google DeepMindÉlevée1 382,5 Elo55,9
195QwQ-32BAlibaba · poids ouvertsNon précisée1 382,4 Elo55,9
196OLMo 3.1 32B InstructAllen Institute for AI · poids ouvertsNon précisée1 381,3 Elo55,6
197Qwen Plus (Jan 2025)AlibabaNon précisée1 378,5 Elo55,0
198Llama 3.1-405BMeta AI · poids ouverts · 2 configurationsNon précisée1 376,3 Elo54,5
199Granite 4.2 3BIBM · poids ouvertsNon précisée1 375,7 Elo54,3
200DeepSeek-V2.5 (Dec 2024)DeepSeek · poids ouvertsNon précisée1 373,7 Elo53,9
201GPT-4.1 nanoOpenAINon précisée1 372,9 Elo53,7
202Llama 4 MaverickMeta AI · poids ouvertsNon précisée1 372,4 Elo53,6
203GPT-4o (May 2024)OpenAINon précisée1 368,9 Elo52,8
204Yi-Lightning01.AINon précisée1 368,4 Elo52,7
205gpt-oss-20bOpenAI · poids ouvertsNon précisée1 368,3 Elo52,7
206DeepSeek-V2.5 (Sep 2024)DeepSeek · poids ouvertsNon précisée1 367,6 Elo52,5
207Granite 4.2 8BIBM · poids ouvertsNon précisée1 366,7 Elo52,3
208MercuryInception LabsNon précisée1 364,0 Elo51,7
209Gemini 2.0 Flash (Feb 2025)Google DeepMindNon précisée1 363,4 Elo51,6
210Llama 4 ScoutMeta AI · poids ouvertsNon précisée1 362,5 Elo51,4
211Llama 3.3 Nemotron Super 49B v1NVIDIA · poids ouvertsNon précisée1 361,7 Elo51,2
212Mistral Small 3.1Mistral AI · poids ouvertsNon précisée1 361,1 Elo51,0
213Nemotron 3 Nano 30BNVIDIA · poids ouvertsNon précisée1 361,0 Elo51,0
214GPT-4o (Aug 2024)OpenAINon précisée1 359,6 Elo50,7
215OLMo 3 32B ThinkAi2 · poids ouvertsNon précisée1 359,2 Elo50,6
216Gemma 3 27BGoogle DeepMind · poids ouvertsNon précisée1 357,8 Elo50,3
217Grok-2 (Aug 2024)xAINon précisée1 357,6 Elo50,3
218Gemini 1.5 Pro (Sept 2024)Google DeepMindNon précisée1 356,1 Elo49,9
219Claude 3 OpusAnthropicNon précisée1 355,2 Elo49,7
220Qwen2.5-72BAlibaba · poids ouvertsNon précisée1 354,8 Elo49,6
221Granite 4.1 8BIBM · poids ouvertsNon précisée1 353,9 Elo49,4
222Mistral Large 2 (Jul 2024)Mistral AI · poids ouvertsNon précisée1 353,5 Elo49,3
223GPT-4o miniOpenAINon précisée1 347,6 Elo48,0
224GPT-4 Turbo (Apr 2024)OpenAINon précisée1 346,8 Elo47,8
225Gemini 1.5 Pro (May 2024)Google DeepMindNon précisée1 346,2 Elo47,7
226Llama 3.3 70BMeta AI · poids ouvertsNon précisée1 345,8 Elo47,6
227Mistral Large 2 (Nov 2024)Mistral AI · poids ouvertsNon précisée1 345,7 Elo47,6
228Amazon Nova ProAmazonNon précisée1 342,6 Elo46,9
229Gemini 2.0 Flash-LiteGoogle DeepMindNon précisée1 342,4 Elo46,8
230Qwen2.5-Coder-32B-InstructAlibaba · poids ouvertsNon précisée1 341,9 Elo46,7
231GPT-4 Turbo (Nov 2023)OpenAI · 2 configurationsNon précisée1 340,3 Elo46,4
232OLMo 3.1 32B ThinkAllen Institute for AI · poids ouvertsNon précisée1 339,5 Elo46,2
233Grok-2 minixAINon précisée1 334,2 Elo45,0
234Llama 3.1-70BMeta AI · poids ouvertsNon précisée1 333,1 Elo44,7
235Granite 4.0 H SmallIBM · poids ouvertsNon précisée1 330,2 Elo44,1
236GPT-4 (Mar 2023)OpenAINon précisée1 329,8 Elo44,0
237Llama-3.1-Nemotron-70B-InstructNVIDIA · poids ouvertsNon précisée1 327,8 Elo43,5
238Claude 3 SonnetAnthropicNon précisée1 318,2 Elo41,4
239Gemini 1.5 Flash (Sep 2024)Google DeepMindNon précisée1 316,1 Elo40,9
240Gemma 3 12BGoogle DeepMind · poids ouvertsNon précisée1 315,8 Elo40,8
241GPT-4 (Jun 2023)OpenAINon précisée1 314,5 Elo40,5
242Mistral Small 3Mistral AI · poids ouvertsNon précisée1 312,0 Elo40,0
243GLM-4 (0520)Z.ai (Zhipu AI)Non précisée1 309,0 Elo39,3
244Gemini 1.5 Flash (May 2024)Google DeepMindNon précisée1 308,7 Elo39,2
244Nemotron-4 340BNVIDIA · poids ouvertsNon précisée1 308,7 Elo39,2
246Gemma 3n E4BGoogle DeepMind · poids ouvertsNon précisée1 307,1 Elo38,9
247Llama 3-70BMeta AI · poids ouvertsNon précisée1 306,1 Elo38,6
248Phi-4Microsoft · poids ouvertsNon précisée1 305,7 Elo38,5
249Amazon Nova LiteAmazonNon précisée1 305,5 Elo38,5
250Gemma 2 27BGoogle DeepMind · poids ouvertsNon précisée1 303,9 Elo38,1
251Claude 3 HaikuAnthropicNon précisée1 301,2 Elo37,5
252Qwen2-72BAlibaba · poids ouvertsNon précisée1 297,3 Elo36,6
253Mistral LargeMistral AI · poids ouvertsNon précisée1 295,6 Elo36,3
254Amazon Nova MicroAmazonNon précisée1 288,3 Elo34,6
255Qwen1.5-110BAlibaba · poids ouvertsNon précisée1 279,7 Elo32,7
256Mixtral 8x22BMistral AI · poids ouvertsNon précisée1 277,7 Elo32,2
257Qwen1.5-72BAlibaba · poids ouvertsNon précisée1 275,3 Elo31,7
258GPT-3.5 Turbo (Jan 2024)OpenAINon précisée1 274,8 Elo31,6
259Ministral 8BMistral AI · poids ouvertsNon précisée1 274,2 Elo31,4
260Gemma 3 4BGoogle DeepMind · poids ouvertsNon précisée1 273,5 Elo31,3
261Gemini 1.5 Flash 8BGoogle DeepMindNon précisée1 271,3 Elo30,8
262Gemma 2 9BGoogle DeepMind · poids ouvertsNon précisée1 269,7 Elo30,4
263Mistral MediumMistral AI · poids ouvertsMoyenne1 262,7 Elo28,8
264GPT-3.5 Turbo (Nov 2023)OpenAINon précisée1 262,4 Elo28,8
265Qwen1.5-32BAlibaba · poids ouvertsNon précisée1 262,3 Elo28,7
266Llama 3.1-8BMeta AI · poids ouvertsNon précisée1 259,5 Elo28,1
267Llama 3-8BMeta AI · poids ouvertsNon précisée1 253,1 Elo26,7
268DBRXDatabricks · poids ouvertsNon précisée1 251,3 Elo26,3
269Yi-1.5-34B01.AI · poids ouvertsNon précisée1 248,5 Elo25,6
270Mixtral 8x7BMistral AI · poids ouvertsNon précisée1 239,8 Elo23,7
270Qwen1.5-14BAlibaba · poids ouvertsNon précisée1 239,8 Elo23,7
272DeepSeek LLM 67BDeepSeek · poids ouvertsNon précisée1 218,3 Elo18,8
273Qwen1.5-7BAlibaba · poids ouvertsNon précisée1 209,7 Elo16,9
274Yi-34B01.AI · poids ouvertsNon précisée1 205,7 Elo16,0
275phi-3-small 7.4BMicrosoft · poids ouvertsNon précisée1 205,1 Elo15,8
276Qwen-14BAlibaba · poids ouvertsNon précisée1 197,8 Elo14,2
277phi-3-mini 3.8BMicrosoft · poids ouverts · 2 configurationsNon précisée1 187,7 Elo11,9
278Mistral 7B v0.2Mistral AINon précisée1 186,1 Elo11,5
279Llama 2-70BMeta AI · poids ouvertsNon précisée1 179,3 Elo10,0
280Llama 3.2 3BMeta AI · poids ouvertsNon précisée1 176,6 Elo9,4
281QwQ-32B-PreviewAlibaba · poids ouvertsNon précisée1 173,9 Elo8,8
282MPT-30BMosaicML · poids ouvertsNon précisée1 168,1 Elo7,5
283Gemma 7BGoogle DeepMind · poids ouvertsNon précisée1 166,6 Elo7,1
284Llama 2-13BMeta AI · poids ouvertsNon précisée1 162,7 Elo6,3
285Llama 3.2 1BMeta AI · poids ouvertsNon précisée1 149,4 Elo3,2
286Gemma 2BGoogle DeepMind · poids ouvertsNon précisée1 135,7 Elo0,2
287Llama 2-7BMeta AI · poids ouvertsNon précisée1 103,3 Elo-7,2
288MPT-7BMosaicML · poids ouvertsNon précisée1 066,1 Elo-15,6
289chatglm2-6bZ.ai (Zhipu AI)Non précisée1 030,8 Elo-23,5
290stablelm-tuned-alpha-7bStability AINon précisée1 005,0 Elo-29,4
291Dolly 2.0-12bDatabricks · poids ouvertsNon précisée962,2 Elo-39,0
292LLaMA-13BMeta AI · poids ouvertsNon précisée882,6 Elo-57,0

En bref

Que mesure Arena, questions de code ?
Les duels à l'aveugle d'Arena sur des questions de programmation. Sur QUELLE IA, il est rangé dans la tâche Code.
Comment Arena, questions de code est-il noté ?
Un score Elo calculé sur les seuls duels portant sur du code. Un modèle qui obtient 1 447 Elo a un score IA d'environ 71.
Qui est en tête sur Arena, questions de code ?
Gemini 4 Carbon (Google DeepMind) est en tête d'Arena, questions de code avec 1 568,2 Elo, dans l'édition du 9 novembre 2026. Suivent Gemini 4 Argon (1 553,4 Elo) et Claude Fable 5 (1 551,5 Elo). 292 modèles y sont mesurés.
Quelles sont les limites d'Arena, questions de code ?
Le votant juge une réponse à l'œil, sans exécuter le code. Au 9 novembre 2026, le benchmark est actif.
Combien pèse Arena, questions de code dans le score IA ?
Arena, questions de code compte pour 1,25 % du score général, dans l'édition du 9 novembre 2026. Il porte 8 % de la tâche Code (15 % du score général), que se partagent 12 benchmarks.
Qui maintient Arena, questions de code ?
Arena (ex LMArena). Sa page de référence : arena.ai/leaderboard.

Les autres benchmarks de la tâche Code

Tous les benchmarks →Comment le score IA est calculé →