À quoi il sert
Sur Quelle IA, Arena, écriture créative sert à noter la tâche Écriture : c'est son seul benchmark. Il départage surtout les modèles dont le score IA approche 70.
Sur Quelle IA, Arena, écriture créative sert à noter la tâche Écriture : c'est son seul benchmark. Il départage surtout les modèles dont le score IA approche 70.
Un score Elo calculé sur les seuls duels d'écriture créative.
Pour le calcul, un Elo devient une probabilité de victoire face à un niveau de référence, ici 1 371 Elo. Un écart de 100 points donne environ 64 % de chances de l'emporter.
Questions surtout en anglais. Mesure le goût des votants.
Arena (ex LMArena).
arena.ai/leaderboard · tâche Écriture · 276 modèles mesurés
En tête : Gemini 4 Argon, 1 521,8 Elo
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 1 371 Elo a un score IA d'environ 70. Le meilleur, Gemini 4 Argon, atteint 1 521,8 Elo.
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
5 %du score général. Arena, écriture créative est le seul benchmark de la tâche Écriture (5 % du score général) : il en porte tout le poids.
En couleur, la tâche Écriture dans le score général. En noir, la part d'Arena, écriture créative.