Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Claude 3.5 Sonnet

Anthropic · États-Unis · sorti le Anthropic · États-Unis · 20 juin 2024

  • Poids fermés
  • En ligne seulement
56,5de 50,9 à 62,0Rang 173 · 80 %?
Empreinte?
Raisonnement59,1Code61,2AgentsUsage59,6Maths48,7Sciences55,9Français61,5Vision58,1Écriture62,8Web

Son bilan?

  • Au classement général, 173e sur 257, dans un peloton de 26 modèles que la marge d'erreur ne permet pas de séparer.
  • Pas encore classé en raisonnement, code, sciences, français et compréhension d'images : trop peu de mesures.
  • Pas encore mesuré en tâches d'agent et création web.
L'application de l'éditeurClaude Ce modèle n'y est peut-être plus proposé. (nouvel onglet)

Score général?

56,5de 50,9 à 62,0

Rang173Groupe 10, ex æquoCouverture80 %16 mesures

Pourquoi ce score ? →Comment lire un score →

Les dix tâches?

Peut-il tourner chez vous ?

Non. Claude 3.5 Sonnet est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.

Ces trois modèles ouverts ont le score le plus proche. Eux se téléchargent, et peuvent tourner sur votre machine ou sur votre serveur.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
200 000 jetonsenviron 150 000 mots
Entrées
Texte, image
Réflexion
Non communiqué
Paramètres
Non communiqué
Licence
Propriétairepoids fermés, accès par l'éditeur
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Avril 2024

Où le trouver

Liens directs, sans affiliation

À lire sur Clubic

1 article · relevé du

Une sélection automatique des articles de Frandroid, Numerama et Clubic consacrés à ce modèle. Ces trois médias appartiennent au groupe Humanoid. Les articles n'entrent pas dans le score.

Toutes les mesures

29 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
MMLU86,5 %61,8InconnueARCHIVÉepoch.ai
EuroEval, HellaSwag (bon sens)70,3 %66,6InconnueACTIFeuroeval.com
MATH Level 551,7 %49,7InconnueARCHIVÉepoch.ai
Arena, écriture créative1 371,2 Elo70,8InconnueACTIFarena.ai
Arena, questions de code1 435,7 Elo67,9InconnueACTIFarena.ai
Video-MME60 %34,1InconnueARCHIVÉepoch.ai
DTBench67,8 %60,1InconnueSATURÉconceptualreasoning.ai
Arena, texte1 374,3 Elo63,8InconnueACTIFarena.ai
Arena, questions en français1 392,2 Elo64,0InconnueACTIFarena.ai
Arena, questions de code1 399,3 Elo59,7InconnueACTIFarena.ai
Arena, questions d'experts1 372,6 Elo61,0InconnueACTIFarena.ai
Arena, questions de maths1 352,4 Elo59,8InconnueACTIFarena.ai
Voir les 17 autres mesures
Arena, texte1 343,3 Elo56,5InconnueACTIFarena.ai
Arena, questions de maths1 342,4 Elo57,7InconnueACTIFarena.ai
Arena, questions en français1 363,2 Elo57,5InconnueACTIFarena.ai
Arena, vision1 161,2 Elo60,4InconnueACTIFarena.ai
Arena, écriture créative1 304,5 Elo55,4InconnueACTIFarena.ai
GPQA Diamond54 %55,3InconnueSATURÉepoch.ai
METR Time Horizons (taux de réussite)40,2 %52,9InconnueARCHIVÉmetr.org
Arena, questions d'experts1 344,4 Elo55,5InconnueACTIFarena.ai
Arena, vision1 145,6 Elo56,6InconnueACTIFarena.ai
WeirdML (v2)31 %61,1InconnueACTIFhtihle.github.io
ForecastBench63,1 %72,9InconnueACTIFepoch.ai
Cybench17,5 %64,9InconnueARCHIVÉepoch.ai
SimpleBench27,5 %55,7InconnueACTIFepoch.ai
OTIS Mock AIME 2024-20256,5 %44,2InconnueSATURÉepoch.ai
FrontierMath, paliers 1 à 3 (version 2025)1 %56,2InconnueACTIFepoch.ai
FrontierMath, palier 4 (version 2025)0 %66,4InconnueACTIFepoch.ai
VPCT (Visual Physics Comprehension Test)33 %62,5InconnueARCHIVÉepoch.ai

En bref

Quel est le score de Claude 3.5 Sonnet ?
Claude 3.5 Sonnet obtient un score IA de 56,5, avec une marge de 50,9 à 62,0, dans l'édition du 9 novembre 2026. Il est classé 173e sur 257 modèles, à partir de 16 mesures.?
Dans quelles tâches Claude 3.5 Sonnet est-il le plus fort ?
Ses deux meilleures tâches sont écriture (62,8) et français (61,5). Sa tâche la plus faible est maths (48,7).
Claude 3.5 Sonnet peut-il tourner en local ?
Non. Claude 3.5 Sonnet est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.
Qui édite Claude 3.5 Sonnet ?
Claude 3.5 Sonnet est édité par Anthropic (États-Unis), et il est sorti le 20 juin 2024. C'est un modèle fermé.

Ses voisins?