Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Claude 3.5 Sonnet (October 2024)

Anthropic · États-Unis · sorti le Anthropic · États-Unis · 22 octobre 2024

  • Poids fermés
  • En ligne seulement
56,2de 50,1 à 62,3Rang 175 · 65 %?
Empreinte?
Raisonnement62,8Code65,8Agents61,5UsageMaths48,2Sciences55,9FrançaisVisionÉcritureWeb

Son bilan?

  • Au classement général, 175e sur 257, dans un peloton de 35 modèles que la marge d'erreur ne permet pas de séparer.
  • Pas encore classé en code, tâches d'agent, maths et sciences : trop peu de mesures.
  • Pas encore mesuré en usage courant, français, compréhension d'images, écriture et création web.

Score général?

56,2de 50,1 à 62,3

Rang175Groupe 11, ex æquoCouverture65 %12 mesures

Pourquoi ce score ? →Comment lire un score →

Artificial Analysis

Hors du score

Artificial Analysis évalue les modèles de son côté et publie son propre indice, l'Artificial Analysis Intelligence Index. C'est un autre indice, qui ne compte pas dans le score IA de QUELLE IA et ne se compare pas directement à lui.

Version évaluéeIndiceRang chez euxVitessePremier jetonPrix par million de jetonsentrée / sortie
Claude 3.5 Sonnet (Oct '24)7,9non publié0,0 jetons/s0,00 s3 $ / 15 $

Médianes de leurs mesures : vitesse en jetons produits par seconde, délai avant le premier jeton en secondes. Prix en dollars par million de jetons, en entrée puis en sortie. Relevé le 26 octobre 2026 sur leur site, reproduit avec leur accord.

Source : Artificial Analysis

Peut-il tourner chez vous ?

Non. Claude 3.5 Sonnet (October 2024) est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.

Ces trois modèles ouverts ont le score le plus proche. Eux se téléchargent, et peuvent tourner sur votre machine ou sur votre serveur.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
Non communiqué
Entrées
Non communiqué
Réflexion
Non communiqué
Paramètres
Non communiqué
Licence
Propriétairepoids fermés, accès par l'éditeur
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

26 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
MMLU87,3 %64,2InconnueARCHIVÉepoch.ai
Lech Mazur Writing8,0372,3InconnueARCHIVÉepoch.ai
LiveBench, code67,1 %63,9InconnueARCHIVÉepoch.ai
GeoBench62 %56,7InconnueARCHIVÉepoch.ai
LiveBench59 %57,3InconnueARCHIVÉepoch.ai
MATH Level 556,9 %51,4InconnueARCHIVÉepoch.ai
LiveBench, raisonnement56,7 %54,9InconnueARCHIVÉepoch.ai
LiveBench, mathématiques52,3 %52,6InconnueARCHIVÉepoch.ai
Aider Polyglot51,6 %65,5InconnueARCHIVÉaider.chat
CadEval48 %65,3InconnueARCHIVÉepoch.ai
Video-MME60 %34,1InconnueARCHIVÉepoch.ai
DTBench67,8 %60,1InconnueSATURÉconceptualreasoning.ai
Voir les 14 autres mesures
GPQA Diamond55,3 %56,1InconnueSATURÉepoch.ai
WeirdML (v2)40 %67,7InconnueACTIFhtihle.github.io
BALROG32,6 %65,6InconnueACTIFbalrogai.com
SimpleBench41,4 %70,2InconnueACTIFepoch.ai
ForecastBench63,2 %73,6InconnueACTIFepoch.ai
TheAgentCompany24 %65,1InconnueARCHIVÉepoch.ai
OTIS Mock AIME 2024-20258,5 %46,1InconnueSATURÉepoch.ai
GSO4,6 %75,5Inconnue · OpenHandsACTIFgso-bench.github.io
EnigmaEval0,9 %54,6InconnueACTIFlabs.scale.com
Humanity's Last Exam4,1 %42,5InconnueACTIFepoch.ai

En bref

Quel est le score de Claude 3.5 Sonnet (October 2024) ?
Claude 3.5 Sonnet (October 2024) obtient un score IA de 56,2, avec une marge de 50,1 à 62,3, dans l'édition du 9 novembre 2026. Il est classé 175e sur 257 modèles, à partir de 12 mesures.?
Dans quelles tâches Claude 3.5 Sonnet (October 2024) est-il le plus fort ?
Ses deux meilleures tâches sont code (65,8) et raisonnement (62,8). Sa tâche la plus faible est maths (48,2).
Claude 3.5 Sonnet (October 2024) peut-il tourner en local ?
Non. Claude 3.5 Sonnet (October 2024) est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.
Qui édite Claude 3.5 Sonnet (October 2024) ?
Claude 3.5 Sonnet (October 2024) est édité par Anthropic (États-Unis), et il est sorti le 22 octobre 2024. C'est un modèle fermé.

Ses voisins?