Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Qwen-⁠14B

Alibaba · Chine · sorti le Alibaba · Chine · 24 septembre 2023

  • Poids ouverts
11,5de 0,0 à 30,5Provisoire · 40 %?
Empreinte?
RaisonnementCode12,0AgentsUsage10,7Maths11,8SciencesFrançaisVisionÉcriture11,0Web

Son bilan?

  • Pas encore de rang au classement général : il a trop peu de mesures, son score est provisoire.
  • Pas encore classé en code et maths : trop peu de mesures.
  • Mesuré seulement en code, usage courant, maths et écriture pour l'instant.
L'application de l'éditeurQwen Chat Ce modèle n'y est peut-être plus proposé. (nouvel onglet)

Score général?

11,5de 0,0 à 30,5

RangScore provisoireCouverture40 %4 mesures

Pourquoi ce score ? →Comment lire un score →

Les dix tâches?

Peut-il tourner chez vous ?

Il se télécharge, mais son éditeur ne dit pas combien de paramètres il compte : impossible d'estimer la mémoire qu'il demande.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
Non communiqué
Entrées
Non communiqué
Réflexion
Non communiqué
Paramètres
Non communiqué
Licence
Poids ouvertspoids ouverts, téléchargeables
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

25 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
ARC (AI2 Reasoning Challenge)84,4 %36,6InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)84,4 %36,6InconnueARCHIVÉepoch.ai
BoolQ86,2 %20,2InconnueARCHIVÉepoch.ai
LAMBADA71,1 %-18,9InconnueARCHIVÉepoch.ai
LAMBADA71,1 %-18,9InconnueARCHIVÉepoch.ai
GSM8K61,3 %11,7InconnueARCHIVÉepoch.ai
GSM8K61,3 %11,7InconnueARCHIVÉepoch.ai
GSM8K61,2 %11,6InconnueARCHIVÉepoch.ai
GSM8K60,1 %10,6InconnueARCHIVÉepoch.ai
PIQA79,9 %-8,7InconnueARCHIVÉepoch.ai
PIQA79,9 %-8,7InconnueARCHIVÉepoch.ai
GSM8K59,5 %10,0InconnueARCHIVÉepoch.ai
Voir les 13 autres mesures
MMLU66,3 %18,4InconnueARCHIVÉepoch.ai
MMLU65 %16,0InconnueARCHIVÉepoch.ai
MMLU64 %14,3InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)55 %8,1InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)53,4 %5,8InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)53,4 %5,8InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)53,4 %5,8InconnueARCHIVÉepoch.ai
MMLU53,4 %-4,8InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)49,7 %0,4InconnueARCHIVÉepoch.ai
Arena, questions de code1 197,8 Elo14,2InconnueACTIFarena.ai
Arena, texte1 139,6 Elo7,9InconnueACTIFarena.ai
Arena, écriture créative1 102,6 Elo8,8InconnueACTIFarena.ai
Arena, questions de maths1 127,2 Elo12,4InconnueACTIFarena.ai

En bref

Quel est le score de Qwen-14B ?
Qwen-14B obtient un score IA de 11,5, avec une marge de 0,0 à 30,5. Ce score est provisoire : il repose sur 4 mesures, et le modèle n'a pas de rang.?
Dans quelles tâches Qwen-14B est-il le plus fort ?
Ses deux meilleures tâches sont code (12,0) et maths (11,8). Sa tâche la plus faible est usage (10,7).
Qwen-14B peut-il tourner en local ?
Il se télécharge, mais son éditeur ne dit pas combien de paramètres il compte : impossible d'estimer la mémoire qu'il demande.
Qui édite Qwen-14B ?
Qwen-14B est édité par Alibaba (Chine), et il est sorti le 24 septembre 2023. Ses poids sont ouverts.

Ses voisins?