Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

PaLM (540B)

Google Research · États-Unis · sorti le Google Research · États-Unis · 4 avril 2022

  • Poids fermés
  • En ligne seulement
22,1de 10,1 à 34,0Historique · 0 %
Empreinte
RaisonnementCodeAgentsUsageMathsSciencesFrançaisVisionÉcritureWebEn attente de mesures

Score général

22,1de 10,1 à 34,0

RangScore historiqueCouverture0 %0 mesure
Pourquoi ce score ? →

Les dix tâches

  • Raisonnement
    Non mesuré
  • Code
    Non mesuré
  • Agents
    Non mesuré
  • Usage
    Non mesuré
  • Maths
    Non mesuré
  • Sciences
    Non mesuré
  • Français
    Non mesuré
  • Vision
    Non mesuré
  • Écriture
    Non mesuré
  • Web
    Non mesuré

Peut-il tourner chez vous ?

Non. PaLM (540B) est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.

Ces trois modèles ouverts ont le score le plus proche. Eux peuvent se télécharger et tourner sur une machine ou un serveur à vous.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
Non communiqué
Entrées
Non communiqué
Réflexion
Non communiqué
Paramètres
Non communiqué
Licence
Propriétairepoids fermés, accès par l'éditeur
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Non communiqué

Toutes les mesures

28 mesures · la matière du score
BenchmarkPubliéSuggèreRéflexionÉtatSource
TriviaQA81,4 %46,9InconnueARCHIVÉepoch.ai
TriviaQA81,4 %46,9InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)85,2 %38,4InconnueARCHIVÉepoch.ai
HellaSwag83,8 %27,7InconnueARCHIVÉepoch.ai
HellaSwag83,6 %26,7InconnueARCHIVÉepoch.ai
LAMBADA77,9 %20,0InconnueARCHIVÉepoch.ai
HellaSwag83,4 %25,7InconnueARCHIVÉepoch.ai
BoolQ88,7 %32,5InconnueARCHIVÉepoch.ai
TriviaQA76,9 %21,8InconnueARCHIVÉepoch.ai
BoolQ88 %29,0InconnueARCHIVÉepoch.ai
BoolQ88 %29,0InconnueARCHIVÉepoch.ai
WinoGrande85,1 %52,5InconnueARCHIVÉepoch.ai
Voir les 16 autres mesures
WinoGrande85,1 %52,5InconnueARCHIVÉepoch.ai
WinoGrande83,7 %45,9InconnueARCHIVÉepoch.ai
PIQA82,3 %16,1InconnueARCHIVÉepoch.ai
PIQA82,3 %16,1InconnueARCHIVÉepoch.ai
WinoGrande81,1 %34,3InconnueARCHIVÉepoch.ai
WinoGrande81,1 %34,3InconnueARCHIVÉepoch.ai
MMLU69,3 %24,1InconnueARCHIVÉepoch.ai
OpenBookQA68 %10,0InconnueARCHIVÉepoch.ai
GSM8K56,5 %8,2InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)60,1 %-1,4InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)60,1 %-1,4InconnueARCHIVÉepoch.ai
OpenBookQA53,6 %-13,2InconnueARCHIVÉepoch.ai
OpenBookQA53,4 %-13,5InconnueARCHIVÉepoch.ai
OpenBookQA53,4 %-13,5InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)53 %-11,5InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)53 %-11,5InconnueARCHIVÉepoch.ai

En bref

Quel est le score de PaLM (540B) ?
PaLM (540B) obtient un score IA de 22,1, avec une marge de 10,1 à 34,0. Ce score est historique : aucun benchmark vivant ne le mesure plus, et le modèle n'a pas de rang.
PaLM (540B) peut-il tourner en local ?
Non. PaLM (540B) est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.
Qui édite PaLM (540B) ?
PaLM (540B) est édité par Google Research (États-Unis), et il est sorti le 4 avril 2022. C'est un modèle fermé.

Ses voisins