À quoi il sert
VPCT (Visual Physics Comprehension Test) servait à noter la tâche Vision et multimodal. Archivé faute de modèle récent mesuré, il ne sert plus qu'à situer les modèles plus anciens sur l'échelle commune.
VisionFiche benchmark · Chase Brower (projet personnel) · cbrower.dev
100 schémas où une bille roule sur des rampes : prédire dans lequel des trois seaux elle va tomber.
VPCT (Visual Physics Comprehension Test) servait à noter la tâche Vision et multimodal. Archivé faute de modèle récent mesuré, il ne sert plus qu'à situer les modèles plus anciens sur l'échelle commune.
Part de bonnes réponses ; le hasard donne 33 %, les trois humains testés ont fait 100 %.
Pour le calcul, ce score est ramené entre 0 et 1 : 33 %, le niveau du hasard, vaut 0 et 100 % vaut 1.
Tâche unique et très étroite, tenue par une seule personne. Elle teste l'intuition physique sur un schéma, rien d'autre.
Chase Brower (projet personnel).
cbrower.dev/vpct · tâche Vision · 28 modèles mesurés
En tête : Gemini 3 Pro, 91 %
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 67 % a un score IA d'environ 81. Le meilleur, Gemini 3 Pro, atteint 91 %. Le benchmark est archivé, faute de modèle récent mesuré.
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
0 %du score général. VPCT (Visual Physics Comprehension Test) est archivé et ne compte plus : la tâche Vision et multimodal (5 % du score général) repose sur 3 autres benchmarks.
En couleur, la tâche Vision et multimodal dans le score général. VPCT (Visual Physics Comprehension Test) n'y a plus de part.