CybenchARCHIVÉ
40 épreuves de piratage tirées de compétitions professionnelles : cryptographie, failles web, rétro-ingénierie, analyse de traces.
- Notation
- Part d'épreuves résolues sans aucune indication intermédiaire (mode « unguided »).
- Limites
- Une partie des chiffres vient des fiches des éditeurs, avec leurs propres harnais. Le meilleur modèle dépasse 90 % et les épreuves sont publiques.
- Tenu par
- Université Stanford
- Claude Opus 4.693 %
- Claude Opus 4.582 %
- Claude Sonnet 4.560 %
21 modèles mesurésLa fiche du benchmark →cybench.github.io ↗