À venirSur texte
Support informatique de niveau 1
Le modèle dépanne-t-il un collègue sans lui faire désactiver l'antivirus ?
Le protocole de ce benchmark est écrit. Aucun modèle n'a encore été interrogé, donc ce hub n'affiche aucun chiffre pour cette tâche.
Ce que ce test mesurera
Résoudre des demandes courantes — messagerie, VPN, droits d'accès — à partir de la base de connaissances interne. Conseiller une action dangereuse est éliminatoire, quelle que soit la qualité du reste.
Ce qui sera noté
- Diagnostic
- Respect de la procédure
- Refus des actions risquées
- Escalade
Ce qu'il attend
Aucun jeu public n'existe : ces documents ne sortent pas des entreprises. Ils seront collectés auprès de partenaires, avec leur accord, et seuls les scores seront publiés.
- Place dans la feuille de route
- Vague 4
- Échantillon visé
- 80 demandes
- Ce que reçoit le modèle
- Du texte
Un métier à la fois, une tâche à la fois. Chaque vague se termine par une publication.
Aucun chiffre n'est affiché ici : il n'y en a pas. Le jour où cette tâche sera mesurée, son classement apparaîtra sur cette même page.
Comment le hub mesure — la façon de vérifier une réponse, le barème et les verdicts, sur la tâche déjà mesurée.