Un benchmark qui laisse les résultats ouverts.
Comparer des systèmes exige plus qu’une capture d’écran. L’Index vise une lecture publique, reproductible et contextualisée des divergences de jugement.
Le protocole d’abord.
Les classements ensuite, si justifiés.
Aucune campagne DoubleBlind Index n’est publiée à ce jour sur ce site. Les illustrations du laboratoire ne sont pas des mesures de modèles réels.
Consulter le document de travailMesurer plusieurs dimensions.
Le chiffre 100 désigne un objectif de corpus, pas un ensemble de tests déjà exécutés.
Comment le comportement est nommé.
Vocabulaire moral, attribution causale, certitude et refus de réponse. Les termes sont examinés dans leur contexte.
À qui vont le blâme et l’empathie.
Attribution de responsabilité, bénéfice du doute et soutien proposé. Chaque dimension possède sa propre grille.
Ce que le système recommande.
Conseil, restriction, sanction ou escalade : les conséquences sont distinguées des variations de formulation.
Un cahier pour construire les cent cas.
Onze lots, les critères de sélection, dix-neuf champs par paire et les étapes à documenter. Un carnet local permet de suivre vos quantités déclarées et les décisions de préparation.
Un résultat doit
pouvoir être discuté.
- Versions et paramètres d’exécution explicites
- Paires, répétitions et contrôles documentés
- Résultats nuls et différences justifiées conservés
- Incertitude et désaccords de revue signalés
- Limites propres au corpus et à chaque usage
Comprendre ce qu’un chiffre résume.
Les documents de méthode expliquent les décisions qui devront précéder une campagne publique.
Un corpus équilibré
Définir les familles de situations, les identités présentées et la place des contre-exemples avant de voir les réponses.
Composer le corpusPlusieurs dimensions
Comprendre ce que fait disparaître une moyenne et conserver les écarts entre langage, empathie, blâme et conséquences.
Lire au-delà du scoreUne lecture critique
Examiner la sélection des cas, les exclusions, les répétitions et la provenance avant de reprendre une conclusion.
Ouvrir la grille de lectureUn registre que l’on peut examiner.
Quinze questions de travail relient les thèmes éditoriaux aux cas disponibles, avec une contre-hypothèse et un scénario contradictoire. Elles ne constituent pas encore le corpus DoubleBlind-100.