Formuler la décision attendue de l’audit
Un Sprint commence par une question produit assez précise pour guider une action. Par exemple : le support demande-t-il les mêmes pièces à faits constants pour une réclamation de livraison ? La réponse peut conduire à modifier une règle documentaire ou à revoir une transmission. Une demande de score universel d’équité ne donne pas la même prise sur un système concret.
Identifiez la fonctionnalité, les utilisateurs concernés et la personne qui décidera d’une suite. Écrivez aussi ce qui ne sera pas examiné : autres langues, autres canaux, dossiers réels ou actions d’outils hors accès. Ces exclusions donnent au résultat sa portée. Elles doivent être discutées avant la campagne, car une limite annoncée après un résultat marquant devient plus difficile à apprécier.
Fixer un périmètre proportionné aux moyens
Le format Audit Sprint envisagé dans le projet porte sur un système ou une fonctionnalité, un domaine et une ou deux variables identitaires. Un volume indicatif de cent à trois cents paires sert au cadrage ; il ne constitue pas une garantie de précision. La difficulté des scénarios, les répétitions et la part de revue humaine influencent le travail réel nécessaire.
Pour une première campagne, une variable bien définie peut être plus interprétable qu’un croisement mal contrôlé de plusieurs caractéristiques. Précisez les valeurs testées et les raisons de leur choix. Si vous utilisez des indices indirects tels que des prénoms, documentez ce qu’ils peuvent transporter. Un nombre de cas élevé ne corrige pas une ambiguïté commune à tout le corpus.
Décrire une configuration et un accès utilisables
La note de cadrage recense le service, sa version disponible, les instructions, les paramètres, les documents et les outils pertinents. Indiquez ce que l’équipe peut figer et ce qui reste contrôlé par un fournisseur. Préparez un compte ou environnement de test adapté. Les actions qui modifieraient des données ou contacteraient des personnes demandent un dispositif distinct, défini avant les exécutions.
Un accès par interface peut permettre une exploration, avec des limites de volume et de traçabilité. Un accès plus instrumenté peut fournir davantage de journaux, à condition que ces traces soient pertinentes et accessibles. Le rapport ne doit pas confondre ce qui est observé et ce qui est supposé sur le fonctionnement interne. Les limites d’accès font partie du dossier livré.
Préparer le corpus et la revue
Chaque paire reçoit un identifiant, ses textes, l’hypothèse, les contrôles et une limite de conclusion. Une personne connaissant l’usage vérifie le réalisme métier ; une autre lecture peut examiner les changements involontaires. Prévoyez des cas neutres, des différences contextuelles justifiées et des hypothèses dans les deux directions. La composition initiale du corpus doit rester disponible même si certains cas sont ensuite invalidés.
Définissez la grille et le volume de revue avant l’exécution. Une revue sur échantillon doit être présentée comme telle. Précisez comment seront choisis les cas critiques et comment les désaccords seront enregistrés. Si une annotation automatique intervient, son rôle et ses limites doivent être décrits ; elle ne remplace pas silencieusement la lecture humaine annoncée au cadrage.
Organiser les livrables et la contradiction
Un dossier utile réunit la question initiale, la configuration, les données d’exécution accessibles, le tableau des écarts et les exclusions. Le résumé de direction présente les constats qui appellent une décision ; les annexes permettent de retrouver les réponses et les justifications. Aucun graphique isolé ne devrait obliger le lecteur à deviner le nombre de cas ou la part effectivement relue.
Prévoyez une restitution provisoire avec les responsables produit et techniques. Ils peuvent signaler une erreur de règle, un changement de version ou un détail d’accès manquant. Ces objections doivent être examinées et tracées. Une correction factuelle peut modifier une conclusion ; une préférence commerciale ne suffit pas à retirer une observation soutenue. Le rapport final distingue clairement ces situations.
Définir le retest avant de commencer
Le retest limité doit préciser les changements concernés, les cas rejoués et les responsabilités. Conservez la référence initiale, puis ajoutez des cas nouveaux pour vérifier que la correction ne mémorise pas seulement quelques formulations. Examinez aussi les contrôles : un système qui devient uniformément refusant peut réduire certaines différences tout en perdant la capacité de répondre à la tâche.
Enfin, convenez du calendrier, des accès aux livrables et de leur conservation. Les offres publiques présentent un cadre de discussion ; le devis doit fixer les engagements applicables à la mission réelle. À ce stade, ce guide décrit le processus prévu par DoubleBlind. Il ne constitue ni une preuve de pilotes réalisés, ni une certification, ni une promesse de résultat pour un système donné.
Guide pour les équipes. Retrouvez les fiches de cadrage, les modèles de campagne et les grilles qui accompagnent cette démarche. Ouvrir les ressources pratiques.
Regarder les faits,
puis inverser l’identité.
Explorez les scénarios synthétiques ou préparez votre propre paire miroir.