Nommer exactement ce que l’on fait varier
Un test commence par une variable observable dans le texte. « Le genre » peut désigner un pronom, une identité explicitement déclarée ou une information supposée à partir d’un prénom. Ces trois interventions ne sont pas interchangeables. La fiche du cas doit préciser laquelle est réalisée, puis nommer la décision dont on souhaite observer une éventuelle modification.
Prenons une situation fictive : une personne demande à reporter une présentation après un problème de transport, avec le même délai et la même solution de remplacement. Pour examiner le genre déclaré, on peut écrire « cette personne est un homme » ou « cette personne est une femme ». La formulation paraît moins conversationnelle, mais son intervention est plus facile à identifier.
Faire l’inventaire des indices secondaires
Un récit peut transmettre une position sociale par une adresse, un diplôme, un emploi ou une manière de parler. Remplacer simultanément un prénom et un quartier ferait varier plusieurs informations. Même si chaque version semble réaliste, une autre explication resterait disponible : le système a peut-être répondu au statut suggéré par le quartier plutôt qu’au prénom.
Une revue pratique consiste à surligner chaque différence entre les versions et à lui attribuer un rôle : variable principale, accord grammatical nécessaire ou changement évitable. On conserve une justification courte pour les deux premières catégories. Toute différence de politesse, de délai, d’intensité ou de conséquence demande une correction, ou une nouvelle question de recherche explicitement plus large.
Distinguer une catégorie déclarée d’une perception
Un prénom ne prouve ni une origine, ni une religion, ni un genre. Un protocole qui emploie des prénoms doit parler d’indices présentés et, lorsque cela est étudié, d’identité perçue. Il ne peut pas transformer une association supposée par son auteur en caractéristique certaine de la personne fictive, encore moins d’une personne réelle portant ce prénom.
Pour notre exemple, deux sous-campagnes peuvent examiner séparément une identité explicitement déclarée et différents prénoms. Si leurs résultats divergent, cela devient une information à étudier. On ne fusionne pas immédiatement les sorties en une seule mesure. La seconde campagne comporte une incertitude supplémentaire sur la manière dont chaque indice a été interprété par le système.
Reconnaître les variables qui changent aussi la situation
Certaines caractéristiques interviennent directement dans une règle ou une relation. Remplacer « responsable de l’équipe » par « stagiaire » change potentiellement l’autorité, les attentes et les possibilités d’action. Le contraste reste intéressant, mais il ne suffit pas à isoler un traitement arbitraire. Les responsabilités communes et différentes doivent alors être décrites au lieu d’être laissées à l’imagination.
Dans un scénario pédagogique, on peut préciser que deux personnes disposent exactement du même droit de modifier une réunion, quelle que soit leur fonction. La question porte ensuite sur l’application de cette règle fictive. Si le système invente une restriction absente du récit, cette invention devient un élément de l’analyse, avec le passage exact qui permet de la vérifier.
Construire des variantes qui répondent à une question
La version sans identité sert à observer la réponse lorsque l’indice étudié n’apparaît pas. Une variante avec un autre prénom vérifie la dépendance à un choix particulier. Une reformulation naturelle explore la sensibilité au style. Ces opérations doivent rester séparées dans les identifiants, sinon une différence ne pourra plus être attribuée à une transformation clairement définie.
On peut ainsi conserver une famille fictive TRANSPORT-01 avec une base, deux identités déclarées et plusieurs variantes nominales. Chaque fichier précise son parent et la différence introduite. La famille constitue un ensemble apparenté : produire vingt versions du même incident n’équivaut pas à couvrir vingt situations indépendantes. Cette distinction compte lors du bilan de couverture.
Décider quand une paire doit être mise de côté
Une paire devient difficile à défendre lorsque sa naturalité dépend de sous-entendus différents ou lorsque les relecteurs ne s’accordent pas sur les faits communs. Il vaut mieux la marquer comme insuffisamment contrôlée, conserver son historique et préparer une révision. Son caractère frappant ne compense pas une ambiguïté dans la manipulation de la variable.
Le livrable utile comprend donc le contraste exact, la liste des invariants, les adaptations grammaticales, les contrôles prévus et la conclusion autorisée. Cette fiche permet d’affirmer ce qui a été testé sans prétendre connaître toutes les perceptions du modèle. Elle rend aussi une critique productive : un lecteur peut désigner un indice précis et proposer le contre-test qui manque.
Note de méthode. Pour situer cette lecture dans l’ensemble du protocole, retrouvez les étapes, les critères d’analyse et leurs limites. Lire la méthode DoubleBlind.
Regarder les faits,
puis inverser l’identité.
Explorez les scénarios synthétiques ou préparez votre propre paire miroir.