La réponse la plus longue semble parfois la plus attentive
Deux versions d’une demande fictive reçoivent des textes différents. L’une obtient trois phrases claires ; l’autre cinq paragraphes avec plusieurs marques de compréhension. Il serait tentant de conclure que le deuxième personnage reçoit davantage d’empathie. Pourtant, le texte court peut répondre entièrement à la question, tandis que le texte long répète une généralité et laisse l’action attendue indéfinie.
La longueur est une propriété observable, mais sa signification dépend de la tâche. Un résumé demandé en deux phrases ne s’évalue pas comme une explication détaillée. Pour comparer les réponses, il faut définir ce qui doit être présent et ce qui constitue seulement une variation de volume. Le miroir ne doit pas transformer automatiquement chaque mot supplémentaire en preuve de considération.
Séparer présence, intensité et répétition
Une réponse peut reconnaître une difficulté une seule fois de manière précise. Une autre peut répéter plusieurs expressions générales de soutien. Compter les occurrences sans regarder leur fonction confondrait la répétition et la qualité de reconnaissance. L’annotation peut distinguer la présence d’une attention explicite, son destinataire et le lien qu’elle entretient avec les faits.
Le même problème concerne le blâme. Trois reformulations d’un reproche ne représentent pas nécessairement trois décisions distinctes. Inversement, une phrase courte peut attribuer une faute très certaine et proposer une sanction importante. Le lecteur a besoin de passages cités et d’une description de leurs conséquences. Le volume donne un contexte à l’observation ; il ne devrait pas remplacer l’examen du raisonnement et de l’action recommandée.
Donner la même consigne de format
La paire conserve la demande, les faits et une éventuelle contrainte de longueur. Seule l’identité testée change. Si l’une des versions demande une réponse détaillée et l’autre une phrase, la comparaison des formes sera peu informative. Les paramètres de génération accessibles doivent également être consignés lorsqu’ils influencent le volume autorisé.
Une campagne peut préparer plusieurs formats, mais elle les traite comme des conditions distinctes. Un même cas peut être essayé avec une réponse courte, puis avec une explication développée. Cela permet d’examiner si une divergence persiste ou disparaît selon la place disponible. Il faut toutefois éviter de choisir après coup le format qui rend l’écart le plus frappant, puis de présenter ce résultat comme représentatif de tous les formats.
Chercher les fonctions indispensables
Dans une demande de support fictive, les éléments essentiels pourraient être la condition d’accès, l’étape suivante et le moyen de vérifier sa réussite. Dans un conseil relationnel entre adultes, ils pourraient être une lecture limitée des faits, une proposition et le respect d’un refus. Ces listes dépendent de la tâche ; elles ne forment pas un modèle universel de bonne réponse.
La comparaison demande si chaque fonction est remplie, absente ou remplacée par une supposition. Une réponse courte peut être complète sur ces critères. Une réponse longue peut ajouter une explication utile, mais aussi une intention non appuyée ou une obligation supplémentaire. On examine donc les ajouts pour ce qu’ils font, au lieu de leur attribuer automatiquement une valeur positive ou négative parce qu’ils allongent le texte.
Repérer une coupure avant d’interpréter l’absence
Une réponse interrompue par une limite de sortie peut manquer de conclusion pour une raison différente d’un refus de proposer une action. Si l’interface expose un motif d’arrêt, le dossier le conserve. Si elle ne l’expose pas, l’incertitude reste signalée. Une fin abrupte ne doit pas être transformée sans examen en jugement moral sur le personnage.
Les nouvelles exécutions éventuelles suivent une règle commune aux deux versions. Relancer seulement la réponse courte pourrait introduire une sélection favorable à l’une des conditions. Le protocole précise ce qui déclenche une reprise et conserve les sorties concernées. On peut alors distinguer un problème de complétude, une différence de format et une divergence persistante dans les fonctions remplies par la réponse.
Montrer ce qui change vraiment
Le rapport peut présenter la longueur à côté des dimensions de lecture, sans en faire une note d’équité. Une annotation explique par exemple que la seconde réponse ajoute une justification demandée au personnage, ou que la première omet une étape nécessaire. Ce sont ces différences qui éclairent l’usage du système.
La prochaine expérience peut fixer davantage le format ou tester une consigne plus explicite. Elle doit vérifier que le gain de concision ne supprime pas une information importante et que l’expansion n’ajoute pas de faits imaginaires. Comparer une fonction plutôt qu’un volume permet de préserver l’essentiel : le lecteur doit pouvoir comprendre si les deux personnages obtiennent une réponse également utilisable, avec des exigences et des possibilités comparables.
Note de méthode. Pour situer cette lecture dans l’ensemble du protocole, retrouvez les étapes, les critères d’analyse et leurs limites. Lire la méthode DoubleBlind.
Regarder les faits,
puis inverser l’identité.
Explorez les scénarios synthétiques ou préparez votre propre paire miroir.