Comparer deux réponses à l’aveugle : fiche de lecture et dossier corrigé

Ce que vous allez produire

Le livrable est une fiche de lecture argumentée, avec un avis individuel conservé et une conclusion limitée au dossier. Elle permet de comprendre ce qui a fait choisir, refuser ou suspendre une réponse. Elle ne désigne pas le meilleur outil du marché.

Tout le matériel de l’exercice figure ci-dessous : consigne, note source F-07, réponses A et B, critères et corrigé. Les deux réponses sont des compositions éditoriales fictives ; elles n’ont pas été obtenues lors d’un test comparatif de modèles. Les lecteurs du modèle rempli sont inventés, eux aussi.

La définition de critères distincts s’appuie sur un repère de recherche en évaluation humaine du texte. ^[1] Les huit champs, le dossier et les règles de décision sont notre proposition de travail. Ils ne reproduisent pas un instrument de mesure validé.

Préparer une lecture avant de discuter

Travail individuel. Lisez la consigne et la référence, puis les deux réponses. Remplissez les champs 1 à 6 avant d’ouvrir le corrigé. Écrivez les passages qui fondent votre avis. Si vous connaissez déjà les réponses ou leur corrigé, dites-le : vous pouvez travailler la méthode, mais votre lecture n’est plus une première comparaison.

Travail en groupe. Une personne prépare les copies et conserve l’éventuelle correspondance avec les provenances. Ici, les identifiants A et B restent les mêmes pour tous. Certains commencent par A, d’autres par B ; chacun note son ordre et lit les deux. Ne rebaptisez pas les textes entre lecteurs, au risque de discuter de productions différentes sous la même lettre.

Masquer l’identité du système et varier la présentation figurent dans les recommandations de van Miltenburg et ses coauteurs. ^[2] Dans cet atelier, ce sont des précautions de méthode, sans promesse d’une lecture exempte de biais. Les pièces, les critères et le temps d’examen doivent rester accessibles à chacun.

Conservez les réponses intégralement. La personne qui prépare le dossier ne corrige ni une erreur, ni une faute, ni une formulation embarrassante. Elle n’annonce pas quelle réponse elle souhaite voir retenue. Après l’avis individuel, les échanges peuvent porter sur les passages et leurs conséquences.

Pièce fictive F-07 : la référence de l’exercice

Consigne commune. Rédiger une courte note d’information destinée aux personnes intéressées par l’atelier, à partir de F-07 uniquement. Elle doit permettre de retrouver la date, le lieu, les modalités d’inscription, le matériel utile et les conditions d’accès aux supports. Conserver les éléments encore en attente. Ne confirmer aucune inscription à la place de la coordination et ne promettre aucune date absente. Aucun envoi n’est effectué dans l’exercice.

Note logistique F-07, version 2 du 20 octobre 2026. Document entièrement fictif. Les lignes ci-dessous constituent toute la référence ; aucune information extérieure n’est nécessaire pour l’exercice.

L1. L’atelier est prévu le 27 novembre 2026, de 9 h 30 à 12 h 30, en présentiel aux Aulnes, salle R2. Aucun accès à distance n’est prévu.

L2. La capacité maximale est de 12 personnes. À la date de la note, 10 inscriptions sont confirmées et 2 demandes restent à vérifier. Déposer une demande ne vaut pas confirmation d’une place.

L3. Les demandes sont recevables jusqu’au 20 novembre à 18 h. La coordination vérifie les demandes et adresse les confirmations individuelles. Les questions d’inscription lui sont transmises.

L4. Un ordinateur portable est facultatif. Les exercices se font en binôme et aucune installation n’est demandée avant l’atelier.

L5. L’atelier ne sera pas enregistré. Des supports PDF seront transmis après l’atelier, après validation par l’intervenant. La date d’envoi n’est pas fixée.

L6. Pour cette note destinée aux participants potentiels, les conditions d’inscription, le caractère facultatif du portable, l’absence d’enregistrement et l’absence de date d’envoi fixée doivent rester explicites.

Deux réponses à examiner avant le corrigé

Réponse A. Texte éditorial fictif, conservé tel quel pour la lecture.

« Nous vous retrouverons le 27 novembre 2026, de 9 h 30 à 12 h 30, aux Aulnes, salle R2, pour un atelier en présentiel. Les douze places sont désormais attribuées. Pour toute question relative à votre inscription, contactez la coordination ; les demandes restent recevables jusqu’au 20 novembre à 18 h et font l’objet d’une confirmation individuelle.

Pour profiter pleinement des exercices en binôme, munissez-vous d’un ordinateur portable. Aucune installation préalable n’est nécessaire. L’atelier ne sera pas enregistré. Après validation par l’intervenant, les supports PDF vous seront transmis dès le lendemain de l’atelier. »

Réponse B. Texte éditorial fictif, conservé tel quel pour la lecture.

« Atelier : 27 novembre 2026, 9 h 30 à 12 h 30. Lieu : les Aulnes, salle R2. Présentiel uniquement, aucun accès à distance.

Douze personnes au maximum. Dix inscriptions sont confirmées ; deux demandes restent à vérifier. Déposez votre demande avant la clôture du 20 novembre à 18 h : la demande seule ne confirme pas la place. La coordination vérifie les demandes et envoie les confirmations individuelles. Adressez-lui vos questions d’inscription.

Portable facultatif. Exercices en binôme ; aucune installation avant l’atelier. Pas d’enregistrement. Les supports PDF seront transmis après l’atelier et après validation par l’intervenant ; la date d’envoi n’est pas fixée. »

Critères communs et fiche de lecture

Pour chaque critère et chaque réponse, utilisez « respecté », « écart » ou « à clarifier », accompagné du passage précis. Le tableau définit le contrôle ; il ne donne pas les résultats.

Décisions possibles. Retenir A ; retenir B ; constater une égalité entre deux réponses acceptables ; refuser les deux ; suspendre la conclusion si une pièce ou un critère manque. « Retenir » signifie seulement que le texte satisfait ici les conditions de lecture définies. Cela ne réalise ni validation opérationnelle ni envoi.

Arrêtez votre lecture ici avant le corrigé. Dans le PDF, rejoignez la trame à compléter par le sommaire et renseignez d’abord les champs 1 à 6. En groupe, discutez ensuite les observations et complétez 7 et 8. Sur le site, revenez à la trame en début de page. La section suivante révèle les réponses attendues : ne la consultez qu’après avoir conservé votre décision.

Corrigé : à lire après votre décision

Corrigé éditorial de l’exercice fictif. Il ne rapporte ni une performance de modèle ni une expérience conduite avec des participants. Chaque constat ci-dessous se vérifie dans F-07 et dans les deux textes.

Conclusion du corrigé. B est retenue dans le périmètre de cet exercice. A est refusée en l’état : le statut des inscriptions est modifié, la condition sur le matériel n’est pas conservée et un délai d’envoi est promis sans fondement. Les qualités de formulation que l’on peut reconnaître à A ne résolvent pas ces écarts.

Nuance de lecture. Un lecteur pourrait entendre « munissez-vous » comme un conseil plutôt que comme une obligation formelle. Ce désaccord n’oblige pas à trancher une intention supposée : la consigne L6 exige que le caractère facultatif reste explicite, ce que A ne fait pas. Cette justification est plus précise qu’un jugement sur le ton.

Une correction de A est possible, mais elle devient une nouvelle version à relire. Ne corrigez pas le texte puis ne comptez pas sa version corrigée comme si c’était la sortie initiale. Dans un véritable essai, la charge de reprise reste également à examiner.

Exemple fictif entièrement rempli : de l’avis individuel à la conclusion

Les notes suivantes montrent comment compléter les huit rubriques. Les rubriques 1 à 3 décrivent le cadre commun ; les rubriques 4 et 5 reproduisent les constats individuels du lecteur 2. La rubrique 6 conserve les deux avis initiaux, puis les rubriques 7 et 8 leur discussion et sa conclusion. Les lecteurs et leur discussion sont inventés ; aucune évaluation réelle n’est rapportée.

1. Tâche et référence. Préparer une information destinée aux personnes intéressées par l’atelier fictif. Référence : F-07, version 2 du 20 octobre 2026, lignes L1 à L6. Décider quel texte conserve les conditions annoncées, sans envoyer de message. Aucune autre pièce n’est utilisée.

2. Exigences. Fidélité des faits ; présence des conditions requises par L6 ; maintien des attentes ; clarté. Un statut d’inscription changé, une condition essentielle absente ou une date promise sans source bloque l’usage en l’état. Pas de note globale permettant de compenser ces écarts par le style.

3. Présentation. Le lecteur 1 lit A puis B ; le lecteur 2, B puis A. Tous deux disposent de F-07 et des mêmes critères. Les textes ne sont pas corrigés. Il n’existe aucune identité de modèle cachée : ce sont deux variantes éditoriales, comme annoncé dès l’ouverture.

4. Constats du lecteur 2 sur A, avant discussion. Date, lieu, binôme et absence d’enregistrement conformes. Trois points à reprendre : « douze places attribuées » contre les dix confirmations de L2 ; portable facultatif non explicite contrairement à L6 ; lendemain promis alors que L5 ne fixe aucune date. Le texte ne peut être utilisé en l’état.

5. Constats du lecteur 2 sur B, avant discussion. Les conditions de F-07 sont conservées, y compris deux demandes à vérifier, portable facultatif et date d’envoi non fixée. Le style est plus télégraphique, mais l’action d’inscription et ses limites restent compréhensibles. Aucun écart bloquant relevé dans ce dossier.

6. Avis individuels avant discussion. Le lecteur 1 écrit d’abord « A, formulation plus accueillante » ; sa fiche ne contient alors qu’une appréciation du ton et aucun examen des écarts de fond. Le lecteur 2 écrit « B, seule réponse conservant les statuts et conditions ». Ce sont des avis pédagogiques inventés, pas des données d’essai.

7. Désaccord et clarification. Retour collectif à L2, L5 et L6. Le lecteur 1 examine à son tour les écarts, complète sa fiche en les rattachant aux lignes de F-07, puis distingue sa préférence de ton de la décision d’usage et révise son choix vers B. Son avis initial reste visible. Le désaccord sur le caractère plus agréable de A demeure, sans modifier le constat factuel.

8. Conclusion, suite et limite. B retenue pour ce seul dossier fictif. A non retenue en l’état ; toute réécriture constituerait une version distincte. Aucun envoi, aucune mesure de temps et aucun modèle évalué. Suite possible : préparer un autre cas qui fasse apparaître une omission différente, sans conclure à une fiabilité générale.

Égalité, refus des deux et adaptation à votre situation

Égalité acceptable. Si deux versions respectent toutes les conditions et que leur différence de forme n’est pas déterminante pour le destinataire, conservez une égalité. « Je n’arrive pas à vérifier » n’est pas une égalité : c’est une conclusion suspendue.

Refus des deux. Variante pédagogique : imaginez que B soit réécrite avec « ordinateur obligatoire », tandis que A reste inchangée. L4 et L6 rendent alors les deux textes impropres à l’usage prévu. Il faut les reprendre, même si l’un contient moins d’erreurs. Cette variante est un raisonnement éditorial, pas une nouvelle sortie obtenue d’un outil.

Pièce ou règle ambiguë. Si la référence elle-même est contradictoire, conservez le point ouvert et faites-la clarifier avant de prétendre départager les réponses. Si vous changez un critère, appliquez sa nouvelle version à A et à B, en gardant la trace du changement.

Pour vos cas, remplacez F-07 par un dossier autorisé et préparez les attentes avant de lire les sorties. Gardez séparément les textes originaux, la correspondance de provenance et les avis. Ne mélangez pas plusieurs versions d’une consigne sous le même identifiant.

Le NIST rappelle la limite des généralisations tirées d’évaluations étroites ou anecdotiques. ^[3] Une fiche remplie constitue une trace de lecture sur un cas, pas une preuve de performance sur tous les usages. La méthode associée explique comment organiser la comparaison humaine.