Aller au contenu

Approfondissement · Auteurs, Apprenants

Mettre en place la relecture par les pairs

Ajoutez un exercice noté par une personne, choisissez qui peut le noter et anticipez l'effet de son verdict sur le résultat de l'apprenant, sa certification et ses reprises.

Une Relecture par les pairs est le seul exercice que WeLearn ne note pas de lui-même. L'apprenant rédige une réponse à votre consigne, et une personne y enregistre plus tard Validé ou À retravailler. Tant que cette personne n'a pas tranché, la formation de l'apprenant n'est pas terminée.

Cette page suit une relecture par les pairs depuis le moment où vous ajoutez le bloc jusqu'au jour où quelqu'un quitte l'organisation alors qu'un rendu attend encore. Les six exercices notés automatiquement sont décrits dans Créer des évaluations. L'évaluation d'un rendu est décrite dans Relire le rendu d'un pair, et la réponse à un exercice dans Répondre à chaque type d'exercice.

Utilisez une relecture par les pairs lorsque seule une personne peut juger la réponse

Une relecture par les pairs convient à un travail sans réponse juste unique : une courte conception, un compte rendu d'incident, la revue d'un morceau de code, une réflexion sur un cas. Si la réponse peut être vérifiée avec un corrigé, utilisez plutôt l'un des exercices notés automatiquement : l'apprenant obtient un verdict immédiat, et personne n'a rien à lire.

Choisissez une relecture par les pairs lorsque Choisissez un exercice noté automatiquement lorsque
Vous évaluez la qualité du raisonnement Une réponse, un ordre, une association ou une valeur est juste
Vous pouvez désigner des personnes qui ont le temps de lire les rendus Personne n'est disponible pour noter
Un délai de quelques heures ou jours avant le verdict est acceptable Les apprenants ont besoin de leur résultat immédiatement
Vous voulez donner un retour écrit Une explication rédigée à l'avance suffit

Le verdict est binaire. Une validation vaut 100 % et À retravailler vaut 0 %, sans rien entre les deux.

Qui fait quoi

Qui Fait Où
Vous, l'auteur Rédigez la consigne et les consignes de relecture ; choisissez qui peut noter ; réglez les tentatives et le score de réussite de la formation L'éditeur : le bloc à l'étape Contenu, le paramètre Relecteurs à l'étape Publication
Les relecteurs Lisent chaque rendu à la lumière de vos consignes, enregistrent Validé ou À retravailler, ajoutent un retour facultatif La page Relectures, accessible depuis En attente de votre relecture sur leur tableau de bord ou depuis la notification
L'apprenant Rédige une réponse, attend, lit le verdict, corrige si c'est permis Le lecteur de formation, et Vos rendus sur la page de la formation
Les administrateurs de l'organisation Notent uniquement lorsque tous les relecteurs que vous avez désignés sont partis (section 08) ; accordent un nouvel essai à un apprenant bloqué (section 05) La page Relectures

Toute personne de l'organisation peut être désignée comme relecteur, quel que soit son rôle. Être manager ou administrateur ne permet pas de noter un rendu pour lequel on n'a pas été désigné, et personne ne peut jamais noter son propre rendu.

Le cycle de vie : envoyé, en attente, tranché

stateDiagram-v2
    direction TB
    state "Rédaction" as Writing
    state "En attente de relecture" as Awaiting
    state "Validé" as Approved
    state "À retravailler" as NeedsWork
    state "Retiré" as Withdrawn
    [*] --> Writing
    Writing --> Awaiting: Envoi
    Awaiting --> Approved: Validé
    Awaiting --> NeedsWork: À retravailler
    NeedsWork --> Awaiting: Corriger et renvoyer (il reste un envoi)
    Awaiting --> Withdrawn: L'apprenant quitte l'organisation
    Approved --> [*]
    NeedsWork --> [*]: Aucun envoi restant
    Withdrawn --> [*]
État, tel que l'apprenant le voit Signification Suite
La consigne et Rédiger votre réponse… Pas encore envoyé L'apprenant rédige et sélectionne Valider
En attente de relecture Envoyé. Le texte ne peut plus être modifié Chaque relecteur est notifié. La formation reste inachevée
Validé (un verdict affiché comme Correct) Un relecteur a enregistré Validé La section se termine avec 100 %. Si rien d'autre n'est en attente, la formation se termine
À retravailler (affiché comme Incorrect) Un relecteur ne l'a pas validé La section se termine avec 0 %. S'il reste un envoi à l'apprenant, Corriger et renvoyer le remet En attente de relecture
Retiré L'apprenant a quitté l'organisation avant que quiconque ne le note Plus personne ne peut le noter. Les relecteurs en sont informés

Le premier relecteur qui enregistre un verdict décide. Un second relecteur qui avait le même rendu ouvert voit son verdict refusé au moment de l'enregistrer, et le premier verdict est maintenu.

Mise en place, étape par étape

Étape 1 : ajoutez le bloc et rédigez la consigne

À l'étape Contenu de l'éditeur, ouvrez Ajouter un bloc et choisissez Relecture par les pairs dans le groupe Questions.

Un bloc Relecture par les pairs intitulé « Your postmortem » dans l'éditeur, avec une Consigne demandant un postmortem de 300 à 500 mots et des Consignes de relecture précisant ce qui est validé et ce qui est à retravailler.
Champ Contenu Qui le voit
Titre, Titre de l’exercice Le nom de l'exercice, tel qu'il apparaît dans le sommaire. Obligatoire pour publier Tout le monde
Consigne « Ce que l’apprenant doit produire. Visible par lui. » La tâche, son périmètre, la longueur et le format attendus. Obligatoire pour publier L'apprenant, les relecteurs
Consignes de relecture « Ce que le relecteur doit regarder. Jamais visible par l’apprenant. » Vos critères de notation et ce qui distingue une validation d'un À retravailler. Facultatif Les relecteurs uniquement, et toute personne qui peut modifier ou relire le brouillon

Les deux textes acceptent la mise en forme, comme un bloc Texte. Le bloc lui-même n'a ni corrigé ni liste de relecteurs ; la ligne en dessous vous le rappelle : « Qui peut évaluer se définit une fois pour toute la formation, à l’étape Publication. »

Une consigne qui laisse le relecteur dans le doute produit des verdicts qui varient d'un relecteur à l'autre. Une bonne paire de textes répond, à elle deux :

  • à ce qu'il faut produire exactement, et à quelle longueur approximative ;
  • aux deux ou trois critères qui décident du verdict ;
  • à ce qu'est une réponse tout juste validée, et à ce qui ne suffit pas.

Si la consigne est vide, la vérification avant publication affiche La consigne ne doit pas être vide. Un titre vide donne Le titre ne doit pas être vide. Aucune autre vérification ne s'applique : une liste de relecteurs vide est la valeur par défaut, pas une lacune.

Étape 2 : décidez du nombre d'envois de chaque apprenant

Une relecture par les pairs n'a pas de paramètre propre pour cela. Elle suit Tentatives, sous Lecture des évaluations à l'étape Publication :

Tentatives Envois par apprenant, par tour Après À retravailler
1 (par défaut) Un Le verdict est définitif
2, 3 ou 5 Autant, en comptant le premier L'apprenant peut corriger jusqu'à épuisement
∞ Illimités L'apprenant peut toujours corriger

L'apprenant voit combien d'envois il lui reste, par exemple « 2 envois restants », en comptant celui qu'il est en train de rédiger. Avec ∞, le décompte n'est pas affiché.

L'Affichage des résultats n'a aucun effet sur une relecture par les pairs : le verdict arrive toujours au moment où une personne l'enregistre.

Étape 3 : choisissez qui peut noter, à l'étape Publication

Lorsque la formation contient au moins une relecture par les pairs, le bandeau Lecture des évaluations de l'étape Publication se termine par un paramètre Relecteurs. Il couvre toutes les relectures par les pairs de la formation ; il n'existe pas de liste par bloc.

Le paramètre Relecteurs avec le groupe Engineering et deux personnes, Anouk Verhoeven et Bruno Salgado, sélectionnés sous forme de pastilles au-dessus du champ de recherche, et la note indiquant que toute modification publie une nouvelle version.
  1. Laissez-le vide pour que les auteurs de la formation notent. L'indication affiche alors « Personne de désigné : les auteurs de la formation évaluent ses relectures. Choisissez des personnes ou des groupes pour élargir. » Lorsque vous ouvrez la liste, elle les nomme : « Évalué par », suivi des auteurs, « tant que personne n’est désigné ici. »
  2. Pour choisir d'autres personnes, saisissez du texte dans Rechercher personnes et groupes…. Les groupes viennent d'abord, marqués groupe ; les personnes suivent, chacune avec son rôle. Sélectionnez une entrée pour l'ajouter ; sélectionnez-la de nouveau, ou la croix de sa pastille, pour la retirer. Charger plus affiche d'autres personnes.
  3. Dès qu'une personne est désignée, l'indication affiche « Seules ces personnes peuvent évaluer les relectures de cette formation. L’auteur du rendu est toujours exclu. »
Choix Qui note Adapté à
Personne de désigné (par défaut) Les auteurs de la formation Une petite équipe qui a rédigé la formation et la notera
Des personnes Exactement ces personnes Quelques experts désignés
Des groupes Tous les membres de ces groupes au moment où ils notent Un roulement, une guilde ou une équipe qui évolue dans le temps
Des personnes et des groupes Les deux ensemble Des experts plus un vivier plus large
Règle Détail
Désigner remplace les auteurs Dès qu'une personne est désignée, les auteurs ne notent que s'ils sont désignés eux aussi, directement ou par un groupe. Désigner quelqu'un restreint le vivier à cette personne
L'auteur du rendu est toujours exclu Même s'il est auteur, personne désignée ou membre d'un groupe désigné
Les groupes sont lus en temps réel Une personne qui rejoint un groupe désigné peut noter aussitôt, y compris les rendus déjà en attente ; une personne qui le quitte cesse de pouvoir noter
Limites Jusqu'à 100 personnes et 20 groupes
Chaque relecteur est notifié Chaque rendu notifie toutes les personnes qui peuvent le noter. Désigner un grand groupe envoie une notification à chacun de ses membres

Les relecteurs du brouillon qui l'ouvrent en mode Lire pour relire voient sous Relecteurs qui le notera : « Les auteurs de la formation, résolus au moment du verdict. », ou le nombre de personnes et de groupes désignés.

Étape 4 : choisissez le score de réussite en pensant au verdict

Le verdict compte dans le résultat de la formation comme toute autre évaluation (section 05). Décidez dès maintenant si À retravailler doit pouvoir faire échouer la formation, et réglez le Score de réussite en conséquence.

Étape 5 : essayez-la dans l'Aperçu, puis publiez

Dans l'Aperçu, vous pouvez rédiger une réponse et sélectionner Valider. Vous voyez alors ce que voit un apprenant pendant l'attente, En attente de relecture. Rien n'est enregistré et personne n'est notifié.

Publiez comme d'habitude avec Publier la formation. Voir L'éditeur de formation.

Comment le verdict compte pour le score, la réussite et la certification

La formation attend le verdict

Une formation dont un rendu attend une relecture n'est pas terminée, même si l'apprenant a fait toutes les sections. Son dernier bouton affiche Fermer et attendre la relecture. Jusqu'à ce qu'un relecteur tranche :

Pendant l'attente Une fois le verdict enregistré
Résultat, réussite ou échec Aucun Calculé, comme pour toute formation
Achèvement Non comptabilisé Comptabilisé
Certification, sur une formation obligatoire Pas encore certifié, et En retard si l'échéance passe entre-temps Certifié si le résultat est une réussite, daté comme indiqué ci-dessous
XP Non attribués pour l'exercice Attribués

La date qui compte est celle de l'envoi

L'apprenant maîtrise le moment où il envoie, pas celui où un relecteur s'en occupe. Ainsi, une fois que le verdict termine la formation, l'achèvement est daté de la dernière action de l'apprenant sur celle-ci, généralement le jour de l'envoi.

  • Une date limite respectée le jour de l'envoi reste respectée, quel que soit le retard du verdict.
  • Une certification court à partir de cette date, et non du jour du verdict : elle expire donc aussi en comptant à partir de cette date.

Le score vaut 100 ou 0, en moyenne avec tout le reste

Une validation compte pour 100 % et À retravailler pour 0 %. Le résultat de la formation est la moyenne simple de toutes ses évaluations, chacune comptant autant (voir Créer des évaluations).

Score de réussite Effet de À retravailler
Aucun seuil (par défaut) Aucun sur l'issue. La formation se termine, est réussie et certifie une formation obligatoire
Un pourcentage Un 0 dans la moyenne. Avec peu d'autres évaluations, il fait échouer la formation

Exemple avec un score de réussite de 80 % : une relecture par les pairs et quatre quiz à 100 %. Une validation donne une moyenne de 100 %. À retravailler donne une moyenne de 80 % : c'est toujours une réussite. Avec une relecture par les pairs et un seul quiz, À retravailler donne une moyenne de 50 % : c'est un échec.

Corriger et recommencer

Ce que fait l'apprenant Ce qui arrive à la relecture par les pairs
Corriger et renvoyer après À retravailler Le texte s'ouvre prérempli ; un nouvel envoi repasse En attente de relecture, l'ancien verdict et son score sont abandonnés, et le résultat est de nouveau en suspens. Les relecteurs sont de nouveau notifiés
Réessayer la formation La relecture par les pairs est conservée telle quelle : le texte, son verdict et les envois déjà utilisés. Seules les autres évaluations repartent de zéro. L'apprenant le confirme d'abord
Réessayer la formation sur une formation dont la seule évaluation est une relecture par les pairs Impossible : il n'y a rien à recommencer. L'apprenant corrige plutôt, tant qu'il lui reste des envois
Réessayer la formation après un À retravailler définitif Refusé, même s'il reste des tentatives, car le 0 resterait. L'écran lui indique de s'adresser à un administrateur
Un nouveau tour (Refaire la formation, Renouveler la certification) La relecture par les pairs repart de zéro, avec un jeu complet d'envois

Le nombre d'envois est un total pour le tour, pas par passage : recommencer ne donne donc jamais d'envois supplémentaires à un apprenant. Un apprenant bloqué par un À retravailler définitif doit demander un nouvel essai aux administrateurs de son organisation. Un essai accordé de cette façon rouvre la relecture par les pairs avec un jeu complet d'envois.

Ce que voit l'apprenant

Le point de vue de l'apprenant est décrit en détail dans Répondre à chaque type d'exercice. En bref :

  • la consigne, une zone marquée Rédiger votre réponse…, et le nombre d'envois restants ;
  • après l'envoi, Votre rendu et En attente de relecture : « Un relecteur va évaluer ce rendu. Vous serez notifié à ce moment-là, et la formation se terminera alors. » ;
  • une notification avec le nom du relecteur, « … a relu votre rendu : validé » ou « … a relu votre rendu : à retravailler » ;
  • le verdict dans le lecteur, avec les mots du relecteur sous Retour du relecteur ;
  • Corriger et renvoyer lorsqu'il lui reste un envoi, ou « Il ne vous reste aucun envoi sur cette formation : ce verdict est définitif. Recommencer le conserve au lieu de le rouvrir. » ;
  • un panneau Vos rendus sur la page de la formation, une ligne par relecture par les pairs, avec En attente de relecture, Validé, À retravailler ou Retiré.

L'apprenant ne voit jamais les Consignes de relecture.

Ce que voient les relecteurs

Les relecteurs travaillent depuis la page Relectures : « Rendus en attente de votre verdict, les plus anciens d’abord. » Elle ne figure pas dans la barre latérale. Ils y accèdent depuis le bandeau En attente de votre relecture de leur tableau de bord, ou depuis la notification « … a soumis un travail à relire ». Chaque rendu affiche les titres de la formation et de l'exercice, « Rendu de » suivi du nom de l'apprenant, la date, la Consigne, vos Consignes de relecture (« Rédigées par l’auteur pour les relecteurs. L’apprenant ne les voit jamais. »), le Rendu, une zone Retour facultative (« Optionnel, transmis à l’apprenant avec votre verdict. ») et les deux boutons Validé et À retravailler.

Les rendus ne sont pas anonymes : le relecteur voit qui les a rédigés, et l'apprenant voit qui les a notés. La page ne liste que les rendus que cette personne peut noter. La procédure complète est décrite dans Relire le rendu d'un pair.

La page Relectures montrant un rendu pour « Design review: sharding a collection » de John Doe, avec la Consigne, les Consignes de relecture, le Rendu, une zone Retour vide et les boutons Validé et À retravailler.

Après la publication

Modifier la consigne, les consignes de relecture ou les relecteurs exige une révision

Une formation publiée n'est jamais modifiée sur place. Ouvrez une révision, modifiez le bloc ou le paramètre Relecteurs, et publiez-la comme version suivante ; un simple changement de relecteurs suffit pour que la révision puisse être publiée. Voir Publication, révisions et archivage.

Sous Relecteurs, l'éditeur indique : « Toute modification publie une nouvelle version. Les relecteurs retirés conservent les rendus qui les attendent déjà et n’en reçoivent plus de nouveaux. » Comprenez « prend effet lorsque vous publiez la révision » : rien ne change d'ici là.

Changement dans la nouvelle version Rendus envoyés sur une version antérieure Rendus envoyés sur la nouvelle version
Vous retirez un relecteur Il doit toujours les noter Il ne les note pas
Vous ajoutez un relecteur Il ne les note pas Il les note
Vous réécrivez la consigne ou les consignes de relecture Notés selon la consigne à laquelle l'apprenant a répondu Notés selon le nouveau texte

Un verdict rendu sur une version antérieure reste valable, et continue de terminer la formation, de compter dans le score et de certifier, quel que soit le nombre de versions publiées depuis.

Quand des personnes partent

Qui part Ce qui se passe
Un apprenant, avec un rendu en attente Le rendu est Retiré. Il quitte la file de chaque relecteur, et chaque relecteur en est informé : « Un rendu que vous deviez relire a été retiré : l’apprenant a quitté l’organisation »
L'un des relecteurs, parmi plusieurs Les autres continuent de noter
Toutes les personnes que vous avez désignées, ou le dernier membre d'un groupe désigné Les rendus en attente, et les nouveaux, vont aux administrateurs de l'organisation, pour qu'un apprenant ne se retrouve jamais sans personne pour le noter
Tous les auteurs, lorsque personne n'a été désigné Même chose : les administrateurs notent
Un membre d'un groupe désigné, qui quitte le groupe Il cesse aussitôt d'être relecteur, y compris pour les rendus déjà en attente

Voir aussi Gérer les membres.

Archivage

L'archivage de la formation arrête les nouvelles inscriptions, et donc les nouveaux rendus. Les rendus déjà en attente restent dans les files des relecteurs et peuvent encore être notés. Voir Publication, révisions et archivage.

Les notifications de ce scénario

Notification Qui la reçoit
« … a soumis un travail à relire » Toutes les personnes qui peuvent noter le rendu, à chaque envoi et à chaque correction
« … a relu votre rendu : validé » ou « … : à retravailler » L'apprenant
« Un rendu que vous deviez relire a été retiré : l’apprenant a quitté l’organisation » Toutes les personnes qui auraient pu le noter

Les trois arrivent toujours dans la boîte de réception WeLearn ; seule leur copie Slack peut être désactivée. Voir Notifications.

Liste de contrôle et pièges

Avant de publier

  • La Consigne énonce la tâche, son périmètre et chaque critère qu'un relecteur appliquera.
  • Les Consignes de relecture indiquent comment pondérer les critères et où passe la limite entre une validation et À retravailler.
  • Relecteurs désigne des personnes qui ont accepté de noter, ou reste vide parce que les auteurs s'en chargeront.
  • Aucune personne qui suivra la formation n'est la seule à pouvoir la noter.
  • Tentatives donne aux apprenants le nombre d'envois que vous souhaitez leur accorder.
  • Le Score de réussite traduit votre choix : À retravailler doit-il pouvoir faire échouer la formation ?
  • Vous avez joué le bloc dans l'Aperçu et vu En attente de relecture.
  • Les relecteurs savent où noter : le bandeau En attente de votre relecture de leur tableau de bord.

Pièges

Piège Ce qui se passe Que faire
Laisser Tentatives sur 1 Un seul À retravailler est définitif pour le tour Augmentez Tentatives si les apprenants doivent pouvoir corriger
Laisser le Score de réussite sur Aucun seuil À retravailler termine quand même la formation, la réussit et certifie Fixez un score de réussite si le verdict doit compter
Des critères uniquement dans les consignes de relecture Les apprenants échouent sur des exigences qu'ils n'ont jamais vues Mettez chaque exigence dans la Consigne
Être le seul auteur et suivre votre propre formation Votre rendu est refusé : personne d'autre ne peut le noter Désignez un relecteur, ou un groupe
Désigner un grand groupe Chaque membre est notifié de chaque rendu Désignez un groupe plus restreint ou quelques personnes
Compter sur un manager ou un administrateur pour noter n'importe quel rendu Il ne peut noter que s'il est désigné, ou lorsque tous les relecteurs désignés sont partis Désignez-le
Modifier Relecteurs en pensant que cela s'applique tout de suite Rien ne change avant la publication de la révision, et seulement pour les nouveaux rendus Publiez la révision ; demandez aux relecteurs retirés de terminer ce qui les attend
Confondre le Relecteur d'un brouillon avec le relecteur d'une relecture par les pairs Inviter quelqu'un à relire le brouillon ne lui permet pas de noter les rendus Désignez-le sous Relecteurs à l'étape Publication
Un apprenant avec un À retravailler définitif veut recommencer Réessayer la formation est refusé Il demande un nouvel essai aux administrateurs de son organisation

Pages associées

Toutes les pages