• Validé

    • Exploiter les indicateurs de Dynamo pour organiser des feedbacks de groupe et moduler la note individuelle

    Owned by Moodle UCLouvain
    Last updated: nov. 13, 2023
    8 min read

    Vous organisez des travaux de groupes et vous rêvez d'un outil qui vous indique les groupes en difficulté et qui vous donne une idée de l'implication de chacun? Le fond de développement pédagogique UCLouvain a financé le développement de l'activité Dynamo à ces fins ! Cette page décrit comment exploiter les résultats et rapports fournis par Dynamo pour réguler la dynamique de groupes et pondérer la note avec l’indicateur d’implication individuelle.

    Configurer une activité Dynamo

    Le fonctionnement et la configuration d’une activité Dynamo sont présentés dans la page

    Configurer une activité Dynamo pour réguler la dynamique de groupes

    Comprendre les indicateurs calculés par Dynamo

    Indicateurs

    Cible d'évaluation

    Visuel

    Interprétation

    Valeur

    Indicateurs

    Cible d'évaluation

    Visuel

    Interprétation

    Valeur

    Implication relative

    individu

    L'étudiant a contribué au travail au moins autant que les autres.

    1 - 5

    L'étudiant a un peu moins contribué au travail que les autres.

    0.9 - 1

    L'étudiant a moins contribué au travail que les autres.

    0.8 - 0.9

    L'étudiant a beaucoup moins contribué au travail que les autres.

    0 - 0.8

    Assurance relative

    individu

    L'étudiant ne surévalue pas son implication.

    0 - 1

    L'étudiant surévalue légèrement son implication.

    1 - 1.1

    L'étudiant surévalue son implication.

    1.1 - 1.25

    L'étudiant surévalue beaucoup son implication.

    1.25 - 5

    Cohérence

    dynamique de groupe

    Cet étudiant est évalué avec beaucoup de cohérence.

    0 - 0.15

    Cet étudiant est évalué avec une assez bonne cohérence.

    0.15 - 0.25

    Cet étudiant est évalué avec un peu de variance.

    0.25 - 0.6

    Cet étudiant est évalué avec beaucoup de variance.

    0.6 - 1

    Cohésion

    dynamique de groupe

    Ce groupe présente une cohésion parfaite (suspect, les étudiants peuvent s'être mis d'accord sur la note)

     

    Ce groupe présente une très bonne cohésion

     

    Ce groupe présente une cohésion faible

     

    Ce groupe présente un mauvaise cohésion

     

    Ce groupe est très probablement en conflit

     

    Climat

    urgence d'intervention

    Compile les 4 indicateurs précédents et leur niveau de gravité pour générer un indicateur visuel global qui indique le degré d'urgence d'intervention.

     

    Organiser le feedback aux groupes

    Les étudiants n'ont aucun retour automatique sur les évaluations des groupes via la plateforme. Il nous paraît trop délicat de communiquer les indicateurs aux étudiants sans une discussion associée, en particulier en cas de difficulté. Il est donc important d'organiser un feedback pour les groupes, en veillant en particulier à fournir une régulation dans les groupes où la dynamique peut être améliorée.

    Construisez vos feedbacks comme des discussions basées sur l'analyse retournée par Dynamo. Il peut aussi arriver que plusieurs individus s'associent pour donner un mauvais feedback sur une personne. C'est au travers d'une discussion que vous pourrez faire émerger les problèmes.

    Vidéo de présentation de l’analyse des résultats de Dynamo


    Commencez pas consulter la Vue d’ensemble et triez les groupes selon la colonne Climat qui indique le degré d’urgence d’intervention.

     

    Accédez au Détails du groupe des groupes en difficulté, en cliquant sur le nom d’un groupe depuis la Vue d’ensemble et parcourez les différents indicateurs. Les commentaires ouverts permettent de mieux comprendre les difficultés qui se présentent dans le groupe.


    Accédez au Détails du participant pour un participant dans le rouge, en cliquant sur l’icône du participant depuis la vue d’ensemble.

     

    Consultez aussi les Rapports à titre informatif, notamment le Trombinoscope qui peut être utile et le Rapport des assurances relatives qui met clairement en évidence les étudiants qui se surestiment beaucoup.

    Dans chacune de ces vues, les indicateurs préoccupants sont surlignés en couleur selon le degré de gravité.

    Rencontrez les groupes ou individus en difficulté.

    Analyser les résultats : la vue d’ensemble

    Ce tableau de pilotage qui présente la liste des groupes avec les indicateurs visuels synthétiques; chaque membre d'un groupe est représenté par une icône de personne et vous pouvez visualiser les noms et photos en survolant les icônes

    Analyser les résultats : les détails du groupe

    Cet onglet présente les indicateurs pour analyser la dynamique du groupe et les commentaires ouverts, avec des graphiques qui comparent les évaluations de chacun avec les évaluations des pairs selon les différents critères d'évaluation;

    Analyser les résultats : les détails du participant

    Cet onglet présente toutes les données sur un individu.

    Analyser les rapports

    Dynamo génère aussi divers Rapports (via l'onglet associé) :

    • la liste des participants sans réponse (pour les relances);

    • le trombinoscope des groupes;

    • les rapports des groupes : affiche les rapports de tous les groupes sur une seule page (pour impression ou export pdf via le navigateur);

    • les rapports individuels : affiche tous les rapports individuels sur une seule page (pour impression ou export pdf via le navigateur);

    • le graphique des assurances relatives : met clairement en évidence les individus qui se surestiment dans le groupe (à rencontrer en priorité);

    • un export Excel : cet export permet un archihvage de toutes les données de l'activité Dynamo dans un seul fichier.

    Exploiter les indicateurs pour adapter la note selon l'implication individuelle

    L'indicateur d'Implication relative a été conçu pour permettre aux enseignants de prendre la mesure de l'implication de chaque étudiant dans un travail de groupe. Cet indicateur a été construit sur base de références bibliographiques solides et il peut donc être utilisé pour adapter la note.

    N'utilisez pas Dynamo seulement dans une logique certificative. Nous indiquons ici quelques pistes pour exploiter les résultats pour générer une note, mais il est essentiel de proposer cette activité plusieurs fois à des fins formatives, avant d'envisager de l'exploiter à des fins certificatives !

    L'utilisation de l'indicateur d'implication relative pour moduler la note suppose aussi que vous veilliez à annoncer cette modalité d'évaluation dès le départ et que vous prévoyiez une possibilité de recours pour les étudiants qui seraient pris comme bouc émissaire d’un groupe.

    Vidéo de présentation des approches pour pondérer la note

    Voici les modalités d'usage conseillées :

    • savoir travailler en équipe fait partie des compétences transversales de nombreux programmes de cours, mais les étudiants doivent pouvoir bénéficier de feedbacks formatifs avant de recevoir une note associée; veillez donc à faire au moins une utilisation formative de Dynamo à mi-parcours et veillez à fournir du feedback aux groupes et/ou aux individus en difficulté, via une rencontre associée à une discussion;

    • prévoyez ensuite une activité Dynamo certificative en fin de parcours et prenez en compte l'implication relative pour pondérer la note de groupe pour générer une note individuelle pour le travail;

    • un exemple de formule utilisée par un enseignant pour atténuer l'impact de l'implication relative (pondération de 70% de la note) :
      Note individuelle = Note de groupe * [0.7 *  Implication relative + 0.3] 

    • certains enseignants visant explicitement l'acquisition de compétences de travail en équipe vont au-delà et proposent une pondération directe de la note par l'implication relative (pondération de 100% de la note) :
      Note individuelle = Note de groupe * Implication relative

    • d'autres prévoient une marge de correction maximale pour que la différence entre la note individuelle et la note de groupe reste de l'ordre 10% du score maximum (maximum 2 points d'écart pour une note sur 20);

    Notez que, pour éviter de renforcer l’esprit de compétition, certains enseignants choisissent de pondérer la note uniquement lorsque l’indicateur d’implication relative est en dessous d’un certain seuil.

    Pour exploiter facilement l'indicateur d'implication relative, utilisez l'export tableur des données disponible via l'onglet Rapports. Les indicateurs individuels sont listés dans la seconde feuille du fichier tableur.

    Ces consignes sont tirées du Rapport d'analyse sur les usages de TeamUp et Dynamo, basé sur des entretiens avec une dizaine d'enseignants utilisateurs:

    Exploiter les indicateurs pour générer une note pour la dynamique de groupe

    Si le travail en équipe figure dans la liste des compétences transversales à exercer et à évaluer dans votre cours, nous vous suggérons d'exploiter Dynamo à divers moments du travail de groupe pour réguler la dynamique des groupes.

    Pour l'instant, il est assez délicat d'exploiter les indicateurs de cohérence et de cohésion à des fins certificatives car ils sont encore assez expérimentaux. Nous vous conseillons dès lors d'évaluer la progression des étudiants dans leur dynamique de groupe et leur prise en compte des feedbacks lors des différentes discussions de régulation.

    Si vous trouvez une modalité d'évaluation qui vous paraît efficace, n'hésitez pas à le signaler en déclarant un incident Moodle ou en contactant un formateur LLL !

    Exporter les résultats

    A la fin d'une année académique, vous devrez archiver les résultats des activités Dynamo de votre cours. Toutes les données sur l'activité sont reprises dans l'export tableur disponible via l'onglet Rapports > Export xls

    Le document exporté contient 3 feuilles :

    • une feuille avec les indicateurs de groupe;

    • une feuille avec  les indicateurs individuels;

    • une feuille avec les données brutes.

    Licence Creative Commons by-sa