Comparaison des versions

Légende

  • Ces lignes ont été ajoutées. Ce mot a été ajouté.
  • Ces lignes ont été supprimées. Ce mot a été supprimé.
  • La mise en forme a été modifiée.

Vous organisez des travaux de groupes et vous rêvez d'un outil qui vous indique les groupes en difficulté et qui vous donne une idée de l'implication de chacun? Le fond de développement pédagogique UCLouvain a financé le développement de l'activité Dynamo à ces fins !

Sommaire

Le moteur de notre Dynamo : l'évaluation par les pairs ...

Image Removed

L'outil  Dynamo est basé sur une évaluation de la dynamique de groupe par les pairs. Chaque étudiant est invité à évaluer les autres membres de son groupe d’apprentissage sur plusieurs dimensions (responsabilité, expertise, attitude, etc.), et à s’évaluer lui-même. Ces évaluations sont ensuite traitées afin de

  • mettre à la disposition des enseignants des indicateurs leur permettant de diagnostiquer en un coup d’œil les groupes en difficulté et les dimensions de la collaboration à prendre en charge.

  • objectiver, sur la base d’autoévaluations et d’évaluations par les pairs, les conflits potentiels et le degré d’engagement de chaque membre dans un groupe ;

  • fournir aux enseignants des informations tangibles, ancrées dans les évaluations étudiantes, pour discuter avec eux des problèmes éventuellement rencontrés dans leur groupe au cours de la réalisation du travail ;

  • offrir aux enseignants, sur la base de ces mêmes évaluations, la possibilité de pondérer le travail collectif par un facteur d’implication individuelle rendant compte de la contribution apportée par chaque étudiant .

Info

Ce module a été développé à l'UCLouvain dans le cadre d'un Fond de Développement Pédagogique. Durant l'année académique 2021-2022, un FDP a financé une analyse des usages de TeamUp et Dynamo qui a permis de nourrir cette page de manuel. N'hésitez pas à parcourir le rapport d'analyse sur les usages de TeamUp et Dynamo, basé sur des entretiens avec une dizaine d'enseignants utilisateurs.

Découvrir le potentiel de Dynamo en vidéo

Si vous n’avez jamais utilisé Dynamo, découvrez son potentiel en visionnant cette vidéo de démonstration:
[Vidéo] Démonstration du fonctionnement et de l'exploitation de Dynamo

Parcourir la grille d'évaluation de la dynamique de groupe

La grille d'évaluation de la dynamique de groupe comporte des critères suivants:

Image Removed

Participation*

rencontres, ponctualité, respect des règles du groupe

Image Removed

Responsabilité*

accomplissement des tâches confiées par le groupe et respect des engagements (lectures, recherches, rédaction, etc)

Image Removed

Contribution scientifique*

richesse et qualité des recherches, rigueur dans l'utilisation et la formulation des idées et concepts scientifiques

Image Removed

Contribution méthodologique*

capacité à utiliser les outils méthodologiques et techniques pour la réalisation des activités (logiciels ou matériel, méthode de recherche, protocoles, bibliographie, citation des sources…)

Image Removed

Collaboration*

esprit d'équipe, respect des personnes, contribution à la cohésion du groupe et à un bon climat de travail, qualité d'écoute et d'ouverture

Image Removed

Critère personnalisé (facultatif)

l'enseignant peut définir un critère d'évaluation personnalisé spécifique au travail organisé, par exemple pour évaluer la qualité des échanges entre groupes

* Les 5 premiers critères ont été sélectionnés sur base d'une veille pédagogique sur la dynamique de groupe. Ils sont obligatoires car la qualité des indicateurs générés en dépend. L'enseignant peut seulement ajouter des éléments personnalisés pour mieux décrire les critères imposés (visibles dans les bulles d'information).

Les participants sont invités à évaluer chaque membre du groupe selon ces critères sur une échelle graduée à 5 niveaux. Ils doivent aussi s'auto-évaluer et, éventuellement,  évaluer leur groupe de manière globale selon les 5 (ou 6) critères.

Image Removed

Les individus sont aussi invités à compléter 2 champs de commentaires ouverts :

  • un commentaire sur leur contribution dans le groupe;

  • un commentaire sur le fonctionnement du groupe en général.

Image Removed

Configurer l’activité Dynamo et récolter les réponses

Image Removed

Parcourons à présent les paramètres à spécifier lorsque vous ajouter une activité Dynamo. Comme pour les autres activités, vous devez définir un titre et une éventuelle description.

Mais le plus important est d'avoir préalablement associé un groupement à la série de groupes qui devront participer à l'évaluation.

Image Removed
Développer
titleMettre des groupes existants dans un groupement

C'est ce qui est conseillé de faire par défaut mais si vous n’avez pas défini de groupement lié à vos groupes, vous pouvez en créer un et y verser vos groupes via le menu de gestion de cours
Participants > Groupements

Cet onglet affiche la liste des groupements définis dans le cours, vous permet de créer un nouveau groupement et d’ajouter des groupes liés.

Image Removed

Une fois le groupement spécifié dans les paramètres de l’activité Dynamo, vous pouvez, pour chacun des critères d'évaluations imposé, personnaliser la description du critère selon les attentes spécifiques de vos travaux de groupes:

Image Removed

Les descriptions des commentaires ouverts peuvent aussi être personnalisées et vous pouvez choisir si les étudiants doivent évaluer globalement leur groupe. L'auto-évaluation est par contre obligatoire car elle permet de générer des indicateurs très intéressants pour le suivi.

Une fois cette activité configurée, vous pouvez prévisualiser le formulaire via l'onglet Prévisualisation. Si tout est bien configuré, vous pouvez inviter les étudiants à compléter l'évaluation en veillant motiver la démarche formative pour assurer un taux de réponse aussi élevé que possible.

Relancer les étudiants qui n’ont pas répondu

Au fil de la complétion des évaluations, vous verrez les résultats évoluer via les onglets Résultats et Rapport. Le rapport "Liste des participants sans réponse" vous indique la liste des participants qui n'ont pas complété le formulaire d'évaluation, pour vous permettre d'effectuer des relances ciblées.

Image Removed

Cette page décrit comment exploiter les résultats et rapports fournis par Dynamo pour réguler la dynamique de groupes et pondérer la note avec l’indicateur d’implication individuelle.

Sommaire

Comprendre les indicateurs calculés par Dynamo

Indicateurs

Cible d'évaluation

Visuel

Interprétation

Valeur

Implication relative

individu

L'étudiant a contribué au travail au moins autant que les autres.

1 - 5

L'étudiant a un peu moins contribué au travail que les autres.

0.9 - 1

L'étudiant a moins contribué au travail que les autres.

0.8 - 0.9

L'étudiant a beaucoup moins contribué au travail que les autres.

0 - 0.8

Assurance relative

individu

L'étudiant ne surévalue pas son implication.

0 - 1

L'étudiant surévalue légèrement son implication.

1 - 1.1

L'étudiant surévalue son implication.

1.1 - 1.25

L'étudiant surévalue beaucoup son implication.

1.25 - 5

Cohérence

dynamique de groupe

Cet étudiant est évalué avec beaucoup de cohérence.

0 - 0.15

Cet étudiant est évalué avec une assez bonne cohérence.

0.15 - 0.25

Cet étudiant est évalué avec un peu de variance.

0.25 - 0.6

Cet étudiant est évalué avec beaucoup de variance.

0.6 - 1

Cohésion

dynamique de groupe

Ce groupe présente une cohésion parfaite (suspect, les étudiants peuvent s'être mis d'accord sur la note)

Ce groupe présente une très bonne cohésion

Ce groupe présente une cohésion faible

Ce groupe présente un mauvaise cohésion

Ce groupe est très probablement en conflit

Climat

urgence d'intervention

Compile les 4 indicateurs précédents et leur niveau de gravité pour générer un indicateur visuel global qui indique le degré d'urgence d'intervention.

Analyser les résultats fournis par Dynamo

Les Résultats (dans l'onglet du même nom) sont présentés en 3 vues :

Vue d'ensemble

Ce tableau de pilotage qui présente la liste des groupes avec les indicateurs visuels synthétiques; chaque membre d'un groupe est représenté par une icône de personne et vous pouvez visualiser les noms et photos en survolant les icônes

Détails du groupe

Cet onglet présente les indicateurs pour analyser la dynamique du groupe et les commentaires ouverts, avec des graphiques qui comparent les évaluations de chacun avec les évaluations des pairs selon les différents critères d'évaluation;

Détails du participant

Cet onglet présente toutes les données sur un individu.

Dans chacune de ces vues, les indicateurs préoccupants sont surlignés en couleur selon le degré de gravité.

Analyser les rapports générés par Dynamo

Dynamo génère aussi divers Rapports (via l'onglet associé) :

  • la liste des participants sans réponse (pour les relances);

  • le trombinoscope des groupes;

  • les rapports des groupes : affiche les rapports de tous les groupes sur une seule page (pour impression ou export pdf via le navigateur);

  • les rapports individuels : affiche tous les rapports individuels sur une seule page (pour impression ou export pdf via le navigateur);

  • le graphique des assurances relatives : met clairement en évidence les individus qui se surestiment dans le groupe (à rencontrer en priorité);

  • un export Excel : cet export permet un archihvage de toutes les données de l'activité Dynamo dans un seul fichier.

Organiser le feedback aux groupes

Remarque

Les étudiants n'ont aucun retour automatique sur les évaluations des groupes via la plateforme. Il nous paraît trop délicat de communiquer les indicateurs aux étudiants sans une discussion associée, en particulier en cas de difficulté. Il est donc important d'organiser un feedback pour les groupes, en veillant en particulier à fournir une régulation dans les groupes où la dynamique peut être améliorée.

Construisez vos feedbacks comme des discussions basées sur l'analyse retournée par Dynamo. Il peut aussi arriver que plusieurs individus s'associent pour donner un mauvais feedback sur une personne. C'est au travers d'une discussion que vous pourrez faire émerger les problèmes.

  • nous vous conseillons de vous concentrer sur les groupes en difficulté sur base de la colonne "Climat" dans la vue d'ensemble. Vous pouvez trier votre liste de groupes sur base de ce critère;

  • pour ces groupes, analysez les résultats de groupe et individuels, vous pouvez aussi les imprimer (utilisez les possibilités d'impression en pdf de votre navigateur pour générer un fichier pdf);

  • consultez aussi les rapports (onglet Rapports) à titre informatif, notamment le trombinoscope qui peut être utile et le rapport des assurances relatives qui met clairement en évidence les étudiants qui se surestiment beaucoup;

  • rencontrez les groupes ou individus en difficulté.

Exploiter les indicateurs pour adapter la note selon l'implication individuelle

L'indicateur d'Implication relative a été conçu pour permettre aux enseignants de prendre la mesure de l'implication de chaque étudiant dans un travail de groupe. Cet indicateur a été construit sur base de références bibliographiques solides et il peut donc être utilisé pour adapter la note.

Remarque

N'utilisez pas Dynamo seulement dans une logique certificative. Nous indiquons ici quelques pistes pour exploiter les résultats pour générer une note, mais il est essentiel de proposer cette activité plusieurs fois à des fins formatives, avant d'envisager de l'exploiter à des fins certificatives !

L'utilisation de l'indicateur d'implication relative pour moduler la note suppose aussi que vous veilliez à annoncer cette modalité d'évaluation dès le départ et que vous prévoyiez une possibilité de recours pour les étudiants qui seraient pris comme bouc émissaire d’un groupe.

Voici les modalités d'usage conseillées :

  • savoir travailler en équipe fait partie des compétences transversales de nombreux programmes de cours, mais les étudiants doivent pouvoir bénéficier de feedbacks formatifs avant de recevoir une note associée; veillez donc à faire au moins une utilisation formative de Dynamo à mi-parcours et veillez à fournir du feedback aux groupes et/ou aux individus en difficulté, via une rencontre associée à une discussion;

  • prévoyez ensuite une activité Dynamo certificative en fin de parcours et prenez en compte l'implication relative pour pondérer la note de groupe pour générer une note individuelle pour le travail;

  • un exemple de formule utilisée par un enseignant pour atténuer l'impact de l'implication relative (pondération de 70% de la note) :
    Note individuelle = Note de groupe * [0.7 *  Implication relative + 0.3] 

  • certains enseignants visant explicitement l'acquisition de compétences de travail en équipe vont au-delàet proposent une pondération directe de la note par l'implication relative (pondération de 100% de la note) :
    Note individuelle = Note de groupe * Implication relative

  • d'autres prévoient une marge de correction maximale pour que la différence entre la note individuelle et la note de groupe reste de l'ordre 10% du score maximum (maximum 2 points d'écart pour une note sur 20);

Pour exploiter facilement l'indicateur d'implication relative, utilisez l'export tableur des données disponible via l'onglet Rapports. Les indicateurs individuels sont listés dans la seconde feuille du fichier tableur.

Exploiter les indicateurs pour générer une note pour la dynamique de groupe

Si le travail en équipe figure dans la liste des compétences transversales à exercer et à évaluer dans votre cours, nous vous suggérons d'exploiter Dynamo à divers moments du travail de groupe pour réguler la dynamique des groupes.

Pour l'instant, il est assez délicat d'exploiter les indicateurs de cohérence et de cohésion à des fins certificatives car ils sont encore assez expérimentaux. Nous vous conseillons dès lors d'évaluer la progression des étudiants dans leur dynamique de groupe et leur prise en compte des feedbacks lors des différentes discussions de régulation.

Si vous trouvez une modalité d'évaluation qui vous paraît efficace, n'hésitez pas à nous le signaler !

Exporter les résultats

A la fin d'une année académique, vous devrez archiver les résultats des activités Dynamo de votre cours. Toutes les données sur l'activité sont reprises dans l'export tableur disponible via l'onglet Rapports > Export xls

Le document exporté contient 3 feuilles :

  • une feuille avec les indicateurs de groupe;

  • une feuille avec  les indicateurs individuels;

  • une feuille avec les données brutes.