La raison de l’évalution de l’apprentissage par simulation virtuelle

De nombreuses raisons motivent l’évaluation d’une simulation virtuelle. Parmi celles-ci, notons :

  • Mesurer l’atteinte d’objectifs d’apprentissage précis.
  • Documenter ce qui fonctionne et ce qui doit changer dans les processus d’apprentissage et d’enseignement liés à la simulation virtuelle.
  • Faire l’inventaire des ressources utilisées pour éclairer les décisions futures touchant l’attribution des ressources.
  • Déterminer les meilleurs processus à utiliser pour intégrer la simulation virtuelle au curriculum.
  • Recueillir des données probantes à mettre en commun avec d’autres enseignant(e)s.

L’un des principes qui sous-tendent le processus, c’est qu’il ne faut pas tenter de répondre à toutes les questions dans le cadre d’une seule évaluation. Il est utile de clarifier la portée de l’évaluation au moment de la planification initiale de celle-ci. Par exemple, vous pourriez commencer par préparer une liste de questions qui sont d’une importance particulière pour l’équipe d’enseignement et pour lesquelles il est possible de trouver des réponses (Tableau 6.1).

Cliquez ici pour télécharger la version PDF de Tableau 6.1.

Tableau 6.1 : Questions clés pour la planification de l’évaluation

Questions

Que voulons-nous vraiment connaître et pourquoi?

Quel résultat voulons-nous mesurer?

Comment les conclusions de l’évaluation seront-elles utilisées pour améliorer l’expérience de simulation virtuelle?

Quel groupe devrait faire l’objet de l’évaluation?

Qui devrait mener l’évaluation?

Quand l’évaluation devrait-elle être effectuée et quels en sont les échéanciers?

Quelle méthode de collecte de données est la plus conforme aux objectifs de l’évaluation?

Comment les données seront-elles analysées et par qui?

Plus une question d’évaluation est précise, plus il est probable que l’enseignant(e) obtiendra une réponse claire. Aussi, au moment de concevoir le plan d’évaluation, il est important de veiller à ce que ce dernier soit faisable (Freeth et coll., 2005). Les enseignant(e)s doivent réfléchir au temps et aux efforts qui devront être consacrés à l’évaluation, aux compétences qui seront requises pour la mener à bien, ainsi qu’à la disponibilité des ressources qui devront être investies. De nombreuses méthodes d’évaluation ne nécessitent pas de compétences spécialisées en analyse ou en collecte de données; cependant, c’est bien le cas pour certaines d’entre elles. Par exemple, des connaissances de base sur la façon d’effectuer et d’interpréter des tests statistiques seront nécessaires pour mesurer l’acquisition des connaissances, avant et après l’activité. Les enseignant(e)s doivent réfléchir attentivement à leur choix de méthode et veiller à disposer des ressources nécessaires pour l’utiliser. Il faut éviter de faire preuve de trop d’ambition!

Conseil d’experts: Évaluation de l’apprenant(e)s

Pour répondre à la question « Que voulons-nous vraiment savoir? », des enseignant(e)s décident d’évaluer l’acquisition des connaissances en lien avec une simulation virtuelle sur les soins néonataux. Pour ce faire, on demande aux apprenant(e)s de répondre à un questionnaire à choix multiple en ligne comptant 10 questions, fondées sur les objectifs d’apprentissage de la simulation virtuelle, avant d’effectuer la simulation comme telle. Ensuite, on répète l’exercice une deuxième fois, une semaine après la simulation. Un membre de l’équipe consent à effectuer l’analyse statistique des données recueillies.

De nombreuses méthodes différentes peuvent être employées pour évaluer l’expérience de simulation virtuelle. Mentionnons : les tests destinés aux apprenant(e)s, les groupes de discussion, les sondages, l’autoréflexion par les facilitateur(-trice)s, l’observation par les pairs et la rétroaction. Tout comme des résultats d’apprentissage précis orientent le choix des enseignant(e)s en matière de simulation virtuelle, ils orientent aussi la stratégie d’évaluation à laquelle elles/ils auront recours (Figure 6.1). Par exemple, si des enseignant(e)s veulent simplement savoir si leurs apprenant(e)s acquièrent des connaissances, les tests constituent une stratégie appropriée. Cependant, si elles/ils désirent approfondir leur compréhension de l’impact de la simulation sur la pratique clinique, des échanges dans un contexte de groupes de discussion représenteraient la meilleure approche.

La simulation appliquée : Groupe de discussion

Les enseignant(e)s ont utilisé une simulation virtuelle afin d’aider les étudiants du programme d’interventions auprès de personnes ayant un handicap à se préparer à leur première visite dans la communauté. Elles/ils souhaitaient évaluer l’impact de la simulation sur les niveaux de connaissances et de confiance des apprenant(e)s. Pour ce faire, elles/ils ont mené un groupe de discussion avec les apprenant(e)s et leur ont posé les questions suivantes :

  1. Parlez-moi de ce que vous pensiez de votre rôle d’intervenant(e) auprès de personnes ayant un handicap pendant que vous réalisiez la simulation.
  2. La simulation vous a-t-elle aidé à vous préparer pour votre première visite dans la communauté? Dites-moi pourquoi ou pourquoi pas.
  3. Quels ont été les principaux apprentissages que vous avez tirés de la simulation? De quelle façon vous aideront-ils sur le terrain?
  4. Comment évalueriez-vous votre niveau de confiance concernant votre première visite avant d’avoir effectué la simulation? Après? Pouvez-vous m’en parler?
  5. Que pourrions-nous faire différemment par rapport à cette simulation virtuelle pour favoriser davantage votre apprentissage?

Cliquez ici pour télécharger la version PDF de Figure 6.1.

Figure 6.1 : Le cycle d’évaluation

De nombreuses stratégies d’évaluation peuvent être mises en œuvre par l’intermédiaire d’un système de gestion de l’apprentissage ou d’un site d’administration de sondages, ce qui permet de rationaliser la collecte et l’analyse de données. Vous trouverez des exemples de résultats et de stratégies d’évaluation dans le Tableau 6.2.

Cliquez ici pour télécharger la version PDF de Tableau 6.2.

Tableau 6.2 : Évaluation des résultats d’apprentissage et stratégies d’évaluation pour la simulation virtuelle

Résultat Stratégies possibles d’évaluation

Acquisition de connaissances par l’apprenant(e)

  • Test de connaissances à choix multiple avant et après l’activité
  • Sondage comportant des questions ouvertes
  • Activités de pratique réflexive
  • Analyses
  • Quiz

Satisfaction des apprenant(e)s à l’égard de la simulation virtuelle (y compris le débreffage)

  • Discussions informelles
  • Sondages
  • Entrevues en groupe de discussion
  • Sondage éclair (anonyme)

Sondage comportant des questions ouvertes

  • Sondage avec des questions ouvertes
  • Activités de pratique réflexive
  • Rétroaction des apprenant(e)s

Capacités de travail en équipe des apprenant(e)s

  • Discussions informelles
  • Activités de pratique réflexive
  • Sondages

Auto-efficacité des apprenant(e)s

  • Discussions informelles
  • Sondages

Compétences des facilitateur(-trice)s

  • Rétroaction des apprenant(e)s
  • Examen/mentorat par les pairs
  • Débreffage en collaboration de la simulation virtuelle

Il est aussi important de songer à la façon dont les résultats d’évaluation seront utilisés. Deux principaux types d’évaluation s’appliquent à la simulation virtuelle : formative et sommative.

Partagez ce livre