7 L’évaluation de l’apprentissage et l’integrité académique
Dans ce chapitre
- Principes d’évaluation
- Options d’évaluation asynchrone
- Options d’évaluation synchrone
- Les examens
- L’intégrité académique
- Pour approfondir
Principes d’évaluation
UBC décrit les principes de l’évaluation dans n’importe quel contexte :
“Valide : Mesure ce qu’elle est censée mesurer
- L’évaluation doit s’aligner sur les résultats d’apprentissage visés (voir Alignement constructif pour plus d’informations).
Le niveau de l’évaluation doit correspondre au niveau des résultats d’apprentissage (voir la taxonomie de Bloom). Réfléchissez bien si une question à choix multiple peut évaluer une compétence d’apprentissage de haut niveau comme la synthèse ou le jugement, et si un essai ou une question écrite similaire est nécessaire pour évaluer une compétence de bas niveau comme la mémorisation ou la compréhension.
Fiable : Les résultats sont cohérents et fiables
- Les différents correcteurs évaluent-ils le travail des élèves de la même manière ?
Les élèves ont-ils des chances d’obtenir des résultats similaires s’ils refont l’évaluation quelques jours plus tard ? L’évaluation dépend-elle de la capacité des élèves à étudier des détails mineurs du cours ou des thèmes généraux du cours ?
Pratique : le coût, l’effort et le délai sont raisonnables.
- L’évaluation doit être réalisable pour vous, pour les assistants et pour les étudiants.
Authentique : elle s’aligne sur la compétence cible.
- Par exemple, pouvons-nous évaluer le travail d’équipe à l’aide d’un questionnaire à choix multiples ?”
Le Taylor Institute for Teaching and Learning a créé une explication réfléchie des principes clés à prendre en compte pour les évaluations en ligne, y compris leurs raisons, la manière d’appliquer le principe et des lectures complémentaires. Les principaux points sont les suivants :
- Se concentrer sur l’apprentissage (en particulier les objectifs les plus importants du cours)
- Équilibrer la structure et la flexibilité (tenir compte des défis potentiels/connus auxquels les étudiantes et étudiants sont confrontés pendant la pandémie)
- Fournir des instructions claires et un retour d’information rapide et de qualité
- Dans la mesure du possible, remplacer les examens programmés par d’autres types d’évaluation
- Mettre l’accent sur l’intégrité académique (par exemple, par des conversations précoces et fréquentes, et une déclaration d’intégrité académique dans le programme d’études)
Options d’évaluation asynchrone
Voici quelques options pour structurer les évaluations au cours du semestre. Nous vous suggérons de moins vous fier aux notes des examens de mi-session et final, et de fournir davantage de notes provenant d’autres sources, par exemple :
- Questionnaire sur Brightspace, publiés chaque semaine, par exemple le jeudi, et à remettre le mercredi suivant
- Compléter un ensemble de problèmes (non évalués, uniquement à des fins d’apprentissage) ; les questions et réponses sont affichées en format PDF
- Résumer les lectures hebdomadaires ; soumettre sous forme de devoir Brightspace
- Devoirs collaboratifs ; soumettre en tant que devoir Brightspace
Options d’évaluation synchrone
- Répondre à une série de questions en classe – l’instructeur peut revoir et développer les réponses ou passer à autre chose si le concept est bien compris. Par exemple Echo360 et Menti sont des systèmes de réponse en classe qui peuvent être utilisés pour évaluer la compréhension des étudiantes et étudiants en temps quasi réel – ils fonctionnent comme une version en ligne d’un clicker.
- Soumettre une ou deux phrases identifiant le point principal d’un concept sur Menti.
- Veuillez noter que cette section sera bientôt étendue. 🙂
Les examens
En bref
Houston, nous avons un problème. Une nouvelle situation exige de nouvelles approches, et l’une des parties les plus difficiles du passage à l’enseignement à distance est de trouver comment évaluer l’apprentissage des étudiantes et étudiants.
Pour faire court, si vous souhaitez donner un examen assez traditionnel dans ces circonstances non traditionnelles, nous vous recommandons :
- un examen collaboratif à livre ouvert, ou
- un examen individuel à livre ouvert, ou
- si les examens à livre ouvert ne peuvent pas fonctionner, un examen utilisant un système de contrôle en ligne
Quel que soit le style d’examen, l’administration de l’examen nécessitera des changements importants par rapport aux examens typiques en personne. La plupart des étudiantes et étudiants respectent les exigences en matière d’intégrité académique, bien qu’un examen à livre ouvert sera probablement collaboratif, que vous le vouliez ou non, du moins pour quelques étudiantes et étudiants. Les étudiantes et étudiants honnêtes peuvent eux-mêmes se sentir trompés s’ils savent que d’autres n’ont pas respecté les normes d’intégrité académique et c’est également une considération.
Les codes d’honneur peuvent également être utilisés pour mettre en avant et enseigner aux étudiantes et étudiants l’intégrité et l’éthique académiques ; les étudiantes et étudiants peuvent signer une déclaration au début de leur examen attestant qu’ils acceptent de suivre les directives de l’examen.
Les détails pratiques
Pour faire un examen à livre ouvert et en collaboration, fixez une taille de groupe réduite et maximale (par exemple, 3). Les étudiantes et étudiants ne doivent pas organiser eux-mêmes les groupes. Communiquez clairement avec les étudiantes et étudiants sur la façon dont les réponses doivent être soumises (par exemple, il y a une soumission par groupe, soumettez en tant que “devoir” Brightspace, les réponses seront vérifiées à l’aide d’un logiciel de plagiat). Vous pouvez demander aux étudiantes et étudiants de certifier qu’ils ont participé de manière égale à la préparation des réponses.
Une explication plus détaillée
L’un des plus grands obstacles à l’offre d’un cours d’apprentissage à distance solide est de comprendre que les examens ne peuvent pas être administrés de manière traditionnelle. Les obstacles pratiques à l’évaluation efficace et équitable des étudiantes et étudiants (et à distance) sont importants pour la plupart des professeurs. Une approche consiste à envisager des alternatives à ces examens traditionnels ; options are explained well by the University of Calgary’s Taylor Institute for Teaching and Learning.
Reconnaître qu’il n’existe pas de moyen parfait pour faire passer un examen traditionnel dans des conditions d’apprentissage à distance. C’est encore plus difficile pendant une pandémie. L’une des approches qui est apparue à beaucoup est de donner des examens courts et chronométrés en partant du principe qu’il est plus difficile de tricher si le temps est très limité. Nous sommes sceptiques quant à la véracité de cette affirmation. En outre, l’administration de ce type d’examen dans un environnement d’apprentissage à distance risque de créer de sérieux (et stressants) défis logistiques : il suffit d’un obstacle technique légitime et l’ensemble du processus, soigneusement planifié, pourrait échouer.
La pandémie rend les problèmes plus difficiles. Nous ne pouvons pas avoir des milliers d’étudiants dans des gymnases qui passent des examens pour plusieurs cours le matin, suivis d’une deuxième cohorte l’après-midi et d’une troisième le soir, et nous attendre à maintenir des exigences d’éloignement physique. De plus, même si l’université peut permettre de tels examens en personne pour certains cours, un changement de statut de la pandémie (comme la très attendue “deuxième vague”) pourrait faire dérailler les plans sans grand avertissement. Que feriez-vous alors pour évaluer les étudiants à la place ?
Les examens surveillés à distance peuvent maintenant être administrés à l’Université d’Ottawa par le biais de Respondus Lockdown Browser ou Respondus Monitor. Ces formats administrés à distance nécessitent des systèmes logiciels qui peuvent être : très invasifs, peu fiables ou susceptibles de fraude académique, trop chers, technologiquement difficiles pour les étudiants, nuisibles à l’expérience des étudiants dans nos cours, ou tout ce qui précède. Si vous prévoyez d’utiliser ce logiciel, nous vous recommandons vivement de suivre la formation recommandée, de faire préparer une méthode de contrôle de secours (pour les étudiants qui ne consentent pas à utiliser Respondus) et de comprendre les problèmes que posent ces outils (décrits ci-dessous).
C’est un problème épineux.
Un examen de mi-parcours ou un examen final administré avec succès dans un environnement d’apprentissage à distance le fera :
- Maintenir l’intégrité académique
- Permettre à tous les étudiantes et étudiants de participer sur un pied d’égalité
- Donner une mesure raisonnable de l’apprentissage des étudiantes et étudiants
- Ne pas imposer de coûts déraisonnables (monétaires ou autres) pour les étudiantes et étudiants ou l’université
L’intégrité académique
Les éducateurs sont naturellement préoccupés par les fautes académiques et la réduction de ces fautes ne se limite pas à la mise en place de mesures pour y mettre fin. L’instauration d’une culture de l’intégrité académique implique d’instaurer la confiance par des conversations et une communication claire tout au long d’un cours, d’offrir plusieurs occasions aux étudiants de démontrer ce qu’ils ont appris, de s’efforcer d’identifier les fautes académiques (par exemple, devoirs plagiés, tricherie contractuelle), et de fournir un soutien institutionnel qui comprend des politiques claires et solides, des campagnes d’intégrité axées sur le positif, impliquant les leaders étudiants, et des programmes de formation pour tous les membres de la communauté universitaire.
Voici quelques-uns des aspects essentiels de l’intégrité académique :
- Avoir des politiques institutionnelles visant à enseigner aux étudiants l’intégrité académique et à faire respecter les règlements
- Impliquer les étudiants leaders dans les conversations et création de politiques
- Explications dans les syllabus de cours, disponible dans le modèle de syllabus dans le chapitre de démarrage rapide
- Des conversations en classe qui informent, partagent les attentes et créent un environnement d’intégrité académique
- Exiger des étudiants qu’ils lisent et signent une déclaration d’intégrité académique pour l’ensemble du cours et les évaluations spécifiques
- Un modèle se trouve dans le chapitre de démarrage rapide
- Inclure des instructions détaillées sur les évaluations indiquant ce qui est autorisé et ce qui ne l’est pas ; ne supposez pas que les étudiants interpréteront les déclarations de la même manière que vous. Par exemple, dire qu’un examen est “à livre ouvert” pourrait signifier que les étudiants peuvent consulter :
- Seul le manuel
- Toute source, y compris le web
- Camarades de classe
- N’importe qui, n’importe où
- Poser des questions qui exigent une réflexion plus poussée, ce qui rend la tricherie plus difficile
- Concevoir des évaluations qui atténuent la tricherie : évaluations authentiques (par exemple, en utilisant des données réelles sur un devoir qui peut être utilisé dans un autre but ou dans un but réel), évaluations en plusieurs étapes (individuel écrit puis oral), réflexions personnelles, poser des questions qui exigent une réflexion plus approfondie, ce qui rend la tricherie plus difficile
- Dissuader l’inconduite académique, voir ci-dessous
Moyens de dissuasion de l’inconduite académique
- Promouvoir l’intégrité académique, comme décrit ci-dessus
- Avantages :
- Bâtit une culture de classe saine
- Aide les étudiants qui ne sont pas conscients de leur intégrité académique ou de leur inconduite
- Inconvénients : certaines personnes tricheront toujours (c’est la même chose dans le milieu universitaire avec le plagiat)
- Avantages :
- Étendre la pondération des évaluations, plutôt que d’en avoir quelques unes importantes
- Avantages :
- Traite des principales raisons pour lesquelles les étudiants commettent des fautes académiques
- Inconvénients :
- Comme toutes les méthodes, ce n’est pas une solution parfaite. Un trop grand nombre d’évaluations peut entraîner une surcharge de travail pour les étudiants (estimateur de la charge de travail).
- Avantages :
- Utilisation d’un logiciel de surveillance à distance
- Avantages :
- Peut dissuader mais ne met pas fin à l’inconduite académique
- Peut aider les étudiants à se sentir moins obligés d’aider leurs amis à tricher
- La surveillance par zoom a été utilisée comme méthode pour surveiller les examens sans utiliser un logiciel de surveillance officiel, en particulier avec une webcam externe
- Inconvénients :
- Beaucoup d’étudiants ressentent cela comme une atteinte à la vie privée (devoir partager leur environnement familial)
- De nombreux étudiantes et étudiants trouvent que ce type de logiciel de surveillance vidéo augmente l’anxiété liée au texte, ce qui a eu un impact négatif sur les performances
- Crée des problèmes d’équité avec les étudiants qui ne peuvent pas acheter une webcam, qui n’ont pas le wifi (ou bande passante suffisante), ou qui ne disposent pas des derniers logiciels nécessaires
- Les étudiants peuvent toujours trouver des moyens de tricher (par exemple, en utilisant des pauses pour aller aux toilettes, un appareil secondaire)
- Limites des types de questions qui peuvent être posées en ligne ; souvent, il faut encore du papier et du crayon
- Risques de briser la confiance et la communauté que nous nous efforçons de développer avec les étudiants – nos futurs étudiants de spécialisation, étudiants diplômés, collègues et co-professionnels
- Les étudiantes et étudiants avec des besoins particuliers (p.ex., les mouvements physiques) peuvent être signalés plus souvent que une étudiante ou un étudiant moyen et, par conséquent, peuvent avoir le sentiment que leur vie privée est davantage violée
- Les étudiants à la peau plus foncée sont plus souvent signalés en raison de la difficulté du logiciel à voir le contraste
- Lorsqu’ils surveillent avec un zoom, les étudiantes et étudiants peuvent s’envoyer des messages ou utiliser d’autres logiciels sans disposer de capacités de surveillance.
- Avantages :
- Traiter les cas identifiés par les politiques et les processus institutionnels en matière d’inconduite dans le milieu universitaire
- Enseigner aux assistants d’enseignement ce qu’ils doivent faire s’ils soupçonnent des cas d’inconduite académique
Options pour les examens qui ont été utilisés pour décourager l’inconduite académique
- Réduction des délais pour les examens
- Avantages : en principe, il est plus difficile d’obtenir des réponses à temps
- Inconvénients :
- Les recherches montrent que cette méthode a peu d’effet sur la tricherie
- Met l’accent sur un mode de réflexion rapide plutôt que sur une réflexion analytique (l’un ou l’autre mode peut être approprié, selon le contexte et l’objectif de l’évaluation)
- Les étudiants peuvent encore demander à d’autres personnes de répondre à leur place ou de chercher des réponses
- Les étudiants sont plus susceptibles de tricher sur les évaluations qui ont un délai d’exécution plus court ou qui représentent une part importante de la note du cours
- Ne tient pas compte des questions techniques qui peuvent se poser
- Versions multiples des examens
- Avantages : plus difficile à copier de quelqu’un d’autre
- Inconvénients : il est difficile et long de réaliser de nombreuses versions équivalentes
- Ne pas autoriser le retour en arrière
- Avantages : rend plus difficile pour les étudiants de soumettre une question sur un site web qui fournit des réponses pendant qu’ils travaillent sur d’autres questions
- Inconvénients : empêche les étudiants de travailler stratégiquement sur l’examen comme ils le feraient souvent (par exemple, en répondant d’abord aux questions qu’ils se sentent en confiance de faire puis en laissant les autres à plus tard)
- Séquences de questions variables
- Avantages : Gêne légèrement le partage des réponses
- Inconvénients : a relativement peu d’impact
- Permettre aux étudiants de passer l’examen une seule fois
- Avantages : Analogue à un examen en personne
- Inconvénients :
- La pression pour obtenir les bonnes réponses du premier coup est un facteur de tricherie ;
- Ils pourraient mal faire s’ils ont une mauvaise journée, sont dans un environnement familial distrait.
- Retarder la disponibilité des scores
- Avantages : les indications de réponses correctes du professeur ne peuvent pas être partagées avec d’autres
- Inconvénients : suppression d’un important mécanisme d’apprentissage
- Retarder ou ne pas donner de feedback
- Avantages : les réponses correctes du professeur ne peuvent pas être partagées avec d’autres
- Inconvénients :
- Supprime l’un des mécanismes d’apprentissage les plus importants, ce qui a un impact considérable et négatif sur l’apprentissage et sur la majorité des étudiants du cours (étudiants honnêtes)
- Peut créer un sentiment de méfiance et nuire à l’environnement du cours
Le graphique suivant résume les perceptions de la tricherie sur les évaluations, telles que rapportées par ceux qui ont triché.
Pour approfondir
- University of Calgary’s Taylor Institute for Teaching and Learning, Five principles for meaningful online assessment
- University of Calgary’s Taylor Institute for Teaching and Learning, Academic Integrity and Online Learning
- University of British Columbia’s Chapman Learning Commons and Faculty of Science (contient des suggestions pour les professeurs, les communications avec les étudiants, les mécanismes de signalement, etc.)
- A Guide for Academics – Open Book Exams
- 5 Tips for Using Take-Home Exams
- Créer des vidéos interactives en utilisant H5P avec eCampusOntario’s H5P Studio ou d’autres méthodes, afin que les étudiantes et étudiants puissent s’auto-évaluer pendant ou après qu’ils regardent un vidéo.
- Weleschuk, Dyjur, & Kelly. (2019). Online assessment in higher education. Taylor Institute for Teaching and Learning Guide Series
- Wisniewski, Zierer, & Hattie. (2020). The power of feedback revisited: A meta-analysis of educational feedback research. Frontiers of Psychology. 10:3087. DOI: 10.3389/fpsyg.2019.03087
- Jopp & Cohen. (2020) Choose your own assessment – assessment choice for students in online higher education. Teaching in Higher Education, pages 1-18. DOI: 10.1080/13562517.2020.1742680
À venir
Le chapitre suivant traite de la communication dans le cadre du cours, tant entre vous et les étudiantes et étudiants qu’entre les étudiantes et étudiants eux-mêmes.
Veuillez nous contacter pour nous faire part de vos questions, suggestions, et préoccupations. Nous vérifions ce formulaire chaque semestre et nous continuerons à mettre à jour ce guide à mesure que la situation évolue.
L'objectif de l'évaluation formative est de suivre l'apprentissage des étudiants afin de fournir un retour d'information continu qui peut être utilisé par les instructeurs pour améliorer leur enseignement et par les étudiants pour améliorer leur apprentissage. Plus précisément, les évaluations formatives :
- aider les étudiants à identifier leurs points forts et leurs points faibles et à cibler les domaines qui nécessitent un travail
- aider le corps enseignant à reconnaître les difficultés des étudiants et à résoudre les problèmes immédiatement
Les évaluations formatives ont généralement des enjeux faibles, ce qui signifie qu'elles n'ont pas ou peu de valeur en points. Les évaluations formatives consistent par exemple à demander aux étudiants de
- de soumettre une ou deux phrases identifiant le point principal d'un cours
- présenter une proposition de recherche pour un retour d'information rapide
- compléter un ensemble de problèmes
Source: https://www.cmu.edu/teaching/assessment/basics/formative-summative.html
L'objectif de l'évaluation sommative est d'évaluer l'apprentissage des étudiants à la fin d'une unité d'enseignement (par exemple, un module, un cours) en le comparant à une norme ou à un point de référence.
Les évaluations sommatives ont souvent des enjeux élevés, ce qui signifie qu'elles ont une valeur de point élevée. Voici quelques exemples d'évaluations sommatives :
- un examen à mi-parcours ou final
- un projet final
- un document
- un récital de haut niveau
Les informations issues des évaluations sommatives peuvent être utilisées de manière formative lorsque les étudiants ou les professeurs les utilisent pour orienter leurs efforts et leurs activités dans les cours suivants.
Source: https://www.cmu.edu/teaching/assessment/basics/formative-summative.html
H5P (une abréviation de HTML5 Package) est un plugin open source qui vous donne la possibilité de créer, de partager et de réutiliser du contenu comme des vidéos interactives, des présentations interactives, des jeux et des quiz pour faire participer les apprenants à votre cours.