Évaluer des REL
Pourquoi évaluer une REL ?
Comme dans le cas des manuels commerciaux, les REL ne sont pas toutes de la même qualité et une seule REL ne répondra peut-être pas à tous les objectifs d’apprentissage prévus dans un cours. Il est donc important de prendre le temps d’évaluer les REL pour déterminer si elles répondent à nos besoins et à ceux des étudiantes et des étudiants et pour y apporter des adaptations si nécessaires.
Que veut-on dire par « qualité » ?
Les REL ne sont pas nécessairement produites suivant le même processus éditorial que les manuels scolaires conventionnels publiés par une maison d’édition. Cette différence peut nuire à la réputation des REL qui sont encore perçues comme étant de moindre qualité. Cette idée fausse persiste alors que beaucoup de REL sont soumises à l’évaluation par les pairs, avant ou après leur publication. Par exemple, le processus d’OpenStax, une initiative de manuels libres de Rice University, s’apparente étroitement à celui des maisons d’édition commerciales. Par le biais de son Textbook Success Program et de ses ressources, Rebus Community soutient les projets de REL du début à la fin, y compris leur évaluation par les pairs. Les REL déjà publiées peuvent aussi faire l’objet d’évaluation par des spécialistes du domaine, le plus souvent de membres du corps professoral ou du personnel enseignant qui considèrent les utiliser dans leurs propres cours. La Bibliothèque libre d’eCampusOntario, la collection de manuels libres de BCcampus et la Open Textbook Library comptent tous sur des expertes et des experts qualifiés pour évaluer les REL qui y sont répertoriées.
Les créatrices et créateurs de REL disposent rarement d’une équipe de conception graphique ou d’un budget pour produire une ressource d’aspect visuel comparable aux manuels commerciaux. Parce que la tendance de juger un livre à sa couverture persiste, ceci peut représenter un désavantage significatif. La couverture et la facture visuelle de la REL n’ont pourtant rien à voir avec l’exactitude et la qualité de son contenu. En 2013, David Wiley remettait en cause ce critère de qualité souvent promu par les maisons d’édition pour plutôt suggérer qu’une seule mesure devrait être considérée, peu importe que la ressource soit commerciale ou gratuite : le matériel permet-il aux étudiantes et étudiants d’atteindre les objectifs d’apprentissages du cours?[1] C’est pourquoi nous avons choisi de ne pas inclure d’images des REL suggérées dans ce guide pour plutôt mettre de l’avant les évaluations de ces ressources lorsqu’elles existent.
Comment évaluer une REL ?
Plusieurs éléments sont à considérer lors de l’évaluation d’une REL. BCOER, Affordable Learning Georgia et la fabriqueREL proposent les rubriques d’évaluation suivantes :
- BCOER, Faculty Guide for Evaluating Open Educational Resources [PDF en anglais]
- Affordable Learning Georgia, OER Evaluation Criteria [PDF en anglais]
- fabriqueREL, Foutaisomètre REL [PDF en français]
En général, une évaluation exhaustive d’une REL tient compte des critères suivants[2] :
- Portée : La ressource couvre de manière appropriée la matière et les idées reliées au sujet.
- Exactitude : Le contenu est exact, objectif et exempt d’erreurs. S’il s’agit d’une traduction, la qualité de celle-ci reflète bien le contenu original.
- Pertinence : Le contenu est à jour ou rédigé/organisé de manière à ce que les mises à jour nécessaires soient relativement faciles et simples à mettre en œuvre. Le contenu est adapté au niveau d’études désiré.
- Autorité : La ressource est créée ou adaptée par une experte ou un expert du sujet. Il est important de noter que la cocréation avec les étudiantes et les étudiants est une pratique de plus en plus commune en éducation ouverte. Leur participation ne devrait pas être automatiquement interprétée comme un indice de qualité inférieure. Dans ce contexte, l’autorité peut être évaluée selon le contexte de création, c’est-à-dire dans le cadre d’un cours et/ou sous la supervision d’un membre du corps professoral.
- Accessibilité et facilité d’accès : La ressource comprend des mesures favorisant l’accessibilité telles que le sous-titrage dans le cas de vidéos ou une transcription dans le cas de balados, une disponibilité dans plusieurs formats et une expérience comparable sur différents appareils.
- Modularité : La ressource peut facilement être divisée en sections qui peuvent être assignées à différents moments du cours sans créer de confusion pour l’apprenante ou l’apprenant.
- Pertinence culturelle et inclusion : Le contenu contient des exemples qui tiennent compte de la diversité de genres, de races, de cultures et d’expériences. Il est approprié au contexte local dans lequel il sera utilisé ou peut être facilement adapté.
- Ressources additionnelles : La ressource s’accompagne de fichiers supplémentaires (vidéos, activités interactives, banque de questions, etc.).
- Licence : La ressource est mise à disposition selon les termes d’une licence ouverte qui permet sa réutilisation, sa modification et sa distribution sans les restrictions de droit d’auteur habituelles.
Évaluation des REL suggérées dans ce guide
Des bibliothécaires ont effectué une évaluation préliminaire des REL suggérées dans ce guide afin de déterminer leur pertinence en relation à des cours spécifiques selon les descriptions disponibles dans le catalogue de l’Université d’Ottawa. Cette évaluation est indiquée par la présence d’un astérisque (*) après le titre de la ressource.
Les critères suivants ont été pris en considération pour cette évaluation préliminaire :
- Pertinence selon une comparaison de la description du cours et de la table des matières de la ressource
- Correspondance selon une comparaison du niveau du cours et du niveau d’apprentissage de la ressource
- Fonctionnalité de la ressource (facile à naviguer, modularité)
- Si la ressource est évaluée par des experts et/ou des usagers, ces évaluations indiquent-elles des problèmes importants?
- Autres détails qui soulignent la pertinence de la ressource (contexte géographique ou culturel)
Bien que cette première évaluation assure un certain niveau de contrôle de la qualité, il revient aux membres du corps professoral ou du personnel enseignant d’effectuer une évaluation plus approfondie suivant les critères présentés dans ce chapitre afin de décider si ces REL correspondent aux objectifs d’apprentissage de leurs cours et aux besoins de leurs étudiantes et étudiants.
- David Wiley, « On Quality and OER », Improving Learning, 10 octobre 2013, https://opencontent.org/blog/archives/2947, CC BY 4.0. ↵
- Cette liste de critères provient d’une combinaison des sources suivantes : BCOER, Faculty Guide for Evaluating Open Educational Resources, avril 2015, https://open.bccampus.ca/files/2014/07/Faculty-Guide-22-Apr-15.pdf, CC BY 4.0 et Open Textbook Library, Open Textbooks Review Criteria, s.d., https://open.umn.edu/opentextbooks/reviews/rubric, CC BY 3.0. ↵
