Building and using a grid for evaluating digital educational resources in distance learning, or how to evaluate 1,500 resources in 365 days?
Main Article Content
Abstract
With distance learning growing fast, sharing digital educational resources (DER) has become a must. The Inter-Order Distance Learning Expertise Center, an entity of Campus numérique Québec funded by the Ministry of Higher Education, has identified 1,500 DERs available in the network in order to assess their quality and group the most relevant ones into a public database of digital educational resources on distance learning in higher education. To this end, an evaluation grid was developed and integrated into a collaborative application that optimizes data monitoring, coordination, and management. In just one year, a structured approach involving 20 evaluators made it possible to achieve a satisfactory level of reliability, despite challenges related to defining criteria, categorizing resources and reaching consensus. The results led to the implementation of an OER database on distance learning, the development of a resource adaptation process and an OER self-assessment grid, and the launch of a call for for new OERs projects. However, significant challenges remain, including ensuring sustainable access to resources to support distance learning in a constantly changing environment.
Downloads
Article Details

This work is licensed under a Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.
References
Alexandre, M., Roy, J., Bernatchez, J., Fournier Dubé, N., et Lahaie, H. (2022). Des solidarités numériques en action : le soutien aux étudiants et aux étudiantes utilisant des environnements numériques d’apprentissage en milieu collégial. Médiations et médiatisations, (12), 54-73. https://doi.org/10.52358/mm.vi12.289 DOI: https://doi.org/10.52358/mm.vi12.289
Allen, N., Hernandez, G et Riehman-Murphy, C. (2025). OPEN EDUCATION 101. Session 1: Open Education Foundations. [webinaire]. https://www.youtube.com/watch?v=MnNxbOTnwQs
Anstey, L. et Watson, G. (2018, 10 septembre). A Rubric for Evaluating E-Learning Tools in Higher Education. Educause review. https://er.educause.edu/articles/2018/9/a-rubric-for-evaluating-e-learning-tools-in-higher-education
Association des bibliothèques de recherche du Canada (s. d.). Dépôts institutionnels. https://www.carl-abrc.ca/fr/faire-avancer-la-recherche/depots-institutionnels/
BAnQ (s. d.). Accessibilité des documents (Word). https://www.banq.qc.ca/accessibilite-des-documents-word/
BCOER (2015). Faculty Guide for Evaluating Open Education Resources. BCcampus. Sous licence CC BY 4.0. https://open.bccampus.ca/files/2014/07/Faculty-Guide-22-Apr-15.pdf
Blandin, B. (1998). Formations ouvertes et à distance – Histoire et processus de développement d’un paradigme : hypothèses pour un état de l’art. Actualité de la formation permanente, (156), 55-62. https://www.researchgate.net/publication/>>>
Conseil supérieur de l’éducation (2025). L'offre de la formation à distance et son incidence sur les étudiantes et les étudiants universitaires : un portrait à coconstruire : rapport à la ministre de l’Enseignement supérieur. BAnQ numérique. https://numerique.banq.qc.ca/patrimoine/details/52327/4998635
Campus numérique Québec(2025). À propos de Pavillon. Pavillon de ressources éducatives numériques. https://campus-ressources.gouv.qc.ca/a-propos
Centre de pédagogie universitaire (2025). Référentiel de compétences pédagogiques à l’intention du personnel enseignant universitaire. Université de Montréal. https://cpu.umontreal.ca/formations/referentiel-de-competences/
eCampus Ontario (s. d.). Critères d’évaluation des ressources éducatives libres (REL). Sous licence CC BY 4.0. https://openlibrary.ecampusontario.ca/wp-content/uploads/sites/3/2022/09/OER-Review-Rubric-FR.pdf
eCampus Ontario (2000). Assessing Online Resources with CRAAP. Sous licence CC BY-NC-SA. https://h5pstudio.ecampusontario.ca/content/12925
Glikman, V. (2021). Il était une fois la formation à distance. Médiations et médiatisations, (6), 3-11. https://doi.org/10.52358/mm.vi6.228 DOI: https://doi.org/10.52358/mm.vi6.228
Gouvernement du Québec (2025). Ressources éducatives numériques pour l’enseignement supérieur. https://www.quebec.ca/education/numerique/ressources-numeriques/ressources-educatives-numeriques-enseignement-superieur
Iniesto, F. et Bossu, C. (2023) Equity, diversity, and inclusion in open education: A systematic literature review, Distance Education, 44(4), 694-711. https://doi.org/10.1080/01587919.2023.2267472 DOI: https://doi.org/10.1080/01587919.2023.2267472
Kmietowicz, Z. (2008). Double blind peer reviews are fairer and more objective, say academics. BMJ (Clinical research ed.), 336(7638), 241. https://doi.org/10.1136/bmj.39476.357280.DB DOI: https://doi.org/10.1136/bmj.39476.357280.DB
Ministère de l’Éducation (2021). Guide de bonnes pratiques pour la production de ressources éducatives numériques. Gouvernement du Québec. https://bibliotheque.assnat.qc.ca/depotnumerique_v2/AffichageFichier.aspx?idf=277951
Naffi, N., Davidson, A.-L.,Kaufman, R., Clark, R. E., Beatty, B., Paquelin, D. (2020). Perturbation dans et par les bureaux de soutien à l’enseignement pendant la pandémie COVID-19. Innover pour l'avenir de l'enseignement supérieur. Observatoire international sur les impacts sociétaux de l’IA et du numérique (OBVIA). https://www.obvia.ca/sites/obvia.ca/files/ressources/202009-OBV-Pub-COVID_SoutienEnseignement.pdf DOI: https://doi.org/10.61737/DMBR6218
Potvin, C. et Dubé, M. (2024). Créer des ressources éducatives libres : un parcours structurant pour une qualité optimale. Dans Chevalier, F et Fournier, C. (dir.) Pratiques pédagogiques innovantes : construire la pédagogie de demain. Caen : Éditions EMS. http://hdl.handle.net/11143/22115
Simard, C. et Basque, J. (2017). Le conseil – Un référentiel de compétences de conseil en pédagogie de l'enseignement supérieur à distance. Dans P. Pelletier et A. Huot (dir.), Construire l’expertise pédagogique et curriculaire en enseignement supérieur : connaissances, compétences et expériences (99-115). Presses de l'Université du Québec. https://r-libre.teluq.ca/1038/
Sun, M., Barry Danfa, J., et Teplitskiy, M. (2022). Does double-blind peer review reduce bias? Evidence from a top computer science conference. Journal of the Association for Information Science and Technology, 73(6), 811-819. https://doi.org/10.1002/asi.24582 DOI: https://doi.org/10.1002/asi.24582
Zawacki-Richter, O., Conrad, D., Bozkurt, A., Aydin, C. H., Bedenlier, S., Jung, I., Stöter, J., Veletsianos, G., Blaschke, L. M., Bond, M., Broens, A., Bruhn, E., Dolch, C., Kalz, M., Kerres, M., Kondakci, Y., Marin, V., Mayrberger, K., Müskens, W., … Xiao, J. (2020). Elements of Open Education: An Invitation to Future Research. The International Review of Research in Open and Distributed Learning, 21(3), 319-334. https://doi.org/10.19173/irrodl.v21i3.4659 DOI: https://doi.org/10.19173/irrodl.v21i3.4659