La question de la mesure des effets des technologies est « déjà » une vieille question. Beaucoup de tentatives, et cela fait environ 30 années que cela dure, se sont hélas soldées par une conclusion qui tient en trois lettres : NSD.
Ce No Significant difference a d’ailleurs été affublé d’une mention de phénomène tant les recherches en question (des centaines d’études) en étaient marquées. Mais de quoi s’agit-il ?
Les recherches les plus fréquentes, souvent construites sur une comparaison « avec et sans technologie » et axées sur les effets en termes de « réussite » des apprenants dans un contexte limité (par exemple : école, outil particulier, discipline) ont la plupart du temps été marquées par ce no significant difference.
Déjà, les méta-recherches pionnières de Kulik et al. (dans le domaine de l’EAO) allaient également dans ce sens, les légères différences observées étant bien souvent entachées de variance importante ou alors noyées dans un bruit de fond lié à la variété des disciplines, aux différentes méthodes encadrant les outils, ainsi qu’aux modalités d’évaluations des apprentissages réalisés (Kulik et al., 1980). Remarquons que ce résultat, désespoir des technopédagogues, est aussi présent dans les recherches qui tentent à expliquer un effet (impact positif des technologies ou d’une méthode pédagogique particulière) avec une seule variable explicative : présence ou absence des TIC.
Or, nous l’avons dit, on peu très bien utiliser les technologies dans le cadre de méthodes transmissives (osons citer les xMOOC) ou alors dans le cadre d’un dispositif actif et interactif visant le développement de compétences. Encore une fois, l’outil seul n’explique rien ; C’est le croisement d’objectifs, de méthodes et … d’outils (et d’évaluations en cohérence) qui nous permettra de voir clair dans ces impacts (voir notre épisode 2). Pas facile !
Ces résultats peuvent s’interpréter (le côté obscur de la force) en disant que les usages des technologies restent fortement marqués par l’enseignement traditionnel (transmissif), qu’il n’y a pas d’effets parce qu’il n’y a pas de changement profond dans les dispositifs … parce que les TIC induisent une fossilisation des pratiques : on refait ce qu’on faisait avant (sans les outils) avec les nouveaux outils.
Cette constatation du NSD a quand même un petit côté positif (le côté clair) : l’introduction des technologies ne conduit pas à une perte dans les connaissances (les savoirs) et dans certaines compétences (compréhension, application …) des étudiants (ce qui est accessible à l’évaluation certificative de la « réussite ») mais les vraies valeurs ajoutées réelles (compétences de haut niveau, attitudes, créativité, esprit critique …) restent difficilement accessibles et discernables par la mesure.
Pourquoi cette difficulté ?
S’il s’agit de mesurer les valeurs ajoutées que je prétends (en esprit critique, en résolution de problèmes, en créativité …), un protocole de mesure qui s’étend sur les quelques mois d’un cours n’est pas assez ample temporellement. Une compétence se construit toute la vie durant, se mesure sur le terrain (souvenons-nous du « C » de Contexte dans notre définition de Compétences) … et ne peut être approchée par un test standardisé de type QCM. Il nous faut donc des recherches bâties sur tout un programme (cohérent) voire qui s’étendent jusqu’à l’entrée dans le champ socio-professionnel (sans négliger « la vie de tous les jours »).
Par ailleurs avec l’arrivée des MOOC, on entend l’espoir véhiculé par le Learning Analytics : 20000 étudiants (et plus) qui suivent un cours (suivre un cours, c’est passif ça !) en même temps, cela permettra de faire des études sur les profils d’apprentissage, sur les différences liées à l’interculturel, sur les difficultés didactiques de certains étudiants, sur les types de médias utilisés … bref, surtout d’étudier et d’améliorer les MOOC. Nous sommes encore loin des études amples et longitudinales que je préconise.
Russell, T. (2001). The no significant differences phenomenon. Littleton, Colorado: IDECC.
Pour de plus amples informations :
Lebrun, M. (2012). Impacts des TIC sur la qualité des apprentissages des étudiants et le développement professionnel des enseignants : vers une approche systémique. Revue des Sciences et Technologies de l’Information et de la Communication pour l’Éducation et la Formation (STICEF), 18. Disponible sur Internet à l’adresse http://bit.ly/A9AFpm (dernière consultation le 3 juillet 2013).
