Learning analytics : quels indicateurs suivre vraiment ?

‍

Un tableau de bord rempli de courbes ne dit pas encore si vos équipes progressent. Beaucoup de responsables formation disposent aujourd'hui de dizaines de chiffres, taux de connexion, durée de session, notes moyennes, et pourtant la question qui revient en comité de direction reste la même : est-ce que ça change quelque chose sur le terrain ?

Les learning analytics désignent la collecte et l'analyse des données générées par les apprenants pour comprendre comment ils apprennent et ajuster le dispositif. Dit comme cela, tout semble mesurable. En pratique, la plupart des plateformes remontent surtout ce qui est facile à compter, et les indicateurs faciles à compter ne sont pas toujours ceux qui comptent. Une équipe retail de 800 personnes peut afficher 92 % de complétion sur un module et continuer à faire les mêmes erreurs en rayon.

L'enjeu n'est donc pas de suivre plus d'indicateurs, mais d'en choisir peu, et de savoir ce que chacun autorise comme décision. Nous verrons d'abord ce que les learning analytics mesurent réellement, puis les indicateurs qui méritent une place dans votre pilotage, avant de voir comment les faire travailler au quotidien, avec les managers comme avec la direction.

‍

Ce que les learning analytics mesurent, et ce qu'elles ne disent pas

‍

Des données d'apprentissage, pas un tableau de bord de plus

Une plateforme de formation enregistre en continu des traces : qui s'est connecté, à quelle heure, quelles questions ont été réussies ou ratées, combien de temps a duré une session, quel contenu a été rouvert. Les learning analytics consistent à transformer ces traces en réponses à des questions de pilotage, et pas seulement à les afficher.

La nuance est importante. Un reporting classique répond à « combien de personnes ont fait la formation ? ». Une vraie démarche d'analyse répond à « qu'est-ce qui bloque, chez qui, et que fait-on lundi matin ? ». Dans le premier cas, vous produisez un compte rendu pour la conformité. Dans le second, vous disposez d'un outil de décision pour les équipes L&D et pour les managers de proximité.

Cette distinction explique pourquoi deux entreprises équipées de la même plateforme peuvent tirer des enseignements très différents. L'une exporte un fichier chaque fin de mois et le classe. L'autre repère en trois semaines qu'une question sur la gestion des retours client est échouée par la moitié des nouveaux arrivants, et ajuste son contenu en conséquence.

‍

La complétion, un indicateur rassurant mais incomplet

Le taux de complétion est l'indicateur historique du e-learning, et il garde une utilité : il confirme qu'un contenu a été ouvert et parcouru jusqu'au bout. Pour une obligation réglementaire, par exemple, c'est même la preuve attendue en cas de contrôle.

Mais la complétion mesure la présence, pas l'apprentissage. Une personne peut cliquer rapidement jusqu'à la dernière diapositive pour libérer sa journée. À l'inverse, un collaborateur qui revient trois fois sur une question difficile, sans jamais « terminer » le module, apprend probablement davantage. Sur des formats courts et répétés, la complétion perd d'ailleurs presque toute valeur discriminante, puisqu'une séquence de trois minutes se termine très facilement.

Il vaut mieux la traiter comme un seuil de base, nécessaire mais non suffisant, et la compléter par des indicateurs de régularité et de maîtrise. C'est le même constat que dans notre article sur l'engagement des apprenants, où la mesure centrée sur la complétion fait partie des raisons pour lesquelles les dispositifs perdent leurs apprenants sans que personne ne s'en aperçoive.

‍

Trois questions à se poser avant de choisir ses indicateurs

Avant de configurer le moindre tableau de bord, trois questions permettent d'éviter l'accumulation de chiffres inutiles.

Qui va lire ce chiffre ? Un directeur des ressources humaines, un responsable de magasin et un chef de projet formation n'ont ni les mêmes besoins ni le même temps. Un indicateur que personne ne regarde est un coût, pas une information.

Quelle décision peut-il déclencher ? Si un indicateur baisse et que vous ne savez pas quoi faire, il ne mérite pas d'être suivi. Un taux de participation en chute peut conduire à relancer une équipe, à raccourcir un format ou à changer l'heure d'envoi des notifications : ce sont des actions concrètes.

À quelle fréquence change-t-il vraiment ? Suivre chaque jour un indicateur qui n'évolue qu'à l'échelle du trimestre crée du bruit. À l'inverse, la participation à un défi hebdomadaire se lit en quelques jours. Le rythme de lecture doit épouser le rythme de variation.

‍

Les indicateurs qui méritent une place dans votre pilotage

‍

Adoption et régularité : savoir si le dispositif vit

Avant de parler de pédagogie, il faut vérifier que les personnes utilisent l'outil. L'adoption se lit à travers le taux d'activation (la part des personnes invitées qui se sont réellement connectées), le taux d'actifs récurrents (celles qui reviennent chaque semaine) et la régularité, c'est-à-dire le nombre de jours d'usage sur une période donnée.

Cette dernière est souvent la plus parlante pour des formats courts. Pour un dispositif fondé sur de brèves séquences quotidiennes, un collaborateur qui joue quatre jours sur cinq est dans une dynamique d'ancrage, alors qu'un autre qui effectue vingt séquences en une soirée avant une échéance fait du bachotage. Les deux ont le même volume, mais pas la même mémorisation.

Sur le terrain, ces chiffres se lisent par équipe, par magasin ou par site plutôt qu'en moyenne nationale. Une moyenne de 65 % d'actifs peut cacher des écarts de un à trois entre deux régions, et c'est précisément cet écart qui oriente l'action : un manager à accompagner, un ambassadeur à repérer, un horaire à revoir.

‍

Apprentissage : progression, maîtrise et erreurs récurrentes

Une fois l'usage établi, la question devient celle de la maîtrise. Le taux de réussite aux premières tentatives donne une photographie honnête de ce que les équipes savent avant d'être corrigées. La progression dans le temps montre si les mêmes personnes réussissent mieux la deuxième, puis la troisième fois sur un même thème.

Les erreurs récurrentes sont probablement l'indicateur le plus sous-exploité. Quand une même question est échouée par une proportion élevée de collaborateurs, deux explications dominent : le contenu est ambigu, ou la pratique réelle diffère de la consigne. Dans les deux cas, vous obtenez un signal précieux, parfois plus utile à l'opérationnel qu'à la formation elle-même.

Pour comparer ces indicateurs entre eux, le tableau suivant rappelle ce que chacun apporte et le piège principal à éviter.

‍

Impact business : relier la formation aux résultats opérationnels

Le dernier niveau est celui que la direction attend : la formation modifie-t-elle un résultat ? Il peut s'agir du panier moyen d'une équipe de vente, du nombre d'incidents sur un site industriel, du délai de montée en autonomie d'un nouvel arrivant ou d'un score de satisfaction client.

Il faut être lucide : la relation de causalité est rarement parfaite. Beaucoup de facteurs influencent un chiffre de vente. L'approche la plus solide consiste à comparer des groupes (équipes actives et équipes peu actives sur le dispositif) et à regarder l'évolution avant et après, plutôt qu'à promettre un lien direct. Notre guide pour mesurer le ROI d'un dispositif de mobile learning détaille cette démarche en trois niveaux, de l'engagement jusqu'aux indicateurs métier.

Dans la pratique, un ou deux indicateurs business suffisent. Mieux vaut choisir avec les opérationnels celui qui leur parle, par exemple le taux de transformation en magasin ou le nombre de non-conformités relevées lors des audits internes, et le suivre sur la durée, plutôt que de produire un faisceau d'indicateurs que personne ne saura relier au dispositif.

‍

Faire travailler les indicateurs au quotidien

‍

Un tableau de bord par profil, pas un seul pour tout le monde

Un tableau de bord unique, trop dense, finit par n'être consulté par personne. Il est plus efficace de bâtir trois vues courtes, adaptées à ce que chacun peut faire de l'information.

La direction ou les ressources humaines regardent l'adoption globale, la tendance sur le trimestre et un indicateur business. Les équipes L&D suivent la maîtrise par thème, les erreurs récurrentes et la santé des contenus. Les managers de proximité, enfin, ont besoin de très peu de choses : qui est actif dans leur équipe, qui décroche, quel thème pose problème cette semaine.

Ce découpage a un effet secondaire souvent sous-estimé : il redonne un rôle aux managers. Quand ils voient en un coup d'œil que deux personnes de leur équipe n'ont pas joué depuis dix jours, ils peuvent en parler lors du point du matin, sans attendre un rapport mensuel du siège. C'est aussi ce qui fait fonctionner les relais locaux décrits dans notre article sur l'animation de la formation auprès des équipes terrain.

‍

Du chiffre à l'action : un rituel de revue court et régulier

Un indicateur n'a de valeur que s'il déclenche une action. Pour cela, un rituel simple suffit : une revue de vingt minutes toutes les deux semaines, avec toujours les mêmes questions. Qu'est-ce qui a bougé ? Où est l'écart le plus fort ? Quelle action tentons-nous d'ici la prochaine revue ?

Les actions possibles sont rarement spectaculaires, et c'est une bonne nouvelle. Reformuler une question ambiguë, avancer l'horaire d'une notification, lancer un défi entre deux magasins en retard, demander à un ambassadeur d'animer un point de dix minutes sur le thème le plus échoué. Chacune se teste vite, et l'indicateur suivant dit si elle a fonctionné.

Pour éviter la lassitude, mieux vaut conserver peu d'indicateurs d'une revue à l'autre et ne changer que les actions. Cela donne une lecture comparable dans le temps, et permet de distinguer une vraie tendance d'une fluctuation de calendrier, comme une semaine de congés ou une opération commerciale.

‍

Ce que permet une plateforme mobile comme SPARTED

Pour des équipes sans poste de travail dédié, la qualité des analytics dépend d'abord de la qualité de l'usage : si les collaborateurs ouvrent l'application chaque jour, les données sont riches, et si le dispositif est occasionnel, elles sont rares. C'est l'une des raisons pour lesquelles le format court, la gamification et le côté social sont liés à la mesure, et pas seulement à l'engagement.

Avec SPARTED, le Back Office rassemble les statistiques d'usage et de résultats, avec des analytics dédiés aux Parcours et aux Battles, et un suivi par équipe qui permet à chaque responsable de lire son périmètre. La plateforme ne remplace pas la réflexion sur les indicateurs à suivre : elle rend simplement leur lecture plus fréquente, plus fine et plus proche du terrain, ce qui est précisément ce que cherchent les directions qui veulent relier performance commerciale et pratiques de formation.

‍