Évaluer ce qu'une équipe retient après une formation IA

Une formation à l'IA se termine souvent par une évaluation à chaud et une attestation de présence. Ces éléments sont utiles pour le suivi administratif et pour certaines exigences qualité. Ils ne disent presque rien sur ce que l'équipe applique deux ou quatre semaines plus tard, lorsque les participants sont revenus à leur charge de travail habituelle.

Or l'enjeu pour une direction n'est pas d'avoir « formé sur l'IA », mais d'avoir déplacé des pratiques : prompts structurés, vérification des sorties, respect de la charte, usage sur des cas métier réels. Sans mesure de rétention, on finance de la sensibilisation sans savoir si le transfert a eu lieu.

Pourquoi la rétention est difficile sur l'IA générative

Les outils d'IA générative sont faciles d'accès. Cette accessibilité crée une illusion de maîtrise immédiate. Un participant peut produire un texte correct en séance, puis revenir à des usages risqués ou superficiels dès le lendemain, faute de cadre, de temps ou de supervision.

Les enquêtes récentes montrent une diffusion rapide des usages en entreprise, avec une part importante d'usages encore limités ou expérimentaux. L'Insee indique qu'en 2025, 18 % des entreprises de 10 salariés ou plus des secteurs principalement marchands hors agriculture, finance et assurance déclarent utiliser au moins une technologie d'IA (enquête TIC entreprises). La Banque de France, sur un autre champ (entreprises d'au moins 20 salariés, enquête de conjoncture début 2026), relève une diffusion large de l'IA générative, souvent encore partielle. Ces chiffres décrivent l'adoption, pas la qualité d'usage. Ils rappellent surtout qu'équiper ou sensibiliser ne suffit pas : il faut observer ce qui se pratique vraiment. Sources : Insee Première n° 2120 et Bulletin de la Banque de France.

La rétention chute aussi lorsque la formation n'a pas de lien avec les outils réellement autorisés dans l'entreprise. Former sur un service grand public, puis imposer un autre outil au retour, crée une rupture. Le choix de l'environnement de travail doit être tranché avant la session, pas après.

Ce qu'il faut mesurer (et ce qu'il ne faut pas)

Mesurer la rétention, ce n'est pas demander « avez-vous aimé la formation ? ». C'est vérifier des comportements observables.

• Capacité à formuler une demande utile (objectif, contraintes, format de sortie, critères de qualité).
• Capacité à détecter une hallucination ou une invention de source.
• Respect des règles de confidentialité sur un cas réel anonymisé.
• Réutilisation autonome sur un dossier du poste, sans le formateur.
• Transmission minimale à un collègue (accompagnement entre pairs) lorsque c'est prévu.

À l'inverse, le nombre de comptes ouverts sur un outil, ou le volume de prompts générés, est un indicateur d'activité, pas de compétence. Un salarié peut générer beaucoup de texte tout en publiant des erreurs ou en exposant des données.

Il est préférable de limiter le nombre de critères à ce que le manager de proximité peut réellement observer. Un critère flou (« mieux utiliser l'IA ») ne peut pas être tranché en entretien de suivi.

Dispositif simple en trois temps

Avant la session

Recueillir un cas métier réel par participant ou par binôme (document type, tâche répétitive, situation à risque). Fixer un critère de réussite observable : par exemple « produire une synthèse vérifiée de deux pages avec sources contrôlées » ou « construire une grille de contrôle avant envoi client ». Communiquer ce critère aux managers avant le jour J.

Pendant la session

Alterner démonstration courte et mise en pratique sur le cas apporté. Faire produire un livrable intermédiaire. Noter les erreurs typiques sans les dramatiser : elles alimentent la grille d'évaluation différée. Réserver un temps explicite à la charte d'usage et aux interdits de saisie.

Après la session (J+15 à J+45)

Organiser un point court (30 à 45 minutes) où chaque participant montre un usage réel post-formation. Le manager de proximité valide ou non le critère fixé en amont. Archiver cette preuve si l'action entre dans un plan financé ou dans un dispositif Qualiopi côté organisme. Si le critère n'est pas atteint, planifier un rattrapage ciblé plutôt qu'une nouvelle journée générique.

Rôle du management de proximité

Sans relais managérial, la rétention s'effondre. Le manager n'a pas besoin de devenir expert en modèles de langage. Il doit : autoriser un temps d'expérimentation encadré, rappeler la charte, exiger une relecture humaine sur les livrables externes, et refuser les usages hors périmètre.

Lorsque plusieurs équipes sont formées, un référent interne par service (pas forcément informaticien) peut centraliser les questions et faire remonter les incidents. Ce rôle doit être nommé, pas improvisé. Le référent n'est pas un support technique : il veille à la cohérence des usages et à la circulation des bonnes pratiques.

La direction doit aussi protéger le temps du point J+30. Tant que ce rendez-vous est facultatif, il disparaît au profit de l'urgence opérationnelle.

Indicateurs sobres pour une PME

• Taux de participants ayant produit un livrable métier conforme au critère dans les 30 jours.
• Nombre d'incidents ou quasi-incidents signalés (fuite évitée, erreur détectée) — un signal de vigilance, pas une faute automatique.
• Part des managers ayant tenu le point J+30.
• Mise à jour de la charte ou des procédures suite aux retours de terrain.

Trois ou quatre indicateurs suffisent. Au-delà, le suivi devient un reporting sans lecture. Il est utile de relire ces indicateurs après deux ou trois cohortes pour ajuster le critère de réussite, pas pour « gonfler » un taux.

Lien avec la qualité de la formation

Le référentiel national qualité associé à Qualiopi attend des prestataires qu'ils évaluent l'atteinte des objectifs et qu'ils recueillent des appréciations. Côté entreprise cliente, rien n'interdit d'exiger, dans le cahier des charges, un mécanisme de transfert et un point différé. Les éléments de lecture officiels sont disponibles via le guide de lecture Qualiopi du ministère du Travail.

Les formats de sessions et les objectifs pédagogiques des parcours Unlock sont décrits sur formations. Pour une session conçue avec critères de réussite métier et point J+30, la page demande collective ou contact permet de préciser le contexte.

En conclusion : évaluer la rétention après une formation IA, c'est fixer un critère observable avant la session, produire un livrable pendant, et vérifier l'usage réel après. Sans ces trois temps, on dispose d'une preuve de présence, pas d'une preuve de compétence. Le management de proximité et un suivi J+30 sont aussi importants que le contenu pédagogique du jour de formation.