Formation métier · Évaluation & certification

Évaluer et certifier à l’ère de l’IA

Un dossier, un mémoire ou une étude de cas rendus par écrit ne démontrent plus ce qu’ils démontraient il y a deux ans. Interdire ne change rien, détecter ne fonctionne pas. Ce qui reste possible, c’est de réviser les modalités d’évaluation pour qu’elles portent sur ce qui se démontre en situation — sans dénaturer le référentiel ni alourdir la charge des évaluateurs.

  • Pour les organisations qui délivrent ou préparent à une certification
  • Vous repartez avec vos propres grilles révisées, produites pendant la session
  • Animée par un évaluateur intervenant en jury de titres de niveau 7
1 jour · 7 h790 € net de TVA · par participant

En résumé

L’essentiel de la formation

Public
Responsables de certification, responsables pédagogiques, membres de jury et évaluateurs
Niveau
Aucun prérequis technique. Disposer d’un dispositif d’évaluation existant à réviser.
Format
Individuel ou en équipe, en intra, en présentiel ou à distance
Durée
1 jour · 7 h
Tarif inter-entreprises
790 € net de TVA · par participantFormules intra détaillées ci-dessous

Formation exonérée de TVA (article 261-4-4° a du CGI) : le montant affiché est le montant facturé.

Les cas pratiques sont préparés à partir de votre contexte réel. Un format sur mesure ou intra-entreprise peut être construit à la demande.

Tarifs

Trois formules, selon qui participe.

Inter-entreprises

Par participant

790 € net de TVA

Intra

Jusqu’à 10 participants

1 890 € net de TVA

Au-delà de 10 participants

Format construit selon le nombre d’évaluateurs à harmoniser

Sur devis

Le point de départ

Ce que vos épreuves mesurent encore.

Le point de départ n’est pas l’IA mais votre dispositif tel qu’il existe : ce qu’il permettait de conclure sur un candidat, et ce qu’il permet encore d’en conclure.

La production écrite ne prouve plus la compétence

Un dossier ou un mémoire rendu hors surveillance valait comme indicateur d’un travail personnel. Il ne le vaut plus systématiquement, et rien ne distingue les deux cas à la lecture.

Les détecteurs ne règlent pas le problème

Leurs résultats sont trop incertains pour fonder une décision, avec un risque réel de faux positifs — c’est-à-dire d’une accusation portée contre un candidat qui a fait le travail.

L’interdiction ne restaure rien

Interdire l’usage sans réviser les modalités laisse le dispositif inchangé : l’épreuve continue de mesurer ce qu’elle mesurait, et la règle n’est pas vérifiable.

Les évaluateurs n’appliquent pas les mêmes règles

Face à un travail suspecté d’être généré, chacun tranche seul, avec son propre seuil. L’équité entre candidats d’une même session en dépend directement.

Public visé

À qui s’adresse cette formation ?

Elle s’adresse aux organisations qui délivrent une certification ou qui y préparent, et aux personnes qui appliquent réellement les grilles.

Responsables de certification

Qui doivent garantir que les modalités mesurent réellement les compétences inscrites au référentiel.

Responsables pédagogiques de l’enseignement supérieur

Qui doivent harmoniser les pratiques entre plusieurs enseignants intervenant sur un même diplôme.

Organismes préparant à un titre

Dont la crédibilité repose sur la valeur de ce qu’ils font passer, et sur ce que leurs épreuves démontrent.

Membres de jury et évaluateurs

Qui conduisent les soutenances, posent les questions et appliquent les critères au cas par cas.

Résultats

Ce que vous saurez faire à la fin

  • Identifier, parmi vos modalités actuelles, celles qui ne discriminent plus
  • Réviser une grille pour qu’elle porte sur la démonstration de la compétence et non sur le rendu
  • Construire des modalités qui restent évaluables même en cas d’usage libre de l’IA
  • Rattacher chaque modalité révisée aux compétences visées, sans dénaturer le référentiel
  • Conduire un questionnement de vérification en soutenance
  • Harmoniser les critères et les décisions entre plusieurs évaluateurs

Programme

Le programme, du diagnostic à l’harmonisation

Chaque module travaille sur votre dispositif réel : la journée produit des modalités révisées, pas un compte rendu de ce qui a été dit.

  1. 01

    Ce que l’IA change à la preuve de compétence

    Ce qu’une production écrite démontre encore, et ce qu’elle ne démontre plus.

    • Distinguer le rendu, le processus et la compétence
    • Ce qui se délègue à un modèle et ce qui ne se délègue pas
    • Ce qu’un écrit produit hors surveillance permet encore de conclure
  2. 02

    Diagnostic de vos modalités actuelles

    Passer en revue le dispositif existant, modalité par modalité, avant toute décision.

    • Inventaire des épreuves et de ce que chacune prétend mesurer
    • Le test de substitution : ce qu’un modèle produirait à la place du candidat
    • Classer ce qui tient, ce qui s’ajuste et ce qui doit changer
  3. 03

    Pourquoi la détection n’est pas une stratégie

    Ce qu’un score de détection permet d’affirmer, et ce qu’il ne permettra pas de justifier.

    • Limites techniques des détecteurs et réalité des faux positifs
    • Charge de la preuve et décision d’évaluation contestée
    • Quelle position d’établissement tenir à défaut de détection
  4. 04

    Les modalités qui restent discriminantes

    Ce qui vérifie encore une compétence, et ce que chaque option coûte réellement.

    • Oral, mise en situation et justification des choix
    • Questionnement de suivi et évaluation du processus
    • Travail ancré dans un contexte réel que le candidat est seul à connaître
    • Ce que chaque modalité coûte en temps d’évaluateur
  5. 05

    Alignement sur le référentiel

    Réviser les modalités sans sortir du cadre que la certification impose.

    • Rattacher les modalités révisées aux compétences et aux blocs visés
    • Réviser sans réduire le niveau d’exigence attendu
    • Ce qui relève de la modalité et ce qui relève du référentiel lui-même
  6. 06

    Harmonisation et conduite du jury

    Une grille révisée ne vaut que si tous ceux qui l’appliquent en tirent la même décision.

    • Grilles partagées et critères formulés pour être lus de la même façon
    • Protocole de questions de vérification en soutenance
    • Traitement des cas litigieux et traçabilité de la décision
    • Équité entre candidats d’une même session

Outils

Ce qui est utilisé pendant la journée

L’outillage sert à un seul usage : soumettre vos propres épreuves à un modèle pour constater ce qu’il en fait. Aucun outil de correction automatique n’est mis en place.

Assistants généralistes

Utilisés sur vos sujets d’épreuve réels, pour produire ce qu’un candidat pourrait rendre et qualifier ce que l’épreuve mesure encore.

Vos grilles et vos référentiels

Le support de travail principal de la journée : les grilles en vigueur, leurs critères, et les compétences auxquelles ils se rattachent.

Détecteurs de texte généré

Examinés pour ce qu’ils font réellement, afin d’établir précisément pourquoi leur résultat ne peut pas fonder une décision d’évaluation.

Ce qui n’est pas utilisé

Ni correction automatique, ni notation assistée, ni analyse de copies par un modèle : l’IA n’évalue pas un candidat à la place d’un jury.

Notre position

Ce que la révision des modalités traite, et ce qu’elle ne traite pas

Le sujet attire les réponses rapides — un outil, une interdiction, un détecteur. Voici les limites que nous posons avant d’entrer dans le programme.

  • Un détecteur d’IA ne peut pas fonder une décision d’évaluation
  • Interdire l’usage de l’IA sans réviser les modalités ne protège pas la valeur de la certification
  • Une modalité orale mal préparée n’est pas plus fiable qu’un écrit généré
  • L’IA n’évalue pas un candidat à la place d’un jury
  • La formation porte sur la robustesse des modalités d’évaluation ; la conformité de l’enregistrement d’une certification relève de France Compétences et n’entre pas dans son périmètre

Mise en pratique

Les exercices

Vous travaillez sur votre propre dispositif : chaque exercice produit une pièce de vos modalités révisées.

Le test de substitution

Soumettre une de vos modalités existantes à un modèle, constater ce qu’il produit, puis qualifier ce que l’épreuve mesure encore.

Réécrire une grille

Transformer une grille centrée sur le rendu en grille centrée sur la démonstration de la compétence.

Un protocole de vérification en soutenance

Construire le jeu de questions qui distingue une compétence maîtrisée d’un dossier bien rédigé.

La règle annoncée aux apprenants

Rédiger la règle d’usage de l’IA communiquée en amont, et ce qu’entraîne un manquement.

Livrable

Vos modalités révisées, produites pendant la session

Ce que vous emportez sont des pièces de votre propre dispositif, rédigées pendant la journée et applicables à la session d’examen suivante.

  • Le diagnostic de vos modalités actuelles, modalité par modalité
  • Une grille d’évaluation révisée, alignée sur les compétences visées
  • Un protocole de questionnement de vérification utilisable en jury
  • La règle d’usage de l’IA à communiquer aux apprenants et aux évaluateurs

Intra-entreprise

En intra : l’harmonisation entre évaluateurs

Une grille révisée ne vaut que si tous ceux qui l’appliquent en tirent la même décision. C’est précisément ce qu’une session en intra permet de traiter, et qu’un travail individuel ne peut pas produire.

Organiser cette formation dans mon établissement
  • Les évaluateurs travaillent sur les mêmes copies et confrontent leurs décisions
  • Les écarts d’interprétation entre membres du jury apparaissent en séance
  • Les critères sont reformulés jusqu’à être lus de la même façon par tous
  • La règle d’usage de l’IA est arbitrée une fois, pour l’ensemble du dispositif

Les détecteurs d’IA sont-ils utilisables ?

+

Leurs résultats sont trop incertains pour fonder une décision d’évaluation, avec un risque réel de faux positifs. La formation explique pourquoi et propose des approches qui n’en dépendent pas.

Faut-il interdire l’IA aux apprenants ?

+

L’interdiction seule ne restaure pas la valeur d’une évaluation, puisqu’elle ne change pas ce que l’épreuve mesure. La question traitée est celle des modalités, avant celle de l’autorisation.

La formation traite-t-elle la conformité RNCP ?

+

Non. Elle porte sur la robustesse des modalités d’évaluation. L’enregistrement d’une certification et sa conformité relèvent de France Compétences.

Peut-on travailler sur nos propres grilles ?

+

Oui, c’est le format prévu. Les exercices produisent directement des éléments de votre dispositif révisé.

Quelle différence avec la formation « Formateur augmenté par l’IA » ?

+

Celle-ci traite la conception et la production d’un dispositif par un formateur. Celle-là traite la validité des évaluations d’une organisation et l’harmonisation entre ses évaluateurs. Les deux se complètent.

Qui doit participer ?

+

L’intérêt principal étant l’harmonisation, la session gagne à réunir le responsable de certification et les personnes qui évaluent réellement.

Évaluer et certifier à l’ère de l’IA

Parlons de votre contexte avant de parler d’outils.

1 jour · 7 h · 790 € net de TVA par participant en inter-entreprises. Formules intra détaillées plus haut, avec des cas pratiques préparés à partir de vos situations.

S’inscrire ou demander un devis