« Human in the loop » : la supervision humaine au-delà du slogan
L'AI Act exige une supervision humaine effective. Mais en pratique, qu'est-ce qui distingue une vraie supervision d'un clic décoratif ?
Le piège du clic-validation
Cocher « OK » sur 200 candidats en une matinée n'est pas une supervision. C'est un caoutchouc. L'AI Act parle de supervision effective — un terme volontairement exigeant.
Quatre critères d'une supervision réelle
- •Capacité d'intervention : le superviseur peut modifier ou annuler une décision IA, pas seulement la valider.
- •Compréhension du système : il sait comment le score est construit, ses limites connues, ses zones d'incertitude.
- •Temps réel disponible : pas plus de 30 décisions/heure pour permettre une vraie revue. Au-delà, c'est mécanique.
- •Documentation des désaccords : chaque override est tracé, agrégé, et nourrit le recalibrage.
L'organisation qui le permet
La supervision n'est pas un acte individuel, c'est un protocole d'équipe.
Concrètement : binôme tournant, revue hebdomadaire des cas litigieux, formation continue sur les biais. Sans cela, le superviseur devient le maillon faible juridique du dispositif.
Le KPI à suivre
Le taux d'override mesure la santé du système. Trop bas (< 5 %) : supervision passive. Trop haut (> 25 %) : modèle mal calibré. La cible saine : 10-20 %, avec analyse des motifs.
Envie d'en discuter dans votre contexte ? Diagnostic offert, 30 min, sans engagement.
Engager la conversation