Décodeur IA
Résumé
La limite irrégulière entre ce que l'IA réussit très bien et ce qu'elle rate, sans suivre la difficulté apparente des tâches.
Frontière dentelée
Lundi, l’IA vous rédige en quelques secondes une synthèse brillante.
Mardi, la même IA se plante sur une consigne que n’importe quel stagiaire aurait comprise.
Vous vous demandez : « Elle est forte, ou pas ? »
Les deux à la fois, et c’est tout l’enjeu.
La définition
La frontière dentelée (« jagged frontier »), c’est la limite irrégulière entre ce que l’IA réussit très bien et ce qu’elle rate, sans suivre la difficulté apparente des tâches.
Deux tâches qui nous semblent aussi difficiles l’une que l’autre peuvent se retrouver de part et d’autre.
« Jagged » : en dents de scie.
L’origine
Le terme est popularisé en 2023 par Ethan Mollick (Wharton) et ses co-auteurs, dans une étude menée avec la Harvard Business School et le Boston Consulting Group.
L’expérience : 758 consultants du BCG, avec GPT-4 :
Sur des tâches « dans la frontière » : 12,2 % de tâches menées en plus, 25,1 % plus vite, une qualité supérieure de plus de 40 %.
Sur une tâche « hors frontière » : 19 points de moins de réponses correctes chez ceux qui s’appuyaient sur l’IA.
Une seule entreprise, une seule tâche hors frontière, un modèle d’avril 2023. Depuis, les modèles ont changé, et la frontière avec eux.
Le vrai problème
La frontière est invisible. Aucun panneau, aucune alerte : la réponse fausse arrive avec la même assurance que la bonne.
En 1967, Benoît Mandelbrot demandait quelle est la longueur de la côte de Grande-Bretagne. Sa réponse, qui reprenait des observations de Lewis Richardson : cela dépend de la règle qu’on utilise, car plus on regarde de près, plus la côte se découpe.
Une côte se mesure en la parcourant. La frontière de l’IA aussi : tâche par tâche, métier par métier.
Ne laissons pas chacun deviner seul
Si la frontière se découvre à l’usage, chaque salarié ne peut pas en porter seul le risque.
Ce que défend notre organisation :
Cartographier la frontière collectivement, avec les équipes qui font le travail.
Un droit à l’erreur : signaler un échec de l’IA doit être valorisé, jamais reproché.
Une formation qui apprend à tester et à douter, pas seulement à rédiger des consignes.
Un point d’usage régulier avec les représentants du personnel, car la frontière bouge à chaque nouvelle version.
L’IA ne plante pas de panneaux « danger ».
À nous d’en poser, ensemble.
Et vous, sur quelle tâche l’IA vous a-t-elle le plus surpris, en bien ou en mal ?
Lire la publication sur LinkedIn
