Un média de décision.Qui répond de ce que produit l'IA dans l'entreprise ? Nous suivons les dispositifs de contrôle, les erreurs qui échappent à la relecture et les tâches qui doivent rester sous décision humaine.
Quel dispositif de contrôle installer avant d'ouvrir l'usage de l'IA ?
Ouvert le · mis à jour le
Sur 45 expériences où une anomalie pouvait être repérée, 20 sont détectées et 25 manquées. Les critères obligatoires du corpus sont satisfaits à 72,6 %. Périmètre limité à trois tâches piégées, en environnement simulé.
Lire l'article associé
Sur les expériences où une anomalie avait été volontairement placée, 25 sur 45 sont passées inaperçues. Le sujet du contrôle n'est pas la qualité moyenne, c'est le trou.
Sur le sous-échantillon doublement évalué de notre campagne, deux évaluateurs à l'aveugle tombent d'accord sur le verdict dans 56,7 % des cas. La mesure est moins stable que le résultat qu'elle prétend établir.