Pour compléter cette démarche, consultez aussi le guide « Annexe manquante : comment tester votre plugin IA ? ».
Une démarche en quatre étapes
- 01
Définir le périmètre du test
Indiquez la tâche testée, les documents ou données admis, les sorties attendues et les situations exclues.
- 02
Préparer plusieurs cas
Incluez un cas normal, un cas incomplet, un cas ambigu et, lorsque cela est pertinent, un cas contradictoire. Les données de test doivent être adaptées et autorisées.
- 03
Comparer le résultat à l’attendu
Contrôlez les questions posées, les informations signalées, le format de sortie et les erreurs ou omissions observées.
- 04
Consigner et corriger
Notez les résultats, limites et corrections d’instructions. Recommencez les cas concernés après modification, sans conclure au-delà du périmètre réellement testé.
Limites à garder en tête
- Un test décrit un comportement observé dans des conditions données ; il ne garantit pas tous les usages futurs.
- Les décisions sensibles restent validées par une personne habilitée.
Un protocole minimal sur un cas fictif
Exemple pédagogique construit pour préparer un test, sans prétendre l’avoir exécuté : un assistant doit synthétiser une note et son annexe. L’annexe n’est pas fournie.
| Point de contrôle | Application proposée |
|---|---|
| Attendu | Signaler l’annexe absente, limiter la synthèse aux éléments reçus et ne pas conclure sur son contenu. |
| Preuve à conserver | Version des consignes, pièces autorisées, demande exacte et première réponse obtenue sans la réécrire. |
| Écart à relever | Une information attribuée à l’annexe absente ou une conclusion de complétude sans preuve. |
| Suite | Corriger les consignes si nécessaire ; rejouer le cas et les autres situations concernées. Décision humaine de conserver, limiter ou arrêter l’usage. |
Voir une fiche de constat d’audit →
Ces repères et exemples sont proposés par DR1. Ils ne constituent ni une certification ni la preuve d’un test exécuté. Les données sensibles sont à traiter selon les modalités autorisées dans votre organisation.
Référence générale : CNIL — usages, risques et vérification des résultats d’IA générative. La grille reste une proposition DR1.
Les décisions, validations et vérifications sensibles restent sous la responsabilité d’une personne habilitée.
Service correspondant
Appliquer ce conseil à votre situation
Ce contenu présente une méthode générale. L’application à un cas réel dépend de vos documents, de votre processus et des contrôles nécessaires.