Preuves et décisions
Quelles preuves conserver pour comprendre une action d’agent IA ?
Un workflow indique qu’une étape est terminée. L’équipe cliente ne retrouve pourtant pas le résultat attendu. Pour comprendre cet écart, il faut relier ce qui était demandé, ce qui était autorisé et ce que les systèmes ont effectivement confirmé.
Ce guide propose un dossier de preuves pour investiguer une mission. L’objectif est de pouvoir soutenir chaque conclusion par un élément identifiable, tout en laissant visibles les informations qui manquent.
En bref
Question et résultat de la lecture.
- Question
- Que pouvons-nous établir sur cette action et son résultat, et que reste-t-il inconnu ?
- Résultat utile
- Un dossier distinguant demande, autorisation, décision, tentative, reçu et résultat confirmé.
Preuves et décisions
Distinguer ce que chaque trace permet d’établir
Avant de conclure qu’une mission est terminée, attribuez une portée précise aux éléments conservés.
| Élément | Ce qu’il permet d’établir |
|---|---|
| Demande initiale | Le résultat demandé et le périmètre concerné. |
| Autorisation | L’action permise et ses conditions. |
| Décision humaine | Le choix d’une personne sur une action identifiée, lorsqu’il était requis. |
| Trace de tentative | L’opération que le système a tenté d’effectuer. |
| Accusé de réception | La réception ou l’acceptation de la demande, selon le sens exact du retour. |
| Confirmation du résultat | L’effet confirmé par le système concerné, dans le périmètre observé. |
Une décision autorisant une action ne prouve pas son exécution. Un statut de mission doit donc renvoyer aux éléments qui le justifient, avec leurs limites.
Preuves et décisions
Exemple : une commande acceptée pour traitement
Dans ce scénario illustratif, un agent demande la création d’une commande dans un ERP. Le service accepte la demande, mais le workflow n’a reçu aucune confirmation de création.
L’équipe dispose de la demande, de l’autorisation et d’un accusé d’acceptation. Elle peut établir que la demande a été acceptée pour traitement. Elle ne peut pas encore conclure que la commande a été créée, ni qu’elle a échoué.
Cette distinction existe aussi au niveau HTTP : le statut 202 Accepted indique une acceptation pour traitement, sans traitement achevé. Il ne garantit pas que l’opération aboutira. La RFC 9110, section 15.3.3, précise ce sens.
Le dossier doit donc conserver le résultat comme non confirmé, avec la référence de la demande et les éléments à vérifier. Cet exemple n’atteste pas d’une intégration ERP disponible dans DUBSAR.
Preuves et décisions
Constituer un dossier qui permette l’investigation
Pour chaque action examinée, réunissez des éléments que l’équipe peut rapprocher :
- L’identifiant de la mission et celui de l’action concernée.
- La demande et la version du contenu ou de l’objet examiné.
- L’autorisation applicable, son périmètre et la règle concernée.
- La décision humaine éventuelle, son auteur et sa date.
- La tentative d’exécution, les retours reçus et leur source.
- Les confirmations disponibles, les contradictions et les informations manquantes.
Conservez les références permettant de consulter les pièces pertinentes, ainsi que leur contexte. Une référence devenue inaccessible doit apparaître comme une limite du dossier.
Choisissez les données à conserver en fonction des questions à résoudre. Il n’est pas nécessaire de copier tous les échanges pour comprendre une décision ; des références seules peuvent aussi être insuffisantes si les éléments référencés ne sont plus consultables.
Preuves et décisions
Relire les faits sans provoquer une nouvelle action
L’investigation doit permettre de parcourir les événements et d’examiner leurs pièces sans réémettre l’opération d’origine. Distinguez explicitement cette consultation d’une éventuelle commande de relance.
Terminez le dossier par une conclusion délimitée : résultat confirmé, échec constaté ou issue encore incertaine. Indiquez la source, le moment et le périmètre de l’observation. Une confirmation valide pour une opération ne démontre pas que toutes les étapes de la mission ont réussi.
L’équipe dispose alors d’une base pour décider de la suite. L’organisation de cette décision est détaillée dans le guide de reprise destiné aux responsables des opérations.
Preuves et décisions
Questions fréquentes
Les journaux de notre outil de workflow suffisent-ils ?
Examinez les questions auxquelles ils répondent. S’ils permettent de retrouver la demande, les décisions et l’effet confirmé, réutilisez-les. Complétez les liens manquants plutôt que de créer une seconde collection sans contexte.
Faut-il enregistrer toutes les conversations avec le modèle ?
Définissez les éléments nécessaires au dossier. Un historique intégral ne remplace pas une relation explicite entre l’action autorisée, la tentative et son résultat.
Un résultat incertain est-il un échec ?
Non. Il signifie que les éléments disponibles ne permettent pas de conclure. Le conserver comme tel évite de présenter une supposition comme un fait.
Preuves et décisions
La place de DUBSAR
DUBSAR développe un socle pour relier l’état des missions, les autorisations, les décisions humaines et les preuves, auprès des outils existants. Certains parcours ciblés ont été testés ; l’intégration et la qualification B2B complète restent en cours. Les pilotes ne sont pas ouverts actuellement.
Preuves et décisions