Comment savez-vous ce que votre agent IA n’a pas vu ?

Résumer cet article avec :

En bref.
Quand une entreprise confie à un agent IA l’analyse de ses appels d’offres, lire le dossier du client, en extraire chaque exigence, préparer les réponses, une question domine toutes les autres: comment sait-on ce qu’il n’a pas vu ? La génération de texte se voit: on la lit, on la corrige. L’extraction ratée est invisible: la liste produite a l’air complète, et rien n’indique l’exigence manquée page 87 d’une annexe, celle qui se découvre à l’ouverture des plis, sous forme de disqualification.

L’asymétrie du visible et de l’invisible

Quand un agent rédige mal, tout le monde le remarque et corrige. Quand il omet, personne ne remarque rien: la sortie est propre, cohérente, convaincante. La confiance s’installe précisément parce que les erreurs les plus graves sont celles qu’on ne voit pas. Et un dossier de consultation est le pire des terrains: exigences dispersées entre règlement, cahier des charges et annexes, formulations juridiques, renvois croisés, tableaux, documents scannés.

La seule réponse sérieuse: mesurer la couverture

La couverture d’extraction se mesure en comparant, sur des dossiers de référence annotés par des humains, la liste des exigences réellement présentes et celle que le système a identifiées. Sans ce banc de test, toute affirmation d’exhaustivité relève de la foi. La question à poser à n’importe quelle équipe, interne ou éditeur: “sur quel jeu de dossiers mesurez-vous votre couverture, et à combien êtes-vous ?”. L’absence de réponse est une réponse. Règle d’organisation qui en découle: tant que la couverture n’est pas mesurée, un humain doit refaire l’extraction en parallèle, ce qui annule l’intérêt de l’agent.

L’approche Optivalue.ai

Optivalue.ai produit une matrice d’exigences traçable jusqu’au numéro de page et traite la couverture comme un objet de conformité: ce qui est couvert, ce qui ne l’est pas, ce qui reste à instruire. L’exhaustivité n’y est pas une promesse, c’est un livrable vérifiable.


Pourquoi l’omission est-elle plus grave que l’erreur ?

Parce qu’une erreur se corrige en relecture; une omission ne se voit pas avant la sanction.

Qu’est-ce que la couverture d’extraction ?
La proportion des exigences réellement présentes dans le dossier que le système a effectivement identifiées.

Transformez vos questionnaires en opportunités, dès maintenant

30 jours gratuits • Aucune CB requise • Sans engagement