learn.chetana.fr

Vue diagnostic vs vue business

11 min readAdvanced

Le mĂȘme gold, deux questions

À partir d'un unique corrigĂ©, on dĂ©rive deux vues qui ne rĂ©pondent pas Ă  la mĂȘme question — et il faut les garder distinctes.

VueMétriquesQuestion
Extraction (diagnostic)line_f1, precision, recall, hallucination_rate, quantity_accuracyA-t-on lu les bonnes lignes du document ?
Commande (business)order_f1, order_recall, order_hallucination, order_qty_accuracyCe que vit le client : les lignes réellement commandées (= avec une quantité) sont-elles justes ?

La vue extraction est un outil de debug pour l'ingĂ©nieur : elle regarde tout ce qui a Ă©tĂ© lu. La vue commande est la vĂ©ritĂ© mĂ©tier : elle ne regarde que ce qui compte pour le client — les lignes commandĂ©es.

Pourquoi deux vues, et pas une

Prends le formulaire catalogue de la leçon précédente (200 réfs lues, 6 commandées). Question piÚge : si le pipeline lit correctement les 200 lignes du formulaire mais qu'aucune n'était à commander sauf 6, est-ce bien ou mal ?

  • cĂŽtĂ© extraction/diagnostic : lire les 200 lignes peut ĂȘtre neutre — on ne le rĂ©compense ni ne le punit, c'est de l'information ;
  • cĂŽtĂ© commande/business : seules les 6 comptent, et inventer une quantitĂ© sur l'une des 194 autres est puni plein pot — car ce serait une ligne facturĂ©e Ă  tort.

Une seule vue globale mélangerait ces deux logiques et te donnerait un chiffre ininterprétable. Séparer = pouvoir dire « la lecture est bonne mais la mise en commande hallucine », ce qui pointe exactement quoi corriger.

Le marquage des cas spéciaux

Pour que la vue extraction reste juste sur ces documents particuliers, le gold porte un drapeau ("form": true). Il indique au scoreur : « sur ce cas, les lignes lues sans quantitĂ© et non appariĂ©es ne sont ni exigĂ©es ni punies en vue extraction — mais la vue commande, elle, reste pleinement punitive ». Le marquage encode une connaissance mĂ©tier dans la vĂ©ritĂ© elle-mĂȘme.

đŸ§© Quiz1/4

Que mesure la vue « commande » (business) par rapport à la vue « extraction » ?

🃏 Flashcards1/4