IA et information

Deux lignes semblables ne sont pas forcément des doublons

Définissez ce qui identifie un enregistrement avant de demander à une IA de regrouper ou fusionner les entrées.

Deux lignes de livraison indiquent le même article et la même quantité. Il peut s’agir d’un import répété ou de deux livraisons réelles. La ressemblance du texte ne suffit pas à décider quelle ligne supprimer.

Définissez d’abord ce qui identifie une ligne

Choisissez les champs qui identifient un enregistrement dans cette liste. Le numéro de commande associé au numéro de ligne peut convenir si cette combinaison est unique dans le système source. Le nom du produit répond à une autre question : ce qui a été commandé, pas de quelle opération il s’agit.

Demandez à l’assistant des groupes de doublons possibles, en conservant toutes les lignes et tous les identifiants d’origine. Séparez les correspondances exactes des rapprochements approximatifs et gardez les cas incertains pour examen. NIST décrit le risque de réponses génératives affirmatives mais fausses. Cette méthode en est une application pratique, pas une garantie testée sur un modèle précis.

Préparez des exemples avec les décisions attendues avant d’évaluer la réponse :

  • Même commande et même ligne importées deux fois : doublon possible à vérifier.
  • Identifiants de commande différents, article et quantité identiques : conserver les deux opérations.
  • Variante orthographique sans identifiant commun : examiner avant de fusionner.

Préservez ce que la fusion enlèverait

Comparez tous les champs de chaque groupe. Des notes, dates ou quantités différentes demandent une décision explicite, même avec les mêmes identifiants. Une différence peut correspondre à une correction.

Travaillez dans un fichier de sortie séparé. Notez les lignes d’origine associées à chaque enregistrement conservé et la raison de la fusion. Comparez les nombres de lignes et les totaux pertinents avant et après, en expliquant chaque changement attendu. Si une différence reste inexpliquée, gardez la source intacte et revoyez le groupe. Une liste plus courte doit toujours représenter correctement les opérations originales.

Sources et lectures

  1. NIST AI 600-1 — Generative Artificial Intelligence Profile, section 2.2

Les sources étayent les explications techniques. Les exemples et les vérifications proposées relèvent du travail éditorial.