Parcourez la documentation
Haomai Technology AI Brain

Valider l’analyse des documents, les figures et le texte

La signification d’un dessin, d’un scan ou d’un tableau dépend de la disposition, de la position et des relations ainsi que du texte. Évaluez les méthodes d’analyse en fonction de la capacité d’une réponse à la question cible à citer le passage source correct.

Guide technique · Novembre 20263 min de lecture

Classer le matériel selon ses caractéristiques

Les PDF avec du texte sélectionnable, des pages numérisées, des tableaux complexes et des manuels illustrés présentent différents défis. Inspectez les pages à la recherche de biais, de flou, d’omissions et de contenu obscur pour distinguer les problèmes dans l’original des erreurs d’analyse.

Un texte OCR précis ne suffit pas à établir que la page a été comprise. Les relations entre les légendes et la prose, les en-têtes et les valeurs, les notes de bas de page et les conclusions peuvent toutes changer la réponse.

Créer un ensemble de tests à partir de pages représentatives

Type de pageQue vérifier de près
Prose continueOrdre de lecture, paragraphes et hiérarchie des titres
TableauRelations entre lignes et colonnes, cellules et unités fusionnées
Dessin ou organigrammeLégendes, étiquettes, direction et explications associées
Page numériséeComplétude du texte, numéro de page et erreurs de reconnaissance
Plusieurs versions manuellesVersion, date d’entrée en vigueur et équipement applicable

Tester l’analyse avec des questions

  1. Pour chaque type de page, choisissez une question factuelle dont un évaluateur peut localiser précisément la réponse.
  2. Comparez le passage récupéré avec l’original et vérifiez s’il inclut suffisamment de contexte.
  3. Vérifiez le numéro de page, l’illustration et la version citées dans la réponse.
  4. Ajoutez des contre-exemples avec une formulation similaire mais des significations différentes pour voir si le système sélectionne le mauvais matériau.
  5. Enregistrez les catégories d’erreurs et les échantillons représentatifs. Retestez après avoir ajusté la méthode de traitement.

Acheminer le contenu peu clair vers un examen humain

Si les chiffres sont flous, si les étiquettes sont manquantes ou si les versions sont en conflit, recherchez d’abord un original plus clair. Ne déduisez pas les paramètres critiques d’un matériau insuffisant. Vérifiez les réponses sur les procédures d’exploitation par rapport à un manuel original vérifié et conservez sa portée et la nécessité d’un jugement humain approprié.

Choisissez la méthode d’analyse, les ressources et les paramètres pris en charge par votre déploiement. Certains fichiers ne peuvent pas être analysés dans leur intégralité.

Essayez « autorisations », « source de données », « fabrication » ou « API ».