OCR - amélioration des champs reconnus

[oryxr]

Bonjour à tous,
Nous sommes en train d’enregistrer les factures d’achats avec l’OCR, mais nous avons des erreurs dans al reconnaissance des montants ht, tva et ttc. Il fait souvent des mélanges. D’autant plus quand il y a plusieurs tva sur le même ticket comme celui la

J’ai vu que vous étiez en train d’implémenter l’ocr de mistral, c’est intéressant !

Je voulais savoir où vous en étiez et si vous aviez prévu une date pour la release.

Et comment faites vous les reconnaissances des champs après avoir reçu l’ocr en retour ?
Je voudrai pouvoir expliquer où trouver les champs pour ne pas se tromper la fois d’après.

J’ai quand même regardé les ocr existant et j’ai vu entre autre dans les opensources olmocr avec la démo ici qui m’a permis de tester le doc ci-dessus.

TICKET N°915451 - VNI le 05/06/2025 12:20:47 caisse : Caisse 1 - impression n°1 Opérateur : / Marine / Vendeur : / Marine

|Qté|Produit|Prix TTC|Prix TTC TVA|
| --- | --- | --- | --- |
|1|Brownie|2.50|2.50|
|1|Savoyard|5.40|5.40|
|1|Taxe Boissons sucrées|0.10|0.10|
|1|Boisson Offerte|0.00|0.00|

TOTAL TTC : 8.00€ Total remise TTC: 0.00€

Nombre total d’articles : 4 / 4 ligne(s)

TAXES : 3 - EXONERE DE T : 0.00€ / 0.10€ HT 2 - TVA 5.5% : 0.13€ / 2.37€ HT 5 - TVA 10% : 0.49€ / 4.91€ HT

TOTAL : 7.38€ HT TOTAL TTC : 8.00€

Toute la difficulté est de réussir à s’adapter à chaque ticket de caisse ou facture qui sont toutes différentes.
ChatGPT a très bien réussi à l’analyser et à me donner les infos qu’il faut, mais c’est gourmand en ressources.

Après en faisant des recherches avec expression régulière spécifique pour chacun des fournisseurs, on pourrait réussi à identifier les bonnes lignes sans erreurs. Comme un ocr avec apprentissage (idem que InvoiceNet)

[chdecultot]

Bonjour @oryxr,

Oui j’ai commencé l’intégration avec l’OCR de Mistral pour proposer une alternative à AWS Textract à partir de la version 5 de Dokos. On prévoit une publication à la rentrée/automne.

AWS Textract propose des fonctionnalités d’entrainement, mais nous ne les avons pas du tout explorées pour le moment.
Idéalement il faudrait pouvoir sélectionner les zones du PDF - ce qui demande pas mal de développements pour faire quelque chose de bien - et les associer avec les clés attendues puis remonter ça à Textract pour l’entrainer (Customizing your Queries Responses - Amazon Textract)

On est ouvert sur les plateformes à utiliser, donc n’hésites pas à ouvrir un ticket sur Gitlab (Dokos / OCR · GitLab) pour qu’on collabore sur des améliorations.