OCR-nauwkeurigheid en menselijke controle
Beoordeel OCR op veldnauwkeurigheid, correcties per document en controletijd. Een praktisch evaluatiekader voor BOL’s en facturen.
OCR-nauwkeurigheid bij BOL’s en facturen is pas te beoordelen wanneer duidelijk is wat er is geteld. Veldnauwkeurigheid gaat over afzonderlijke uitgelezen waarden. Het percentage documenten dat zonder correctie doorgaat, gaat over alle vereiste waarden op een compleet document. In de DHL Aruba-case van Esnaj ligt de gerapporteerde nauwkeurigheid boven 96% van de uitgelezen velden. Dat zegt niet dat 96% van de documenten geen controle nodig heeft. Het betreft een operationeel cijfer van Esnaj, geen onafhankelijk gecontroleerde dataset.
Meet OCR-nauwkeurigheid vóór menselijke correcties
| Maatstaf | Werkdefinitie | Waarom meten? |
|---|---|---|
| Veldnauwkeurigheid | Correct uitgelezen velden gedeeld door beoordeelde velden. | Laat zien welke gegevenstypen goed of slecht gaan. |
| Documenten zonder correctie | Documenten met alle verplichte velden correct, gedeeld door beoordeelde documenten. | Maakt duidelijk hoe vaak een volledig document zonder aanpassing doorgaat. |
| Controletijd | Tijd voor verificatie en correctie per document. | Toont hoeveel menselijk werk overblijft. |
| Uitzonderingen | Documenten die een expliciete beslissing over ontbrekende of onduidelijke gegevens vragen. | Helpt de benodigde controlecapaciteit plannen. |
Spreek vooraf af wat “correct” betekent. Een datum in een andere, geldige notatie kan hetzelfde gegeven zijn; een bijna juist factuurnummer is niet goed genoeg. Maak onderscheid tussen een leesfout van OCR en een verkeerde interpretatie van het veld. Bewaar voor elk testveld een door een beoordelaar gecontroleerde referentiewaarde en registreer wat tijdens controle is aangepast.
Bij documenten met meerdere kritieke velden kan een hoge veldnauwkeurigheid toch samengaan met veel documenten die minstens één correctie nodig hebben. Hoe vaak dat gebeurt, hangt af van het aantal velden, de verdeling van fouten en de verplichte gegevens. Leid het documentpercentage dus niet af uit alleen 96%. Een betrouwbaarheidsscore kan controle helpen prioriteren, maar is geen vervanging voor vergelijking met gecontroleerde waarden.
Test juist ook moeilijke documenten
Verzamel voorbeelden per leverancier, documenttype en scankwaliteit. Bij DHL corrigeert beeldvoorbewerking de oriëntatie, lezen OCR en AI uiteenlopende indelingen en benamingen uit en beoordelen medewerkers de resultaten. Gecontroleerde gegevens blijven in het vervangende platform en kunnen worden geëxporteerd. Deze werkwijze bewijst geen koppeling met een douanesysteem of TMS.
Gebruik voor een evaluatie een apart gehouden steekproef. Meet de juistheid vóór menselijke correcties en daarnaast de totale verwerkingstijd tot goedkeuring. Neem ook documenten mee die niet als problematisch zijn gemarkeerd: een geloofwaardig ogende fout kan anders onopgemerkt blijven. Registreer zowel gemiste problemen als onterechte waarschuwingen, omdat beide gevolgen hebben voor kwaliteit of werkdruk.
Leg vast wie beslist bij onleesbare scans, ontbrekende informatie of tegenstrijdige waarden. Zorg dat de beoordelaar het oorspronkelijke document kan raadplegen. Test opnieuw wanneer nieuwe leveranciers worden toegevoegd; één totaalgemiddelde kan slechte resultaten binnen een kleine maar belangrijke documentgroep verbergen.
De uitleg van de BOL- en factuurworkflow laat de stappen in samenhang zien. Bekijk documentextractie voor logistiek of bespreek een evaluatie met Esnaj.
Veelgestelde vragen
Is 96% veldnauwkeurigheid hetzelfde als 96% foutloze documenten? Nee. Het DHL-cijfer betreft velden. Een document met één onjuist verplicht veld moet nog worden gecorrigeerd, ook als de overige waarden correct zijn.
Moeten medewerkers alleen gemarkeerde velden controleren? Markeringen helpen prioriteren, maar beoordeel ook een steekproef van niet-gemarkeerde resultaten. Bepaal de controleaanpak op basis van de gevolgen van fouten per veld.
Wat hoort naast nauwkeurigheid in een proef? Meet ook het aandeel documenten zonder correctie, aantallen aanpassingen en uitzonderingen, en de volledige verwerkingstijd inclusief menselijke controle op representatieve documenten.