Betrouwbaarheidsscore
Een betrouwbaarheidsscore beoordeelt een modelvoorspelling volgens de gebruikte methode. De score geeft geen inhoudelijke bedrijfsgoedkeuring.
Begrijpen wat de score beoordeelt
Een betrouwbaarheidsscore beschrijft hoe zeker een model een specifieke voorspelling volgens zijn methode acht. Schaal en betekenis moeten voor het concrete systeem duidelijk zijn. Bij documentherkenning kan bijvoorbeeld de score voor een woord verschillen van die voor een gekoppeld veld.
In een fictief voorbeeld wordt de prijs 24 EUR herkend met een veldscore van 0,98. Dat beoordeelt de betreffende herkenning. Het bevestigt niet dat 24 EUR bij het geldige contract past of dat de hele factuur juist is.
Een drempel kan resultaten naar controle sturen. De geschiktheid ervan moet met passende voorbeelden en de gevolgen van fouten worden onderzocht. De score is ook geen statistisch betrouwbaarheidsinterval of algemene garantie voor een bepaald foutpercentage in uw bedrijf.
Bronnen
Verwante begrippen
- Optische tekenherkenningOptische tekenherkenning maakt schrift in beelden verwerkbaar. Een bedrag lezen is nog geen inhoudelijke controle van een factuur.
- Herordening van zoekresultatenHerordening beoordeelt gevonden zoekkandidaten opnieuw. De aansluiting op de vraag en de grenzen van de eerste selectie blijven bepalend.
- Documenten opdelen in chunksEen document verdelen in kleinere samenhangende delen voor zoeken en modelcontext.
- Hybride zoekmethodeWoordgebaseerd zoeken en vectorzoeken combineren tot één gezamenlijke resultatenlijst.
- Semantisch zoekenZoeken dat resultaten vindt en rangschikt op inhoudelijke verwantschap met de zoekvraag.
- ModelrouteringVoor elke aanvraag een geschikt model kiezen uit een vastgelegde verzameling toegestane kandidaten.
Artikelen over dit onderwerp
Uw project met ASES
Beschrijf ons uw project. We nemen contact met u op met een eerste inschatting.