Modelkort

At beskrive en models anvendelsesbetingelser tydeligt

Et modelkort, også kaldet Model Card, er dokumentation, der følger med en AI-model. Det beskriver blandt andet den tilsigtede brug, trænings- og evalueringsdata, evalueringsmetoder og kendte begrænsninger. Oplysningerne bør knyttes til en identificerbar modelversion. Resultater giver først mening sammen med betingelserne for vurderingen: Hvilke opgaver, input og sprog blev undersøgt? Kortet understøtter et oplyst valg, men erstatter ikke en undersøgelse i virksomhedens egen anvendelse.

For en fiktiv model til kategorisering af servicehenvendelser skal kortet nævne den undersøgte type henvendelse og de vurderede kategorier. Hvis kvaliteten kun var vurderet med standardiserede skriftlige henvendelser, ville det ikke dokumentere undersøgt egnethed til automatisk transskriberede talebeskeder med virksomhedsinterne forkortelser. Denne inputtype skal stå tydeligt som et åbent spørgsmål og undersøges særskilt. Ved en ny modelversion skulle oplysningerne kontrolleres igen. Et tydeligt skrevet kort er ikke i sig selv et uafhængigt certifikat eller dokumentation for fejlfri videresendelse.

Kilder

• Hugging Face · Model Cards

• Mitchell et al. · Model Cards for Model Reporting