Model card

Descrivere chiaramente le condizioni d’uso di un modello

Una model card è una documentazione che accompagna un modello di IA. Descrive, tra l’altro, l’uso previsto, i dati di addestramento e valutazione, i metodi di valutazione e i limiti noti. Le informazioni dovrebbero essere associate a una versione identificabile del modello. I risultati acquistano significato insieme alle condizioni di verifica: quali compiti, dati in ingresso e lingue sono stati esaminati? La model card sostiene una scelta informata, ma non sostituisce una verifica nel proprio caso d’uso.

Per un modello fittizio che classifica segnalazioni di assistenza, la model card dovrebbe indicare il tipo di segnalazione considerato e le categorie verificate. Se la qualità fosse stata valutata solo su segnalazioni scritte standardizzate, ciò non dimostrerebbe un’idoneità verificata per messaggi vocali trascritti automaticamente con abbreviazioni aziendali. Quel tipo di input dovrebbe restare visibile come questione aperta ed essere esaminato separatamente. Con una nuova versione del modello occorrerebbe ricontrollare le informazioni. Una model card chiara non costituisce da sola né un certificato indipendente né la prova di uno smistamento senza errori.

Fonti

• Hugging Face · Model Cards

• Mitchell et al. · Model Cards for Model Reporting