Modellkarte

Einsatzbedingungen eines Modells nachvollziehbar beschreiben

Eine Modellkarte, auch Model Card, ist eine begleitende Dokumentation zu einem KI-Modell. Sie beschreibt unter anderem den vorgesehenen Zweck, die verwendeten Trainings- und Bewertungsdaten, die Bewertungsverfahren sowie bekannte Grenzen. Die Angaben sollten einer erkennbaren Modellversion zugeordnet sein. Ergebnisse werden erst zusammen mit ihren Prüfbedingungen verständlich: Welche Aufgaben, Eingaben und Sprachen wurden untersucht? Die Karte unterstützt eine informierte Auswahl, ersetzt aber keine Prüfung im eigenen Anwendungsfall.

Für ein fiktives Modell zur Einordnung von Servicemeldungen soll eine solche Karte den betrachteten Meldungstyp und die geprüften Kategorien nennen. Wäre die Qualität nur mit standardisierten schriftlichen Meldungen bewertet worden, ließe sich daraus keine geprüfte Eignung für automatisch transkribierte Sprachnachrichten mit betrieblichen Abkürzungen ableiten. Diese Eingabeart müsste als offene Frage sichtbar bleiben und gesondert untersucht werden. Bei einer neuen Modellversion wären die Angaben erneut abzugleichen. Eine übersichtlich geschriebene Karte ist für sich weder ein unabhängiges Zertifikat noch ein Nachweis fehlerfreier Weiterleitung.

Quellen

• Hugging Face · Model Cards

• Mitchell et al. · Model Cards for Model Reporting