Fiche de modèle

Décrire clairement les conditions d’utilisation d’un modèle

Une fiche de modèle, ou Model Card, est une documentation qui accompagne un modèle d’IA. Elle décrit notamment l’usage prévu, les données d’entraînement et d’évaluation, les méthodes d’évaluation et les limites connues. Les informations devraient être rattachées à une version identifiable du modèle. Les résultats prennent sens avec leurs conditions d’évaluation : quelles tâches, entrées et langues ont été examinées ? La fiche aide à choisir en connaissance de cause, mais ne remplace pas une vérification dans le cas d’usage propre à l’organisation.

Pour un modèle fictif de classement des signalements de service, la fiche devrait nommer le type de signalement considéré et les catégories évaluées. Si la qualité n’avait été évaluée que sur des signalements écrits standardisés, cela n’établirait pas une aptitude vérifiée pour des messages vocaux transcrits automatiquement contenant des abréviations internes. Ce type d’entrée devrait rester une question ouverte explicite et être examiné séparément. Les informations seraient à vérifier de nouveau pour une nouvelle version du modèle. Une fiche claire ne constitue à elle seule ni un certificat indépendant ni une preuve d’orientation sans erreur.

Sources

• Hugging Face · Model Cards

• Mitchell et al. · Model Cards for Model Reporting