Multimodale AI
AI met meerdere informatietypen zoals tekst, beeld of geluid in invoer of uitvoer.
Wat is multimodale AI?
Multimodale AI verwerkt of genereert meerdere informatietypen, zoals tekst, beelden of geluid. Een model kan verschillende invoer samen beoordelen en toch alleen tekst leveren. Combinaties hangen af van model en koppeling. De term belooft geen begrip van elk invoertype of generatie van elk uitvoertype.
In een fictieve servicezaak ontvangt een model een apparaatfoto en schriftelijke notitie. Beide bronnen moeten samen de beoordeling helpen. Is het typeplaatje onleesbaar, dan vraagt de workflow verduidelijking in plaats van een ongefundeerde apparaatcode. Het team controleert of echte beeld- en tekstinhoud de uitkomsten steunt. Extra invoer kan nuttige context geven maar vervangt die controle niet.
Bronnen
Verwante begrippen
- Neuraal netwerkEen model van verbonden rekenknopen met aanpasbare parameters.
- Groot taalmodelEen groot taalmodel verwerkt taal met geleerde patronen. Vloeiende tekst bewijst geen feitelijke juistheid of toegang tot actuele bedrijfsgegevens.
- SpraakherkenningGesproken taal uit audiogegevens omzetten in tekst.
- SpraaksyntheseGeschreven tekst als synthetische spraak weergeven.
- Optische tekenherkenningOptische tekenherkenning maakt schrift in beelden verwerkbaar. Een bedrag lezen is nog geen inhoudelijke controle van een factuur.
- ModelkaartEen modelkaart documenteert doel, grondslagen, beoordelingsvoorwaarden en bekende beperkingen van een bepaalde versie van een AI-model.
Artikelen over dit onderwerp
AI & automatisering met ASES
AI-assistenten en geautomatiseerde processen