Kontrollera källornas status före ett modellbyte

En kunskapsassistent beskriver en ersatt arbetsgång. Före köp av en större modell är det värt att fråga vilken dokumentversion svaret faktiskt fick. En giltig instruktion som aldrig skickades blir inte automatiskt tillgänglig genom en större modell.

En gammal instruktion som gemensam grund

Följande exempel är helt hypotetiskt. Inga modeller har anropats och inga svar har mätts. Den arkiverade instruktionen D-40 kräver en reparationsbegäran som PDF via e-post. Den giltiga godkända versionen D-41 kräver portalformuläret.

Anta att bara det gamla avsnittet skickas till frågan om den aktuella inlämningsvägen:

Svaren skulle stämma med den gamla texten och ändå vara fel för det aktuella förloppet. En källänk skulle inte rätta den felaktiga giltigheten.

En modell kan känna igen arkivmarkeringen och vägra svara. Den har då ändå inte fått den saknade nya instruktionen. Tabellen visar möjliga fel, inte att alla modeller reagerar likadant.

Följ giltigheten genom källkedjan

Kontrollera vem som godkänner den giltiga versionen och hur ersatta versioner markeras. Det senaste fildatumet avgör inte ensamt vilken instruktion som gäller. Även tillämpningsområdet måste stämma.

En ändring i dokumentsystemet uppdaterar inte nödvändigtvis genast sökavsnitt, sparade svar eller samtalsinnehåll. Den berörda rollen måste kunna nå den giltiga versionen; gamla kopior behöver en bestämd hantering.

Därefter kan samma fråga prövas med aktuellt, saknat och motstridigt underlag. Källval, källtrogenhet och tillåten åtkomst bedöms separat. Modellkvalitet är fortfarande relevant: en annan modell kan tolka tillhandahållen information bättre. Källkontrollen gör jämförelsen mer meningsfull utan att föra med ett olöst dokumentfel.

Källor

• Microsoft — RAG prompt engineering

• Microsoft — Retrieval-augmented generation in Azure AI Search

• OWASP — RAG Security Cheat Sheet