RAG løser kunnskapssøk, ikke alt
RAG passer når ansatte leter i rutiner, PDF-er, SharePoint, Notion, produktdokumentasjon, kontrakter eller gamle saker. Det passer dårligere hvis problemet egentlig er manglende prosess, dårlige kildedata eller behov for en agent som skal utføre handlinger.
Kildene bestemmer kvaliteten
En RAG-løsning blir ikke bedre enn dokumentene den henter fra. Før bygging bør kilder ryddes, duplikater fjernes, eierskap avklares og dokumenter merkes med område, dato, tilgang og gyldighet.
Tilgang må følge brukeren
Intern AI bør ikke vise informasjon brukeren ikke har rett til å se. En trygg løsning må kunne filtrere retrieval etter bruker, rolle, avdeling, kunde eller dokumenttype, og logge hvilke kilder som påvirket svaret.
Evaluer med ekte spørsmål
Kvalitet bør testes med spørsmål ansatte faktisk stiller. Svarene må vurderes på presisjon, kildebruk, manglende svar, feil kilder og hvor ofte systemet bør stoppe i stedet for å gjette.