Van vraag naar passage
Een organisatie heeft honderden handleidingen. Je zoekt eerst tekst die bij de vraag past. Het model ontvangt vervolgens die selectie als bronmateriaal. Dit heet retrieval-augmented generation, vaak afgekort tot RAG.
Test ook de zoekstap
Een passend geformuleerd antwoord kan alsnog fout zijn als een uitzondering in een ander hoofdstuk staat. Controleer daarom twee dingen apart. Zat de beslissende passage in de selectie? Volgt het antwoord ook uit die passage?
Vergelijk twee routes
Gebruik dezelfde reeks vragen met volledige documenten en met een selectie van passages. Vergelijk bruikbaarheid, bronverwijzing en gemiste uitzonderingen. Bij korte documenten kan de eenvoudigere aanpak voldoende zijn.
Alle notities