Onder de motorkap
Hoe een antwoord wordt opgebouwd — en waarom het te vertrouwen is
Elk onderdeel van de pijplijn bestaat om één belofte waar te maken: geen antwoord zonder een vindplaats die je zelf kan natrekken.
Hybride retrieval, geen keyword-zoekmachine
Elke vraag doorloopt query-planning, hybride retrieval (BM25 + vector) en een semantische rerank voordat er iets naar het model gaat. Het model synthetiseert alleen wat de kennisbank daadwerkelijk heeft aangeleverd — nooit uit eigen parametrische kennis.
Peildatum als filter, niet als bijschrift
Wetgeving is geconsolideerd én geamendeerd. Elk fragment in de index draagt een geldigheidsinterval; elke vraag draagt een peildatum. Kies je een historische datum, dan krijgt het antwoord een duidelijke markering — het verschil tussen “geldend recht” en “recht op datum X” is de duurste verwarring die dit product kan veroorzaken.
Gezagsweging in het antwoord, niet verborgen in de ranking
Een arrest van het Hof van Cassatie weegt niet even zwaar als een vonnis van een vrederechter. We forceren dat niet als harde boost in de retrieval — dat verbergt relevante lagere rechtspraak — maar het model benoemt de hiërarchie expliciet, en de instantie staat in de citatie.
Weigergedrag is een feature
Vindt het systeem niets in de bronnen, dan is het antwoord “dat vind ik niet in de bronnen”. Een juridisch antwoord zonder vindplaats is erger dan geen antwoord: het verplaatst het verificatiewerk naar iemand die niet weet dat hij het moet doen.
Kwaliteit is een pijplijn, geen demo
Voor een juridisch product is “het werkt in de demo” geen bewijs. Dit draait in CI op elke wijziging van instructies, chunkingstrategie of model.
- Een gouden set van minimaal 200 vragen met door een jurist vastgestelde juiste vindplaats, verdeeld over België/Nederland, wetgeving/rechtspraak en actuele/historische peildatum.
- Recall@k op de juiste vindplaats — de metriek die er het meest toe doet: als de juiste bron niet wordt opgehaald, kan geen enkel model het goede antwoord geven.
- Citatiegetrouwheid: staat elke bewering in het antwoord daadwerkelijk in een opgehaald fragment.
- Een hoog percentage “ik weet het niet” op vragen waarvan we weten dat het corpus ze niet dekt — dat is een goed teken, geen slecht.