De uitdaging
Wolters Kluwer moest Generatieve AI integreren in hun Schulinck-kennisbank, de gouden standaard voor Nederlandse gemeenten, zonder concessies te doen aan betrouwbaarheid. Juridische vragen over sociale domeinen (zoals de Participatiewet of WMO) zijn complex en dynamisch; een onjuist antwoord kan ernstige gevolgen hebben. De uitdaging was om een systeem te bouwen dat kon "redeneren" over enorme juridische teksten en juridisch onderbouwde antwoorden met bronvermeldingen kon geven, in plaats van alleen plausibel klinkende samenvattingen.
Onze aanpak
We stapten af van standaard "out-of-the-box" AI-implementaties en vestigden een rigoureuze, kwaliteit-eerst en experiment-gedreven engineeringcultuur:
- Deep Tech & RAG-architectuur: We bouwden een custom Retrieval-Augmented Generation (RAG)-infrastructuur die het eenvoudig schakelen en rigoureus testen van verschillende Large Language Models (LLM's) mogelijk maakt. Dit beschermde het product tegen vendor-hype en zorgde ervoor dat we alleen modellen uitrolden die daadwerkelijk beter presteerden op juridisch redeneren.
- Geautomatiseerd evaluation framework: In plaats van te vertrouwen op subjectieve feedback ("het ziet er goed uit"), bouwden we een geautomatiseerd evaluation framework om de antwoordkwaliteit objectief te meten tegen een gouden standaard.
- Human-in-the-Loop-ontwikkeling: We integreerden de juridische experts van Schulinck direct in het productteam. Dit creeerde een dagelijkse feedbackloop waarin engineers en juristen zij aan zij werkten om prompts en context te verfijnen, waarbij de AI werd behandeld als een "CoPilot" die weet wanneer hij "ik weet het niet" moet zeggen.
De resultaten
De Schulinck AI-Desk is nu een live, vertrouwde tool die door gemeenten in heel Nederland wordt gebruikt.
- Hoog gebruikersvertrouwen: Door nauwkeurigheid boven pure snelheid te stellen, behaalde de tool overweldigend positieve feedback van juridische professionals die er bij complexe casuistiek op vertrouwen.
- Verifieerbare nauwkeurigheid: Elk antwoord bevat directe bronvermeldingen naar het bronmateriaal (wetgeving, jurisprudentie, beleid), waardoor gebruikers de output van de AI direct kunnen verifieren.
- Workflowtransformatie: De tool zoekt niet alleen; hij fungeert als redeneerpartner, die gemeentemedewerkers helpt om sneller betere besluiten op te stellen en de tijd te verminderen die wordt besteed aan het doorspitten van complexe regelgeving.
Verdieping
Voor een eerlijke blik op het ontwikkelproces, lees onze gezamenlijke retrospectieve van de Data Expo waarin we de harde lessen delen die we hebben geleerd: Lees: 10 valkuilen bij het ontwikkelen van impactvolle AI (en hoe je ze voorkomt)
