Superior Court van Quebec test negen AI-agents met 22 rechters; de meesten willen ze houden

Het probleem

Rechters bij de rechtbank van eerste aanleg in Quebec behandelen elk jaar duizenden civiele, familie-, handels- en strafzaken, en een groot deel van het werk vóór een beslissing bestaat uit lezen, redigeren en opzoeken. Sommige rechters gebruikten al op eigen houtje AI-tools, zonder institutioneel kader. De rechtbank koos voor een begeleide test in plaats van dit gebruik ongestuurd te laten.

Wat ze bouwden

Negen afzonderlijke AI-agents binnen Microsoft Teams, gebouwd met Microsoft Copilot Studio. Eén redigeert en herformuleert tekst, één vertaalt tussen Frans en Engels, vier doorzoeken het Burgerlijk Wetboek, het Wetboek van Burgerlijke Rechtsvordering, het Wetboek van Strafrecht en het faillissementsrecht, één controleert juridische citaten, één biedt IT-ondersteuning en één dekt een intern naslagwerk over familierecht. De agents mochten geen vonnissen schrijven of het recht uitleggen.

Hoe ze het aanpakten

Tweeëntwintig vrijwillige rechters, gekozen om de mix van regio's, zaaktypen en gemak met technologie van de rechtbank te weerspiegelen, deden mee van 8 december 2025 tot 16 maart 2026. Ze werden verdeeld in drie groepen met gespreide toegang. De agents draaiden in de Microsoft 365-omgeving van het ministerie van Justitie van Quebec. Rechters gaven elke agent handmatig fragmenten, gesprekken waren privé tussen gebruikers en de agents konden niet op het web surfen. Rechters kwamen wekelijks bijeen om toepassingen te delen en te leren over AI-risico's. De rechtbank mat de resultaten met drie enquêtes, gebruiksgegevens van het platform en 90 synthetische testvragen.

Resultaten

De agents registreerden 893 sessies, waarvan 479 met de schrijfassistent, die elke reagerende rechter gebruikte. Volgens de rechtbank scoorden de opstel- en vertaalagents 9,3 tot 9,8 van de 10 op haar testvragen en scoorden de juridische onderzoeksagents tussen 7,8 en 9,0. In de eindenquête wilde 89% de tools blijven gebruiken en zei 84% dat AI bij hun rol past. De rechtbank meldt dat geen enkele rechter zei dat AI een beslissing had beïnvloed. De rechtbank zegt de meestgebruikte agents te houden, eigen AI-expertise op te bouwen en een bredere uitrol te onderzoeken.

Wat er misging

De test van de rechtbank vond in de citatie-agent één verzonnen voornaam van een auteur, waarvoor de agent 0 van de 10 scoorde. Een Microsoft-update van het onderliggende model vertraagde de lancering met enkele weken en dwong het team alle agents opnieuw te testen. Rechters van wie de toegang halverwege werd ingetrokken meldden een duidelijk slechtere ervaring dan degenen die haar behielden. De rechtbank kon bovendien niet garanderen dat gegevens in Canada bleven en vertelde dat aan de deelnemers.