Vertaald uit het Engelse origineel. De cijfers en bronnen zijn ongewijzigd. Lees het Engelse origineel
UK Department for Work and Pensions
Brits DWP geeft 3.549 medewerkers Microsoft 365 Copilot en schat 19 minuten tijdwinst per dag ten opzichte van een vergelijkingsgroep
Het Britse Department for Work and Pensions gaf zes maanden lang Microsoft 365 Copilot-licenties aan 3.549 medewerkers op het hoofdkantoor en vergeleek hun enquêteantwoorden met die van een steekproef van collega's zonder licentie. Het model van het departement schat een gemiddelde besparing van 19 minuten per dag over acht routinetaken. Het waarschuwt dat de resultaten zelfgerapporteerd zijn en niet uit een gerandomiseerde proef komen.
Kerncijfers
Letterlijk overgenomen uit de bronnen. Kopieer elk cijfer met bronvermelding.
19
minuten
Geschatte gemiddelde bespaarde tijd per dag over acht routinetaken, licentiehouders ten opzichte van vergelijkingsgroep, uit het regressiemodel van het departement met alle controlevariabelen1
0,56
punten
Stijging van de werktevredenheid op een schaal van 7 punten ten opzichte van niet-gebruikers, uit het regressiemodel van het departement1
0,49
punten
Stijging van de ervaren kwaliteit van het werk op een schaal van 7 punten ten opzichte van de vergelijkingsgroep, uit het regressiemodel van het departement1
90%
Gebruikers in de enquête die aangaven dat Copilot hen tijd bespaarde1
Het probleem
Een groot ministerie besteedt veel van de tijd van zijn medewerkers aan routinetaken zoals e-mails opstellen, informatie zoeken en documenten samenvatten. Het DWP wilde bewijs of een betaalde AI-assistent tijd zou besparen en het werk zou verbeteren, en of eerdere overheidsresultaten standhielden als ze tegen een vergelijkingsgroep werden getoetst.
Wat ze bouwden
Het DWP voerde een proef uit met de gelicentieerde versie van Microsoft 365 Copilot. Dat is een AI-assistent die is ingebouwd in Word, Outlook, Teams en andere Microsoft-apps, met toegang tot de gegevens van de organisatie van de gebruiker. De licenties gingen naar medewerkers op het hoofdkantoor in 12 groepen die verbonden waren met bedrijfsonderdelen zoals digitaal, beleid en financiën.
Hoe ze het aanpakten
Tussen oktober 2024 en maart 2025 wees het DWP 3.549 licenties toe via vrijwilligers en voordrachten van collega's. Onderzoekers stuurden een enquête naar alle licentiehouders en naar een gestratificeerde aselecte steekproef van 9.300 medewerkers zonder licentie, en kregen 1.716 en 2.535 reacties. Ze vergeleken de twee groepen met regressieanalyse, een statistische methode die corrigeert voor verschillen zoals salarisschaal en interesse in AI, en voegden 19 interviews met medewerkers toe.
Resultaten
Het model schatte een gemiddelde besparing van 19 minuten per dag over acht routinetaken. Volgens het rapport waren de grootste verkortingen te zien bij het zoeken van informatie en het schrijven van e-mails. De werktevredenheid lag op een schaal van 7 punten 0,56 punten hoger en de ervaren kwaliteit van het werk 0,49 punten hoger dan in de vergelijkingsgroep. In de enquête zei 90% van de gebruikers dat Copilot hen tijd bespaarde, en 65% gebruikte hem dagelijks. Gebruikers zeiden de tijd te herinvesteren in projectuitvoering, planning en het ondersteunen van hogere leidinggevenden.
Wat u kunt overnemen
Leg de uitkomstmaten en het analyseplan vast voordat u gegevens verzamelt, en bevraag een vergelijkingsgroep zoals het DWP deed, zodat het resultaat naast andere proeven kan worden gelezen. Verzamel ook een nulmeting, wat het DWP niet deed.
Alle gemelde cijfers
| Maatstaf | Cijfer | Bronvermelding |
|---|---|---|
| Geschatte gemiddelde bespaarde tijd per dag over acht routinetaken, licentiehouders ten opzichte van vergelijkingsgroep, uit het regressiemodel van het departement met alle controlevariabelen | 19 minuten1 | |
| Stijging van de werktevredenheid op een schaal van 7 punten ten opzichte van niet-gebruikers, uit het regressiemodel van het departement | 0,56 punten1 | |
| Stijging van de ervaren kwaliteit van het werk op een schaal van 7 punten ten opzichte van de vergelijkingsgroep, uit het regressiemodel van het departement | 0,49 punten1 | |
| Gebruikers in de enquête die aangaven dat Copilot hen tijd bespaarde | 90%1 | |
| Gebruikers in de enquête die zeiden Copilot dagelijks te gebruiken | 65%1 |
Lessen voor uw project
Bouw een vergelijkingsgroep in de proef in. Het DWP vroeg licentiehouders en een gestratificeerde aselecte steekproef van medewerkers zonder licentie, zodat het een verschil kan schatten in plaats van alleen meningen te melden.
Corrigeer voor hoe enthousiast mensen zijn over AI. De geschatte besparing nam toe toen het model rekening hield met interesse en ervaring met AI; wie dat overslaat, kan het effect verkeerd weergeven.
Plan training die bij de functies past. De meeste gebruikers leerden het zichzelf aan, en velen vroegen om functiespecifieke sessies en snelle tips.
Houd menselijke controle in stand. Gebruikers beschreven Copilot als een startpunt waarvan het resultaat hun bewerking en oordeel nodig had.
Kanttekeningen
- Het departement evalueerde zijn eigen proef. Alle uitkomsten zijn zelfgerapporteerd in enquêtes, zonder objectieve tijdmeting.
- Licenties gingen naar vrijwilligers en door collega's voorgedragen personen, op volgorde van aanmelding, dus het was geen gerandomiseerde proef en selectiebias is mogelijk. Vóór de proef is geen nulmeting gedaan.
- De 19 minuten komen uit het model dat controleert voor interesse en ervaring met AI. Modellen zonder die controles geven lagere schattingen, tussen 10 en 12 minuten in tabel 4.3 van het rapport, wat het rapport verklaart doordat AI-enthousiaste medewerkers sowieso meer tijd aan taken besteden.
- De proef omvatte alleen medewerkers op het hoofdkantoor. Medewerkers van Jobcentres en andere uitvoerende medewerkers hadden geen licenties, en de gratis versie van Copilot bereikte pas in april 2025 alle medewerkers, na het veldwerk.
- De bronnen noemen het product, Microsoft 365 Copilot, maar niet het onderliggende taalmodel.
- Het DWP nam ook deel aan de aparte interdepartementale Copilot-proef van de Government Digital Service. Deze case gaat over de eigen, apart gepubliceerde evaluatie van het DWP.
Bronnen
- An Evaluation of DWP's Microsoft 365 Copilot Trial
GOV.UK (Department for Work and Pensions) · 2026-01-29 · Onderzoeksrapport · gov.uk
In eigen woorden samengevat op basis van de bovenstaande bronnen. Een fout gezien? Zie correcties.