Traduit de l’original anglais. Les chiffres et les sources sont inchangés. Lire l’original en anglais
UK Department for Work and Pensions
Le DWP britannique donne Microsoft 365 Copilot à 3 549 agents et estime un gain de 19 minutes par jour face à un groupe de comparaison
Le Department for Work and Pensions britannique a attribué des licences Microsoft 365 Copilot à 3 549 agents de l’administration centrale pendant six mois et a comparé leurs réponses à une enquête avec celles d’un échantillon de collègues sans licence. Le modèle du ministère estime un gain moyen de 19 minutes par jour sur huit tâches courantes. Il prévient que les résultats sont déclaratifs et ne proviennent pas d’un essai randomisé.
Chiffres clés
Repris tels quels des sources. Copiez n’importe quel chiffre avec sa citation.
19
minutes
Temps moyen estimé gagné par jour sur huit tâches courantes, détenteurs de licence par rapport au groupe de comparaison, d’après le modèle de régression du ministère avec tous les contrôles1
0,56
point
Hausse de la satisfaction au travail sur une échelle de 7 points par rapport aux non-utilisateurs, d’après le modèle de régression du ministère1
0,49
point
Hausse de la qualité perçue du travail sur une échelle de 7 points par rapport au groupe de comparaison, d’après le modèle de régression du ministère1
90 %
Utilisateurs de l’enquête ayant indiqué que Copilot leur a fait gagner du temps1
Le problème
Un grand ministère consacre une bonne part du temps de ses agents à des tâches courantes comme rédiger des courriels, rechercher des informations et résumer des documents. Le DWP voulait savoir si un assistant d’IA payant ferait gagner du temps et améliorerait le travail, et si les résultats gouvernementaux antérieurs résistaient à un test face à un groupe de comparaison.
Ce qu’ils ont construit
Le DWP a mené un essai de la version sous licence de Microsoft 365 Copilot. Il s’agit d’un assistant d’IA intégré à Word, Outlook, Teams et d’autres applications Microsoft, avec accès aux données de l’organisation de l’utilisateur. Les licences ont été attribuées à des agents de l’administration centrale répartis en 12 groupes liés à des domaines d’activité comme le numérique, les politiques publiques et les finances.
Comment ils s’y sont pris
D’octobre 2024 à mars 2025, le DWP a attribué 3 549 licences à des volontaires et à des personnes proposées par leurs pairs. Les chercheurs ont envoyé une enquête à tous les détenteurs de licence et à un échantillon aléatoire stratifié de 9 300 agents sans licence, et ont reçu 1 716 et 2 535 réponses. Ils ont comparé les deux groupes par analyse de régression, une méthode statistique qui corrige les écarts comme le grade et l’intérêt pour l’IA, et ont ajouté 19 entretiens avec des agents.
Résultats
Le modèle a estimé un gain moyen de 19 minutes par jour sur huit tâches courantes. Selon le rapport, les plus fortes réductions concernent la recherche d’informations et la rédaction de courriels. La satisfaction au travail était supérieure de 0,56 point et la qualité perçue du travail de 0,49 point, sur une échelle de 7 points, par rapport au groupe de comparaison. Dans l’enquête, 90 % des utilisateurs ont dit que Copilot leur avait fait gagner du temps, et 65 % l’utilisaient chaque jour. Les utilisateurs ont dit réinvestir ce temps dans la conduite de projets, la planification et l’appui aux cadres dirigeants.
Ce qu’il faut retenir
Fixez les indicateurs de résultat et le plan d’analyse avant de collecter les données, et interrogez un groupe de comparaison comme l’a fait le DWP, afin que le résultat puisse être lu à côté d’autres essais. Relevez aussi une situation de référence, ce que le DWP n’a pas fait.
Tous les chiffres publiés
| Indicateur | Chiffre | Citation |
|---|---|---|
| Temps moyen estimé gagné par jour sur huit tâches courantes, détenteurs de licence par rapport au groupe de comparaison, d’après le modèle de régression du ministère avec tous les contrôles | 19 minutes1 | |
| Hausse de la satisfaction au travail sur une échelle de 7 points par rapport aux non-utilisateurs, d’après le modèle de régression du ministère | 0,56 point1 | |
| Hausse de la qualité perçue du travail sur une échelle de 7 points par rapport au groupe de comparaison, d’après le modèle de régression du ministère | 0,49 point1 | |
| Utilisateurs de l’enquête ayant indiqué que Copilot leur a fait gagner du temps | 90 %1 | |
| Utilisateurs de l’enquête ayant déclaré utiliser Copilot chaque jour | 65 %1 |
Enseignements pour votre projet
Intégrez un groupe de comparaison à l’essai. Le DWP a interrogé les détenteurs de licence et un échantillon aléatoire stratifié d’agents sans licence, ce qui lui permet d’estimer un écart au lieu de rapporter de simples opinions.
Tenez compte de l’appétence des personnes pour l’IA. Le gain estimé augmentait quand le modèle prenait en compte l’intérêt et l’expérience en matière d’IA : l’ignorer peut fausser l’effet mesuré.
Prévoyez une formation adaptée aux métiers. La plupart des utilisateurs se sont formés seuls, et beaucoup ont demandé des sessions par métier et des aide-mémoire.
Maintenez la relecture humaine. Les utilisateurs ont décrit Copilot comme un point de départ dont les résultats exigeaient leur correction et leur jugement.
Réserves
- Le ministère a évalué son propre essai. Tous les résultats sont déclaratifs, issus d’enquêtes, sans mesure objective du temps.
- Les licences sont allées à des volontaires et à des personnes proposées par leurs pairs, selon l’ordre d’arrivée : il ne s’agit donc pas d’un essai randomisé et un biais de sélection est possible. Aucune situation de référence n’a été relevée avant l’essai.
- Les 19 minutes viennent du modèle qui contrôle l’intérêt et l’expérience en matière d’IA. Les modèles sans ces contrôles donnent des estimations plus basses, entre 10 et 12 minutes dans le tableau 4.3 du rapport, ce que le rapport explique par le fait que les agents passionnés d’IA consacrent de toute façon plus de temps à ces tâches.
- L’essai ne couvrait que les agents de l’administration centrale. Les agents des Jobcentres et des autres services de terrain n’avaient pas de licence, et la version gratuite de Copilot n’a été ouverte à tous les agents qu’en avril 2025, après l’enquête de terrain.
- Les sources nomment le produit, Microsoft 365 Copilot, mais pas le modèle de langage sous-jacent.
- Le DWP a aussi participé à l’essai interministériel distinct de Copilot mené par le Government Digital Service. Ce cas porte sur l’évaluation propre au DWP, publiée séparément.
Sources
- An Evaluation of DWP's Microsoft 365 Copilot Trial
GOV.UK (Department for Work and Pensions) · 2026-01-29 · Article de recherche · gov.uk
Résumé dans nos propres mots à partir des sources ci-dessus. Une erreur ? Consultez les corrections.