Übersetzt aus dem englischen Original. Zahlen und Quellen sind unverändert. Englisches Original lesen
HM Revenue and Customs
HMRC gibt 3.000 zufällig ausgewählten Beschäftigten Microsoft 365 Copilot und meldet selbst berichtete Einsparungen von rund 60 Minuten pro Woche
HMRC führte einen viermonatigen Versuch mit Microsoft 365 Copilot durch, bei dem 3.000 Lizenzen an zufällig ausgewählte Beschäftigte gingen, dazu 500 weitere für Freiwillige. Befragte berichteten, 2-3 % ihrer Arbeitswoche einzusparen. HMRC versteht die Zahl als Basisschätzung und nicht als genaue Messung.
Kennzahlen
Wortgetreu aus den Quellen übernommen. Kopieren Sie jede Zahl mit ihrer Quellenangabe.
rund 60 Minuten pro Woche
Dieselbe selbst berichtete Ersparnis, ausgedrückt pro Woche für ein Vollzeit-Arbeitsmuster1
83 %
Beschäftigte mit zugewiesener Lizenz, die sie während des Versuchs genutzt haben1
Was es erforderte
Kosten, Teamgröße und Zeitplan wurden in den Quellen nicht veröffentlicht.
Das Problem
HMRC, die britische Steuerbehörde, wollte wissen, wie viel Zeit ein KI-Assistent ihren Büro-Beschäftigten beim Verfassen von Texten, bei der Dokumentensuche und bei der Arbeit in Teams sparen kann. Außerdem wollte sie wissen, wie viele Menschen ihn tatsächlich nutzen würden und was andere davon abhält.
Was sie gebaut haben
HMRC testete Microsoft 365 Copilot, einen in Word, Outlook und Teams eingebauten Assistenten, der ein großes Sprachmodell nutzt, ein KI-System, das Text liest und schreibt. Der Versuch hatte drei Phasen. Zwei frühe Phasen Mitte 2024 betrafen 300 Beschäftigte, die sich selbst gemeldet hatten. Phase III war die umfassendste.
Wie sie vorgegangen sind
Phase III lief von September bis Dezember 2024. HMRC vergab 3.000 Lizenzen nach Zufall an Beschäftigte in Rollen, die überwiegend Microsoft Office nutzen, im Verhältnis zur Größe der Geschäftsbereiche. Weitere 500 Lizenzen gingen an Freiwillige, darunter Menschen, die sie als angemessene Vorkehrung brauchten. Die Belege stammten aus einer Umfrage mit 1.364 Antworten, aus Nutzungsdaten eines Microsoft-Dashboards, aus Fokusgruppen mit 35 Personen und aus einer Aufgabenübung mit 49 Personen.
Ergebnisse
Die Befragten berichteten, 2-3 % einer Arbeitswoche einzusparen, rund 60 Minuten bei Vollzeit. Insgesamt nutzten 83 % der Beschäftigten mit Lizenz diese, und die Zufriedenheit lag im Schnitt bei 7,1 von 10. Außerdem wären 61 % enttäuscht, ihre Lizenz zu verlieren. Am häufigsten genutzt wurden das Verfassen in Word (53 %) und die Zusammenarbeit in Teams (45 %). Laut Bericht sind seine Schätzungen vorsichtiger als die Zahl des Government Digital Service, die aus einem anderen Versuchsaufbau stammt.
Was Sie übernehmen können
Losen Sie aus, wer das Werkzeug bekommt, rechnen Sie die Umfrageantworten herunter und veröffentlichen Sie die Methode zusammen mit dem Ergebnis.
Alle berichteten Zahlen
| Messgröße | Wert | Quellenangabe |
|---|---|---|
| Von den Versuchsteilnehmenden selbst berichtete Zeitersparnis, Anteil an ihrer Arbeitswoche | 2-3 %1 | |
| Dieselbe selbst berichtete Ersparnis, ausgedrückt pro Woche für ein Vollzeit-Arbeitsmuster | rund 60 Minuten pro Woche1 | |
| Beschäftigte mit zugewiesener Lizenz, die sie während des Versuchs genutzt haben | 83 %1 | |
| Durchschnittliche Zufriedenheit der Nutzenden | 7,1 von 101 | |
| Nutzende, die enttäuscht wären, ihre Lizenz zu verlieren | 61 %1 |
Erkenntnisse für Ihr Projekt
Vergeben Sie Lizenzen nach Zufall, wenn Sie ein faires Bild wollen. HMRC loste 3.000 Lizenzen über die Geschäftsbereiche aus, was die Verzerrung verringert, die entsteht, wenn nur Enthusiasten das Werkzeug bekommen.
Rechnen Sie selbst berichtete Einsparungen herunter. HMRC senkte die selbst berichteten Zeitersparnisschätzungen um etwa 20 %, weil nicht jeder Lizenzinhaber Copilot nutzte und die Befragten eher aktive Nutzende waren, und nannte das Ergebnis eine Basisschätzung.
Kombinieren Sie mehrere Messungen. HMRC verband Umfrage, Nutzungsdaten, Fokusgruppen und eine Aufgabenübung, statt sich auf eine einzige zu stützen.
Legen Sie Regeln für den Umgang mit Daten fest und schulen Sie die Beschäftigten. Der häufigste Grund für Nichtnutzung waren Sicherheits- und Datenschutzbedenken, und die Nutzenden wünschten sich praxisnahe, maßgeschneiderte Schulungen.
Einschränkungen
- HMRC hat seinen eigenen Versuch bewertet. Die Einsparungen beruhen auf Selbstauskünften, und der Bericht sagt, sie sollten als Basisschätzung und nicht als genaue Messung behandelt werden.
- Der Bericht sagt, die selbst berichteten Zeitersparnisschätzungen seien um etwa 20 % gesenkt worden, weil nicht alle Lizenzinhaber Copilot nutzten und die Befragten eher aktive Nutzende waren. Die Seite sagt nicht, ob die Zahl von 2-3 % vor oder nach dieser Senkung gilt.
- Die Umfrage hatte 1.364 Antworten, 45 % der zufällig ausgewählten Lizenzinhaber; Antwortausfälle können die Ergebnisse verzerren.
- Der Bericht fasst eine Phase einer laufenden Bewertung zusammen. Die Teilnehmenden durften Copilot nur für Material unterhalb der Einstufung Official Sensitive nutzen.
- Die Seite nennt außerdem einen jährlichen Nutzen von rund 50 Millionen Pfund für eine breitere Lizenzvergabe. Das ist eine Projektion und kein gemessenes Ergebnis und wird hier nicht verwendet.
- Die Quellen nennen das Produkt, Microsoft 365 Copilot, aber nicht das zugrunde liegende Sprachmodell. Phase III ist der eigene Versuch von HMRC; HMRC nahm auch am separaten ressortübergreifenden Versuch des Government Digital Service teil.
- Phase III lief von September bis Dezember 2024; der Bericht erschien im Juli 2026.
Quellen
- Evaluating the Impact of Microsoft Copilot in HMRC
GOV.UK (HM Revenue and Customs) · 2026-07-09 · Forschungsarbeit · gov.uk
In eigenen Worten aus den oben genannten Quellen zusammengefasst. Einen Fehler entdeckt? Siehe Korrekturen.