Übersetzt aus dem englischen Original. Zahlen und Quellen sind unverändert. Englisches Original lesen
UK Government Digital Service
Test von KI-Programmierassistenten in der britischen Regierung: Nutzer schätzen 56 Minuten Zeitersparnis pro Tag, 15,8 % des vorgeschlagenen Codes übernommen
Der britische Government Digital Service stellte Entwicklern in mehr als 50 Organisationen des öffentlichen Sektors drei Monate lang 2.500 Lizenzen für KI-Programmierassistenten zur Verfügung. Umfrageteilnehmer schätzten, dass sie pro Arbeitstag 56 Minuten sparten, doch die Telemetriedaten von GitHub Copilot zeigten, dass nur 15,8 % der vorgeschlagenen Codezeilen übernommen wurden.
Kennzahlen
Wortgetreu aus den Quellen übernommen. Kopieren Sie jede Zahl mit ihrer Quellenangabe.
56
Minuten
Durchschnittlich eingesparte Zeit pro Arbeitstag, geschätzt von den Testteilnehmern in einer Umfrage (424 Antworten aus 31 Behörden)1
58 %
Umfrageteilnehmer, die nicht zu den Arbeitsbedingungen vor den Assistenten zurückkehren möchten1
15,8 %
Übernommene vorgeschlagene Codezeilen, GitHub-Copilot-Telemetrie1
Was es erforderte
Das Problem
Die Entwicklungsteams der Regierung bauen und pflegen die Software hinter öffentlichen Diensten. Der Government Digital Service (GDS) wollte wissen, ob kommerzielle KI-Programmierassistenten Entwickler im öffentlichen Sektor produktiver machen, da es dazu kaum Forschung gab.
Was sie gebaut haben
Der GDS führte einen behördenübergreifenden Test mit zwei fertig erhältlichen KI-Programmierassistenten durch: GitHub Copilot und Gemini Code Assist. Diese Werkzeuge schlagen Code vor, während der Entwickler tippt, beantworten Fragen in einem Chatfenster und helfen beim Prüfen bestehenden Codes. Eine interne kommerzielle Prüfung im Juli 2024 hatte sie damals als die ausgereiftesten Optionen eingestuft.
Wie sie vorgegangen sind
Der Test lief drei Monate lang von November 2024 bis Februar 2025. Der GDS stellte in mehr als 50 Organisationen 2.500 Lizenzen bereit und unterstützte Einführung, Nutzerbindung und Akzeptanz. Er erhob Umfrageantworten zu Beginn, in der Mitte und am Ende, Nutzungsdaten aus dem GitHub-Copilot-Dashboard, acht Interviews und Erfolgsgeschichten. Die Hauptanalyse stützte sich auf 424 Umfrageantworten aus 31 Behörden.
Ergebnisse
Die Teilnehmer schätzten die durchschnittliche Ersparnis auf 56 Minuten pro Arbeitstag, den größten Anteil davon beim Erstellen von Code und bei der Analyse. Von den Befragten würden 58 % lieber nicht zur Arbeit ohne das Werkzeug zurückkehren, und die Zufriedenheit lag im Schnitt bei 6,6 von 10.
Was schiefgelaufen ist
Die Nutzungsdaten fielen weniger schmeichelhaft aus als die Umfrage. Nutzer von GitHub Copilot übernahmen nur 15,8 % der vorgeschlagenen Codezeilen, was der Bericht als etwas niedriger als in Branchenberichten bezeichnet, und nur 39 % der Nutzer gaben an, vorgeschlagenen Code eingecheckt zu haben. Laut Pressemitteilung wurden 15 % des generierten Codes ohne Änderungen verwendet. Telemetriedaten fehlten für einen Monat, Lizenzen wurden in manchen Organisationen spät verteilt, und 8 % der Nutzer sahen keine nennenswerte Zeitersparnis.
Was Sie übernehmen können
Führen Sie einen zeitlich begrenzten Test mit einem zentralen Team durch, das beim Einstieg hilft, und veröffentlichen Sie die Einschränkungen, wie es der GDS getan hat. Stellen Sie gegenüber, was Nutzer sagen und was die Werkzeuge aufzeichnen, und stützen Sie keinen Business Case allein auf selbst berichtete Minuten.
Alle berichteten Zahlen
| Messgröße | Wert | Quellenangabe |
|---|---|---|
| Durchschnittlich eingesparte Zeit pro Arbeitstag, geschätzt von den Testteilnehmern in einer Umfrage (424 Antworten aus 31 Behörden) | 56 Minuten1 | |
| Umfrageteilnehmer, die nicht zu den Arbeitsbedingungen vor den Assistenten zurückkehren möchten | 58 %1 | |
| Durchschnittliche Gesamtzufriedenheit | 6,6 von 101 | |
| Übernommene vorgeschlagene Codezeilen, GitHub-Copilot-Telemetrie | 15,8 %1 | |
| Nutzer, die angaben, vom Assistenten vorgeschlagenen Code eingecheckt zu haben | 39 %1 | |
| Nutzer ohne nennenswerte Zeitersparnis | 8 %1 | |
| KI-generierter Code, der ohne jede Änderung verwendet wurde (Pressemitteilung der Regierung) | 15 %2 |
Erkenntnisse für Ihr Projekt
Messen Sie die Nutzung mit Systemdaten und nicht nur mit Umfragen. Die selbst berichteten 56 Minuten Ersparnis pro Tag standen neben einer gemessenen Übernahmequote von 15,8 % für vorgeschlagenen Code.
Sagen Sie den Beschäftigten, wie lange der Zugang besteht. Laut Bericht haben Nutzer, die wussten, dass die Lizenzen nach dem Test entzogen würden, die Werkzeuge möglicherweise nicht voll genutzt.
Sichern Sie sich in jeder Organisation einen Förderer. Das Engagement hing von lokalen Förderern ab, und manche Lizenzen erreichten die Nutzer erst nach dem ersten Monat.
Vermeiden Sie ein Testfenster, das Feiertage einschließt. Der mittlere Monat fiel in die Weihnachtszeit, was die Verfügbarkeit von Nutzern und Teams verringerte.
Lassen Sie Menschen für das Ergebnis verantwortlich bleiben. Die Richtlinien der Regierung verlangten von Entwicklern, jeden vom Assistenten erzeugten Code zu verstehen und zu verantworten.
Einschränkungen
- Den Bericht hat der Government Digital Service der Regierung selbst veröffentlicht. Die zentrale Zeitersparnis stammt aus Schätzungen der Teilnehmer in 10-Minuten-Schritten, nicht aus gemessener Arbeit.
- Dem Bericht zufolge können sich Einsparungen über Aufgaben hinweg überschneiden und die Befragten zu optimistisch gewesen sein, sodass die 56 Minuten überhöht sein können.
- Für den zweiten Testmonat fehlen die Telemetriedaten von GitHub Copilot. Für Gemini Code Assist wurden keine vergleichbaren Telemetriedaten berichtet.
- Von 2.500 Lizenzen wurden 1.900 zugewiesen; 1.100 von 1.600 GitHub-Copilot-Lizenzen und 173 von 323 Gemini-Code-Assist-Lizenzen wurden eingelöst. Laut Pressemitteilung nahmen mehr als 1.000 Entwickler teil.
- Dem Bericht zufolge wurden die Personen zwischen der Anfangs-, Zwischen- und Abschlussumfrage nicht verfolgt, sodass Veränderungen im Zeitverlauf schwer zu beurteilen sind.
- Der Bericht verwendet die Zahl 39 % zweimal: Die Kernergebnisse besagen, dass 39 % der Nutzer vorgeschlagenen Code eingecheckt haben; im Haupttext heißt es, 39 % glaubten, ihre Produktivität würde sinken, wenn sie den Zugang verlören. Hier wird die Formulierung der Kernergebnisse verwendet.
- Laut Bericht wird der Test künftige Beschaffungen nicht beeinflussen. Die Pressemitteilung nennt das DSIT als Organisator des Tests; der Bericht wird vom GDS veröffentlicht. Als Einführungsdatum gilt der Startmonat des Tests.
Quellen
- AI coding assistant trial: UK public sector findings report
Government Digital Service, GOV.UK · 2025-09-12 · Behördliche Meldung · gov.uk
- Government coders using AI to each save 28 days a year and build more tech
GOV.UK (DSIT) · 2025-09-12 · Pressemitteilung · gov.uk
In eigenen Worten aus den oben genannten Quellen zusammengefasst. Einen Fehler entdeckt? Siehe Korrekturen.