Przetłumaczono z angielskiego oryginału. Liczby i źródła pozostają bez zmian. Przeczytaj angielski oryginał
UK Government Digital Service
Pilotaż asystentów programowania w brytyjskim rządzie: użytkownicy szacują oszczędność 56 minut dziennie, zaakceptowano 15,8 % sugerowanego kodu
Brytyjski Government Digital Service udostępnił na trzy miesiące 2 500 licencji asystentów programowania opartych na AI inżynierom z ponad 50 organizacji sektora publicznego. Ankietowani szacowali, że oszczędzają 56 minut na dzień roboczy, ale telemetria GitHub Copilot pokazała, że zaakceptowano tylko 15,8 % sugerowanych linii kodu.
Kluczowe liczby
Przepisane dokładnie ze źródeł. Skopiuj każdą liczbę wraz z przypisem.
56
minut
Średnia oszczędność czasu na dzień roboczy, według szacunków uczestników pilotażu w ankiecie (424 odpowiedzi z 31 departamentów)1
58 %
Ankietowani, którzy powiedzieli, że nie chcieliby wracać do warunków pracy sprzed asystentów1
15,8 %
Zaakceptowane sugerowane linie kodu, telemetria GitHub Copilot1
Ile to kosztowało
Problem
Zespoły inżynierskie rządu budują i utrzymują oprogramowanie stojące za usługami publicznymi. Government Digital Service (GDS) chciał ustalić, czy komercyjne asystenty programowania oparte na AI zwiększą produktywność inżynierów w sektorze publicznym, ponieważ badań dotyczących sektora publicznego było niewiele.
Co zbudowano
GDS przeprowadził międzyresortowy pilotaż dwóch gotowych asystentów programowania: GitHub Copilot i Gemini Code Assist. Narzędzia te sugerują kod w trakcie pisania, odpowiadają na pytania w oknie czatu i pomagają w przeglądzie istniejącego kodu. Wewnętrzny przegląd komercyjny z lipca 2024 r. uznał je wówczas za najbardziej dojrzałe rozwiązania.
Jak to zrobiono
Pilotaż trwał trzy miesiące, od listopada 2024 do lutego 2025. GDS udostępnił 2 500 licencji w ponad 50 organizacjach i wspierał wdrożenie, angażowanie użytkowników oraz adopcję. Zebrał odpowiedzi z ankiet na początku, w połowie i na końcu, dane o użyciu z panelu GitHub Copilot, osiem wywiadów i historie sukcesu. Główna analiza opierała się na 424 odpowiedziach z ankiet z 31 departamentów.
Wyniki
Uczestnicy szacowali średnią oszczędność na 56 minut na dzień roboczy, przy czym największa część wynikała z tworzenia kodu i analizy. Spośród ankietowanych 58 % wolałoby nie wracać do pracy bez narzędzia, a zadowolenie wyniosło średnio 6,6 na 10.
Co poszło nie tak
Dane o użyciu były mniej korzystne niż ankieta. Użytkownicy GitHub Copilot zaakceptowali tylko 15,8 % sugerowanych linii kodu, co raport określa jako nieco mniej niż w raportach branżowych, a tylko 39 % użytkowników zgłosiło zatwierdzenie sugerowanego kodu. Komunikat prasowy mówi, że 15 % wygenerowanego kodu użyto bez zmian. Telemetrii brakowało przez miesiąc, w niektórych organizacjach licencje rozdano późno, a 8 % użytkowników nie zauważyło istotnej oszczędności czasu.
Co warto powtórzyć
Warto przeprowadzić pilotaż ograniczony w czasie, z centralnym zespołem wspierającym wdrożenie, i opublikować ograniczenia, tak jak zrobił to GDS. Warto zestawić to, co mówią użytkownicy, z tym, co rejestrują narzędzia, i nie opierać biznesplanu wyłącznie na deklarowanych minutach.
Wszystkie zgłoszone liczby
| Miara | Liczba | Przypis |
|---|---|---|
| Średnia oszczędność czasu na dzień roboczy, według szacunków uczestników pilotażu w ankiecie (424 odpowiedzi z 31 departamentów) | 56 minut1 | |
| Ankietowani, którzy powiedzieli, że nie chcieliby wracać do warunków pracy sprzed asystentów | 58 %1 | |
| Średnia ogólna ocena zadowolenia | 6,6 na 101 | |
| Zaakceptowane sugerowane linie kodu, telemetria GitHub Copilot | 15,8 %1 | |
| Użytkownicy, którzy zgłosili zatwierdzenie kodu zasugerowanego przez asystenta | 39 %1 | |
| Użytkownicy zgłaszający brak istotnej oszczędności czasu | 8 %1 | |
| Kod wygenerowany przez AI użyty bez żadnych zmian (komunikat prasowy rządu) | 15 %2 |
Wnioski dla Twojego projektu
Warto mierzyć użycie danymi systemowymi, a nie tylko ankietami. Deklarowana oszczędność 56 minut dziennie współistniała ze zmierzonym wskaźnikiem akceptacji sugerowanego kodu na poziomie 15,8 %.
Warto powiedzieć pracownikom, jak długo potrwa dostęp. Według raportu użytkownicy, którzy wiedzieli, że licencje zostaną cofnięte po pilotażu, mogli nie korzystać z narzędzi w pełni.
Warto zapewnić sponsora w każdej organizacji. Zaangażowanie zależało od lokalnych sponsorów, a część licencji trafiła do użytkowników dopiero po pierwszym miesiącu.
Warto unikać okna pilotażu obejmującego okres świąteczny. Środkowy miesiąc wypadł w święta, co zmniejszyło dostępność użytkowników i zespołów.
Warto pozostawić ludziom odpowiedzialność za wynik. Wytyczne rządu nakazywały programistom rozumieć i brać na siebie odpowiedzialność za każdy kod wytworzony przez asystenta.
Zastrzeżenia
- Raport opublikował sam Government Digital Service. Główna oszczędność czasu pochodzi z szacunków uczestników w krokach co 10 minut, a nie ze zmierzonej pracy.
- Raport stwierdza, że oszczędności w różnych zadaniach mogą się nakładać, a ankietowani mogli być zbyt optymistyczni, więc 56 minut może być zawyżone.
- Brakuje telemetrii GitHub Copilot za drugi miesiąc pilotażu. Dla Gemini Code Assist nie podano porównywalnej telemetrii.
- Z 2 500 licencji przydzielono 1 900; wykorzystano 1 100 z 1 600 licencji GitHub Copilot i 173 z 323 licencji Gemini Code Assist. Komunikat prasowy mówi, że w pilotażu wzięło udział ponad 1 000 programistów.
- Sam raport stwierdza, że osób nie śledzono między ankietami na początku, w środku i na końcu, więc trudno ocenić zmiany w czasie.
- Raport dwukrotnie używa liczby 39 %: kluczowe ustalenia mówią, że 39 % użytkowników zgłosiło zatwierdzenie sugerowanego kodu; treść mówi, że 39 % uważało, że ich produktywność spadnie, jeśli stracą dostęp. Tutaj użyto sformułowania z kluczowych ustaleń.
- Raport stwierdza, że pilotaż nie wpłynie na przyszłe zakupy. Komunikat prasowy wskazuje DSIT jako organizatora pilotażu; raport publikuje GDS. Data wdrożenia to miesiąc rozpoczęcia pilotażu.
Źródła
- AI coding assistant trial: UK public sector findings report
Government Digital Service, GOV.UK · 2025-09-12 · Dokument urzędowy · gov.uk
- Government coders using AI to each save 28 days a year and build more tech
GOV.UK (DSIT) · 2025-09-12 · Komunikat prasowy · gov.uk
Streszczone własnymi słowami na podstawie powyższych źródeł. Zauważyłeś błąd? Zobacz sprostowania.