Przetłumaczono z angielskiego oryginału. Liczby i źródła pozostają bez zmian. Przeczytaj angielski oryginał
HM Revenue and Customs
HMRC daje 3 000 losowo wybranym pracownikom Microsoft 365 Copilot i odnotowuje deklarowane oszczędności około 60 minut tygodniowo
HMRC przeprowadziło czteromiesięczną próbę Microsoft 365 Copilot, w której 3 000 licencji trafiło do losowo wybranych pracowników, a 500 kolejnych do ochotników. Ankietowani zadeklarowali oszczędność 2-3 % tygodnia pracy. HMRC traktuje tę liczbę jako szacunek bazowy, a nie dokładny pomiar.
Kluczowe liczby
Przepisane dokładnie ze źródeł. Skopiuj każdą liczbę wraz z przypisem.
około 60 minut tygodniowo
Ta sama deklarowana oszczędność wyrażona tygodniowo dla pełnoetatowego wymiaru pracy1
83 %
Pracownicy, którym przydzielono licencję i którzy z niej korzystali w trakcie próby1
Ile to kosztowało
Koszt, wielkość zespołu i harmonogram nie zostały ujawnione w źródłach.
Problem
HMRC, brytyjski urząd skarbowy, chciało wiedzieć, ile czasu asystent AI może zaoszczędzić pracownikom biurowym przy pisaniu tekstów, szukaniu dokumentów i pracy w Teams. Musiało też wiedzieć, ilu ludzi faktycznie będzie z niego korzystać i co powstrzymuje pozostałych.
Co zbudowano
HMRC wypróbowało Microsoft 365 Copilot, asystenta wbudowanego w Word, Outlook i Teams, który używa dużego modelu językowego, systemu AI czytającego i piszącego tekst. Próba miała trzy fazy. Dwie wczesne fazy w połowie 2024 r. objęły 300 pracowników, którzy zgłosili się sami. Faza III była najobszerniejsza.
Jak to zrobiono
Faza III trwała od września do grudnia 2024 r. HMRC losowo przydzieliło 3 000 licencji pracownikom na stanowiskach, które głównie korzystają z Microsoft Office, proporcjonalnie do wielkości grup biznesowych. Kolejne 500 licencji trafiło do ochotników, w tym osób, które potrzebowały ich jako racjonalnego dostosowania. Dowody pochodziły z ankiety z 1 364 odpowiedziami, danych o użyciu z panelu Microsoftu, 35 osób w grupach fokusowych i 49 w ćwiczeniu z zadaniami.
Wyniki
Uczestnicy ankiety zadeklarowali oszczędność 2-3 % tygodnia pracy, około 60 minut dla osoby pracującej na pełny etat. Łącznie 83 % pracowników z licencją z niej korzystało, a zadowolenie wyniosło średnio 7,1 na 10. Ponadto 61 % byłoby rozczarowanych utratą licencji. Najczęściej używane funkcje to pisanie w Wordzie (53 %) i współpraca w Teams (45 %). Raport mówi, że jego szacunki są ostrożniejsze niż liczba Government Digital Service, która pochodziła z innego układu badania.
Co warto powtórzyć
Warto losować, kto dostaje narzędzie, pomniejszać odpowiedzi z ankiety i publikować metodę razem z wynikiem.
Wszystkie zgłoszone liczby
| Miara | Liczba | Przypis |
|---|---|---|
| Zaoszczędzony czas, zgłoszony przez uczestników próby, jako odsetek ich tygodnia pracy | 2-3 %1 | |
| Ta sama deklarowana oszczędność wyrażona tygodniowo dla pełnoetatowego wymiaru pracy | około 60 minut tygodniowo1 | |
| Pracownicy, którym przydzielono licencję i którzy z niej korzystali w trakcie próby | 83 %1 | |
| Średnia ocena zadowolenia użytkowników | 7,1 na 101 | |
| Użytkownicy, którzy byliby rozczarowani utratą licencji | 61 %1 |
Wnioski dla Twojego projektu
Warto przydzielać licencje losowo, jeśli zależy nam na uczciwym obrazie. HMRC wylosowało 3 000 licencji spośród grup biznesowych, co zmniejsza obciążenie wynikające z dawania narzędzia tylko entuzjastom.
Warto pomniejszać deklarowane oszczędności. HMRC obniżyło deklarowane szacunki oszczędności czasu o około 20 %, bo nie każdy posiadacz licencji korzystał z Copilota, a respondenci częściej byli aktywnymi użytkownikami, i nazwało wynik wartością bazową.
Warto łączyć kilka pomiarów. HMRC połączyło ankietę, dane o użyciu, grupy fokusowe i ćwiczenie z zadaniami, zamiast polegać na jednym.
Warto ustalić zasady postępowania z danymi i szkolić ludzi. Główną przyczyną niekorzystania były obawy o bezpieczeństwo i prywatność, a użytkownicy prosili o praktyczne, dopasowane szkolenia.
Zastrzeżenia
- HMRC oceniało własną próbę. Oszczędności pochodzą z deklaracji, a raport mówi, że należy je traktować jako szacunek bazowy, a nie dokładny pomiar.
- Raport mówi, że deklarowane szacunki oszczędności czasu obniżono o około 20 %, ponieważ nie wszyscy posiadacze licencji korzystali z Copilota, a respondenci częściej byli aktywnymi użytkownikami. Strona nie mówi, czy liczba 2-3 % dotyczy stanu przed czy po tej obniżce.
- Ankieta miała 1 364 odpowiedzi, czyli 45 % losowo wybranych posiadaczy licencji, więc brak odpowiedzi może zniekształcać wyniki.
- Raport jest podsumowaniem jednej fazy trwającej oceny. Uczestnicy mogli używać Copilota tylko do materiałów poniżej klasyfikacji Official Sensitive.
- Strona cytuje też roczną korzyść szacowaną na około 50 milionów funtów przy szerszym przydziale licencji. To prognoza, a nie zmierzony wynik, i nie jest tu używana.
- Źródła podają nazwę produktu, Microsoft 365 Copilot, ale nie podają bazowego modelu językowego. Faza III to własna próba HMRC; HMRC uczestniczyło też w odrębnej próbie międzyresortowej prowadzonej przez Government Digital Service.
- Faza III trwała od września do grudnia 2024 r.; raport opublikowano w lipcu 2026 r.
Źródła
- Evaluating the Impact of Microsoft Copilot in HMRC
GOV.UK (HM Revenue and Customs) · 2026-07-09 · Publikacja naukowa · gov.uk
Streszczone własnymi słowami na podstawie powyższych źródeł. Zauważyłeś błąd? Zobacz sprostowania.