W skrócie
- Firma
- HM Revenue & Customs (HMRC)Krajowy urząd skarbowy
- Wielkość
- Duże (1000+ pracowników) Pilotaż objął 3500 licencji w ogólnokrajowym urzędzie państwowym.
- Gdzie i kiedy
- Wielka Brytania. Wrzesień – grudzień 2024, publikacja w lipcu 2026.
- Kto podał liczby
- Oficjalny dokumentLiczby pochodzą z ewaluacji samego HMRC. Głównym źródłem była ankieta wśród 1364 użytkowników, czyli 45% osób, które dostały licencję losowo, uzupełniona danymi o użyciu, grupami fokusowymi i ćwiczeniem na zadaniach. Zaoszczędzony czas to szacunek pracowników, a nie zmierzony czas.
Co zrobili
HMRC, brytyjski urząd skarbowy, wypróbował Microsoft 365 Copilot w trzech etapach. Copilot to asystent AI w Outlooku, Teams, Wordzie, Excelu i PowerPoincie. W dwóch pierwszych etapach, w połowie 2024 roku, wzięło udział 300 pracowników, którzy zgłosili się na ochotnika.
Trzeci etap trwał od września do grudnia 2024 roku:
- 3000 licencji trafiło do losowo wybranych pracowników, spośród tych, którzy w pracy korzystają głównie z Microsoft Office. Rozdzielono je między działy urzędu proporcjonalnie do ich wielkości.
- Kolejne 500 licencji trafiło do wybranych pracowników. Byli to ochotnicy, którzy potrzebowali Copilota jako racjonalnego usprawnienia z powodu niepełnosprawności lub stanu zdrowia, albo osoby, które brały udział we wcześniejszych etapach.
Następnie HMRC przeprowadził ankietę wśród użytkowników, przeanalizował dane o użyciu, zorganizował grupy fokusowe z 35 osobami i ćwiczenie na zadaniach z 49 osobami.
Liczby
- 83% pracowników z licencją korzystało z niej w czasie pilotażu.
- 7,1 na 10: średnie zadowolenie.
- 61% powiedziało, że byłoby rozczarowanych utratą licencji.
- 2–3% tygodnia pracy: tyle według szacunków pracowników oszczędzali. HMRC przelicza to na około 60 minut tygodniowo na osobę pracującą na pełen etat.
- Około 20%: o tyle HMRC obniżył deklarowane oszczędności, bo nie każdy posiadacz licencji używał Copilota, a aktywni użytkownicy częściej odpowiadali na ankietę. HMRC nazywa wynik “a baseline estimate rather than a precise measure of impact” [„szacunkiem wyjściowym, a nie dokładnym pomiarem wpływu”].
- 46% pracowników, którzy nie korzystali ze swojej licencji, jako główny powód podało obawy o bezpieczeństwo i ochronę danych.
Analitycy HMRC szacują też, że do 50 000 licencji dałoby około £50 mln rocznie korzyści netto w wydajności. To prognoza, a nie zmierzony wynik.
Co ewaluacja zostawia otwarte
- Zaoszczędzony czas to szacunek pracowników. Raport nie porównuje zmierzonego czasu między posiadaczami licencji a pracownikami bez licencji.
- 500 wybranych pracowników nie opisano osobno. Ich wyników nie da się oddzielić od wyników osób wybranych losowo.
- Pracownicy prosili o więcej pomocy. Główne bariery poza bezpieczeństwem to potrzeba praktycznego szkolenia dopasowanego do ich pracy i czasu na naukę narzędzia.
Szerszy pilotaż
W całej administracji użytkownicy we wcześniejszym pilotażu z udziałem około 20 000 pracowników szacowali, że Copilot oszczędzał im 26 minut dziennie. HMRC opisuje swój szacunek jako ostrożniejszy. Pilotaż w Department for Business and Trade zmierzył czas niektórych zadań i nie znalazł dowodu wyższej wydajności.
Co pokazuje ten przypadek
- Losowy wybór użytkowników daje uczciwszy obraz. Ochotnicy to często najbardziej zapaleni użytkownicy. Losowy przydział w HMRC i obniżka o 20% działają przeciw temu skrzywieniu.
- Godzina tygodniowo to niewielka część tygodnia. To samo narzędzie, mierzone na różne sposoby, dało 26 minut dziennie w całej administracji i około godziny tygodniowo w HMRC.
- Zasada dotycząca danych wpływa na to, ile osób używa narzędzia. Prawie połowa pracowników, którzy nie używali Copilota, jako główny powód wskazała bezpieczeństwo lub prywatność.
Co ten przypadek mówi o praktykach
Praktyki, które firma zastosowała
- Zacznij od gotowej AI w oprogramowaniu, którego już używasz, zanim zbudujesz własną HMRC sprawdził asystenta wbudowanego w oprogramowanie Microsoft Office, którego jego pracownicy już używali, z 3000 licencji na trzy miesiące. Zrób najpierw · Nakład pracy: niski (dni, jedna osoba)
- Mierz czas zaoszczędzony na zadaniu względem pomiaru wyjściowego HMRC wybrał posiadaczy licencji losowo, zamiast brać tylko ochotników, i obniżył deklarowane oszczędności czasu o około 20%, bo na ankietę częściej odpowiadali aktywni użytkownicy. Zrób najpierw · Nakład pracy: niski (dni, jedna osoba)
- Zdecyduj, jakie dane mogą trafiać do jakich narzędzi AI W czasie pilotażu pracownicy mogli używać Copilota tylko do materiałów poniżej klauzuli bezpieczeństwa Official Sensitive. Zrób najpierw · Nakład pracy: niski (dni, jedna osoba)