- Pilotaż
- Analiza dokumentów
Raport ze 120 dokumentów: praca analityka spadła z ośmiu do dwóch godzin
W pilotażu porównano dwa sposoby przygotowania czterostronicowego raportu informacyjnego ze 120 dokumentów. Praca człowieka zajęła osiem godzin w wariancie ręcznym i dwie godziny przy wykorzystaniu AI. Drugi wynik obejmował przygotowanie danych, kontrolę i poprawki. Narzędzie dodatkowo pracowało przez 20 minut.
Pilotaż. Rozwiązanie pozostało na etapie pilotażu i nie zostało wykorzystane do kolejnych raportów.
Problem
Czterostronicowy raport informacyjny ze 120 dokumentów wymagał 480 minut pracy człowieka: 90 minut przygotowania, 300 minut przeglądu i opracowania oraz 90 minut kontroli.
Próba
W wariancie wspomaganym AI człowiek przygotował materiały, sprawdził wynik i naniósł poprawki. Narzędzie pracowało dodatkowe 20 minut, a zakres i lista 40 wymaganych informacji pozostały te same.
Efekt
Praca człowieka wyniosła 120 minut. Pierwsza wersja zawierała 38 poprawnych pozycji z 40; po poprawkach raport spełniał wszystkie warunki, tak samo jak wariant ręczny.
- Wynik pilotażu
- Nakład pracy człowieka mniejszy o sześć godzin, czyli 75%. To wynik jednej próby porównawczej na tym samym zestawie materiałów.
Pomiar
| Miernik | Przed | Po | Zmiana |
|---|---|---|---|
| Przygotowanie materiałów | 90 min | 35 min | |
| Przegląd i opracowanie | 300 min | 20 min pracy narzędzia | |
| Kontrola i poprawki | 90 min | 85 min | |
| Praca człowieka łącznie | 480 min | 120 min | −75% |
Podstawa pomiaru: Jedna próba porównawcza na tym samym zamkniętym zestawie 120 dokumentów i tej samej liście 40 wymaganych informacji. Raporty przygotowały dwie osoby o zbliżonym doświadczeniu, żeby druga realizacja nie korzystała z pamięci pierwszej.
Zakres próby
Zakres ograniczono do zebrania i uporządkowania informacji o przedsiębiorstwie. Raport nie zawierał oceny finansowej, rekomendacji ani decyzji. W obu wariantach wykorzystano ten sam zamknięty zestaw dokumentów oraz tę samą listę 40 wymaganych informacji.
Pomiar czasu
Wariant ręczny obejmował 90 minut przygotowania materiałów, 300 minut przeglądu i opracowania raportu oraz 90 minut kontroli. Łącznie oznaczało to 480 minut pracy człowieka.
Wariant wspomagany AI obejmował 35 minut przygotowania materiałów, 70 minut kontroli wyniku i 15 minut poprawek. Człowiek pracował łącznie 120 minut. Narzędzie wykonywało zadanie przez dodatkowe 20 minut. W tym scenariuszu czynności odbywały się kolejno i bez przerw, więc cały przebieg trwał 140 minut.
Nakład pracy człowieka zmniejszył się o sześć godzin, czyli 75%. To wynik jednej porównawczej próby. Odnosił się do tego samego zestawu materiałów, przy czym raporty przygotowały dwie osoby o zbliżonym doświadczeniu, aby druga realizacja nie korzystała z pamięci pierwszej. Różnice między osobami nadal pozostawały ograniczeniem porównania.
Kontrola jakości
Kontroler sprawdził wszystkie 40 wymaganych informacji w każdym raporcie. Pierwsza wersja przygotowana z AI zawierała 38 poprawnych pozycji i dwie wymagające uzupełnienia. Po poprawkach raport spełniał wszystkie 40 warunków. Porównywany raport ręczny również po kontroli spełniał wszystkie wymagania. Czas kontroli i poprawek był uwzględniony w obu wariantach.
Co dalej
Właściciel otrzymał podstawę do kolejnej decyzji: powtórzyć próbę na większej liczbie raportów i sprawdzić działanie na dokumentach o różnej jakości. Pilotaż nie był jeszcze regularnym wdrożeniem.
- Wniosek
- Właściciel otrzymał podstawę do kolejnej decyzji: powtórzyć próbę na większej liczbie raportów i sprawdzić działanie na dokumentach o różnej jakości.