Pierwszy agent powinien dostać nudną robotę

Zapytajcie zarząd, od którego procesu powinien zacząć agent, a odpowiedzi rzadko będą skromne. Obsługa reklamacji od początku do końca. Zakupy. Prowadzenie lejka sprzedaży. Każda z tych rzeczy byłaby ważna, każda dobrze wygląda na slajdzie i każda jest złym pierwszym wyborem z tego samego powodu: nikt nie potrafi szybko i tanio sprawdzić, czy agent zrobił to dobrze.

Pierwszy agent, który naprawdę trafia na produkcję, jest zwykle nudny. To nie brak ambicji. Tak dostaje się zgodę na drugiego i trzeciego.

Dlaczego efektowny kandydat utyka

Nikt nie umie go sprawdzić. Jeśli ocena, czy agent dobrze obsłużył sprawę, zajmuje ekspertowi pół godziny, zestaw ewaluacyjny nigdy nie powstaje, poziom błędów nigdy nie jest znany, a komitet ryzyka nie ma czego zatwierdzić. Projekt zostaje pilotażem, bo nikt nie podpisze się pod liczbą, która nie istnieje.

Proces to w rzeczywistości kilka procesów. Szerokie zadania różni ludzie wykonują różnie, a właśnie w tych różnicach siedzi rozeznanie. Agent zbudowany na takim podłożu utrwala jedną wersję z dużą prędkością i zaskakuje wszystkich, którzy robili to inaczej.

Każda pomyłka jest droga. Szeroki zakres oznacza, że agent wcześnie dotyka pieniędzy, klientów i zobowiązań. Każda z tych rzeczy wymaga bramki zatwierdzania, a agent, przy którym prawie wszystko trzeba zatwierdzić, jest po prostu wolniejszą wersją pracy ręcznej.

Błędów nie da się zdebugować. Gdy coś pójdzie źle w szerokim zadaniu, przyczyna może leżeć wszędzie. Wąski agent myli się w sposób, który da się znaleźć, wyjaśnić i naprawić w tydzień.

Jak wygląda dobre pierwsze zadanie

Kryteria są nieefektowne, a większość z nich da się sprawdzić w arkuszu, zanim ktokolwiek porozmawia z dostawcą.

Duży wolumen. Powiedzmy setki spraw miesięcznie, a nie kilka. Wolumen płaci za budowę i daje dość dowodów, żeby później poszerzać granice.

Sprawdzalny wynik. Ktoś patrzy na rezultat i w minutę czy dwie mówi: dobrze albo źle. Dopasowanie faktury do zamówienia jest sprawdzalne. Rozstrzygnięcie sporu handlowego już nie.

Proces, który istnieje. Spisany albo przynajmniej wykonywany tak samo przez ludzi, którzy go robią. Jeśli dwie doświadczone osoby obsłużyłyby tę samą sprawę inaczej, najpierw to uzgodnijcie.

Działania odwracalne. Przygotowanie, klasyfikacja, szkic, przekierowanie i aktualizacja wewnętrznego rekordu idą przed czymkolwiek, co płaci, obiecuje albo kontaktuje się z klientem. Kroki nieodwracalne mogą przyjść później, za zatwierdzeniem człowieka.

Znany dzisiejszy koszt. Ile trwa jedna sprawa i kto ją obsługuje. Bez tego nikt później nie powie, czy cokolwiek się poprawiło.

Właściciel, który tego chce. Kierownik zespołu wykonującego tę pracę, który będzie czytał eskalacje. Nie sponsor trzy szczeble wyżej.

Macierz, którą warto narysować

Rozłóżcie kandydatów na dwóch osiach: ile spraw przychodzi w miesiącu i jak szybko człowiek sprawdzi wynik. Prawy górny róg to miejsce dla pierwszego agenta. W lewym dolnym zwykle siedzą pomysły flagowe — i tam lepiej najpierw naprawić proces, niż go automatyzować.

Infografika

Gdzie szukać pierwszego agenta

Łatwo sprawdzićTrudno sprawdzić

Wystarczy lista kontrolnaŁatwo sprawdzić, ale zbyt rzadko, żeby opłaciła się budowa.

Pierwszy agentWolumen za niego płaci, a sprawdzalność trzyma go w ryzach.

Zostawić ludziomRzadkie, oparte na osądzie i drogie, gdy pójdzie źle.

Najpierw zdefiniować wynikWarto automatyzować, gdy da się odróżnić dobrze od źle.

Mało przypadkówDużo przypadków

To ćwiczenie zajmuje właścicielowi procesu i analitykowi kilka dni, a nie cały program. Jeśli nie da się go zrobić, bo nikt nie zna wolumenów ani tego, ile dziś trwa jedna sprawa, to jest pierwsze ustalenie — i znacznie taniej odkryć je w arkuszu niż w połowie pilotażu.

Nudny agent zarabia na ciekawego

Wąski agent na produkcji daje rzeczy, których nie da slajd: zmierzony poziom błędów na prawdziwych sprawach, rejestr decyzji, zapis tego, ile trwają zatwierdzenia, i zespół, który z systemem już pożył. Tych dowodów potrzebuje komitet ryzyka, zanim zgodzi się na szerszy zakres — i tylko one czynią flagowy pomysł wiarygodnym później.

Buduje też coś mniej widocznego: ludzi, którzy umieją pracować obok agenta. Uczą się czytać eskalacje, wiedzą, kiedy odrzucić szkic, i co zanotować, gdy coś wygląda podejrzanie. Ta umiejętność przechodzi na kolejnego agenta. Utknięty flagowy pilotaż nikogo niczego nie uczy.

Start od efektownego zadania zwykle daje odwrotność: długi pilotaż, brak liczby i sceptyczną organizację w chwili, gdy ktoś proponuje drugą próbę.

Jak do tego podchodzimy

W inżynierii agentów AI pierwszym krokiem jest zawężenie jednego zadania — wąskiego, o dużym wolumenie i ze sprawdzalnym wynikiem — a gdy proces nie jest gotowy do automatyzacji, mówimy to wprost. Wąski pierwszy agent na produkcji za bramką zatwierdzania to zwykle kwestia tygodni. Poszerzanie jego granic trwa dłużej i powinno.