AI w Customer Service: pomoc konsultantowi pod kontrolą

Konsultant otrzymuje gotową odpowiedź z AI. Czy potrafi sprawdzić, że dotyczy właściwego produktu, aktualnej instrukcji i konkretnej sprawy klienta? Pomoc AI w Customer Service ma wartość wtedy, gdy skraca drogę do poprawnej decyzji. Płynny tekst nie jest jeszcze dowodem poprawności. Zaprojektuj sprawdzenie źródła jako część pracy, a nie dodatkową czynność wykonywaną tylko przy podejrzeniu błędu.

Co konsultant dostaje od Copilot

W funkcji Ask a question konsultant może zadawać pytania i korzystać z odpowiedzi przygotowanej na podstawie źródeł udostępnionych przez organizację. Dokumentacja opisuje odnośniki do źródeł oraz możliwość sprawdzenia treści przed przekazaniem jej klientowi. Microsoft wprost wskazuje odpowiedzialność za ocenę i edycję propozycji.

Nie traktuj tego jako automatycznego rozwiązania sprawy. Wyszukanie procedury, przygotowanie wiadomości i wykonanie operacji w systemie to odrębne działania. Odpowiedź opisująca zwrot płatności nie potwierdza, że zwrot został zatwierdzony lub wykonany.

Zakres funkcji zależy również od używanej aplikacji i konfiguracji. Dokumentacja Copilot w Customer Service rozróżnia interfejsy oraz dostępność poszczególnych możliwości. Dlatego instrukcję dla zespołu przygotuj na podstawie środowiska, w którym rzeczywiście pracują konsultanci.

Sprawdź materiał, zanim ocenisz odpowiedź

Wybierz jedną procedurę często wykorzystywaną w obsłudze. Ustal jej właściciela, wersję produktu i datę obowiązywania. Jeśli w bazie pozostają sprzeczne instrukcje, najpierw rozstrzygnij, która jest aktualna. Model nie powinien zastępować decyzji organizacji o obowiązujących zasadach.

Dokumentacja Microsoft wskazuje ograniczenie odczytywania tabel i obrazów w artykułach wiedzy przez opisywane funkcje Copilot. Nie zakładaj więc, że warunek zapisany wyłącznie na zrzucie ekranu lub w tabeli zostanie uwzględniony. Sprawdź zachowanie konkretnego źródła i zadania w twojej konfiguracji.

Kontrola materiału	Pytanie do właściciela wiedzy
Aktualność	Czy procedura nadal obowiązuje dla tego produktu?
Zakres	Czy dotyczy tego typu klienta i sprawy?
Kompletność	Czy warunki i wyjątki są opisane tekstowo?
Sprzeczność	Czy inne dostępne źródło podaje inną zasadę?
Odpowiedzialność	Kto zatwierdza poprawkę i wycofanie instrukcji?

Ta tabela jest propozycją roboczą do przeglądu wiedzy. Nie oznacza, że każdą instrukcję trzeba przepisać od początku. Zacznij od materiałów używanych w wybranym pilotażu i sprawdź, czy braki wpływają na wynik.

Trzy pytania przed wysłaniem wiadomości

Konsultant powinien ustalić, czy odpowiedź zgadza się ze źródłem, czy pasuje do przypadku oraz czy nie zawiera nieuprawnionej obietnicy. To trzy różne kontrole. Poprawny cytat z instrukcji dla innej wersji produktu nadal może prowadzić do błędnej odpowiedzi.

Przykładowo klient pyta o zmianę terminu usługi. Instrukcja opisuje możliwość zmiany pod określonymi warunkami, ale odpowiedź AI pomija jeden z nich. Sam odnośnik do właściwego dokumentu nie naprawia pominięcia. Trzeba sprawdzić treść warunku oraz dane sprawy.

Gdy brakuje informacji, kolejnym krokiem może być pytanie do klienta albo przekazanie sprawy osobie uprawnionej do decyzji. Nie wymuszaj kompletnej odpowiedzi za wszelką cenę. W pilotażu uznaj prawidłowe wskazanie braku danych za użyteczny wynik, jeżeli zapobiega błędnej deklaracji.

Modelowy test jakości odpowiedzi

Załóżmy syntetyczny zestaw 30 pytań. Dla 20 istnieje jednoznaczna odpowiedź w aktualnej wiedzy, pięć wymaga dodatkowych informacji od klienta, a pięć wykracza poza zakres materiałów. To przykładowy podział do ćwiczenia, nie dane z wdrożenia autora.

Dla każdej grupy ustal oczekiwane zachowanie przed uruchomieniem próby. W pierwszej oczekujesz odpowiedzi zgodnej ze źródłem. W drugiej potrzebujesz wskazania brakujących danych. W trzeciej liczy się rozpoznanie ograniczenia i właściwe przekazanie sprawy, zamiast wymyślonej procedury.

Jeśli 24 z 30 wyników spełnia wymagania, otrzymujesz 80% poprawnych zachowań w tej próbie. Nie zapisuj jednak wyłącznie średniej. Dwa błędy polegające na obietnicy wykonania niedozwolonej operacji mogą mieć większe znaczenie niż cztery drobne problemy językowe.

Typ wyniku	Decyzja w pilotażu
Poprawna odpowiedź i właściwe źródło	Sprawdź czas użycia i zrozumiałość
Poprawne wskazanie braku informacji	Oceń proponowane pytanie uzupełniające
Źródło właściwe, pominięty warunek	Zapisz błąd merytoryczny do poprawy
Obietnica bez podstawy	Wstrzymaj ten scenariusz do wyjaśnienia
Brak odpowiedzi mimo dobrej wiedzy	Sprawdź źródła, język i konfigurację

Mierz pracę potrzebną do uzyskania poprawnego wyniku

Zmierz czas wyszukania informacji, sprawdzenia odpowiedzi i wprowadzenia korekty. Dopiero suma tych czynności pozwala porównać pracę z AI z dotychczasową procedurą. Czas samego generowania tekstu pomija najważniejszą część odpowiedzialności konsultanta.

W modelowym porównaniu ręczne przygotowanie 30 odpowiedzi zajmuje po pięć minut, czyli 150 minut. Jeżeli praca z propozycją AI wraz z kontrolą zajmuje po trzy minuty, wynik wynosi 90 minut. Różnica to 60 minut przed uwzględnieniem utrzymania wiedzy i oceny jakości. Te liczby są wyłącznie przykładem kalkulacji.

Powtarzaj część pytań w osobnych sesjach. Microsoft opisuje możliwość różnic w odpowiedzi na podobne wejście, a historia rozmowy także wpływa na kontekst. Jednorazowo udana demonstracja nie potwierdza stabilnego zachowania przy kolejnych sprawach.

Zamknij obieg poprawiania błędów

Ustal, kto odbiera zgłoszenie błędnej odpowiedzi i jak klasyfikuje przyczynę. Nieaktualna instrukcja wymaga innej poprawki niż niewłaściwe uprawnienia lub brak danych klienta. Zachowaj przypadek testowy, żeby sprawdzić skuteczność zmiany.

Do ponownej próby dodaj także nowe pytania. Poprawienie jednego znanego przykładu nie wystarcza do rozszerzenia wdrożenia. Zapisz zakres dopuszczonego użycia oraz sytuacje, w których konsultant przechodzi do obsługi bez AI.

Zadbaj o prostą instrukcję dla nowych pracowników: jak otworzyć źródło, rozpoznać ograniczenie i zgłosić problem. Sprawdź ją na osobie, która nie uczestniczyła w konfiguracji. Jeśli wymaga ustnych wyjaśnień twórcy, dopracuj opis przed zwiększeniem grupy użytkowników.

Powiąż te zasady z odpowiedzialnością opisaną w systemie pracy firmy z AI. Następnie porównaj je z odbiorem AI w Dynamics 365 Contact Center, gdzie dochodzi między innymi jakość podsumowania rozmowy.

W poniedziałek wybierz jedną instrukcję i przygotuj pytanie zwykłe, pytanie o wyjątek oraz pytanie bez odpowiedzi w źródle. Poproś konsultanta o sprawdzenie wyniku i zapisanie decyzji. Od tych trzech prób zacznij poprawę procesu.