Agent lifecycle
Testowanie Agentforce: sprawdzaj zachowanie, nie tylko konfigurację.
Agent AI jest niedeterministyczny. Ten sam cel może prowadzić do różnych ścieżek rozumowania, akcji i odpowiedzi. Dlatego klasyczne testy Salesforce uzupełniamy testami rozmów, klasyfikacji, wiedzy, bezpieczeństwa i wyników biznesowych.
Krótka odpowiedź
Jak testować Agentforce przed wdrożeniem?
Testy powinny łączyć przypadki oczekiwane, wyjątki, próby nadużycia, różne role użytkowników i dane zbliżone do produkcyjnych. Agentforce Testing Center pozwala wykonywać testy na większą skalę, ale najważniejszy jest dobry zestaw scenariuszy i mierzalne kryteria. Po uruchomieniu potrzebne są tracing, analityka i regularna regresja.
Budujemy bibliotekę zachowań, które agent musi przejść.
Zaczynamy od celu procesu i ryzyka. Dla obsługi klienta testujemy prawidłowe odpowiedzi, grounding, cytowanie wiedzy, rozpoznanie intencji, eskalację i aktualizację sprawy. Dla sprzedaży dodatkowo kwalifikację, duplikaty, zgodę na komunikację i poprawne uzupełnianie CRM.
Każdy scenariusz ma oczekiwany temat, dozwolone akcje, kryteria odpowiedzi oraz warunek zatrzymania. Osobno tworzymy przypadki niejednoznaczne, brakujące dane, prompt injection, zmianę tematu, powtórzenie akcji i awarię integracji.
- Happy paths i realne rozmowy
- Edge cases i testy negatywne
- Role, języki i uprawnienia
- Akcje, integracje i skutki uboczne
Skala testów bez wykonywania ich ręcznie po każdej zmianie.
Agentforce Testing Center umożliwia generowanie lub importowanie przypadków, testowanie klasyfikacji, sekwencji akcji oraz jakości odpowiedzi. Wyniki pomagają znaleźć wzorce błędów, których pojedyncza rozmowa w builderze nie ujawni.
Nie traktujemy oceny modelu jako jedynej prawdy. Wyniki automatyczne kalibrujemy na przykładach ocenionych przez właścicieli procesu. Dla krytycznych akcji przejście testów rozmowy nie zastępuje kontroli danych i walidacji po stronie Flow, Apex lub API.
Po go-live mierzymy skuteczność agenta i procesu.
Agentforce Observability pozwala analizować sesje, tracing, nierozwiązane interakcje, luki wiedzy i metryki skuteczności. Łączymy je z KPI procesu: deflection, czas obsługi, poprawność aktualizacji, konwersja, eskalacje i koszt wykonanej pracy.
Monitoring prowadzi do kontrolowanej pętli poprawy. Priorytetyzujemy błędy według wpływu, poprawiamy instrukcje, wiedzę lub akcje, uruchamiamy regresję i dopiero potem publikujemy nową wersję.
Zakres architektoniczny
Co obejmuje plan jakości Agentforce
- 01Strategia testów i kryteria akceptacji
- 02Biblioteka scenariuszy oraz danych testowych
- 03Konfiguracja testów masowych
- 04Testy bezpieczeństwa i uprawnień
- 05Dashboard KPI oraz zużycia
- 06Proces regresji i ciągłej optymalizacji
FAQ
Pytania o Testing Center i monitoring
01Czy wystarczą testy w Agent Builderze?
Nie. Są dobre do szybkiej iteracji, ale produkcja wymaga powtarzalnego zestawu scenariuszy, testów masowych, UAT oraz sprawdzenia integracji i uprawnień.
02Ile przypadków testowych potrzeba?
Nie istnieje jedna liczba. Zaczynamy od najważniejszych intencji, akcji i ryzyk, a zestaw rozszerzamy do momentu, gdy kolejne testy nie odkrywają nowych klas błędów.
03Jak mierzyć jakość odpowiedzi?
Łączymy poprawność faktów, grounding, kompletność, zgodność z instrukcjami, ton, decyzję o eskalacji oraz rezultat procesu.
04Czy po wdrożeniu trzeba testować ponownie?
Tak. Zmiany danych, wiedzy, instrukcji, modeli i integracji mogą zmienić zachowanie, dlatego regresja jest elementem cyklu życia agenta.
Bezpłatna pre-konsultacja
Znajdźmy pierwszy agentowy use case.
30 minut z architektem Salesforce. Omówimy proces, dane i ryzyka. Po rozmowie dostaniesz konkretną rekomendację następnego kroku.
- Bez prezentacji sprzedażowej
- Wstępna ocena gotowości
- Rekomendacja: pilot, discovery lub jeszcze nie teraz
Powered by Tucario