„Zawsze sprawdzam wyniki” brzmi rozsądnie. Równie dobrze mogłaby tak odpowiedzieć osoba, która po prostu czyta tekst drugi raz. Kiedy pracodawca pyta o pomyłkę AI, daj mu możliwość prześledzenia decyzji: co wzbudziło twoją wątpliwość, do czego porównałeś wynik i jak ta kontrola zmieniła dalszą pracę.
Najlepiej wybrać mały błąd, który umiesz wyjaśnić bez specjalistycznego słownictwa. Pomylony wariant produktu, wynik bez poprawnego mianownika czy informacja z dokumentu dotyczącego innego oddziału wystarczą. Nie trzeba odgadywać, jaki mechanizm wewnątrz modelu doprowadził do odpowiedzi. W rekrutacji do pracy w zawodzie cenniejsze jest to, czy błędne twierdzenie przeszłoby przez twoją kontrolę.
Wybierz przypadek z rozstrzygającym źródłem
Zapisz na kartce pierwszą sugestię AI. Obok wpisz źródło, które pozwala ją zweryfikować: tabelę transakcji, zdjęcie referencyjne, historię zamówienia, instrukcję w odpowiedniej wersji albo komunikat przedsiębiorstwa o znanej dacie. Ustal, czy źródło rzeczywiście rozstrzyga sprawę. Jedna prezentacja zapowiadająca inwestycję dowodzi planów. Potwierdzenia oddania inwestycji do użytku trzeba szukać osobno. Czasem najbardziej fachowy wniosek brzmi „w dostępnym materiale brakuje potwierdzenia”.
NIST w profilu ryzyka generatywnej AI opisuje możliwość pojawiania się przekonujących, błędnych treści. Dla twojej odpowiedzi praktyczne znaczenie ma niezależność kontroli. Ponowienie pytania temu samemu asystentowi może podsunąć trop. O potwierdzeniu twierdzenia decyduje jednak dokument, przeliczenie albo obserwowalna cecha produktu.
Przećwicz obie wersje odpowiedzi
Przykład redakcyjny z marketingu. Kampania A przyniosła 50 zamówień przy 1000 wizytach. Kampania B przyniosła 36 zamówień przy 400 wizytach. W tym ćwiczeniu firma pyta konkretnie, z której grupy wizyt większa część zakończyła się zamówieniem. Asystent wskazał A, powołując się na większą liczbę zamówień.
Wersja ogólna: „Model źle zinterpretował dane, więc sprawdziłam je w Excelu i poprawiłam rekomendację”.
Wersja sprawdzalna: „Zatrzymało mnie uzasadnienie. Asystent porównał same zamówienia, a liczba wizyt była różna. W eksporcie sprawdziłam, że obie kolumny dotyczą tego samego okresu i tego samego zdarzenia. Podzieliłam zamówienia przez wizyty. A miała 5%, B miała 9%. W odpowiedzi wskazałam B jako grupę o wyższym odsetku zamówień. Z decyzją o budżecie poczekałam, bo w materiale brakowało kosztu i wartości zamówień”.
W drugiej odpowiedzi można osobno sprawdzić sygnał ostrzegawczy, rachunek i granicę rekomendacji. To ważne również po poprawnym przeliczeniu. Wyższy obserwowany odsetek nie rozstrzyga jeszcze, która kampania pozostanie skuteczniejsza po zwiększeniu budżetu. Jeżeli rekruter zmieni pytanie na „która przyniosła więcej zamówień?”, poprawna odpowiedź zmienia się na A. Kontrolujesz znaczenie pytania, zanim ocenisz odpowiedź modelu.
Jak znaleźć podobną historię w swoim zawodzie?
| Obszar | Co może wzbudzić wątpliwość | Do czego wracasz | Co może się zmienić |
|---|---|---|---|
| Księgowość | Model łączy dwa rekordy, bo mają tę samą kwotę. | Kontrahent, numer faktury, identyfikator transakcji, dokument źródłowy. | Zostawiasz pozycję do wyjaśnienia. |
| Grafika | Zmiana tła naruszyła kształt uchwytu produktu. | Ten sam fragment zdjęcia referencyjnego w tej samej skali. | Przywracasz fragment ze źródła i ponownie oceniasz gotowy kadr. |
| Sprzedaż | W notatce „rozważamy wejście na rynek” zmieniło się w „otworzyli oddział”. | Datowany komunikat firmy i dokładne brzmienie czasownika. | Zmieniasz pierwsze pytanie do klienta lub odkładasz kontakt. |
| Obsługa klienta | Szkic obiecuje wypłatę po samym wpłynięciu wniosku. | Stan konkretnej sprawy i obowiązujące zasady postępowania. | Potwierdzasz przyjęcie wniosku i podajesz rzeczywisty następny krok. |
Wybierz jedną sytuację ze swojego doświadczenia i napisz jej własną wersję. Przy danych poufnych możesz opowiedzieć o metodzie, wykorzystując nowy materiał ćwiczeniowy. Podpisz wtedy odtworzenie. Jeśli dopiero zaczynasz i nie masz rzeczywistej pomyłki do opisania, wykonaj próbę na samodzielnie przygotowanym zestawie. Gdy model odpowie poprawnie, powiedz, jak to sprawdziłeś. Możesz też pokazać wykrycie celowo wprowadzonego błędu, nazywając go błędem testowym.
Czy to pomyłka modelu, problem ze źródłem czy źle postawione pytanie?
Załóżmy, że otrzymujesz dwa pliki, a w jednym kolumna „zamówienia” obejmuje złożone zamówienia, w drugim tylko opłacone. Po sprawdzeniu źródeł okazuje się, że asystent poprawnie policzył ilorazy, ale dane nie nadają się do porównania bez uzgodnienia definicji. W swojej historii powiedz wtedy wprost: „Znalazłem problem w porównywalności materiału, poprosiłem o spójny eksport i wstrzymałem rekomendację”. To pełnoprawny dowód kompetencji. Osoba, która potrafi odwołać pochopny zarzut błędu pod adresem modelu, pokazuje, że stosuje tę samą miarę do własnych wniosków.
Uważaj też na definicje z gotowych raportów. W przykładzie powyżej pytamy o odsetek wizyt zakończonych zamówieniem i zakładamy pojedyncze zamówienie na taką wizytę. W Google Ads współczynnik konwersji opiera się na konwersjach i interakcjach z reklamą. Przepisanie wskaźnika z platformy do opowieści o wizytach bez sprawdzenia mianownika mogłoby wprowadzić nową pomyłkę w czasie poprawiania pierwszej. Na rozmowie wystarczy nazwać, co w danym przykładzie liczysz i gdzie sprawdzono definicję.
W zawodach, gdzie nie ma jednego rozstrzygającego dokumentu, możesz użyć innego zakończenia historii. Grafik może pokazać dwie wersje i wyjaśnić, dlaczego poprosił właściciela produktu o potwierdzenie koloru. Handlowiec może zostawić pytanie otwarte, bo komunikaty dwóch spółek z tej samej grupy dotyczą różnych krajów. W obu przypadkach przydaje się jasna odpowiedź na pytanie „co zrobiłem do czasu wyjaśnienia?”. Wstrzymanie publikacji albo usunięcie niepotwierdzonego twierdzenia z wiadomości jest działaniem, którego skutki potrafisz wyjaśnić.
Co odpowiedzieć, jeśli pytają dalej?
„A skąd wiesz, że twój arkusz był poprawny?” to dobre pytanie. W przykładzie marketingowym odpowiedz, jaką definicję zdarzenia przyjmujesz oraz czy w liczniku i mianowniku stosujesz ten sam okres i podział kampanii. Możesz niezależnie odtworzyć wynik na kartce. W obsłudze klienta podobny sprawdzian to upewnienie się, że czytasz aktualną instrukcję dla odpowiedniego rynku. W grafice przyda się zgodność modelu i wariantu produktu. Drugi krok kontroli dobierz do rodzaju pomyłki.
„Co zmieniło się po tym zdarzeniu?” również zasługuje na odpowiedź proporcjonalną do faktów. Jeśli poprawiłeś jeden plik, napisz to. Jeśli dodałeś stały punkt do kontroli raportu, możesz pokazać jego treść. Gdy skutku jeszcze nie znasz, powiedz, jak go sprawdzisz. Metoda STAR pomaga ułożyć historię działania i rezultatu. Tutaj skróć wstęp i poświęć czas na źródło oraz decyzję.
Na koniec odłóż notatki i odpowiedz jednym ciągiem: „Podejrzenie pojawiło się, gdy… Sprawdziłem… Zmieniłem… Wciąż pozostawało niejasne…”. Jeśli jedno z tych miejsc zostaje puste, wybierz prostszy przykład z lepszym śladem. Mała pomyłka, którą można odtworzyć, mówi o twoim warsztacie więcej niż głośna historia bez rozstrzygającego dowodu.
Wróć do sekcji „Poradniki”