Co powinien wykazać pilotaż selekcji CV wspieranej przez AI?
Pilotaż powinien odpowiedzieć na jedno wąskie pytanie operacyjne: czy zespół potrafi ocenić kandydatów na jeden rzeczywisty typ stanowiska, mając czytelniejsze potwierdzenia w CV, a każde działanie wobec kandydata nadal świadomie wykonuje człowiek? Nie powinien próbować dowieść, że produkt jest zgodny z prawem, wolny od uprzedzeń ani dokładniejszy w każdej rekrutacji.
Wskazówki Skilltage: najpierw zapisz, gdzie przebiega granica między tym, co robi narzędzie, a tym, o czym decyduje człowiek. W pilotażu narzędzie może porządkować informacje z CV i wskazywać luki; za przejście kandydata do kolejnego etapu, odrzucenie, status i komunikację z kandydatem nadal odpowiada wykwalifikowana osoba oceniająca.
Jak określić zakres pilotażu?
Wybierz jedno stanowisko, jeden zespół rekrutacyjny i krótki okres obserwacji. Wyznacz właściciela pilotażu, dwie osoby oceniające, osobę kontaktową po stronie produktu i ścieżkę eskalacji. Dobierz próbę na tyle dużą, by obejmowała zwykłe i trudne przypadki, ale na tyle małą, by dało się sprawdzić każdy wynik. Zapisz wersję wymagań dla stanowiska, daty oceny, uczestników oraz to, czego pilotaż wprost nie rozstrzyga.
Przerwij pilotaż, jeśli osoby oceniające nie mogą sprawdzić potwierdzenia w dokumencie źródłowym, nieoczekiwane działanie systemu zmienia status kandydata, błędy odczytu dokumentów są ukrywane albo zespół nie może wrócić do dotychczasowego, ręcznego procesu.
Jakie CV powinny trafić do zestawu testowego?
Używaj dokumentów syntetycznych lub wyraźnie zatwierdzonych. Zadbaj o zrównoważony zestaw zwykłych przykładów i celowo dobranych przypadków granicznych:
- nietypowa terminologia lub różne nazwy tego samego stanowiska;
- brakujące informacje i sprzeczne daty;
- doświadczenie z pokrewnej dziedziny, które może się przydać na tym stanowisku;
- dokument, którego system nie potrafi odczytać lub który ma nietypowy układ;
- wyraźne potwierdzenie, słabe potwierdzenie i informacje wymagające wyjaśnienia.
Nie testuj wyłącznie na jednym, upatrzonym kandydacie z bieżącej rekrutacji. Celem jest sprawdzenie procesu bez poddawania realnej osoby ukrytemu eksperymentowi.
Co powinny zapisywać osoby oceniające?
Przy każdym przypadku zapisz wymaganie, pokazane potwierdzenie, jego miejsce w dokumencie źródłowym, lukę lub niepewność, działanie osoby oceniającej oraz uzasadnienie, jeśli odstąpiła od sugestii AI. Zaznacz, czy system nie odczytał dokumentu, nadinterpretował informacje albo pominął coś istotnego. Porównaj notatki dopiero po niezależnych ocenach, aby pierwsza pewna siebie interpretacja nie stała się domyślną.
Karta oceny pilotażu
Oceń każdy wymiar w skali 0–2: 0 = nie wykazano, 1 = wykazano częściowo, 2 = wykazano na przykładzie, który można sprawdzić.
| Wymiar | Pytanie testowe | Co zachować |
|---|---|---|
| Dopasowanie do procesu | Czy osoby oceniające kończą uzgodnioną ocenę dla stanowiska bez obejść? | Obserwacja z pomiarem czasu i rejestr problemów |
| Widoczne potwierdzenia | Czy każda ocena wskazuje potwierdzenie w dokumentach dostarczonych przez kandydata? | Przykłady dla każdego wymagania |
| Obsługa błędów | Czy braki, sprzeczności i nieodczytane dokumenty są widoczne? | Notatki o przypadkach błędów i zrzuty ekranu, jeśli zatwierdzono |
| Korekta przez człowieka | Czy osoba oceniająca może poprawić lub odrzucić sugestię AI, zanim zmieni się status? | Rejestr działań i uzasadnienie osoby oceniającej |
| Kontrola komunikacji | Czy komunikacja z kandydatem pozostaje świadomym działaniem człowieka? | Rozdział etapów: szkic, sprawdzenie, wysyłka |
| Droga odwrotu | Czy zespół może przerwać pilotaż i wrócić do dotychczasowego procesu? | Osoba odpowiedzialna za powrót i termin |
Ustal próg minimalny przed startem pilotażu. Wysoki wynik łączny nie może przesłonić zera w wymiarze kontroli człowieka, który nie podlega negocjacjom.
Jak zakończyć pilotaż?
Zorganizuj spotkanie podsumowujące z właścicielem i osobami oceniającymi. Wybierz jeden wariant: przerwać pilotaż i wrócić do dotychczasowego procesu; powtórzyć go ze zmienionym zakresem lub mechanizmem kontroli; albo przejść do ograniczonego wdrożenia, zatwierdzonego osobną decyzją. Zapisz kartę oceny, nierozwiązane ryzyka, decyzje i termin kolejnego przeglądu. Obserwacje dotyczące produktu oddziel od wniosków prawnych, regulacyjnych i dotyczących równego traktowania, które wymagają oceny specjalisty.
Co ilustruje proces w Skilltage?
Skilltage może posłużyć jako przykładowy proces: zatwierdzone wymagania wyznaczają podstawę oceny, kolejka dokumentów pokazuje stan przetwarzania, przegląd potwierdzeń łączy obserwacje z dokumentami źródłowymi, osoby oceniające oznaczają przejście kandydata do kolejnego etapu za pomocą wyraźnych ustawień statusu, a punkty kontrolne komunikacji sprawiają, że wiadomości do kandydatów są wysyłane świadomie. To przykłady z produktu, a nie zastępstwo dla niezależnego testu w ramach pilotażu ani dla odpowiedzialności zespołu za nadzór nad procesem.
Ograniczenia i następny krok
Mały pilotaż nie pozwala ocenić działania narzędzia dla innych stanowisk, języków, grup kandydatów ani przyszłych wersji produktu. Nie rozstrzyga też obowiązków prawnych ani nie dowodzi, że proces jest sprawiedliwy. Na podstawie karty oceny zdecyduj, co testować dalej, a następnie oceń narzędzia rekrutacyjne według szerszej checklisty dla dostawców. Jeśli pilotaż ujawni brakujące wymaganie lub niejasne potwierdzenia, wróć do ustrukturyzowanych wymagań rekrutacyjnych, zanim zaczniesz oceniać kolejnych kandydatów.
Źródła i szablon
Skopiuj ten szablon podsumowania do roboczych notatek zespołu:
Stanowisko i wersja wymagań:
Właściciel pilotażu i osoby oceniające:
Przetestowane przypadki, w tym graniczne:
Ocena w każdym wymiarze (0–2):
Zaobserwowane błędy i korekty:
Warunki przerwania, które wystąpiły:
Decyzja: przerwanie / powtórzenie / ograniczone wdrożenie
Otwarte pytania, ocena specjalisty i termin kolejnego przeglądu:
Akt w sprawie sztucznej inteligencji (AI Act) wyznacza europejskie ramy prawne dla niektórych zastosowań AI w zatrudnieniu, a opinia EROD 28/2024 omawia aspekty ochrony danych w modelach AI. W przypadku konkretnego wdrożenia sprawdź aktualny tekst przepisów i skonsultuj się z wykwalifikowanym doradcą.