Hvad skal en pilot med AI-understøttet CV-screening vise?
En pilot skal besvare ét afgrænset, praktisk spørgsmål: Kan teamet vurdere ansøgere til én reel type stilling med tydeligere dokumentation, mens alle handlinger fortsat udføres bevidst af et menneske? Den skal ikke forsøge at bevise, at et produkt overholder lovgivningen, er fri for bias eller er mere præcist i alle rekrutteringssammenhænge.
Skilltage-vejledning: Skriv først ned, hvor grænsen går mellem det, værktøjet gør, og det, mennesker beslutter. I piloten må værktøjet gerne organisere dokumentationen og synliggøre huller; en kvalificeret bedømmer har fortsat ansvaret for, om kandidater går videre eller får afslag, for status og for kandidatkommunikation.
Hvordan afgrænses piloten?
Vælg én stilling, ét ansættelsesteam og en kort observationsperiode. Udpeg en ansvarlig, to bedømmere, en kontaktperson for produktet og en eskalationsvej. Vælg et antal cases, der er stort nok til at rumme både almindelige og vanskelige tilfælde, men lille nok til, at I kan efterprøve hvert eneste resultat. Notér, hvilken version af kravprofilen I bruger, hvornår vurderingerne foregår, hvem der deltager, og hvad piloten udtrykkeligt ikke skal afgøre.
Stop piloten, hvis bedømmerne ikke kan efterprøve dokumentationen i kildedokumentet, hvis en uventet systemhandling ændrer en kandidats status, hvis det skjules, når et dokument ikke kan aflæses, eller hvis teamet ikke kan vende tilbage til sin hidtidige manuelle proces.
Hvilke CV'er skal med i testen?
Brug syntetiske eller udtrykkeligt godkendte dokumenter. Sammensæt en afbalanceret blanding af almindelige eksempler og bevidst valgte grænsetilfælde:
- uventet terminologi eller forskellige jobtitler for det samme job;
- manglende oplysninger og datoer, der modsiger hinanden;
- erfaring fra et beslægtet område, som kan være overførbar;
- et dokument, systemet ikke kan aflæse, eller som har et usædvanligt layout;
- tydelig dokumentation, svag dokumentation og oplysninger, der kræver afklaring.
Brug ikke en foretrukken ansøger fra en igangværende rekruttering som den eneste test. Formålet er at teste arbejdsgangen uden at sende et rigtigt menneske igennem et skjult eksperiment.
Hvad skal bedømmerne notere?
Notér for hver case kravet, den dokumentation, systemet viste, hvor i kildedokumentet den står, hullet eller usikkerheden, bedømmerens handling og begrundelsen, hvis bedømmeren fraviger AI-forslaget. Markér, om systemet ikke kunne aflæse dokumentet, læste for meget ind i oplysningerne eller udelod noget relevant. Sammenlign bedømmernes noter, efter at de har vurderet hver for sig, så den første selvsikre fortolkning ikke automatisk bliver den gældende.
Pilotens vurderingsskema
Giv hver dimension 0–2 point: 0 = ikke påvist, 1 = delvist påvist, 2 = påvist med et eksempel, der kan efterprøves.
| Dimension | Testspørgsmål | Det skal I gemme |
|---|---|---|
| Passer ind i arbejdsgangen | Kan bedømmerne gennemføre den aftalte vurdering af stillingen uden omveje? | Observation med tidtagning og problemlog |
| Synlig dokumentation | Peger hver vurdering på dokumentation fra kandidatens egne dokumenter? | Eksempler krav for krav |
| Fejlhåndtering | Er huller, modsigelser og dokumenter, der ikke kan aflæses, synlige? | Noter om fejlcases og skærmbilleder, hvis det er godkendt |
| Menneskelig korrektion | Kan en bedømmer rette eller afvise et AI-forslag, før status ændres? | Handlingslog og bedømmerens begrundelse |
| Kontrolpunkt for kommunikation | Er kandidatkommunikation stadig en bevidst menneskelig handling? | Skel mellem kladde, gennemsyn og afsendelse |
| Vej tilbage | Kan teamet stoppe og vende tilbage til den hidtidige proces? | Ansvarlig for tilbagerulning og dato |
Fastlæg en minimumsgrænse, før piloten starter. En høj samlet score må ikke skjule et nul på en dimension for menneskelig kontrol, som ikke er til forhandling.
Hvordan afsluttes piloten?
Hold et afslutningsmøde med den ansvarlige og bedømmerne. Vælg ét udfald: Stop, og vend tilbage til den hidtidige proces; gentag med en ændret afgrænsning eller kontrol; eller gå videre til en begrænset udrulning, som godkendes særskilt. Notér vurderingsskemaet, uafklarede risici, beslutninger og datoen for næste gennemgang. Hold observationer om produktet adskilt fra konklusioner om jura, regulering eller ligebehandling, som kræver en specialists vurdering.
Hvad viser Skilltages arbejdsgang?
Skilltage kan bruges som eksempel på en arbejdsgang: Godkendte krav danner grundlaget for vurderingen, en dokumentkø viser, hvor langt behandlingen er nået, gennemgangen af dokumentation kobler observationer til kildedokumenterne, bedømmerne registrerer via eksplicitte statusvalg, om en kandidat går videre, og kontrolpunkter for kommunikation sikrer, at beskeder til kandidater sendes bevidst. Det er eksempler fra produktet – ikke en erstatning for pilotens uafhængige test eller teamets eget ansvar for styring og kontrol.
Begrænsninger og næste skridt
En lille pilot kan ikke vise, hvordan løsningen fungerer på tværs af stillinger, sprog, ansøgergrupper eller fremtidige produktversioner. Den kan heller ikke afgøre juridiske forpligtelser eller bevise, at en proces er fair. Brug vurderingsskemaet til at beslutte, hvad I skal teste som det næste, og vurdér derefter rekrutteringsværktøjer ud fra en bredere leverandørtjekliste. Hvis piloten afslører et manglende krav eller uklar dokumentation, så gå tilbage til strukturerede ansættelseskrav, før I vurderer flere kandidater.
Kilder og skabelon
Kopiér denne afslutningsskabelon ind i teamets arbejdsnoter:
Stilling og version af kravprofilen:
Pilotansvarlig og bedømmere:
Testede cases, inkl. grænsetilfælde:
Score pr. dimension (0–2):
Observerede fejl og korrektioner:
Udløste stopkriterier:
Beslutning: stop / gentag / begrænset udrulning
Åbne spørgsmål, specialistvurdering og dato for næste gennemgang:
AI-forordningen er den relevante europæiske retlige ramme for visse anvendelser af AI i ansættelsessammenhæng, mens EDPB-udtalelse 28/2024 behandler databeskyttelsesaspekter ved AI-modeller. Læs den gældende tekst, og søg kvalificeret rådgivning om den konkrete anvendelse.