Zo meet u of uw cv-screening echt beter wordt

Wat betekent betere cv-screening?#

Betere screening laat zich niet in één getal vangen. Een bruikbare evaluatie kijkt of kandidaten een beheerst proces doorlopen, of beoordelaars het werk aankunnen, of beslissingen consequent op zichtbaar bewijs steunen en of fouten tot een duidelijke actie leiden. Een snellere screening kan slechter zijn als daardoor ontbrekend bewijs, parsingfouten of door mensen teruggedraaide beslissingen uit beeld raken.

Acas adviseert een consistent proces op basis van de functieomschrijving en de functie-eisen, en CIPD beschrijft gestructureerde selectiemethoden en de wetenschappelijke onderbouwing ervan. Geen van beide bronnen biedt een universele scorecard voor elke functie. Het team moet nog steeds zelf bepalen wat het meet, en de noemer vastleggen.

De AI-verordening biedt het kader voor transparantie, menselijk toezicht, nauwkeurigheid, robuustheid en monitoring van systemen die eronder vallen. De ICO-audits van AI-tools voor werving beschrijven zorgen die bij specifieke onderzochte tools en werkwijzen zijn vastgesteld. Deze bronnen schrijven het werkblad hieronder niet voor en tonen niet aan dat een proces aan de regels voldoet of dat de maatstaven eerlijk of valide zijn.

Leg een nulmeting vast voordat u periodes vergelijkt#

Definieer één functie, één goedgekeurde criteriaversie, één afbakening van kandidaatbronnen en één beslisregel voor de screening. Skilltage-advies: gebruik als nulmeting de eerste 25 afgeronde beoordelingen of de eerste vier weken, afhankelijk van wat het langst duurt. Evalueer daarna elke vier weken. Laat 20% van het cohort onafhankelijk dubbel beoordelen, met 10 tot 30 kandidaten per periode. Zijn er minder dan 10 kandidaten, toon dan de afzonderlijke gevallen en trek geen conclusies over een trend.

Voeg wezenlijk verschillende functies, criteriaversies, talen of kandidaatbronnen niet samen in één percentage. Verandert een van die factoren, start dan een nieuwe deelgroep of vermeld duidelijk dat de vergelijking is onderbroken.

Uitkomstmaatstaf#

Doorstroom naar gesprek#

• Teller: kandidaten in het cohort met wie na de screening een gesprek is ingepland.
• Noemer: kandidaten in hetzelfde cohort voor wie een mens de screeningsbeslissing heeft afgerond.
• Cohort en periode: één functie, criteriaversie en bronafbakening, over een periode van vier weken.
• Kanttekening: de doorstroom hangt af van de kandidatenmix, de capaciteit voor gesprekken en de gekozen drempels; ze bewijst niet dat de screening goed is of dat u betere mensen aanneemt.
• Eigenaar: recruitmentmanager.
• Drempel: onderzoek een absolute verandering van 10 procentpunt ten opzichte van de nulmeting of elke wezenlijke wijziging in het cohort.
• Actie: bekijk criteria, bronnenmix, capaciteit en beslisnotities; verhoog of verlaag het streefpercentage niet automatisch.
• Volgende evaluatie: de volgende vierwekelijkse evaluatie, vastgelegd in het werkblad.

Procesmaatstaven#

Verwerkingstempo#

• Teller: door mensen afgeronde screeningsbeslissingen.
• Noemer: beoordelaarsuren die aan die beslissingen zijn besteed; leg ook het ruwe aantal beslissingen en de mediane doorlooptijd afzonderlijk vast.
• Cohort en periode: hetzelfde functiecohort en dezelfde periode van vier weken als bij de uitkomstmaatstaf.
• Kanttekening: een hoger tempo kan wijzen op minder grondige beoordeling, eenvoudigere kandidaten of betere voorbereiding; op zichzelf zegt het niets over kwaliteit.
• Eigenaar: verantwoordelijke voor het screeningsproces.
• Drempel: onderzoek een verandering van 20% of meer ten opzichte van de nulmeting, omhoog of omlaag.
• Actie: controleer een steekproef van beslissingen en foutgevallen voordat u de bezetting of workflow aanpast.
• Volgende evaluatie: de volgende vierwekelijkse evaluatie.

Verzoeken om verduidelijking#

• Teller: beoordeelde kandidaten die minstens één functiegerelateerd verzoek om verduidelijking kregen.
• Noemer: alle kandidaten in het cohort met een afgeronde screening.
• Cohort en periode: dezelfde functie en periode van vier weken; tel elke kandidaat één keer, ook als er meerdere vragen zijn gesteld.
• Kanttekening: om verduidelijking vragen kan een gezonde manier zijn om bewijs te verzamelen; minder verzoeken is niet automatisch beter.
• Eigenaar: hoofdbeoordelaar.
• Drempel: onderzoek een absolute verandering van 10 procentpunt of elke vraag die bij minstens drie kandidaten terugkomt.
• Actie: bepaal of het criterium, de sollicitatievraag, de vacaturetekst of de richtlijn voor beoordelaars moet worden herzien.
• Volgende evaluatie: de volgende vierwekelijkse evaluatie, of eerder na een herziening van een criterium.

Kwaliteitsmaatstaven#

Overeenstemming tussen beoordelaars#

• Teller: onafhankelijk dubbel beoordeelde kandidaten die van beide beoordelaars dezelfde eerste beoordelingsstatus kregen.
• Noemer: alle kandidaten die in de periode vóór overleg onafhankelijk dubbel zijn beoordeeld.
• Cohort en periode: de gestratificeerde steekproef van 20% voor de functie, met dezelfde criteriaversie; leg overeenstemming over de bewijsstatus apart vast.
• Kanttekening: overeenstemming bewijst niet dat een criterium relevant, eerlijk, rechtmatig of juist is.
• Eigenaar: verantwoordelijke voor kalibratie.
• Drempel: elk verschil van oordeel over een harde eis, of een daling van 10 procentpunt ten opzichte van de nulmeting.
• Actie: vergelijk het bewijs in de bron en de formulering, kalibreer de beoordelaars en leg elke goedgekeurde criteriumwijziging vast als nieuwe versie.
• Volgende evaluatie: direct na de kalibratie en opnieuw in de volgende vierwekelijkse steekproef.

Dekkingsgraad van het bewijs#

• Teller: criteriumbeoordelingen in de steekproef (één criterium voor één kandidaat) met herleidbaar bewijs uit de bron of een expliciete status: ontbreekt, onzeker, tegenstrijdig of analyse mislukt.
• Noemer: alle relevante criteriumbeoordelingen in de steekproef.
• Cohort en periode: alle criteria voor de dubbel beoordeelde steekproef in de periode van vier weken.
• Kanttekening: een vastgelegde status maakt de beoordeling herleidbaar, maar toont niet aan dat het bewijs volstaat of dat het criterium valide is.
• Eigenaar: verantwoordelijke voor de bewijsbeoordeling.
• Drempel: elk doorslaggevend criterium zonder herleidbare bron of status, of een totale dekkingsgraad onder 95%.
• Actie: haal de bron alsnog boven water, corrigeer de status of houd de beslissing aan voordat u op het resultaat vertrouwt.
• Volgende evaluatie: na herstel en in de volgende geplande steekproef.

Verschuiving in de interpretatie#

• Teller: gecontroleerde beslissingen die afwijken van de vastgelegde formulering van het criterium en de afgesproken interpretatie van het bewijs.
• Noemer: alle beslissingen die tegen precies die criteriaversie zijn gecontroleerd.
• Cohort en periode: de dubbel beoordeelde steekproef plus eventuele geëscaleerde gevallen in de periode van vier weken.
• Kanttekening: een gewijzigde interpretatie kan erop wijzen dat de functie echt is veranderd; pas de nulmeting niet stilletjes aan op een favoriete kandidaat.
• Eigenaar: hiring manager en recruitmentmanager samen.
• Drempel: elke verschuiving van de drempel tijdens een lopende screening, of een verschuiving in meer dan 10% van de gecontroleerde beslissingen.
• Actie: houd de screening aan, documenteer de reden, keur het criterium zo nodig goed en leg het vast als nieuwe versie, en begin daarna een nieuwe vergelijking onder die versie.
• Volgende evaluatie: voordat verder wordt gescreend met het gewijzigde criterium, en bij de volgende vierwekelijkse evaluatie.

Veiligheids- en controlemaatstaven#

Aandeel parsingfouten#

• Teller: ingediende documenten waarvan de parsing mislukte of waarin bij het handmatig terughalen van de bron een wezenlijke weglating werd gevonden.
• Noemer: alle documenten in het afgebakende screeningscohort; toon de statussen geblokkeerd, in de wachtrij, mislukt en klaar afzonderlijk.
• Cohort en periode: documenten voor de functie die in de periode van vier weken zijn ontvangen.
• Kanttekening: lay-out en taal beïnvloeden het aandeel; een fout betekent dat er invoer ontbreekt, niet dat er bewijs tegen de kandidaat is.
• Eigenaar: verantwoordelijke voor de instroom van cv's.
• Drempel: elke fout die een beslissing beïnvloedt zonder dat de bron is hersteld, of een aandeel dat minstens twee keer zo hoog is als bij de nulmeting.
• Actie: houd de betreffende beslissing aan, controleer het origineel, leg het herstel vast en escaleer terugkerende foutpatronen.
• Volgende evaluatie: na herstel en bij de volgende vierwekelijkse evaluatie.

Heropende of herziene beslissingen#

• Teller: kandidaten van wie de eerste vastgelegde afsluitende beoordelingsstatus later is heropend of gewijzigd.
• Noemer: kandidaten in het cohort met als eerste status ‘Op de shortlist’ of ‘Afgewezen’.
• Cohort en periode: beslissingen die voor het eerst in de periode van vier weken zijn afgesloten, gevolgd tot de volgende evaluatiedatum.
• Kanttekening: een herziening kan terecht zijn als er nieuw bewijs binnenkomt; de reden is belangrijker dan een zo laag mogelijk percentage.
• Eigenaar: recruitmentmanager.
• Drempel: elke herziening zonder benoemde reden en eigenaar, of een percentage boven 10%.
• Actie: deel de oorzaak in als nieuw bewijs, verschoven criterium, bronfout, beoordelaarsfout of proceswijziging en pak die oorzaak aan.
• Volgende evaluatie: bij het sluiten van de vacature en bij de volgende vierwekelijkse evaluatie.

Overrulen van toolsuggesties#

• Teller: gevallen in de steekproef waarin een beoordelaar een zichtbare suggestie van de tool afwees of aanpaste.
• Noemer: gevallen in de steekproef waarin zo'n suggestie echt aanwezig was; noteer anders ‘niet vastgelegd’.
• Cohort en periode: de dubbel beoordeelde steekproef in de periode van vier weken.
• Kanttekening: een hoog of laag percentage zegt op zichzelf niets over kwaliteit, en Skilltage biedt deze scorecard momenteel niet als analyticsdashboard aan.
• Eigenaar: verantwoordelijke voor menselijk toezicht.
• Drempel: elke keer overrulen zonder vastgelegde, onderbouwde reden, of een absolute verandering van 10 procentpunt ten opzichte van de nulmeting.
• Actie: bekijk de bron, de suggestie, de reden van de beoordelaar en het criterium; verbeter de workflow in plaats van op een bepaald percentage te sturen.
• Volgende evaluatie: na elke keer overrulen zonder onderbouwing en bij de volgende vierwekelijkse evaluatie.

Werkblad voor nulmeting en periodieke evaluatie#

Gebruik één rij per maatstaf. Noteer nooit een percentage zonder teller en noemer.

Rekenvoorbeeld#

Stel: de nulmeting beslaat vier weken en 40 afgeronde screenings. Het team noteert 10 ingeplande gesprekken (10/40), 8 kandidaten aan wie om verduidelijking is gevraagd (8/40), 10 gelijke eerste statussen bij 12 dubbele beoordelingen (10/12) en 188 expliciete bewijsstatussen bij 200 criteriumbeoordelingen (188/200). Daarnaast legt het team 3 documenten met een parsingfout of wezenlijke weglating vast van de 40 ontvangen documenten (3/40), 2 heropende beslissingen van de 34 eerste afsluitende statussen (2/34) en 4 keer overrulen bij 15 steekproefgevallen waarin een suggestie zichtbaar was (4/15).

Deze cijfers zijn een nulmeting, geen oordeel. Bij de volgende evaluatie vergelijkt de eigenaar appels met appels, past de vastgelegde drempels toe, verklaart gewijzigde noemers en legt de actie vast. Een totaalscore of gemiddelde mag een nul voor bronherstel of menselijke controle niet verbergen.

Wat kan Skilltage nu al zichtbaar maken?#

Skilltage-advies: koppel het werkblad aan uw werkelijke workflow, zonder te suggereren dat er een kant-en-klare analysemodule bestaat. Skilltage houdt het opstellen van eisen, de instroom van cv's, de beoordeling en de interacties met kandidaten gescheiden; toont de verwerkingsstatus van documenten; laat per eis het bewijs en de hiaten zien; laat de keuze van de beoordelingsstatus aan een mens over; en legt een beperkt spoor vast van menselijke en AI-acties. De huidige gebruiksregistratie gaat over productverbruik, zoals modeltokens, niet over de kwaliteitsscorecard hierboven. Het team moet deze maatstaven zelf buiten het product berekenen, interpreteren en beheren, tenzij er een aparte analysefunctie wordt geïmplementeerd en gevalideerd.

Beperkingen en volgende stap#

Deze scorecard kan niet aantonen dat het proces eerlijk, rechtmatig, valide of nauwkeurig is, of dat u betere mensen aanneemt. Kleine steekproeven schommelen, overeenstemming kan een slechte regel in stand houden, de doorstroom verandert met de kandidatenmix en vastgelegd bewijs kan nog steeds verkeerd worden geïnterpreteerd. Voor de gevolgen voor beschermde groepen en voor verplichtingen die per rechtsgebied verschillen, zijn een zorgvuldig ingerichte analyse en deskundig advies nodig.

Begin met het bepalen van grenzen voor menselijke controle bij AI-ondersteunde cv-screening. Gaat het om een producttest, leg de maatstaven dan vast in een omkeerbare pilot met AI-ondersteunde screening. Lopen de oordelen van beoordelaars uiteen, kalibreer dan de screeningscriteria opnieuw; mislukt het uitlezen van de bron, gebruik dan de handmatige terugvaloptie bij cv-parsing.