Mät kvaliteten i CV-granskningen

Vad innebär en bättre CV-granskning?

En bättre granskning går inte att fånga i ett enda tal. En användbar uppföljning frågar om kandidaterna går igenom en kontrollerad process, om granskarna hinner med arbetet, om besluten konsekvent bygger på synliga belägg och om fel fortfarande går att åtgärda. En snabbare granskning kan vara sämre om den döljer saknade belägg, misslyckade CV-tolkningar eller beslut som människor har fått ändra i efterhand.

Brittiska Acas vägledning rekommenderar en konsekvent process där sökande bedöms mot arbetsbeskrivningen och kravprofilen, och CIPD:s vägledning beskriver strukturerade urvalsmetoder och kunskapsunderlaget bakom dem. Ingen av källorna erbjuder ett universellt styrkort för alla roller. Teamet måste fortfarande själv bestämma vad det mäter och spara nämnaren.

EU:s AI-förordning är relevant bakgrund när det gäller transparens, mänsklig tillsyn, noggrannhet, robusthet och övervakning i de system som omfattas. ICO:s granskningar av rekrytering redovisar problem som hittats i vissa granskade rekryteringsverktyg och arbetssätt. Källorna föreskriver inte arbetsbladet nedan, bevisar inte att en process följer regelverket och visar inte att måtten är rättvisa eller giltiga.

Gör en nollmätning innan du jämför perioder

Bestäm en roll, en godkänd version av kriterierna, vilka ansökningskällor som ingår och en regel för urvalsbeslutet. Skilltages vägledning: använd de första 25 avslutade granskningarna eller fyra veckor, beroende på vilket som inträffar senast, som nollmätning. Följ sedan upp var fjärde vecka. Låt två personer granska 20 procent av kohorten oberoende av varandra, med 10–30 fall per period. Finns färre än 10 fall: visa de enskilda fallen och påstå inte att det finns en trend.

Slå inte ihop roller, kriterieversioner, språk eller ansökningskällor som skiljer sig väsentligt till en och samma andel. Om något av dem ändras: börja en ny delgrupp eller ange tydligt var jämförelsen bryts.

Resultatmått

Från granskning till intervju

Täljare: kandidater i kohorten som fått en intervju bokad efter granskningen.
Nämnare: kandidater i samma kohort som har fått ett avslutat urvalsbeslut av en människa.
Kohort och period: en roll, en kriterieversion, ett avgränsat urval av ansökningskällor och en period på fyra veckor.
Förbehåll: andelen som går vidare speglar vilka som söker, kapaciteten att rekrytera och var gränsen dras; den bevisar inte att granskningen håller hög kvalitet eller att anställningen blir bättre.
Ansvarig: rekryteringsansvarig.
Tröskel för uppföljning: utred en förändring på 10 procentenheter jämfört med nollmätningen, eller varje väsentlig förändring i kohorten.
Åtgärd: gå igenom kriterierna, fördelningen mellan källor, kapaciteten och beslutsunderlagen; höj eller sänk inte målet för andelen som går vidare per automatik.
Nästa uppföljning: nästa fyraveckorsgenomgång av styrkortet, noterad i arbetsbladet.

Processmått

Genomströmning i granskningen

Täljare: avslutade urvalsbeslut som fattats av människor.
Nämnare: de granskningstimmar som lagts på besluten; spara också antalet beslut och mediantiden för varje beslut separat.
Kohort och period: samma rollkohort och fyraveckorsperiod som för resultatmåttet.
Förbehåll: ett högre tempo kan bero på mindre noggrann granskning, enklare kandidater eller bättre förberedelser; det är inte ett kvalitetsresultat i sig.
Ansvarig: den som ansvarar för urvalsarbetet.
Tröskel för uppföljning: utred en förändring på minst 20 procent jämfört med nollmätningen, uppåt eller nedåt.
Åtgärd: gör stickprov bland beslutsunderlag och felfall innan du ändrar bemanning eller arbetsflöde.
Nästa uppföljning: nästa fyraveckorsgenomgång.

Hur ofta följdfrågor behövs

Täljare: granskade kandidater som fått minst en följdfråga om rollen.
Nämnare: alla kandidater i kohorten med en avslutad granskning.
Kohort och period: samma roll och fyraveckorsperiod; räkna varje kandidat en gång även om flera frågor har skickats.
Förbehåll: en följdfråga kan vara ett sunt sätt att samla in belägg; färre frågor är inte automatiskt bättre.
Ansvarig: huvudgranskare.
Tröskel för uppföljning: utred en förändring på 10 procentenheter, eller en fråga som återkommer hos minst tre kandidater.
Åtgärd: avgör om kriteriet, ansökningsfrågan, jobbannonsen eller instruktionerna till granskarna behöver ses över.
Nästa uppföljning: nästa fyraveckorsgenomgång, eller tidigare om ett kriterium har reviderats.

Kvalitetsmått

Samstämmighet mellan granskare

Täljare: fall som två personer granskat oberoende av varandra och som fått samma första granskningsstatus.
Nämnare: alla fall i perioden som två personer granskat oberoende av varandra innan de diskuterades.
Kohort och period: det stratifierade stickprovet på 20 procent för rollen, med samma kriterieversion; registrera samstämmigheten om beläggens status separat.
Förbehåll: samstämmighet bevisar inte att ett kriterium är relevant, rättvist, lagligt eller korrekt.
Ansvarig: den som ansvarar för kalibreringen.
Tröskel för uppföljning: varje oenighet om ett Ska-krav, eller en nedgång på 10 procentenheter från nollmätningen.
Åtgärd: jämför belägg och formuleringar i källorna, kalibrera granskarna och versionshantera varje godkänd ändring av kriterierna.
Nästa uppföljning: direkt efter kalibreringen och igen i nästa fyraveckorsstickprov.

Täckning av belägg

Täljare: kontroller i stickprovet, ett kriterium för en kandidat i taget, som har spårbara belägg i källan eller en uttrycklig status: saknas, osäker, motstridig eller misslyckad analys.
Nämnare: alla kontroller av kriterium mot kandidat som ingår i stickprovet.
Kohort och period: alla kriterier för det dubbelgranskade stickprovet under fyraveckorsperioden.
Förbehåll: en registrerad status gör granskningen mer spårbar; den bevisar inte att beläggen räcker eller att kriteriet är giltigt.
Ansvarig: den som ansvarar för granskningen av belägg.
Tröskel för uppföljning: varje avgörande kriterium utan spårbar källa eller status, eller en total täckning under 95 procent.
Åtgärd: ta fram källan, rätta statusen eller pausa beslutet innan du förlitar dig på resultatet.
Nästa uppföljning: efter åtgärden och i nästa planerade stickprov.

Kalibreringsdrift

Täljare: kontrollerade beslut som inte följer den låsta formuleringen av kriteriet och den överenskomna tolkningen av belägg.
Nämnare: alla beslut som kontrollerats mot exakt den kriterieversionen.
Kohort och period: det dubbelgranskade stickprovet plus alla eskalerade fall under fyraveckorsperioden.
Förbehåll: en ändrad tolkning kan visa att rollen faktiskt har förändrats; skriv inte tyst om nollmätningen så att den passar en favoritkandidat.
Ansvarig: rekryterande chef och rekryteringsansvarig gemensamt.
Tröskel för uppföljning: varje förskjutning av gränsen medan granskningen pågår, eller drift i mer än 10 procent av de kontrollerade fallen.
Åtgärd: pausa, dokumentera skälet, godkänn och versionshantera kriteriet om det är motiverat och börja sedan om jämförelsen med den nya versionen.
Nästa uppföljning: innan granskningen fortsätter med det ändrade kriteriet och vid nästa fyraveckorsgenomgång.

Säkerhets- och kontrollmått

Hur ofta CV-tolkningen misslyckas

Täljare: inskickade dokument där tolkningen misslyckades eller där väsentliga uppgifter visade sig saknas när källan kontrollerades manuellt.
Nämnare: alla dokument som kommer in i den definierade kohorten; visa statusarna Bearbetning stoppad, I kö, Misslyckades och Klar var för sig.
Kohort och period: dokument för rollen som kommit in under fyraveckorsperioden.
Förbehåll: dokumentets layout och språk påverkar andelen; ett misslyckande betyder att underlaget saknas, inte att det finns ett negativt belägg om kandidaten.
Ansvarig: den som ansvarar för mottagningen av ansökningar.
Tröskel för uppföljning: varje misslyckande som påverkar ett beslut utan att källan har tagits fram, eller en andel misslyckanden som är minst dubbelt så hög som i nollmätningen.
Åtgärd: pausa det berörda beslutet, gå igenom originalet, dokumentera hur källan togs fram och eskalera mönster som återkommer.
Nästa uppföljning: efter åtgärden och vid nästa fyraveckorsgenomgång.

Hur ofta beslut öppnas igen eller ändras

Täljare: kandidater vars första registrerade, avslutade granskningsstatus senare öppnades igen eller ändrades.
Nämnare: kandidater i kohorten som först fick statusen Går vidare eller Ej aktuell.
Kohort och period: beslut som först avslutades under fyraveckorsperioden, följda fram till nästa uppföljningsdatum.
Förbehåll: ett ändrat beslut kan vara rätt när nya belägg kommer in; skälet är viktigare än att hålla andelen låg.
Ansvarig: rekryteringsansvarig.
Tröskel för uppföljning: varje ändrat beslut utan angivet skäl och ansvarig, eller en andel över 10 procent.
Åtgärd: klassificera orsaken som nya belägg, drift i kriterierna, fel i källan, misstag av granskaren eller ändrad process, och åtgärda just den orsaken.
Nästa uppföljning: när rekryteringen avslutas och vid nästa fyraveckorsgenomgång av styrkortet.

Hur ofta granskaren överprövar verktyget

Täljare: fall i stickprovet där en granskare avstod från eller ändrade ett synligt förslag från verktyget.
Nämnare: fall i stickprovet där ett sådant förslag faktiskt fanns; notera ”ej registrerat” när det inte gick att se.
Kohort och period: det dubbelgranskade stickprovet under fyraveckorsperioden.
Förbehåll: en hög eller låg andel säger i sig ingenting om kvaliteten, och Skilltage erbjuder i dag inte det här styrkortet som en analyspanel.
Ansvarig: den som ansvarar för mänsklig tillsyn.
Tröskel för uppföljning: varje överprövning som saknar ett registrerat skäl grundat på belägg, eller en förändring på 10 procentenheter från nollmätningen.
Åtgärd: gå igenom källan, förslaget, granskarens motivering och kriteriet; rätta arbetsflödet i stället för att styra mot en viss andel överprövningar.
Nästa uppföljning: efter varje överprövning som saknar stöd och vid nästa fyraveckorsgenomgång.

Arbetsblad för nollmätning och regelbunden uppföljning

Använd en rad per mått. Ange aldrig en procentsats utan täljare och nämnare.

Fält	Vad du registrerar
Roll och kohort	Roll, kriterieversion, ansökningskällor, språk, regler för vad som ingår och inte
Period	Start- och slutdatum för nollmätningen eller uppföljningen
Mått	Måttets exakta namn och dimension: resultat, process, kvalitet eller säkerhet
Täljare och nämnare	Antal, andel när det är lämpligt och hur uppgifter som saknas hanteras
Jämförelse	Värdet i nollmätningen, nuvarande värde och eventuella brott i jämförbarheten
Förbehåll	Litet urval, ändrad sammansättning, fel i källan, ändrad kapacitet eller annat
Ansvarig	Namngiven person som ansvarar för uppföljning och åtgärder
Tröskel	Den utlösare för måttet som bestämts i förväg
Åtgärd och beslut	Utreda, ta fram källan, kalibrera, revidera, pausa eller behålla – med skäl
Nästa uppföljning	Datum samt vilken version av kriterier och kohort som ska användas

Räkneexempel

För en nollmätning på fyra veckor med 40 avslutade granskningar registrerar teamet 10 bokade intervjuer (10/40), 8 kandidater som fått följdfrågor (8/40), 10 samstämmiga första statusar av 12 dubbelgranskningar (10/12) och 188 uttryckliga statusar för belägg av 200 kontroller av kriterium mot kandidat (188/200). Teamet registrerar också 3 av 40 inkomna dokument där tolkningen misslyckades eller väsentliga uppgifter saknades (3/40), 2 återöppnade beslut av 34 som först avslutades (2/34) och 4 överprövningar av 15 fall i stickprovet där ett förslag var synligt (4/15).

Siffrorna är en nollmätning, inte ett omdöme. Vid nästa uppföljning jämför den ansvariga lika med lika, tillämpar de tröskelvärden som bestämts i förväg, förklarar förändringar i nämnarna och dokumenterar åtgärden. En total eller genomsnittlig poäng får inte dölja en nolla för att ta fram källor eller för mänsklig kontroll.

Vad kan Skilltage visa i dag?

Skilltages vägledning: koppla arbetsbladet till det faktiska arbetsflödet utan att påstå att det finns en färdig analysprodukt. Skilltage håller isär stegen Definiera, Ansökningar, Granskning och Kandidatkontakt, visar bearbetningsstatus för dokument, presenterar belägg och luckor krav för krav, låter en människa välja kandidatens granskningsstatus och sparar en begränsad aktivitetslogg över vad människor och AI har gjort. Den befintliga förbrukningsredovisningen gäller hur produkten används, till exempel modelltokens, inte styrkortet ovan. Teamet måste själv beräkna, tolka och ansvara för måtten utanför produkten, om inte en separat analysfunktion har byggts och validerats.

Begränsningar och nästa steg

Styrkortet kan inte bevisa rättvisa, regelefterlevnad, validitet, träffsäkerhet eller bättre anställningar. Små urval svänger, samstämmighet kan befästa en dålig regel, andelen som går vidare ändras med vilka som söker och registrerade belägg kan fortfarande feltolkas. Effekter utifrån diskrimineringsgrunderna och skyldigheter som gäller i det enskilda landet kräver en analys under ordnade former och kvalificerad rådgivning.

Börja med att sätta gränser för mänsklig kontroll i AI-stödd CV-granskning. Gäller det ett test av en produkt: definiera måtten i en AI-stödd pilot med en väg tillbaka. När granskarnas bedömningar glider isär: kalibrera om urvalskriterierna. När uppgifterna inte går att läsa ut ur källan: använd den manuella reservrutinen när CV-tolkningen misslyckas.

Mät om CV-granskningen faktiskt blir bättre