Vi oppdaterer scoringsmetodene våre
Hos TestGorilla er vi opptatt av å kontinuerlig forbedre opplevelsen og brukervennligheten på plattformen vår. Vårt neste fokusområde er å styrke scoringsmetodene våre og gi deg flere valgmuligheter enn noen gang før. Denne artikkelen vil dekke endringene i scoringsmetodene som gjøres på plattformen, og etter hvert som vi ruller ut disse endringene til flere brukere, vil de eksisterende artiklene våre bli oppdatert for å inkludere de nye endringene. Denne artikkelen gjelder for alle nye og nåværende brukere av TestGorilla.
Ca. 8 minutters lesetid
I denne artikkelen
- Hva er det som endrer seg?
- Hva er persentiler?
- Hvorfor persentiler?
- Hvordan beregnes persentilscorer?
- Bruk av persentilscorer
- Vanlige spørsmål
Hva er det som endrer seg?
Fra og med 14. oktober og ut måneden lanserer vi persentilscorer i hele appen. Hvis du er en ny bruker kan du bruke persentilscoringen umiddelbart! Du vil se hvordan kandidatene rangeres i forhold til andre som har tatt den samme testen, noe som gir deg en tydeligere og mer nøyaktig måte å evaluere resultatene på.
I tillegg vil følgende oppdateringer bli gjort:
- Det finnes en ny bryter på hver vurderingsside som gjør det mulig å veksle mellom ulike score-beregninger. Persentil er standardinnstillingen, men du kan bytte til "Råscore" (tidligere "Prosent") hvis du foretrekker det.
- På resultatsiden til hver kandidat vises persentil- og råscorer side om side, sammen med en gausskurve som viser hvordan de står i forhold til andre som har tatt samme test.
- Begge score-beregningene presenteres side om side i PDF-rapporter, slik at det er enkelt å sammenligne dem.
- Kun den beregningen som er valgt på vurderingssiden er tilgjengelig i CSV- og Excel-eksportering.
Hva er persentiler?
Persentiler er et scoringsmål som hjelper deg å forstå kandidatenes prestasjoner sammenlignet med andre. En kandidat som for eksempel scorer på den 54- persentilen er en kandidat som gjorde det bedre på testen enn 54 % av de andre kandidatene i referansegruppetesten vår. Merk at dette ikke er det samme som at en kandidat scorer 54 % av de riktige svarene på en prøve.
Alternativet til persentilscoring er prosentscore for rette svar. For å holde oss til eksempelet vårt: 54 % rette svar betyr ganske enkelt at kandidaten har svart rett på et visst antall spørsmål. Det tar ikke hensyn til vanskelighetsgraden eller likheten mellom spørsmålene, noe som gjør det mye lettere å overse gode kandidater.
Med en prosentscore for rette svar er det ikke mulig å vite om de 54 % skyldes at kandidaten gjorde det bra på de viktige og vanskelige spørsmålene, eller om det skyldes at vedkommende fikk toppkarakter på alle de enkle spørsmålene som en svært dyktig kandidat kan finne distraherende. I tillegg kan det være vanskelig å sammenligne resultater på tvers av vurderinger med prosentscore for rette svar, ettersom tester av samme ferdighet i ulike vurderinger vil ha forskjellige spørsmål.
Persentilscoren er et enkelt tall som kombinerer informasjon om kandidatens svar og oppgavens vanskelighetsgrad. Dette gjør det enkelt å skille mellom gode, svært gode og fremragende kandidater. Det gjør det også mulig å sammenligne kandidater på tvers av ulike evalueringer, ettersom persentilscoren allerede tar hensyn til spørsmålenes og testens vanskelighetsgrad. Når en utvikler oppnår en score på 90-prosentilen på en Javascript-test, betyr det at vedkommende presterte bedre enn 90 % av de øvrige kandidatene som tok den.
Mens 90 % riktig på en vanskelig test kan bety mye, betyr ikke en score på 90 % på en lett test like mye. Et resultat i 90-prosentilen betyr alltid det samme - at en kandidat er bedre enn 90 % av de andre som har tatt testen. Dette gjør det mulig å rangere og sammenligne kandidater uten å tenke på de enkelte spørsmålene, forskjellene mellom dem og vanskelighetsgraden.
Hvorfor persentiler?
Det er flere viktige faktorer som ligger til grunn for at vi har lagt til persentilscorer:
- Konsekvent og pålitelig tolkning av resultatene
- Tar i betraktning spørsmålets vanskelighetsgrad
- Økt tillit til kandidatens ferdigheter
- Muliggjør fleksibilitet
For en mer inngående titt på vitenskapen og resonnementene bak hver enkelt faktor, sjekk ut vår blogg.
Vi mener at persentilscorer ikke bare er en ny måte å rangere kandidater på, men de er et kraftig verktøy som hjelper deg med å ta mer informerte og tryggere ansettelsesbeslutninger. Enten du evaluerer individuelle tester eller helhetlige vurderinger, gir persentiler et mer fullstendig bilde av kandidatens evner.
Persentilscorer gir dypere innsikt ved å ta hensyn til spøsrsmålenes vanskelighetsgrad, noe som gjør det enklere å sammenligne kandidater på tvers av tester, selv om de møter ulike utfordringsnivåer i testen. I motsetning til prosentscorer, som bare gjenspeiler riktige svar, viser persentilene hvor godt en kandidat presterer sammenlignet med andre.
|
Hvordan beregnes persentilscorer?
På testnivå tar vi hensyn til vanskelighetsgraden på de enkelte spørsmålene. Tenk på to kandidater: Den ene svarer kanskje riktig på de enkleste spørsmålene, mens den andre klarer å takle de vanskeligste. Systemet vårt justerer scorene deres deretter.
Dette gjøres ved å vekte de riktige svarene med parameterne som beskriver spørsmålenes vanskelighetsgrad. Spørsmålenes vanskelighetsgrad beregnes ved å se på prestasjonene i referanseutvalget og beregne hvor sannsynlig det er at den gjennomsnittlige kandidaten svarer riktig på oppgaven.
Et spørsmål med en vanskelighetsgrad på 0,8 er et spørsmål som 80 % av kandidatene klarer å svare riktig på, noe som betyr at det er enkelt. Et spørsmål med en vanskelighetsgrad på 0,2 er et vanskelig spørsmål, og bare 20 % av kandidatene vil kunne svare riktig på det. Denne informasjonen brukes deretter til å gi en høyere "score" til det vanskelige spørsmålet enn til det enkle.
Hvis du vil ha mer informasjon om hvordan persentilscorene beregnes, kan du lese bloggen vår.
Bruk av persentilscorer
Med denne oppdateringen er det flere måter du kan begynne å bruke persentilscorer i ansettelsesprosessen med en gang:
Veksling mellom score-beregningsmetoder Persentilscoring vil nå være standard scoringsmetode. Dette betyr at kandidatresultatene på oversiktssiden for vurderingen automatisk vil vises med persentilscoringsmetoden. Dette kan veksles tilbake til råscoren hvis det passer bedre til dine behov. |
||
Resultatsiden På resultatsiden for hver kandidat er det en gausskurve som markerer persentilen kandidaten befinner seg i sammenlignet med gjennomsnittet. Under gausskurven finner du testene som inngår i vurderingen, som viser både persentilen kandidaten befinner seg i for hver test, samt råscoren (prosentandelen) som de fikk.
|
||
PDF-rapporter Både persentilscorer og råscorer vil være synlige i PDF-rapporter. De vises side om side på både vurderings- og testnivå. |
||
CSV- og Excel-eksportering CSV- og Excel-eksportering viser én enkelt scoreberegning - avhengig av hva som er valgt i vurderingsoversikten. Dette kan være enten persentilscore eller råscore. |
||
PDF-rapporter med sammendrag av vurderingen Den valgte score-beregningen påvirker også hvordan PDF-rapporten med resultatsammendrag viser kandidatenes prestasjoner på tvers av vurderingen. Den valgte scoren vises i hele rapporten. Hvis du vil endre beregningen som vises, justerer du bare bryteren i vurderingsoversikten. |
Vanlige spørsmål
Kan jeg fortsatt se scorene for prosentandelen rette svar?Ja! Du kan fortsatt se prosentscoren for rette svar under alternativet "råscore", men standard scoring vil nå være persentilbasert.
Vil dette påvirke mine eksisterende vurderinger eller data?Dine tidligere vurderingsdata forblir intakte og vil nå være tilgjengelige under alternativet "råscore". Du vil også se persentilscoren i tidligere testresultater.
Hvordan beregnes persentilscorene?Persentilscorer tar hensyn til både antall riktige svar og vanskelighetsgraden på spørsmålene, og viser hvor godt en kandidat presterte sammenlignet med alle andre kandidater som tok den samme testen hosTestGorilla.
Disse scorene er avledet fra z-scorer, som forutsetter en standard normalfordeling (dvs. en gausskurve). Disse z-scorene beregnes ved hjelp av statistikk som er spesifikk for hvert spørsmål, og som justerer for spørsmålets vanskelighetsgrad. Z-scorene konverteres deretter til persentilscorer for å gjenspeile kandidatens rangering i forhold til andre. Du finner mer informasjon om hvordan beregningen fungerer på Vitenskapsbloggen .
Hva er forskjellen mellom en persentilscore og en prosent rett-score?
En persentilscore sammenligner en kandidats prestasjoner med prestasjonene til andre som har tatt den samme testen, og viser hvordan vedkommende ligger an i forhold til referansegruppen. En prosent rett-score gjenspeiler ganske enkelt antall spørsmål som er riktig besvart. Du kan se prosent rett (råscore) under alternativet "råscore".
Hvordan kan persentilscorer være til nytte i ansettelsesprosessen?
Persentilscorer gir en konsekvent måte å sammenligne kandidater på, fordi de viser hvor godt noen gjorde det sammenlignet med andre, uavhengig av testens vanskelighetsgrad. I motsetning til råscorer der 60 % på en lett test ikke er det samme som 60 % på en vanskelig test, gjenspeiler persentilene kandidatens prestasjoner i forhold til de andre kandidatene, noe som gjør sammenligninger rettferdige og standardiserte over tid.
Hvorfor skal jeg stole mer på persentiler enn prosentscorer?
Persentiler tar hensyn til prestasjonene til andre kandidater som har tatt samme test, og til vanskelighetsgraden på hvert spørsmål, noe som gir et tydeligere bilde av kandidatens ferdigheter i forhold til andre. En høy prosentandel på en enkel test er ikke like informativ som en høy persentilscore, som gjenspeiler kandidatens posisjon i en bred referansegruppe.
Hva er referansegruppen for persentilsscorer?
Referansegruppen består av alle kandidater som har tatt testen, slik at du kan sammenligne kandidatene dine med en global referansegruppe i stedet for bare de som befinner seg i den umiddelbare ansettelsespoolen.
Hvordan vektes vanskelige spørsmål annerledes enn lette spørsmål i persentilberegningen?
Systemet vårt justerer scoren basert på spørsmålenes vanskelighetsgrad. For eksempel vil det å svare riktig på et vanskelig spørsmål (som få kandidater klarer) bidra mer til den endelige scoren enn et enklere spørsmål.
Hvordan skal jeg tolke at en kandidat scorer i 90-prosentilen?
En kandidat i 90-persentilen presterte bedre enn 90 % av de andre TestGorilla-kandidatene som tok den samme testen. Dette viser deres relative styrke sammenlignet med en bredere talentpool.
Endrer kandidatenes persentilscorer seg over tid, når flere og flere kandidater tar testen ? Dataene som brukes til å beregne persentilscorer blir regelmessig gjennomgått og oppdatert over tid. Den nøyaktige frekvensen for disse oppdateringene bestemmes av flere faktorer, blant annet antall kandidater og hvor lang tid som har gått siden forrige oppdatering.
Hva om jeg ønsker å legge mer vekt på visse ferdigheter fremfor andre i vurderingen min?
Du kan tilordne ulike vekter til tester i en vurdering. Persentilscoren justeres for å gjenspeile den relative viktigheten du tillegger hvert ferdighetsområde, slik at du får en tilpasset totalscore.
Vil persentilresultatet endres hvis jeg legger til eller fjerner tester fra en vurdering?
Ja, den samlede persentilscoren beregnes på nytt basert på kombinasjonen av tester og vektingen av dem, slik at det gjenspeiler dine spesifikke ansettelsesbehov.
Er percentilpoeng tilgjengelige gjennom ATS-integrasjoner (søkersporingssystemer)?
Poengene som synkroniseres til ATS, vil være råpoeng. Siden det er mulig å bytte mellom vurderingsmetoder i resultatoversikten under en aktiv vurdering, må vi sikre at resultatene som deles med ATS er sammenlignbare mellom kandidater. Derfor kan det ikke være en blanding av råpoeng og percentilpoeng.
I fremtiden vil vi undersøke om enkelte ATS-integrasjoner kan motta både råpoeng og percentilpoeng, men foreløpig er dette ikke mulig for de fleste ATS-er.