diskuterede jeg 7 måder at hurtigt vurdere it-specialisters kompetencer på, som kan anvendes før et stort, omfattende og tidskrævende teknisk interview. Dengang udtrykte jeg min sympati for tidsbegrænsede tests. I denne artikel vil jeg uddybe emnet omkring tests.
Tidsbegrænsede tests er et universelt værktøj, der er velegnet til at vurdere viden og praktiske færdigheder hos alle specialister på tværs af professioner.
Så opgaven er – vi har en strøm af ansøgninger fra kandidater til en stilling, vi skal hurtigt og enkelt få yderligere information om deres færdigheder og deres overensstemmelse med kravene til vores stilling. Vi ønsker, at sådan en kompetencevurdering ikke tager meget tid, er meget pålidelig og er bekvem for kandidaterne, så de er villige til at deltage i vores vurdering.
En god løsning på denne opgave er korte tests med tidsbegrænsning. Det er ikke starttidspunktet for testen, der er begrænset, men den tid, hvor kandidaten skal besvare spørgsmålene. Et typisk eksempel på en sådan test er eksamen i trafikregler, som er det første skridt i eksamen for at få et kørekort. På 20 minutter skal man besvare 20 spørgsmål.
Lidt teori
Jeg har talt om den hybride beslutningstagermodel "mennesket som en fornuftig", foreslået af Daniel Kahneman og hans kolleger. Ifølge dette koncept styres menneskelig adfærd af to interagerende beslutningssystemer. System 1 - hurtig og automatisk, sikrer kroppens sikkerhed og kræver ikke væsentlige anstrengelser for at danne en beslutning. Dette system trænes baseret på erfaringer, som individet får gennem livet. Nøjagtigheden af beslutninger fra dette system afhænger af personlig erfaring og træning, mens hastigheden afhænger af individets nervesystems egenskaber. System 2 - langsom, kræver anstrengelse og opmærksomhed. Det giver os komplekse ræsonneringer og logiske slutninger og dens funktion afslører menneskets intellektuelle potentiale. Men arbejdet i dette system forbruger hurtigt ressourcer - energi og opmærksomhed. Derfor træffes størstedelen af beslutningerne af System 1 - således bliver menneskelig adfærd meget mere effektiv. System 1 trænes i lang tid gennem de anstrengelser, der ydes af System 2, hvilket derefter giver hurtige automatiske reaktioner. System 2 er en universel problemløser, men arbejder langsomt og bliver hurtigt træt. Man kan "træne" System 2, men grænserne for mulige forbedringer er meget beskedne, og det er tidskrævende og kræver betydelige anstrengelser. Der er stor efterspørgsel i det menneskelige samfund efter "træning" af System 1. Når vi søger en person, der er erfaren inden for noget, betyder det, at hans System 1 er trænet til hurtigt at løse de nødvendige opgaver for os.
Den bedste måde at vurdere System 1's muligheder for en bestemt person inden for et specifikt vidensområde, anser jeg for at være tests, der er tidsbegrænsede. En test, der er udarbejdet én gang, muliggør hurtig vurdering og sammenligning mellem mange kandidater. Dette er et redskab til digitalisering af kontrol over viden og færdigheder.
Hvordan laver man en god test?
Opgaven for en veludformet test er at bestemme graden af træning af kandidatens System 1 vedrørende de nødvendige viden og færdigheder. For at lave en sådan test, skal man først bestemme emnerne og de nødvendige færdigheder, og derefter udarbejde spørgsmål og svarmuligheder.
Her er mine kriterier for forberedelse af en test, der nøjagtigt og kvalitativt vurderer kandidatens viden og færdigheder:
- Spørgsmålene og svarmulighederne skal være enkle. Enten kender du det rigtige svar, eller også gør du ikke. Testen bør ikke kræve komplekse overvejelser og beregninger.
- Udførelsen af testen bør være tidsbegrænset. Man kan endda begrænse tiden til at overveje hvert svar. Hvis kandidaten ikke kan beslutte sig inden for, lad os sige, 30 sekunder, så vil lange overvejelser næppe hjælpe. At finde det rigtige svar på 30 sekunder bør også være svært.
- Spørgsmålene skal handle om praksisser, der er reelt nødvendige i arbejdet – ikke abstrakte og teoretiske, men rent praktiske.
- Det er ønskeligt, at der er flere spørgsmål om hvert lille emne. Disse spørgsmål kan variere for forskellige kandidater (det svarer til forskellige versioner af prøver i skolen) eller alle være til stede i en længere version af testen.
- Antallet af spørgsmål og tiden til at gennemføre testen skal være strengt forbundet. Mål hvor lang tid det tager at læse spørgsmålene og svarmulighederne. Læg yderligere 10-20 sekunder til hver spørgsmål – det er tiden til at overveje og vælge et svar.
- Det er ønskeligt at teste testen på jeres medarbejdere og måle deres gennemførelsestid for at bestemme tilstrækkelig tid til, at kandidaterne kan gennemføre testen.
- Omfanget af testen afhænger af formålet med dens anvendelse. Til en første vurdering af kompetencer er 10-30 spørgsmål med tidsbegrænsning – 5-15 minutter – tilstrækkeligt efter min mening. Til en mere detaljeret diagnose af færdighederne er tests på 30-45 minutter med 50-100 spørgsmål passende.
Som eksempel – her er en test, som jeg udviklede og brugte for nylig ved udvælgelsen af kandidater til stillingen som IT-rekrutterer. Der blev afsat 6 minutter til at gennemføre testen, og tiden blev kontrolleret manuelt og på æreord. Alle de testede kandidater holdt sig inden for denne tid. Det tog mig 30 minutter at sammensætte testen.
Du kan tage en test, og efterfølgende kan du se, hvor du begik fejl. Da kandidaterne tog testen, blev fejlene ikke vist, og vi gennemgik fejlene senere under samtalerne med de kandidater, der havde mere end 3 fejl.
Værktøjer
I øjeblikket opretter jeg tests og spørgeskemaer ved hjælp af Google Forms – et enkelt, praktisk, alsidigt og gratis værktøj. Men jeg savner nogle funktioner, der ville gøre Google Forms til et godt værktøj til oprettelse af tests. Mine hovedklager til Google Forms er:
- Der mangler registrering og kontrol af den tid, der bruges både på hele testen og på hvert spørgsmål. Dette giver mere information om kandidatens adfærd under testen.
- Da Google Forms ikke er designet til tests som standard, er mange vigtige indstillinger for tests (f.eks. 'svar på spørgsmålet er obligatorisk' og 'bland svarene') noget, man skal 'klikke igennem' for hvert spørgsmål – hvilket kræver tid og opmærksomhed. For at hver spørgsmål kan stilles på en separat skærm, skal man oprette separate sektioner for hvert spørgsmål, hvilket også fører til mange ekstra klik.
- Hvis man skal lave en ny test som en kombination af fragmenter fra flere eksisterende tests (for eksempel at samle en test for fullstack udviklere fra delspørgsmål til frontend og backend på et bestemt sprog), må man duplikere spørgsmål manuelt. Der er ingen mulighed for at markere og kopiere flere sektioner eller spørgsmål til en anden formular.
Kollegaer, hvis I kender bedre løsninger til at oprette tests, så skriv venligst om dem i kommentarer.
Kilde: habr.com
