Ik heb gekeken naar 7 manieren om snel de competenties van IT-specialisten te testen, die kunnen worden toegepast voordat een groot, omvangrijk en tijdrovend technisch interview wordt afgenomen. Vervolgens betuigde ik mijn sympathie voor in de tijd beperkte tests. In dit artikel ga ik dieper in op het onderwerp testen.
Tijdgebonden tests zijn een universeel hulpmiddel dat zeer geschikt is voor het testen van de kennis en praktische vaardigheden van elke specialist in welk beroep dan ook.
De taak is dus: we hebben een stroom reacties van kandidaten op een vacature, we moeten snel en gemakkelijk aanvullende informatie verkrijgen over de vaardigheden van de kandidaten en hun naleving van de vereisten van onze vacature. We willen dat een dergelijke verificatie van de competenties van kandidaten niet veel van onze tijd in beslag neemt, zeer betrouwbaar is en gemakkelijk is voor kandidaten, zodat zij ermee instemmen onze verificatie te ondergaan.
Een goede oplossing voor dit probleem zijn korte tests die in de tijd beperkt zijn. Niet het moment waarop de toets begint is beperkt, maar de tijd waarin de kandidaat de vragen moet beantwoorden. Een typisch voorbeeld van zo’n toets is de verkeersregelstoets, de eerste fase van het examen voor het verkrijgen van een rijbewijs. Je moet 20 vragen beantwoorden in 20 minuten.
Een beetje theorie
Ik sprak over het hybride model van Homo sapiens-besluitvorming, voorgesteld door Daniel Kahneman en zijn collega's. Volgens dit concept wordt menselijk gedrag bepaald door twee op elkaar inwerkende besluitvormingssystemen. Systeem 1 is snel en automatisch, waarborgt de veiligheid van het lichaam en vergt geen grote inspanning om een oplossing te formuleren. Dit systeem leert op basis van de ervaringen die iemand gedurende zijn hele leven opdoet. De nauwkeurigheid van de beslissingen van dit systeem hangt af van persoonlijke ervaring en training, en de snelheid hangt af van de kenmerken van het zenuwstelsel van het individu. Systeem 2 is langzaam en vereist inspanning en concentratie. Ze biedt ons complexe redeneringen en logische gevolgtrekkingen, haar werk onthult het potentieel van menselijke intelligentie. De werking van dit systeem verbruikt echter intensief hulpbronnen: energie en aandacht. Daarom worden de meeste beslissingen genomen door Systeem 1 – dit is hoe menselijk gedrag veel effectiever wordt. Systeem 1 heeft veel tijd nodig om te leren door de inspanningen van Systeem 2, maar geeft daarna snelle automatische reacties. Systeem 2 is een veelzijdige probleemoplosser, maar het is traag en wordt snel moe. Het is mogelijk om Systeem 2 “op te pompen”, maar de grenzen van mogelijke verbeteringen zijn zeer bescheiden en het kost veel tijd en vergt grote inspanning. Er is veel vraag naar het “upgraden” van Systeem 1 in de menselijke samenleving. Als we iemand zoeken die ergens ervaring mee heeft, betekent dit dat zijn Systeem 1 is getraind om snel de problemen op te lossen die we nodig hebben.
Ik beschouw in de tijd beperkte tests als de beste manier om de capaciteiten van Systeem 1 van een specifieke persoon op een bepaald kennisgebied te beoordelen. Eenmaal voltooid, kunt u met de test snel een groot aantal kandidaten beoordelen en vergelijken. Dit is een instrument om de beheersing van kennis en vaardigheden te digitaliseren.
Hoe maak je een goede test?
Het doel van een goed ingerichte toets is om vast te stellen in welke mate een kandidaat in Systeem 1 is opgeleid voor de kennis en vaardigheden die jij nodig hebt. Om zo'n test te maken, moet u eerst beslissen over de onderwerpen en vereiste vaardigheden en vervolgens vragen en antwoordopties maken.
Hier zijn dus mijn criteria voor het voorbereiden van een test die de kennis en vaardigheden van de kandidaat nauwkeurig en efficiënt beoordeelt:
- Vragen en antwoordmogelijkheden moeten eenvoudig zijn. Je weet het juiste antwoord, of je weet het niet. U mag de noodzaak van complexe redeneringen en berekeningen niet in de test meenemen.
- De test moet binnen een bepaalde tijd worden afgerond. U kunt zelfs de tijd beperken die u over elk antwoord nadenkt. Als een kandidaat niet binnen bijvoorbeeld 30 seconden kan beslissen over een antwoord, is het onwaarschijnlijk dat lang overleg hem zal helpen. Het moet ook lastig zijn om in 30 seconden het juiste antwoord te Googlen.
- Vragen moeten gaan over praktijken die echt nodig zijn in het werk – niet abstract en theoretisch, maar puur praktisch.
- Het is raadzaam om voor elk klein onderwerp meerdere vragen te stellen. Deze vragen kunnen per kandidaat verschillen (dit is vergelijkbaar met verschillende versies van toetsen op school) of allemaal aanwezig zijn in een langere versie van de toets.
- Het aantal vragen en de tijd die nodig is om de test te voltooien, moeten strikt aan elkaar gekoppeld zijn. Meet hoe lang het duurt om de vragen en antwoordmogelijkheden te lezen. Voeg voor elke vraag 10-20 seconden toe aan deze tijd - dit is tijd om na te denken en een antwoord te kiezen.
- Het is raadzaam om de test uit te proberen bij uw medewerkers en hun doorlooptijd vast te leggen, zodat u kunt bepalen hoeveel tijd de kandidaten nodig hebben om de test te voltooien.
- De omvang van de test hangt af van het doel van het gebruik ervan. Voor de initiële beoordeling van competenties zijn naar mijn mening 10-30 vragen met een tijdslimiet van 5-15 minuten voldoende. Voor een meer gedetailleerde diagnostiek van vaardigheden zijn tests van 30-45 minuten en met 50-100 vragen geschikt.
Als voorbeeld is hier een test die ik onlangs heb ontwikkeld en gebruikt bij het selecteren van kandidaten voor een IT-recruiterpositie. Er werden zes minuten uitgetrokken voor het voltooien van de test; de tijd werd handmatig en voorwaardelijk gecontroleerd. Alle geteste kandidaten ontmoetten elkaar deze keer. Het kostte me 6 minuten om de test samen te stellen.
Je kunt de test doen en aan het einde kun je zien waar je een fout hebt gemaakt. Toen kandidaten deze test deden, kregen ze geen fouten te zien; we hebben de fouten later uitgezocht tijdens interviews met kandidaten die niet meer dan 3 fouten maakten.
Gereedschap
Nu maak ik tests en enquêtes met Google Forms - het is een eenvoudige, handige, veelzijdige en gratis tool. Ik mis echter enige functionaliteit om Google Forms een goed hulpmiddel te noemen voor het maken van tests. Mijn voornaamste klachten over Google Formulieren:
- Er is geen boekhouding en controle over de tijd die zowel aan de hele toets als aan elke vraag wordt besteed. Dit geeft meer informatie over het gedrag van de kandidaat tijdens de toets.
- Omdat Google Forms niet standaard is ontworpen voor tests, moeten bij elke vraag veel opties worden aangeklikt die belangrijk zijn voor tests (bijvoorbeeld 'vraagantwoord is vereist' en 'antwoorden in willekeurige volgorde') - wat tijd en aandacht vereist. Om elke vraag op een apart scherm te kunnen stellen, moet je per vraag een apart onderdeel aanmaken, wat ook nog eens een groot aantal extra klikken oplevert.
- Als je een nieuwe test moet maken als combinatie van fragmenten uit meerdere bestaande tests (een test voor een full-stack ontwikkelaar wordt bijvoorbeeld samengesteld uit een deel van vragen voor frontend en backend in een bepaalde taal), dan moet je dupliceer de vragen handmatig. Het is niet mogelijk om meerdere secties of vragen naar een ander formulier te selecteren en te kopiëren.
Collega's, als u de beste oplossingen kent voor het maken van tests, schrijf hierover dan in de reacties.
Bron: www.habr.com