Podíval jsem se na 7 způsobů, jak rychle otestovat kompetence IT specialistů, které lze uplatnit před provedením velkého, objemného a časově náročného technického rozhovoru. Pak jsem vyjádřil sympatie k časově omezeným testům. V tomto článku se budu tématu testů věnovat podrobněji.
Časově omezené testy jsou univerzálním nástrojem, který se dobře hodí k prověření znalostí a praktických dovedností každého specialisty v jakékoli profesi.
Úkol tedy zní – máme proud odpovědí kandidátů na volné pracovní místo, potřebujeme rychle a snadno získat další informace o dovednostech kandidátů a jejich souladu s požadavky naší volné pozice. Chceme, aby nám takové ověřování kompetencí kandidátů nezabíralo mnoho času, bylo vysoce spolehlivé a pro kandidáty pohodlné, aby s naším ověřením souhlasili.
Dobrým řešením tohoto problému jsou krátké testy, které jsou časově omezené. Omezený není okamžik, kdy test začíná, ale doba, během které musí uchazeč odpovídat na otázky. Typickým příkladem takového testu je test z pravidel silničního provozu, který je prvním stupněm zkoušky pro získání řidičského oprávnění. Musíte odpovědět na 20 otázek za 20 minut.
Některé teorie
Mluvil jsem o hybridním modelu rozhodování Homo sapiens navrženém Danielem Kahnemanem a jeho kolegy. Podle této koncepce je lidské chování řízeno dvěma vzájemně se ovlivňujícími systémy rozhodování. Systém 1 je rychlý a automatický, zajišťuje bezpečnost těla a nevyžaduje značné úsilí k formulaci řešení. Tento systém se učí na základě zkušeností, které člověk získává po celý život. Přesnost rozhodnutí tohoto systému závisí na osobních zkušenostech a tréninku a rychlost závisí na vlastnostech nervového systému jedince. Systém 2 je pomalý a vyžaduje úsilí a koncentraci. Poskytuje nám komplexní uvažování a logické vyvozování, její práce odhaluje potenciál lidské inteligence. Provoz tohoto systému však intenzivně spotřebovává zdroje – energii a pozornost. Většinu rozhodnutí proto dělá Systém 1 – tak se lidské chování stává mnohem efektivnější. Systému 1 trvá dlouho, než se učí díky úsilí, které vynakládá Systém 2, ale pak poskytuje rychlé automatické reakce. Systém 2 je všestranným řešením problémů, ale je pomalý a rychle se unaví. Systém 2 je možné „napumpovat“, ale limity možných vylepšení jsou velmi skromné a trvá to dlouho a vyžaduje velké úsilí. „Upgrade“ Systému 1 je v lidské společnosti velmi žádaný. Když hledáme člověka, který má v něčem zkušenosti, znamená to, že jeho Systém 1 je vycvičený k rychlému řešení problémů, které potřebujeme.
Časově omezené testy považuji za nejlepší způsob, jak posoudit schopnosti Systému 1 konkrétního člověka v určité oblasti znalostí. Po dokončení test umožňuje rychle vyhodnotit a porovnat velké množství kandidátů. Jedná se o nástroj pro digitalizaci kontroly znalostí a dovedností.
Jak udělat dobrý test?
Účelem dobře navrženého testu je určit, do jaké míry je kandidát vyškolen v Systému 1 pro znalosti a dovednosti, které potřebujete. Chcete-li vytvořit takový test, musíte se nejprve rozhodnout o tématech a požadovaných dovednostech a poté vytvořit otázky a možnosti odpovědí.
Zde jsou tedy moje kritéria pro přípravu testu, který přesně a efektivně hodnotí znalosti a dovednosti kandidáta:
- Otázky a možnosti odpovědí by měly být jednoduché. Buď znáte správnou odpověď, nebo ne. Do testu byste neměli zahrnout nutnost složitého uvažování a výpočtů.
- Test musí být dokončen v časovém limitu. Můžete dokonce omezit dobu, po kterou přemýšlíte o každé odpovědi. Pokud se kandidát nedokáže rozhodnout pro odpověď řekněme do 30 sekund, je nepravděpodobné, že mu dlouhé zvažování pomůže. Musí být také obtížné vygooglit správnou odpověď za 30 sekund.
- Otázky by se měly týkat postupů, které jsou v práci skutečně potřeba – ne abstraktní a teoretické, ale čistě praktické.
- Ke každému malému tématu je vhodné položit několik otázek. Tyto otázky se mohou u různých kandidátů lišit (toto je podobné jako u různých verzí testů ve škole) nebo mohou být všechny přítomny v delší verzi testu.
- Počet otázek a čas na vyplnění testu musí být přesně propojeny. Změřte, jak dlouho trvá čtení otázek a možností odpovědí. Přidejte k tomuto času 10–20 sekund na každou otázku – to je čas na přemýšlení a výběr odpovědi.
- Je vhodné si test vyzkoušet na svých zaměstnancích a zaznamenat si čas jejich dokončení, abyste určili dostatek času pro kandidáty na vyplnění testu.
- Rozsah testu závisí na účelu jeho použití. Pro prvotní posouzení kompetencí dle mého názoru stačí 10-30 otázek s časovým limitem 5-15 minut. Pro podrobnější diagnostiku dovedností jsou vhodné testy trvající 30-45 minut a obsahující 50-100 otázek.
Jako příklad uvádím test, který jsem vyvinul a nedávno použil při výběru kandidátů na pozici IT recruiter. Na dokončení testu bylo vyhrazeno 6 minut, čas byl řízen ručně a podmínečně. Všichni testovaní kandidáti se tentokrát sešli. Sestavení testu mi trvalo 30 minut.
Můžete si udělat test a na konci uvidíte, kde jste udělali chybu. Když uchazeči absolvovali tento test, neukázali se žádné chyby, později jsme chyby vytřídili při pohovorech s uchazeči, kteří neudělali více než 3 chyby.
Nástroje
Nyní vytvářím testy a průzkumy pomocí Google Forms – je to jednoduchý, pohodlný, všestranný a bezplatný nástroj. Postrádám však některé funkce, abych mohl Formuláře Google označit za dobrý nástroj pro vytváření testů. Moje hlavní stížnosti na Formuláře Google:
- Neexistuje žádné účtování a kontrola času stráveného jak na celém testu, tak na každé otázce. To poskytuje více informací o chování kandidáta během testu.
- Vzhledem k tomu, že Formuláře Google nejsou ve výchozím nastavení navrženy pro testy, je třeba u každé otázky kliknout na mnoho možností, které jsou pro testy důležité (například „je vyžadována odpověď na otázku“ a „zamíchat odpovědi“) – což vyžaduje čas a pozornost. Aby byla každá otázka položena na samostatné obrazovce, musíte pro každou otázku vytvořit samostatné sekce, což také vede k velkému počtu kliknutí navíc.
- Pokud potřebujete vytvořit nový test jako kombinaci fragmentů z několika existujících testů (například test pro vývojáře full-stack je sestaven z části otázek pro frontend a backend v určitém jazyce), musíte duplikujte otázky ručně. Neexistuje způsob, jak vybrat a zkopírovat více sekcí nebo otázek do jiného formuláře.
Kolegové, pokud znáte nejlepší řešení pro tvorbu testů, napište o nich prosím do komentářů.
Zdroj: www.habr.com