Kontrola kompetencií testami – prečo a ako

Vo svojom článku Pred uskutočnením veľkého, zdĺhavého a časovo náročného technického rozhovoru som sa pozrel na 7 spôsobov, ako rýchlo otestovať kompetencie IT profesionálov, ktoré možno uplatniť. Potom som vyjadril svoje sympatie k časovo obmedzeným testom. V tomto článku sa budem téme testov venovať podrobnejšie.

Časovo obmedzené testy sú univerzálnym nástrojom, ktorý sa dobre hodí na preverenie vedomostí a praktických zručností každého špecialistu v akejkoľvek profesii.

Takže úloha – máme prúd uchádzačov o voľné pracovné miesto, potrebujeme rýchlo a jednoducho získať ďalšie informácie o zručnostiach kandidátov a ich súlade s požiadavkami našej voľnej pozície. Chceme, aby takéto testovanie kompetencií kandidátov bolo rýchle, spoľahlivé vo vysokej miere a pohodlné pre kandidátov, aby súhlasili s testovaním nami.

Dobrým riešením tejto úlohy sú krátke testy, časovo obmedzené. Limitovaný nie je okamih začiatku testu, ale čas, počas ktorého musí uchádzač odpovedať na otázky. Typickým príkladom takejto skúšky je znalosť pravidiel cestnej skúšky, ktorá je prvým stupňom skúšky na získanie vodičského oprávnenia. Máte 20 otázok, na ktoré musíte odpovedať za 20 minút.

Niektoré teórie

V predchádzajúcom článku Hovoril som o hybridnom modeli rozhodovania Homo sapiens, ktorý navrhol Daniel Kahneman a jeho kolegovia. Podľa tohto konceptu ľudské správanie riadia dva vzájomne sa ovplyvňujúce systémy rozhodovania. Systém 1 je rýchly a automatický, zaisťuje bezpečnosť tela a nevyžaduje značné úsilie na vytvorenie riešenia. Tento systém sa učí na základe skúseností, ktoré človek počas života získa. Presnosť rozhodnutí tohto systému závisí od osobných skúseností a tréningu a rýchlosť závisí od vlastností nervového systému jednotlivca. Systém 2 je pomalý, vyžaduje úsilie a koncentráciu. Poskytuje nám komplexnú úvahu a logický záver, jej práca odhaľuje potenciál ľudskej inteligencie. Prevádzka tohto systému však intenzívne spotrebúva zdroje – energiu a pozornosť. Preto väčšinu rozhodnutí robí Systém 1 – takto sa ľudské správanie stáva oveľa efektívnejším. Systém 1 sa dlho učí vďaka úsiliu Systému 2, ale potom poskytuje rýchle automatické reakcie. Systém 2 je všeobecným riešením problémov, ale je pomalý a rýchlo únavný. Systém 2 je možné „napumpovať“, ale limity možných vylepšení sú veľmi skromné ​​a trvá to dlho a vyžaduje si veľké úsilie. „Pumpovanie“ Systému 1 je v ľudskej spoločnosti veľmi žiadané. Keď hľadáme človeka, ktorý má v niečom skúsenosti, znamená to, že jeho Systém 1 je vycvičený na rýchle riešenie problémov, ktoré potrebujeme.

Najlepší spôsob, ako posúdiť schopnosti systému 1 konkrétnej osoby v určitej oblasti vedomostí, si myslím, že testy sú časovo obmedzené. Po zostavení testu vám umožní rýchlo vyhodnotiť a porovnať veľké množstvo kandidátov. Ide o nástroj na digitalizáciu kontroly vedomostí a zručností.

Ako urobiť dobrý test?

Účelom dobre navrhnutého testu je určiť, do akej miery je kandidát Systém 1 vyškolený vo vedomostiach a zručnostiach, ktoré potrebujete. Ak chcete vytvoriť takýto test, musíte sa najprv rozhodnúť o témach a potrebných zručnostiach a potom napísať otázky a možnosti odpovedí.

Takže tu sú moje kritériá na prípravu testu, ktorý presne a presne hodnotí znalosti a zručnosti kandidáta:

  1. Otázky a možnosti odpovedí by mali byť jednoduché. Buď poznáte správnu odpoveď, alebo nie. V teste by ste nemali klásť potrebu zložitého uvažovania a výpočtov.
  2. Test by mal byť časovo obmedzený. Môžete dokonca obmedziť čas na premyslenie každej odpovede. Ak sa kandidát nevie rozhodnúť pre odpoveď napríklad do 30 sekúnd, veľa premýšľania mu pravdepodobne nepomôže. Nájsť správnu odpoveď za 30 sekúnd by malo byť tiež ťažké.
  3. Otázky by sa mali týkať postupov, ktoré sú v práci skutočne potrebné – nie abstraktné a teoretické, ale čisto praktické.
  4. Je žiaduce, aby pre každú malú tému bolo niekoľko otázok. Tieto otázky sa môžu pre rôznych kandidátov meniť (je to podobné ako pri rôznych verziách testov v škole) alebo môžu byť všetky prítomné v dlhšej verzii testu.
  5. Počet otázok a čas na vykonanie testu by mali byť úzko prepojené. Zmerajte, ako dlho trvá čítanie otázok a možností odpovedí. Pridajte k tomuto času 10-20 sekúnd na každú otázku - to je čas na premýšľanie a výber odpovede.
  6. Je vhodné vyskúšať si test na svojich zamestnancoch a sledovať ich absolvovanie, aby ste určili dostatočný čas pre kandidátov na úspešné absolvovanie testu.
  7. Rozsah testu závisí od účelu jeho použitia. Na prvotné posúdenie kompetencií podľa mňa stačí 10-30 otázok s časovým limitom 5-15 minút. Pre podrobnejšiu diagnostiku zručností sú vhodné testy na 30-45 minút s obsahom 50-100 otázok.

Tu je napríklad test, ktorý som vyvinul a nedávno použil pri výbere kandidátov na pozíciu IT recruiter. Test dostal 6 minút, čas bol kontrolovaný manuálne a podmienečne. Všetci testovaní kandidáti zapadajú do tohto časového rámca. Vyplnenie testu mi trvalo 30 minút. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Môžete si urobiť test a na konci uvidíte, kde ste urobili chybu. Keď kandidáti prešli týmto testom, neukázali sa im žiadne chyby, chyby sme analyzovali neskôr na pohovoroch s kandidátmi, ktorí neurobili viac ako 3 chyby.

Nástroje

Teraz vytváram testy a prieskumy pomocou Google Forms – je to jednoduchý, pohodlný, všestranný a bezplatný nástroj. Chýba mi však určitá funkcionalita na to, aby som Formuláre Google označil za dobrý nástroj na vytváranie testov. Moje hlavné sťažnosti na Formuláre Google:

  1. Neexistuje žiadne účtovanie a kontrola času stráveného na celom teste a na každej otázke. To poskytuje viac informácií o správaní kandidáta počas testu.
  2. Keďže Formuláre Google nie sú predvolene navrhnuté na testy, mnohé možnosti, ktoré sú dôležité pre testy (napríklad „vyžaduje sa odpoveď na otázku“ a „zamiešať odpovede“), musíte pri každej otázke „kliknúť“, čo si vyžaduje čas a pozornosť. Aby bola každá otázka položená na samostatnej obrazovke, musíte pre každú otázku vytvoriť samostatné sekcie, čo tiež vedie k veľkému počtu kliknutí navyše.
  3. Ak potrebujete vytvoriť nový test ako kombináciu fragmentov z niekoľkých existujúcich testov (napríklad test pre vývojára fullstacku, ktorý sa má zhromaždiť z časti otázok pre frontend a backend v určitom jazyku), musíte duplikovať otázky ručne. Neexistuje spôsob, ako vybrať a skopírovať viacero sekcií alebo otázok do iného formulára.

Kolegovia, ak poznáte najlepšie riešenia na vytváranie testov, napíšte o nich do komentárov.

Zdroj: hab.com

Pridať komentár