Testarea competențelor folosind teste - de ce și cum

În articolul său Am analizat 7 moduri de a testa rapid competențele specialiștilor IT, care pot fi aplicate înainte de a realiza un interviu tehnic amplu, voluminos și consumatoare de timp. Apoi mi-am exprimat simpatia pentru testele limitate în timp. În acest articol voi trata mai detaliat subiectul testelor.

Testele limitate în timp sunt un instrument universal care este foarte potrivit pentru testarea cunoștințelor și abilităților practice ale oricărui specialist din orice profesie.

Deci, sarcina este - avem un flux de răspunsuri ale candidaților pentru un post vacant, trebuie să obținem rapid și ușor informații suplimentare despre abilitățile candidaților și conformitatea acestora cu cerințele postului nostru vacant. Ne dorim ca o astfel de verificare a competențelor candidaților să nu ne ocupe mult timp, să fie foarte fiabilă și să fie convenabilă pentru candidați, astfel încât aceștia să accepte să fie supuși verificării noastre.

O soluție bună pentru această problemă sunt testele scurte care sunt limitate în timp. Nu momentul în care începe testul este limitat, ci timpul în care candidatul trebuie să răspundă la întrebări. Un exemplu tipic de astfel de test este testul regulilor de circulație, care este prima etapă a examenului pentru obținerea permisului de conducere. Trebuie să răspunzi la 20 de întrebări în 20 de minute.

Un pic de teorie

Într-un articol precedent Am vorbit despre modelul hibrid de luare a deciziilor Homo sapiens propus de Daniel Kahneman și colegii săi. Conform acestui concept, comportamentul uman este guvernat de două sisteme decizionale care interacționează. Sistemul 1 este rapid si automat, asigura siguranta organismului si nu necesita efort semnificativ pentru a formula o solutie. Acest sistem învață pe baza experiențelor pe care o persoană le primește de-a lungul vieții. Acuratețea deciziilor acestui sistem depinde de experiența personală și de pregătire, iar viteza depinde de caracteristicile sistemului nervos al individului. Sistemul 2 este lent și necesită efort și concentrare. Ea ne oferă raționament complex și inferență logică, munca ei dezvăluie potențialul inteligenței umane. Cu toate acestea, funcționarea acestui sistem consumă intens resurse - energie și atenție. Prin urmare, majoritatea deciziilor sunt luate de Sistemul 1 - astfel comportamentul uman devine mult mai eficient. Sistemul 1 necesită mult timp pentru a învăța din cauza eforturilor depuse de Sistemul 2, dar apoi dă reacții automate rapide. System 2 este un solutor de probleme versatil, dar este lent și obosește rapid. Este posibil să „pumpăm” Sistemul 2, dar limitele posibilelor îmbunătățiri sunt foarte modeste și durează mult timp și necesită un efort greu. „Actualizarea” Sistemului 1 este la mare căutare în societatea umană. Când căutăm o persoană cu experiență în ceva, aceasta înseamnă că Sistemul său 1 este antrenat să rezolve rapid problemele de care avem nevoie.

Consider că testele limitate în timp sunt cea mai bună modalitate de a evalua capacitățile Sistemului 1 ale unei anumite persoane într-un anumit domeniu de cunoaștere. Odată finalizat, testul vă permite să evaluați și să comparați rapid un număr mare de candidați. Acesta este un instrument de digitalizare a controlului cunoștințelor și abilităților.

Cum să faci un test bun?

Scopul unui test bine conceput este de a determina gradul în care un candidat este instruit în Sistemul 1 pentru cunoștințele și abilitățile de care aveți nevoie. Pentru a crea un astfel de test, mai întâi trebuie să decideți asupra subiectelor și abilităților necesare, apoi creați întrebări și opțiuni de răspuns.

Așadar, iată criteriile mele pentru pregătirea unui test care evaluează în mod precis și eficient cunoștințele și abilitățile candidatului:

1. Întrebările și opțiunile de răspuns ar trebui să fie simple. Ori știi răspunsul corect, ori nu. Nu ar trebui să includeți nevoia de raționament și calcule complexe în test.
2. Testul trebuie finalizat într-un interval de timp. Puteți chiar să limitați timpul în care vă gândiți la fiecare răspuns. Dacă un candidat nu poate decide cu privire la un răspuns în, să zicem, 30 de secunde, atunci este puțin probabil ca o deliberare lungă să-l ajute. De asemenea, trebuie să fie dificil să găsești pe Google răspunsul corect în 30 de secunde.
3. Întrebările ar trebui să fie despre practici care sunt cu adevărat necesare în muncă - nu abstracte și teoretice, ci pur practice.
4. Este recomandabil să aveți mai multe întrebări pentru fiecare subiect mic. Aceste întrebări pot varia pentru diferiți candidați (aceasta este similară cu diferite versiuni de teste din școală) sau toate pot fi prezente într-o versiune mai lungă a testului.
5. Numărul de întrebări și timpul de finalizare a testului trebuie să fie strict legate. Măsurați cât timp este nevoie pentru a citi întrebările și opțiunile de răspuns. Adăugați la acest timp 10-20 de secunde pentru fiecare întrebare - acesta este timpul să vă gândiți și să alegeți un răspuns.
6. Este recomandabil să încercați testul pe angajații dvs. și să înregistrați timpul de finalizare a acestora pentru a determina timpul suficient pentru ca candidații să finalizeze testul.
7. Scopul testului depinde de scopul utilizării acestuia. Pentru evaluarea inițială a competențelor, după părerea mea, sunt suficiente 10-30 de întrebări cu o limită de timp de 5-15 minute. Pentru diagnosticarea mai detaliată a aptitudinilor, sunt potrivite teste cu o durată de 30-45 de minute și care conțin 50-100 de întrebări.

De exemplu, iată un test pe care l-am dezvoltat și folosit recent când am selectat candidații pentru un post de recrutor IT. Au fost alocate 6 minute pentru finalizarea testului; timpul a fost controlat manual și eliberat condiționat. Toți candidații testați s-au întâlnit de data aceasta. Mi-a luat 30 de minute pentru a compila testul. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Poți să dai testul și la sfârșit poți vedea unde ai greșit. Când candidații au susținut acest test, nu li s-a arătat nicio greșeală; ulterior am rezolvat greșelile în timpul interviurilor cu candidații care au făcut nu mai mult de 3 greșeli.

Instrumente

Acum creez teste și sondaje folosind Google Forms - este un instrument simplu, convenabil, versatil și gratuit. Cu toate acestea, îmi lipsesc unele funcționalități pentru a numi Google Forms un instrument bun pentru crearea de teste. Principalele mele plângeri despre Google Forms:

1. Nu există contabilitate și control al timpului petrecut atât pe întregul test, cât și pe fiecare întrebare. Aceasta oferă mai multe informații despre comportamentul candidatului în timpul testului.
2. Deoarece Google Forms nu este proiectat pentru teste în mod implicit, multe opțiuni care sunt importante pentru teste (de exemplu, „răspunsul la întrebare este necesar” și „sale răspunsuri”) trebuie să fie făcute clic pentru fiecare întrebare - ceea ce necesită timp și atenție. Pentru ca fiecare întrebare să fie adresată pe un ecran separat, trebuie să creați secțiuni separate pentru fiecare întrebare, iar acest lucru duce, de asemenea, la un număr mare de clicuri suplimentare.
3. Dacă trebuie să faceți un nou test ca o combinație de fragmente din mai multe teste existente (de exemplu, un test pentru un dezvoltator full-stack este asamblat dintr-o parte de întrebări pentru frontend și backend într-o anumită limbă), atunci trebuie să duplicați manual întrebările. Nu există nicio modalitate de a selecta și copia mai multe secțiuni sau întrebări într-un alt formular.

Colegi, dacă cunoașteți cele mai bune soluții pentru crearea de teste, vă rugăm să scrieți despre ele în comentarii.

Sursa: www.habr.com