Verificarea competențelor prin teste – de ce și cum

În articolul meu am discutat despre 7 metode rapide de verificare a competențelor specialiștilor IT, pe care le putem aplica înainte de a desfășura un interviu tehnic amplu și laborios. Atunci, mi-am exprimat aprecierea pentru teste cu timp limitat. În acest articol, voi explora subiectul testelor în detaliu.

Testele cu timp limitat sunt un instrument universal, care se potrivesc bine pentru verificarea cunoștințelor și abilităților practice ale specialiștilor din orice profesie.

Așadar, misiunea este – avem un flux de aplicații de la candidați pentru un post, trebuie să obținem rapid și simplu informații suplimentare despre abilitățile candidaților și conformitatea acestora cu cerințele postului nostru. Vrem ca această verificare a competențelor să nu ne ia mult timp, să fie extrem de fiabilă și să fie comodă pentru candidați, astfel încât aceștia să fie dispuși să participe la verificarea noastră.

O soluție bună pentru această sarcină sunt testele scurte cu timp limitat. Se limitează nu la momentul în care testul începe, ci la intervalul în care candidatul trebuie să răspundă la întrebări. Un exemplu tipic al unui astfel de test este examenul pentru cunoștințele regulilor de circulație, care reprezintă prima etapă a examenului pentru obținerea permisului de conducere. În 20 de minute trebuie să răspundeți la 20 de întrebări.

Puțină teorie

În articolul anterior Am vorbit despre modelul hibrid de luare a deciziilor „de către omul rațional”, propus de Daniel Kahneman și colegii săi. Conform acestei concepții, comportamentul uman este guvernat de două sisteme de luare a deciziilor care interacționează între ele. Sistemul 1 – rapid și automat, asigură siguranța organismului și nu necesită eforturi considerabile pentru formarea unei decizii. Acest sistem se dezvoltă pe baza experienței acumulate de-a lungul vieții. Precizia deciziilor acestui sistem depinde de experiența personală și de instruire, iar viteza – de particularitățile sistemului nervos al individului. Sistemul 2 – lent, necesită efort și concentrare. El ne asigură raționamente complexe și concluzii logice, activitatea sa dezvăluie potențialul inteligenței umane. Totuși, atunci când acest sistem este activat, consumă intens resurse – energie și atenție. De aceea, cea mai mare parte a deciziilor este luată de Sistemul 1 – astfel, comportamentul uman devine mult mai eficient. Sistemul 1 se dezvoltă suficient de mult datorită eforturilor depuse de Sistemul 2, dar ulterior oferă reacții rapide și automate. Sistemul 2 este un rezolvitor de probleme universal, dar funcționează lent și obosește repede. „Îmbunătățirea” Sistemului 2 este posibilă, dar limitele posibilelor îmbunătățiri sunt foarte modeste și acest proces este îndelungat și necesită eforturi considerabile. Există o mare cerere în societatea umană pentru „îmbunătățirea” Sistemului 1. Atunci când căutăm o persoană experimentată într-un domeniu, înseamnă că Sistemul său 1 este antrenat să rezolve rapid sarcinile de care avem nevoie.

Consider că cea mai bună metodă de evaluare a abilităților Sistemului 1 al unei persoane într-un anumit domeniu de cunoștințe constă în teste cu limită de timp. Un test elaborat o dată permite evaluarea rapidă și compararea multor candidați între ei. Acesta este un instrument de digitalizare a controlului cunoștințelor și abilităților.

Cum să realizăm un test bun?

Obiectivul unui test bine elaborat constă în determinarea gradului de pregătire a Sistemului 1 al candidatului pentru cunoștințele și abilitățile de care aveți nevoie. Pentru a crea un astfel de test, trebuie mai întâi să stabiliți temele și abilitățile necesare, apoi să elaborați întrebările și variantele de răspuns.

Așadar, iată criteriile mele pentru pregătirea unui test care să evalueze cu precizie și calitate cunoștințele și abilitățile candidaților:

1. Întrebările și variantele de răspuns trebuie să fie simple. Fie știi răspunsul corect, fie nu știi. Nu este necesar să incluzi în test necesitatea unor raționamente complexe sau calcule.
2. Executarea testului trebuie să fie limitată în timp. Poate chiar limita timpul de reflecție pentru fiecare răspuns. Dacă candidatul nu poate să se decidă asupra unui răspuns în, să zicem, 30 de secunde, atunci cu siguranță nu-l vor ajuta reflecțiile îndelungate. Găsirea răspunsului corect în 30 de secunde ar trebui să fie, de asemenea, dificilă.
3. Întrebările ar trebui să fie despre practici care sunt, într-adevăr, necesare în muncă - nu abstracte și teoretice, ci strict practice.
4. Este recomandabil să existe mai multe întrebări pe fiecare mică temă. Aceste întrebări pot varia pentru diferiți candidați (aceasta este similară cu diferitele variante de teste din școală) sau să fie toate incluse într-o variantă mai lungă a testului.
5. Numărul de întrebări și timpul alocat pentru finalizarea testului ar trebui să fie strict legate. Măsurați cât timp durează citirea întrebărilor și a variantelor de răspuns. Adăugați la acest timp 10-20 de secunde pentru fiecare întrebare - acesta este timpul pentru reflecție și alegerea răspunsului.
6. Este recomandabil să testați testul pe angajații dumneavoastră și să le urmăriți timpul de finalizare, pentru a determina timpul suficient pentru candidați.
7. Volumul testului depinde de obiectivele utilizării acestuia. Pentru o evaluare inițială a competențelor, în opinia mea, sunt suficiente 10-30 de întrebări cu o limită de timp de 5-15 minute. Pentru o diagnosticare mai detaliată a abilităților, testele de 30-45 de minute, conținând 50-100 de întrebări, sunt potrivite.

De exemplu – acesta este testul pe care l-am dezvoltat și folosit recent în procesul de selecție a candidaților pentru poziția de recrutor IT. Timpul alocat pentru finalizarea testului a fost de 6 minute, timpul fiind controlat manual și pe cuvânt de onoare. Toți candidații testați s-au încadrat în acest timp. Îmi lua 30 de minute să compun testul. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Puteți să faceți un test și, la final, să vedeți unde ați greșit. Când acest test a fost susținut de candidați, greșelile nu le-au fost afișate, le-am discutat ulterior în interviurile cu candidații care au făcut nu mai mult de 3 greșeli.

Instrumente

Acum creez teste și sondaje cu ajutorul Google Forms – acesta este un instrument simplu, convenabil, universal și gratuit. Cu toate acestea, îmi lipsesc anumite funcționalități pentru a considera Google Forms un instrument bun pentru crearea testelor. Principalele mele obiecții la adresa Google Forms:

1. Lipsa contabilizării și controlului timpului, atât pentru întregul test, cât și pentru fiecare întrebare. Aceasta oferă mai multe informații despre comportamentul candidatului în timpul testului.
2. Deoarece Google Forms nu este conceput în mod implicit pentru teste, multe opțiuni importante pentru teste (de exemplu, "răspunsul la întrebare este obligatoriu" și "amestecarea răspunsurilor") trebuie să fie selectate manual pentru fiecare întrebare, ceea ce necesită timp și atenție. Pentru ca fiecare întrebare să fie afișată pe un ecran separat, trebuie create secțiuni separate pentru fiecare întrebare, ceea ce duce la un număr mare de clicuri suplimentare.
3. Dacă trebuie să fac un nou test ca o combinație de fragmente din mai multe teste existente (de exemplu, să adun întrebări pentru un programator fullstack din părți de întrebări pentru frontend și backend pe un anumit limbaj), trebuie să dublez întrebările manual. Nu există opțiunea de a selecta și copia mai multe secțiuni sau întrebări într-un alt formular.

Colegi, dacă știți soluții mai bune pentru crearea testelor, vă rog să scrieți despre acestea în comentarii.

Sursa: habr.com