Megnéztem az informatikusok kompetenciáinak gyors tesztelésének 7 módját, amelyek egy nagy, terjedelmes és időigényes műszaki interjú lebonyolítása előtt alkalmazhatók. Aztán együttérzésemet fejeztem ki az időkorlátos tesztekkel kapcsolatban. Ebben a cikkben a tesztek témájával foglalkozom részletesebben.
Az időkorlátos tesztek egy univerzális eszköz, amely bármely szakmában bármely szakember tudásának és gyakorlati készségeinek tesztelésére alkalmas.
A feladat tehát az, hogy egy-egy állásra rengeteg jelentkezői válasz áll rendelkezésre, gyorsan és egyszerűen további információkat kell szereznünk a jelöltek készségeiről és arról, hogy megfelelnek-e az állásunk követelményeinek. Azt akarjuk, hogy a jelöltek kompetenciájának ilyen ellenőrzése ne vegye el sok időnket, rendkívül megbízható legyen, és kényelmes legyen a jelöltek számára, hogy beleegyezzenek az ellenőrzésünkbe.
Erre a problémára jó megoldást jelentenek a rövid tesztek, amelyek időben korlátozottak. Nem az a pillanat, amikor a teszt kezdődik, korlátos, hanem az az idő, amely alatt a vizsgázónak válaszolnia kell a kérdésekre. Tipikus példa egy ilyen tesztre a KRESZ-teszt, amely a jogosítvány megszerzéséhez szükséges vizsga első szakasza. 20 perc alatt 20 kérdésre kell válaszolnia.
Egy kis elmélet
Beszéltem a Homo sapiens döntéshozatal hibrid modelljéről, amelyet Daniel Kahneman és munkatársai javasoltak. E felfogás szerint az emberi viselkedést két egymással kölcsönhatásban lévő döntéshozatali rendszer szabályozza. Az 1. rendszer gyors és automatikus, biztosítja a test biztonságát, és nem igényel jelentős erőfeszítést a megoldás megfogalmazása. Ez a rendszer azon tapasztalatok alapján tanul, amelyeket az ember egész életében kap. E rendszer döntéseinek pontossága a személyes tapasztalatoktól és képzettségtől, a sebesség pedig az egyén idegrendszerének jellemzőitől függ. A 2. rendszer lassú, erőfeszítést és koncentrációt igényel. Bonyolult érveléssel és logikus következtetésekkel lát el bennünket, munkái feltárják az emberi intelligencia lehetőségeit. Ennek a rendszernek a működése azonban intenzíven felemészti az erőforrásokat - energiát és figyelmet. Ezért a legtöbb döntést az 1. rendszer hozza meg – így válik sokkal hatékonyabbá az emberi viselkedés. Az 1. rendszer tanulása a 2. rendszer erőfeszítései miatt sok időt vesz igénybe, de ezután gyors automatikus reakciókat ad. A System 2 sokoldalú problémamegoldó, de lassú és hamar elfárad. Lehetséges a System 2 „felpumpálása”, de a lehetséges fejlesztések határai nagyon szerények, és hosszú időt vesz igénybe és kemény erőfeszítést igényel. Az 1. rendszer „frissítése” nagy igény az emberi társadalomban.Ha valamiben tapasztalt embert keresünk, ez azt jelenti, hogy az 1. rendszere képzett a szükséges problémák gyors megoldására.
Az időkorlátos teszteket tartom a legjobb módszernek egy adott személy 1. rendszerének képességeinek felmérésére egy bizonyos tudásterületen. A kitöltést követően a teszt lehetővé teszi nagyszámú jelölt gyors értékelését és összehasonlítását. Ez egy eszköz a tudás és készségek ellenőrzésének digitalizálására.
Hogyan készítsünk jó tesztet?
A jól megtervezett teszt célja annak meghatározása, hogy a jelölt milyen mértékben van képzett az 1. rendszerben a szükséges ismeretek és készségek tekintetében. Egy ilyen teszt létrehozásához először el kell döntenie a témákat és a szükséges készségeket, majd kérdéseket és válaszlehetőségeket kell létrehoznia.
Tehát itt vannak a kritériumaim egy olyan teszt elkészítéséhez, amely pontosan és hatékonyan méri fel a jelölt tudását és készségeit:
- A kérdéseknek és a válaszlehetőségeknek egyszerűnek kell lenniük. Vagy tudja a helyes választ, vagy nem. A tesztben nem szabad bonyolult érvelést és számításokat végezni.
- A tesztet határidőn belül kell teljesíteni. Még az egyes válaszok gondolkodási idejét is korlátozhatja. Ha egy jelölt nem tudja eldönteni a választ mondjuk 30 másodpercen belül, akkor nem valószínű, hogy hosszú mérlegelés segít neki. Biztosan nehéz is 30 másodperc alatt megtalálni a Google-ban a helyes választ.
- A kérdéseknek olyan gyakorlatokra kell vonatkozniuk, amelyekre valóban szükség van a munkában – nem elvont és elméleti, hanem pusztán gyakorlati.
- Célszerű minden kis témához több kérdést feltenni. Ezek a kérdések a különböző jelölteknél eltérőek lehetnek (ez hasonló az iskolai tesztek különböző verzióihoz), vagy mindegyik jelen lehet a teszt hosszabb változatában.
- A kérdések számát és a teszt kitöltésének idejét szorosan össze kell kapcsolni. Mérje meg, mennyi ideig tart a kérdések és a válaszlehetőségek elolvasása. Adjunk ehhez az időhöz 10-20 másodpercet minden kérdéshez – itt az ideje gondolkodni és választ választani.
- Célszerű kipróbálni a tesztet az alkalmazottain, és feljegyezni a teljesítési idejüket, hogy megállapíthassuk, mennyi idő áll rendelkezésre a jelöltek számára a teszt kitöltésére.
- A teszt hatóköre a felhasználás céljától függ. A kompetenciák kezdeti felméréséhez véleményem szerint 10-30 kérdés 5-15 perces időkorláttal elegendő. A képességek részletesebb diagnosztikájára a 30-45 perces, 50-100 kérdést tartalmazó tesztek alkalmasak.
Példaként álljon itt egy teszt, amelyet a közelmúltban fejlesztettem ki és használtam az IT-toborzói pozícióra jelöltek kiválasztásakor. A teszt befejezésére 6 perc állt rendelkezésre, az időt manuálisan és feltételesen szabályozták. Ezúttal valamennyi tesztelt jelölt találkozott. 30 percembe telt a teszt összeállítása.
Elvégezheti a tesztet, és a végén láthatja, hol hibázott. Amikor a vizsgázók kitöltötték ezt a tesztet, nem kaptak hibát, később a legfeljebb 3 hibát elkövető jelentkezők interjúi során kijavítottuk a hibákat.
Tools
Most teszteket és felméréseket készítek a Google Forms segítségével – ez egy egyszerű, kényelmes, sokoldalú és ingyenes eszköz. Azonban hiányzik néhány funkcióm ahhoz, hogy a Google Forms-t jó eszköznek nevezzem a tesztek létrehozásához. Fő kifogásaim a Google Forms-szal kapcsolatban:
- A teljes tesztre és az egyes kérdésekre fordított idő elszámolása és ellenőrzése nincs. Ez több információt nyújt a jelölt viselkedéséről a teszt során.
- Mivel a Google Űrlapok alapértelmezés szerint nem tesztekhez készültek, sok, a tesztek szempontjából fontos opcióra (például a „kérdés válasza kötelező” és a „válaszok keverése”) rá kell kattintani – ami időt és figyelmet igényel. Ahhoz, hogy az egyes kérdéseket külön képernyőn tegyék fel, minden kérdéshez külön rovatokat kell létrehozni, és ez szintén nagyszámú további kattintáshoz vezet.
- Ha egy új tesztet kell készítenie több meglévő teszt töredékeinek kombinációjaként (például egy teszt egy full-stack fejlesztő számára egy bizonyos nyelvű frontend és backend kérdéseinek egy részéből áll össze), akkor duplikálja meg a kérdéseket manuálisan. Nincs lehetőség több szakasz vagy kérdés kijelölésére és más űrlapra másolására.
Kollégák, ha ismeritek a tesztkészítés legjobb megoldásait, írjátok meg kommentben.
Forrás: will.com