Тестирање компетенција помоћу тестова – зашто и како

У свом чланку Погледао сам 7 начина за брзо тестирање компетенција ИТ стручњака, који се могу применити пре спровођења великог, обимног и дуготрајног техничког интервјуа. Тада сам изразио своје саосећање са временски ограниченим тестовима. У овом чланку ћу детаљније покрити тему тестова.

Временски ограничени тестови су универзални алат који је веома погодан за тестирање знања и практичних вештина било ког специјалисте у било којој професији.

Дакле, задатак је - имамо ток одговора кандидата за конкурс, потребно је брзо и лако да добијемо додатне информације о вештинама кандидата и њиховој усклађености са захтевима нашег конкурса. Желимо да нам таква провера компетенција кандидата не одузима много времена, да буде веома поуздана и да буде згодна за кандидате да пристану да прођу нашу верификацију.

Добро решење за овај проблем су кратки тестови који су временски ограничени. Није ограничен тренутак у ком почиње тест, већ време током којег кандидат мора да одговара на питања. Типичан пример таквог теста је испит из правила саобраћаја, који је прва фаза испита за добијање возачке дозволе. Треба да одговорите на 20 питања за 20 минута.

Мало теорије

У претходном чланку Говорио сам о хибридном моделу одлучивања о Хомо сапиенсу који су предложили Даниел Кахнеман и његове колеге. Према овом концепту, људским понашањем управљају два система доношења одлука у интеракцији. Систем 1 је брз и аутоматски, обезбеђује безбедност тела и не захтева значајан напор да се формулише решење. Овај систем учи на основу искустава која особа добија током живота. Тачност одлука овог система зависи од личног искуства и обуке, а брзина зависи од карактеристика нервног система појединца. Систем 2 је спор и захтева напор и концентрацију. Она нам пружа сложено резоновање и логичко закључивање, њен рад открива потенцијал људске интелигенције. Међутим, рад овог система интензивно троши ресурсе – енергију и пажњу. Стога већину одлука доноси Систем 1 – тако људско понашање постаје много ефикасније. Систему 1 је потребно много времена за учење због напора које је уложио Систем 2, али онда даје брзе аутоматске реакције. Систем 2 је свестран решавач проблема, али је спор и брзо се замара. Могуће је „напумпати“ Систем 2, али су границе могућих побољшања веома скромне и то траје дуго и захтева велики напор. „Надоградња“ Система 1 је веома тражена у људском друштву. Када тражимо особу која је искусна у нечему, то значи да је њен Систем 1 обучен да брзо решава проблеме који су нам потребни.

Сматрам да су временски ограничени тестови најбољи начин за процену способности Система 1 одређене особе у одређеној области знања. Када се заврши, тест вам омогућава да брзо процените и упоредите велики број кандидата. Ово је алат за дигитализацију контроле знања и вештина.

Како направити добар тест?

Сврха добро осмишљеног теста је да одреди степен до којег је кандидат обучен у Систему 1 за знања и вештине које су вам потребне. Да бисте креирали такав тест, прво морате да одлучите о темама и потребним вештинама, а затим креирате питања и опције одговора.

Дакле, ево мојих критеријума за припрему теста који тачно и ефикасно процењује знање и вештине кандидата:

  1. Питања и опције одговора треба да буду једноставне. Или знате тачан одговор или не знате. Не би требало да укључите потребу за сложеним расуђивањем и прорачунима у тест.
  2. Тест мора бити завршен у року. Можете чак и ограничити време размишљања о сваком одговору. Ако кандидат не може да се определи за одговор у, рецимо, 30 секунди, онда је мало вероватно да ће му дуго размишљање помоћи. Такође мора да је тешко пронаћи тачан одговор на Гоогле-у за 30 секунди.
  3. Питања треба да буду о праксама које су заиста потребне у раду – не апстрактним и теоријским, већ чисто практичним.
  4. Препоручљиво је имати неколико питања за сваку малу тему. Ова питања могу да се разликују за различите кандидате (ово је слично различитим верзијама тестова у школи) или сва питања могу бити присутна у дужој верзији теста.
  5. Број питања и време за испуњавање теста морају бити стриктно повезани. Измерите колико је времена потребно за читање питања и опција одговора. Додајте овом времену 10-20 секунди за свако питање - ово је време да размислите и изаберете одговор.
  6. Препоручљиво је да испробате тест на својим запосленима и забележите време њиховог завршетка како бисте утврдили довољно времена за кандидате да заврше тест.
  7. Обим теста зависи од сврхе његове употребе. За почетну процену компетенција, по мом мишљењу, довољно је 10-30 питања са временским ограничењем од 5-15 минута. За детаљнију дијагностику вештина погодни су тестови који трају 30-45 минута и садрже 50-100 питања.

Као пример, ево теста који сам недавно развио и користио приликом одабира кандидата за позицију ИТ регрутера. За завршетак теста било је додељено 6 минута; време је контролисано ручно и на условној. Овај пут су се састали сви тестирани кандидати. Требало ми је 30 минута да саставим тест. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Можете полагати тест и на крају ћете видети где сте погрешили. Када су кандидати полагали овај тест, није им уочена ниједна грешка, а касније смо исправљали грешке током интервјуа са кандидатима који су направили највише 3 грешке.

Алат

Сада креирам тестове и анкете користећи Гоогле Формс – то је једноставан, згодан, свестран и бесплатан алат. Међутим, недостаје ми неке функционалности да бих назвао Гоогле Формс добрим алатом за прављење тестова. Моје главне жалбе на Гоогле обрасце:

  1. Не постоји обрачун и контрола утрошеног времена и на цео тест и на свако питање. Ово пружа више информација о понашању кандидата током теста.
  2. Пошто Гоогле обрасци нису подразумевано дизајнирани за тестове, многе опције које су важне за тестове (на пример, „потребан је одговор на питање“ и „промешај одговоре“) морају да се кликну за свако питање – што захтева време и пажњу. Да би свако питање било постављено на посебном екрану, потребно је да за свако питање направите посебне одељке, а то такође доводи до великог броја додатних кликова.
  3. Ако треба да направите нови тест као комбинацију фрагмената из неколико постојећих тестова (на пример, тест за фулл-стацк програмера је састављен од дела питања за фронтенд и бацкенд на одређеном језику), онда морате да дуплирајте питања ручно. Не постоји начин да изаберете и копирате више одељака или питања у други образац.

Колеге, ако знате најбоља решења за креирање тестова, пишите о њима у коментарима.

Извор: ввв.хабр.цом

Додај коментар