Праверка кампетэнцый з дапамогай тэстаў - чаму і як

У сваім артыкуле я разглядаў 7 спосабаў хуткай праверкі кампетэнцый IT-адмыслоўцаў, якія можна ўжыць да правядзення вялікай, аб'ёмнай і працаёмкай тэхнічнай гутаркі. Тады я выказаў сваю сімпатыю тэстам, абмежаваным па часе. У гэтым артыкуле я раскрою тэму тэстаў больш падрабязна.

Тэсты, абмежаваныя па часе - гэта ўніверсальная прылада, які добра падыходзіць для праверкі ведаў і практычных навыкаў любых адмыслоўцаў любых прафесій.

Такім чынам, задача - у нас ёсць паток водгукаў кандыдатаў на вакансію, нам трэба хутка і проста атрымаць дадатковую інфармацыю аб навыках кандыдатаў і іх адпаведнасці патрабаванням нашай вакансіі. Мы хочам, каб такая праверка кампетэнцый кандыдатаў не адбірала ў нас шмат часу, была дакладнай у высокай ступені і была зручная кандыдатам, каб яны пагаджаліся праходзіць нашу праверку.

Добрым рашэннем для гэтай задачы з'яўляюцца кароткія тэсты, абмежаваныя па часе праходжання. Абмяжоўваецца не момант пачатку праходжання тэста, а час, на працягу якога кандыдат павінен адказаць на пытанні. Тыповы прыклад такога тэсту - гэта іспыт на веданне правілаў дарожнага руху, які з'яўляецца першым этапам іспыту для атрымання вадзіцельскага пасведчання. За 20 хвілін трэба адказаць на 20 пытанняў.

крыху тэорыі

У папярэднім артыкуле я распавёў аб гібрыднай мадэлі прыняцця рашэнняў «чалавекам разумным», прапанаванай Даніэлем Канеманам і яго калегамі. Згодна з гэтай канцэпцыяй, паводзіны чалавека кіруюцца дзвюма ўзаемадзейнічаючымі сістэмамі прыняцця рашэнняў. Сістэма 1 - хуткая і аўтаматычная, забяспечвае бяспеку арганізма і не патрабуе істотных намаганняў для фарміравання рашэння. Гэтая сістэма навучаецца на аснове досведу, які атрымлівае чалавек на працягу жыцця. Дакладнасць рашэнняў гэтай сістэмы залежыць ад асабістага вопыту і трэніроўкі, а хуткасць - залежыць ад асаблівасцяў нервовай сістэмы індывіда. Сістэма 2 - павольная, патрабуе намаганняў і канцэнтрацыі ўвагі. Яна забяспечвае нам складаныя развагі і лагічную выснову, яе праца раскрывае патэнцыял інтэлекту чалавека. Аднак, пры працы гэтай сістэмы ўзмоцнена спажываюцца рэсурсы - энергія і ўвага. Таму большая частка рашэнняў прымаецца Сістэмай 1 - так паводзіны чалавека становіцца нашмат эфектыўней. Сістэма 1 дастаткова доўга навучаецца за кошт намаганняў, якія здзяйсняюцца Сістэмай 2, затое потым дае хуткія аўтаматычныя рэакцыі. Сістэма 2 - універсальны решатель задач, але працуе павольна і хутка стамляецца. Прапампаваць Сістэму 2 можна, але межы магчымых паляпшэнняў вельмі сціплыя і гэта доўга і патрабуе цяжкіх намаганняў. Вялікім попытам у чалавечым грамадстве карыстаецца «прапампоўка» Сістэмы 1. Калі мы шукаем чалавека, дасведчанага ў чымсьці, гэта азначае, што яго Сістэма 1 навучана хутка вырашаць патрэбныя нам задачы.

Найлепшым спосабам адзнакі магчымасцяў Сістэмы 1 пэўнага чалавека ў вызначанай вобласці ведаў я лічу тэсты, абмежаваныя па часе мінання. Аднойчы складзены тэст дазваляе хутка ацэньваць і параўноўваць паміж сабой вялікую колькасць кандыдатаў. Гэта інструмент аблічбоўкі кантролю ведаў і навыкаў.

Як зрабіць добры тэст?

Задача добра складзенага тэсту заключаецца ў вызначэнні ступені натрэніраванасці Сістэмы 1 кандыдата на патрэбныя вам веды і навыкі. Каб скласці такі тэст, трэба спачатку вызначыцца з тэмамі і неабходнымі навыкамі, а затым скласці пытанні і варыянты адказаў.

Такім чынам, вось мае крытэрыі падрыхтоўкі тэста, які дакладна і якасна ацэньвае веды і навыкі кандыдата:

  1. Пытанні і варыянты адказаў павінны быць простыя. Альбо ты ведаеш правільны адказ, альбо ня ведаеш. Не варта закладваць у тэст неабходнасць складаных разваг і вылічэнняў.
  2. Выкананне тэста павінна быць абмежавана па часе. Можна нават абмежаваць час абдумвання кожнага адказу. Калі кандыдат не можа вызначыцца з адказам на працягу, скажам, 30 секунд, то наўрад ці яму дапамогуць доўгія роздумы. Нагугліць правільны адказ за 30 секунд таксама павінна быць цяжка.
  3. Пытанні павінны быць аб практыках, якія рэальна патрэбныя ў працы - не абстрактныя і тэарэтычныя, а асабліва практычныя.
  4. Пажадана, каб па кожнай маленькай тэме было некалькi пытанняў. Гэтыя пытанні могуць мяняцца для розных кандыдатаў (гэта аналагічна розным варыянтам кантрольных работ у школе) або ўсё прысутнічаць у больш доўгім варыянце тэсту.
  5. Колькасць пытанняў і час на праходжанне цеста павінны быць жорстка звязаны. Замерце колькі часу займае прачытанне пытанняў і варыянтаў адказаў. Дадайце да гэтага часу па 10-20 секунд на кожнае пытанне - гэты час на абдумванне і выбар адказу.
  6. Пажадана апрабаваць тэст на вашых супрацоўніках і засекчы іх час праходжання, каб вызначыцца з дастатковым часам на праходжанне тэсту кандыдатамі.
  7. Аб'ём тэсту залежыць ад мэт яго ўжывання. Для першаснай ацэнкі кампетэнцый, на маю думку, дастаткова 10-30 пытанняў з абмежаваннем часу праходжання - 5-15 хвілін. Для больш падрабязнай дыягностыкі навыкаў падыходзяць тэсты на 30-45 хвілін, якія змяшчаюць 50-100 пытанняў.

Для прыкладу - вось тэст, які я распрацаваў і выкарыстоўваў нядаўна пры адборы кандыдатаў на пазіцыю IT-рэкрутэра. На праходжанне цеста адводзілася 6 хвілін, час кантраляваўся ўручную і пад слова гонару. Усе з пратэставаных кандыдатаў укладваліся ў гэты час. На складанне цеста ў мяне сышло 30 хвілін. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Вы можаце прайсці тэст і па заканчэнні вы зможаце паглядзець, дзе дапусцілі памылку. Калі гэты тэст праходзілі кандыдаты, ім памылкі не паказваліся, памылкі мы разбіралі потым на сумоўях з кандыдатамі, якія дапусцілі не больш за 3 памылкі.

Інструменты

Цяпер я ствараю тэсты і апытанні з дапамогай Google Forms – гэта простая, зручная, універсальная і бясплатная прылада. Аднак, мне бракуе некаторага функцыяналу для таго, каб назваць Google Forms добрай прыладай для стварэння тэстаў. Асноўныя мае прэтэнзіі да Google Forms:

  1. Адсутнічае ўлік і кантроль часу, затрачанага як на ўвесь тэст, так і на кожнае пытанне. Гэта дае больш інфармацыі аб паводзінах кандыдата падчас праходжання тэсту.
  2. Так як Google Forms не заменчаны пад тэсты па змаўчанні, шматлікія важныя для тэстаў опцыі (напрыклад, "адказ на пытанне абавязковы" і "змешваць адказы") даводзіцца "праклікваць" для кожнага пытання - што патрабуе часу і ўвагі. Каб кожнае пытанне задавалася на асобным экране, трэба стварыць асобныя секцыі для кожнага пытання, а гэта таксама прыводзіць да вялікай колькасці дадатковых клікаў.
  3. Калі трэба зрабіць новы тэст як камбінацыю фрагментаў з некалькіх ужо існых тэстаў (напрыклад, тэст для fullstack распрацоўніка сабраць з часткі пытанняў для frontend і backеnd на вызначанай мове), тое прыходзіцца дубляваць пытанні рукамі. Няма магчымасці вылучыць і скапіяваць некалькі секцый ці пытанняў у іншую форму.

Калегі, калі вы ведаеце лепшыя рашэнні для стварэння тэстаў, калі ласка, напішыце пра іх у каментарах.

Крыніца: habr.com

Дадаць каментар