Pengujian kompetensi menggunakan tes – mengapa dan bagaimana

Dalam artikelnya Saya melihat 7 cara untuk menguji kompetensi spesialis IT dengan cepat, yang dapat diterapkan sebelum melakukan wawancara teknis yang besar, banyak, dan memakan waktu. Kemudian saya menyatakan simpati saya untuk ujian yang terbatas waktu. Pada artikel ini saya akan membahas topik tes secara lebih rinci.

Tes berbatas waktu adalah alat universal yang cocok untuk menguji pengetahuan dan keterampilan praktis setiap spesialis dalam profesi apa pun.

Jadi, tugasnya adalah - kami memiliki aliran tanggapan kandidat untuk suatu lowongan, kami perlu memperoleh informasi tambahan dengan cepat dan mudah tentang keterampilan kandidat dan kepatuhan mereka terhadap persyaratan lowongan kami. Kami ingin verifikasi kompetensi kandidat tidak menyita banyak waktu kami, dapat diandalkan dan nyaman bagi kandidat sehingga mereka setuju untuk menjalani verifikasi kami.

Solusi yang baik untuk masalah ini adalah tes singkat yang terbatas waktu. Yang dibatasi bukanlah saat dimulainya ujian, melainkan waktu di mana calon harus menjawab soal. Contoh khas dari tes tersebut adalah tes peraturan lalu lintas, yang merupakan tahap pertama ujian untuk mendapatkan Surat Izin Mengemudi. Anda perlu menjawab 20 pertanyaan dalam 20 menit.

Sedikit teori

Dalam artikel sebelumnya Saya berbicara tentang model hibrida dalam pengambilan keputusan Homo sapiens yang diusulkan oleh Daniel Kahneman dan rekan-rekannya. Menurut konsep ini, perilaku manusia diatur oleh dua sistem pengambilan keputusan yang saling berinteraksi. Sistem 1 cepat dan otomatis, menjamin keamanan tubuh dan tidak memerlukan usaha yang signifikan untuk merumuskan solusi. Sistem ini belajar berdasarkan pengalaman yang diterima seseorang sepanjang hidupnya. Keakuratan keputusan sistem ini bergantung pada pengalaman dan pelatihan pribadi, dan kecepatannya bergantung pada karakteristik sistem saraf individu. Sistem 2 lambat dan membutuhkan usaha dan konsentrasi. Dia memberi kita penalaran yang kompleks dan kesimpulan logis, karyanya mengungkapkan potensi kecerdasan manusia. Namun, pengoperasian sistem ini secara intensif menghabiskan sumber daya – energi dan perhatian. Oleh karena itu, sebagian besar keputusan dibuat oleh Sistem 1 - inilah cara perilaku manusia menjadi lebih efektif. Sistem 1 membutuhkan waktu lama untuk dipelajari karena upaya yang dilakukan Sistem 2, namun kemudian memberikan reaksi otomatis yang cepat. Sistem 2 adalah pemecah masalah serbaguna, namun lambat dan cepat lelah. Dimungkinkan untuk “memompa” Sistem 2, tetapi batas kemungkinan perbaikannya sangat sederhana dan membutuhkan waktu lama serta upaya yang keras. “Meningkatkan” Sistem 1 sangat diminati dalam masyarakat manusia. Ketika kita mencari seseorang yang berpengalaman dalam suatu hal, ini berarti Sistem 1-nya dilatih untuk menyelesaikan masalah yang kita perlukan dengan cepat.

Saya menganggap tes terbatas waktu sebagai cara terbaik untuk menilai kemampuan Sistem 1 orang tertentu dalam bidang pengetahuan tertentu. Setelah selesai, tes ini memungkinkan Anda mengevaluasi dan membandingkan sejumlah besar kandidat dengan cepat. Ini adalah alat untuk mendigitalkan kendali pengetahuan dan keterampilan.

Bagaimana cara membuat tes yang baik?

Tujuan dari tes yang dirancang dengan baik adalah untuk menentukan sejauh mana seorang kandidat dilatih dalam Sistem 1 untuk pengetahuan dan keterampilan yang Anda butuhkan. Untuk membuat tes semacam itu, pertama-tama Anda harus memutuskan topik dan keterampilan yang dibutuhkan, lalu membuat pertanyaan dan pilihan jawaban.

Jadi, inilah kriteria saya dalam mempersiapkan tes yang menilai pengetahuan dan keterampilan kandidat secara akurat dan efisien:

1. Pertanyaan dan pilihan jawaban harus sederhana. Entah Anda tahu jawaban yang benar atau tidak. Anda tidak boleh memasukkan kebutuhan akan penalaran dan perhitungan yang rumit dalam ujian.
2. Tes harus diselesaikan dalam batas waktu. Anda bahkan dapat membatasi waktu memikirkan setiap jawaban. Jika seorang kandidat tidak dapat memutuskan suatu jawaban dalam waktu, katakanlah, 30 detik, maka musyawarah yang panjang kemungkinan besar tidak akan membantunya. Pasti sulit juga mencari jawaban yang benar di Google dalam 30 detik.
3. Pertanyaannya harus mengenai praktik yang benar-benar diperlukan dalam pekerjaan – bukan abstrak dan teoretis, tetapi murni praktis.
4. Dianjurkan untuk memiliki beberapa pertanyaan untuk setiap topik kecil. Pertanyaan-pertanyaan ini mungkin berbeda untuk kandidat yang berbeda (ini mirip dengan versi tes yang berbeda di sekolah) atau semuanya ada dalam versi tes yang lebih panjang.
5. Jumlah soal dan waktu penyelesaian tes harus benar-benar terkait. Ukur berapa lama waktu yang dibutuhkan untuk membaca pertanyaan dan pilihan jawaban. Tambahkan waktu ini 10-20 detik untuk setiap pertanyaan - inilah saatnya berpikir dan memilih jawaban.
6. Dianjurkan untuk mencoba tes pada karyawan Anda dan mencatat waktu penyelesaiannya untuk menentukan waktu yang cukup bagi kandidat untuk menyelesaikan tes.
7. Ruang lingkup tes tergantung pada tujuan penggunaannya. Untuk penilaian awal kompetensi menurut saya cukup 10-30 soal dengan batas waktu 5-15 menit. Untuk diagnosis keterampilan yang lebih rinci, tes yang berlangsung selama 30-45 menit dan berisi 50-100 pertanyaan cocok.

Sebagai contoh, berikut adalah tes yang saya kembangkan dan gunakan baru-baru ini ketika memilih kandidat untuk posisi perekrut TI. 6 menit diberikan untuk menyelesaikan tes; waktu dikontrol secara manual dan pembebasan bersyarat. Semua kandidat yang diuji bertemu kali ini. Saya membutuhkan waktu 30 menit untuk menyusun tes. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Anda dapat mengikuti tes dan pada akhirnya Anda dapat melihat di mana kesalahan Anda. Saat kandidat mengikuti tes ini, mereka tidak menunjukkan kesalahan apa pun; kami kemudian memilah kesalahan saat wawancara dengan kandidat yang melakukan tidak lebih dari 3 kesalahan.

Alat

Sekarang saya membuat tes dan survei menggunakan Google Formulir - ini adalah alat yang sederhana, nyaman, serbaguna, dan gratis. Namun, saya kekurangan beberapa fungsi untuk menyebut Google Formulir sebagai alat yang bagus untuk membuat pengujian. Keluhan utama saya tentang Google Formulir:

1. Tidak ada penghitungan dan pengendalian waktu yang dihabiskan baik untuk keseluruhan tes maupun untuk setiap pertanyaan. Ini memberikan lebih banyak informasi tentang perilaku kandidat selama tes.
2. Karena Google Formulir tidak dirancang untuk pengujian secara default, banyak opsi yang penting untuk pengujian (misalnya, “jawaban pertanyaan diperlukan” dan “jawaban acak”) harus diklik untuk setiap pertanyaan - yang memerlukan waktu dan perhatian. Agar setiap pertanyaan diajukan pada layar terpisah, Anda perlu membuat bagian terpisah untuk setiap pertanyaan, dan ini juga menghasilkan banyak klik tambahan.
3. Jika Anda perlu membuat pengujian baru sebagai kombinasi fragmen dari beberapa pengujian yang ada (misalnya, pengujian untuk full-stack developer dikumpulkan dari bagian pertanyaan untuk frontend dan backend dalam bahasa tertentu), maka Anda harus melakukannya duplikat pertanyaan secara manual. Tidak ada cara untuk memilih dan menyalin beberapa bagian atau pertanyaan ke formulir lain.

Rekan-rekan, jika Anda mengetahui solusi terbaik untuk membuat tes, silakan tulis di komentar.

Sumber: www.habr.com