Menyemak kecekapan dengan ujian - mengapa dan bagaimana

Dalam artikelnya Saya melihat 7 cara untuk menguji kecekapan pakar IT dengan cepat, yang boleh digunakan sebelum menjalankan temu duga teknikal yang besar, banyak dan memakan masa. Kemudian saya menyatakan simpati saya untuk ujian terhad masa. Dalam artikel ini saya akan membincangkan topik ujian dengan lebih terperinci.

Ujian terhad masa adalah alat universal yang sangat sesuai untuk menguji pengetahuan dan kemahiran praktikal mana-mana pakar dalam mana-mana profesion.

Jadi, tugasnya ialah - kami mempunyai aliran maklum balas calon untuk kekosongan, kami perlu mendapatkan maklumat tambahan dengan cepat dan mudah tentang kemahiran calon dan pematuhan mereka terhadap keperluan kekosongan kami. Kami mahu pengesahan kompetensi calon sedemikian tidak mengambil banyak masa kami, menjadi sangat dipercayai dan memudahkan calon supaya mereka bersetuju untuk menjalani pengesahan kami.

Penyelesaian yang baik untuk masalah ini ialah ujian pendek yang terhad masa. Bukan masa di mana ujian bermula yang terhad, tetapi masa di mana calon mesti menjawab soalan. Contoh biasa ujian sedemikian ialah ujian peraturan lalu lintas, yang merupakan peringkat pertama peperiksaan untuk mendapatkan lesen memandu. Anda perlu menjawab 20 soalan dalam masa 20 minit.

Sedikit teori

Dalam artikel sebelum ini Saya bercakap tentang model hibrid pembuatan keputusan Homo sapiens yang dicadangkan oleh Daniel Kahneman dan rakan-rakannya. Menurut konsep ini, tingkah laku manusia dikawal oleh dua sistem membuat keputusan yang berinteraksi. Sistem 1 adalah pantas dan automatik, memastikan keselamatan badan dan tidak memerlukan usaha yang ketara untuk merumuskan penyelesaian. Sistem ini belajar berdasarkan pengalaman yang diterima oleh seseorang sepanjang hayat. Ketepatan keputusan sistem ini bergantung pada pengalaman dan latihan peribadi, dan kelajuan bergantung pada ciri-ciri sistem saraf individu. Sistem 2 lambat dan memerlukan usaha dan tumpuan. Dia memberikan kita penaakulan yang kompleks dan inferens logik, karyanya mendedahkan potensi kecerdasan manusia. Walau bagaimanapun, operasi sistem ini secara intensif menggunakan sumber - tenaga dan perhatian. Oleh itu, kebanyakan keputusan dibuat oleh Sistem 1 - inilah cara tingkah laku manusia menjadi lebih berkesan. Sistem 1 mengambil masa yang lama untuk belajar kerana usaha yang dilakukan oleh Sistem 2, tetapi kemudian memberikan reaksi automatik yang cepat. Sistem 2 adalah penyelesai masalah yang serba boleh, tetapi ia lambat dan cepat letih. Ia adalah mungkin untuk "membesarkan" Sistem 2, tetapi had kemungkinan penambahbaikan adalah sangat sederhana dan ia mengambil masa yang lama dan memerlukan usaha keras. “Naik Taraf” Sistem 1 sangat diperlukan dalam masyarakat manusia. Apabila kita mencari seseorang yang berpengalaman dalam sesuatu, ini bermakna Sistem 1nya dilatih untuk menyelesaikan masalah yang kita perlukan dengan cepat.

Saya menganggap ujian terhad masa sebagai cara terbaik untuk menilai keupayaan Sistem 1 orang tertentu dalam bidang pengetahuan tertentu. Setelah selesai, ujian membolehkan anda menilai dan membandingkan sebilangan besar calon dengan cepat. Ini adalah alat untuk mendigitalkan kawalan pengetahuan dan kemahiran.

Bagaimana untuk membuat ujian yang baik?

Tujuan ujian yang direka dengan baik adalah untuk menentukan tahap di mana calon dilatih dalam Sistem 1 untuk pengetahuan dan kemahiran yang anda perlukan. Untuk membuat ujian sedemikian, anda perlu memutuskan topik dan kemahiran yang diperlukan terlebih dahulu, kemudian mencipta soalan dan pilihan jawapan.

Jadi, berikut ialah kriteria saya untuk menyediakan ujian yang menilai pengetahuan dan kemahiran calon dengan tepat dan cekap:

1. Soalan dan pilihan jawapan hendaklah mudah. Sama ada anda tahu jawapan yang betul atau tidak. Anda tidak seharusnya memasukkan keperluan untuk penaakulan dan pengiraan yang kompleks dalam ujian.
2. Ujian mesti diselesaikan dalam had masa. Anda juga boleh mengehadkan masa anda memikirkan setiap jawapan. Jika calon tidak dapat memutuskan jawapan dalam tempoh, katakan, 30 saat, maka tidak mungkin perbincangan yang panjang akan membantunya. Ia juga mesti sukar untuk Google jawapan yang betul dalam 30 saat.
3. Soalan harus mengenai amalan yang benar-benar diperlukan dalam kerja - bukan abstrak dan teori, tetapi praktikal semata-mata.
4. Adalah dinasihatkan untuk mempunyai beberapa soalan untuk setiap topik kecil. Soalan ini mungkin berbeza-beza untuk calon yang berbeza (ini serupa dengan versi ujian yang berbeza di sekolah) atau semuanya hadir dalam versi ujian yang lebih panjang.
5. Bilangan soalan dan masa untuk menyelesaikan ujian mesti dikaitkan dengan ketat. Ukur berapa lama masa yang diambil untuk membaca soalan dan pilihan jawapan. Tambahkan pada masa ini 10-20 saat untuk setiap soalan - inilah masanya untuk berfikir dan memilih jawapan.
6. Adalah dinasihatkan untuk mencuba ujian ke atas pekerja anda dan merekodkan masa penyiapan mereka untuk menentukan masa yang mencukupi untuk calon menyelesaikan ujian.
7. Skop ujian bergantung kepada tujuan penggunaannya. Untuk penilaian awal kompetensi, pada pendapat saya, 10-30 soalan dengan had masa 5-15 minit sudah memadai. Untuk diagnostik kemahiran yang lebih terperinci, ujian yang berlangsung selama 30-45 minit dan mengandungi 50-100 soalan adalah sesuai.

Sebagai contoh, berikut ialah ujian yang saya bangunkan dan gunakan baru-baru ini apabila memilih calon untuk jawatan perekrut IT. 6 minit diperuntukkan untuk menyelesaikan ujian; masa dikawal secara manual dan parol. Semua calon yang diuji bertemu kali ini. Saya mengambil masa 30 minit untuk menyusun ujian. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Anda boleh mengambil ujian dan pada akhirnya anda boleh melihat di mana anda membuat kesilapan. Apabila calon mengambil ujian ini, mereka tidak menunjukkan sebarang kesilapan; kami kemudiannya menyelesaikan kesilapan semasa temu duga dengan calon yang membuat tidak lebih daripada 3 kesilapan.

Tools

Sekarang saya membuat ujian dan tinjauan menggunakan Borang Google - ia adalah alat yang mudah, mudah, serba boleh dan percuma. Walau bagaimanapun, saya kekurangan beberapa fungsi untuk memanggil Borang Google sebagai alat yang baik untuk membuat ujian. Aduan utama saya tentang Borang Google:

1. Tiada perakaunan dan kawalan masa yang dihabiskan pada keseluruhan ujian dan pada setiap soalan. Ini memberikan lebih banyak maklumat tentang tingkah laku calon semasa ujian.
2. Memandangkan Borang Google tidak direka bentuk untuk ujian secara lalai, banyak pilihan yang penting untuk ujian (contohnya, "jawapan soalan diperlukan" dan "kocok jawapan") perlu diklik untuk setiap soalan - yang memerlukan masa dan perhatian. Agar setiap soalan ditanya pada skrin yang berasingan, anda perlu membuat bahagian berasingan untuk setiap soalan, dan ini juga membawa kepada sejumlah besar klik tambahan.
3. Jika anda perlu membuat ujian baharu sebagai gabungan serpihan daripada beberapa ujian sedia ada (contohnya, ujian untuk pembangun tindanan penuh dipasang daripada sebahagian soalan untuk bahagian hadapan dan hujung belakang dalam bahasa tertentu), maka anda perlu menduplikasi soalan secara manual. Tiada cara untuk memilih dan menyalin berbilang bahagian atau soalan ke borang lain.

Rakan sekerja, jika anda tahu penyelesaian terbaik untuk membuat ujian, sila tulis tentangnya dalam ulasan.

Sumber: www.habr.com