Testleri kullanarak yeterlilikleri test etme - neden ve nasıl

makalesinde Büyük, hacimli ve zaman alıcı bir teknik görüşme yapmadan önce uygulanabilecek, BT uzmanlarının yetkinliklerini hızlı bir şekilde test etmenin 7 yoluna baktım. Daha sonra sınırlı süreli testlere olan sempatimi dile getirdim. Bu yazımda testler konusunu daha detaylı ele alacağım.

Süresi sınırlı testler, herhangi bir meslekteki herhangi bir uzmanın bilgi ve pratik becerilerini test etmek için çok uygun olan evrensel bir araçtır.

Yani görev şu: Bir açık pozisyon için aday yanıtları akışımız var, adayların becerileri ve açık pozisyonumuzun gerekliliklerine uygunlukları hakkında hızlı ve kolay bir şekilde ek bilgi edinmemiz gerekiyor. Adayların yeterliliklerinin bu şekilde doğrulanmasının çok fazla zamanımızı almamasını, son derece güvenilir olmasını ve adayların doğrulamamıza girmeyi kabul etmeleri açısından uygun olmasını istiyoruz.

Bu soruna iyi bir çözüm, süresi sınırlı olan kısa testlerdir. Sınırlı olan, sınavın başladığı an değil, adayın soruları cevaplaması gereken süredir. Böyle bir testin tipik bir örneği, ehliyet alma sınavının ilk aşaması olan trafik kuralları testidir. 20 soruyu 20 dakikada cevaplamanız gerekiyor.

Biraz teori

Bir önceki yazıda Daniel Kahneman ve meslektaşlarının önerdiği Homo sapiens karar vermenin hibrit modelinden bahsettim. Bu kavrama göre insan davranışı birbiriyle etkileşim halinde olan iki karar verme sistemi tarafından yönetilmektedir. Sistem 1 hızlı ve otomatiktir, vücudun güvenliğini sağlar ve çözüm formüle etmek için fazla çaba gerektirmez. Bu sistem, kişinin yaşamı boyunca edindiği deneyimlere dayanarak öğrenir. Bu sistemin kararlarının doğruluğu kişisel tecrübe ve eğitime, hızı ise bireyin sinir sisteminin özelliklerine bağlıdır. Sistem 2 yavaştır ve çaba ve konsantrasyon gerektirir. Bize karmaşık akıl yürütme ve mantıksal çıkarım sağlıyor; çalışmaları insan zekasının potansiyelini ortaya çıkarıyor. Ancak bu sistemin çalışması, kaynakları - enerjiyi ve dikkati - yoğun bir şekilde tüketir. Bu nedenle çoğu karar Sistem 1 tarafından alınır; insan davranışı bu şekilde çok daha etkili hale gelir. Sistem 1'in öğrenmesi, Sistem 2'nin gösterdiği çaba nedeniyle uzun zaman alır, ancak daha sonra hızlı otomatik tepkiler verir. Sistem 2 çok yönlü bir problem çözücüdür ancak yavaştır ve çabuk yorulur. Sistem 2'yi "pompalamak" mümkündür, ancak olası iyileştirmelerin sınırları çok mütevazıdır ve uzun zaman alır ve yoğun çaba gerektirir. Sistem 1'in "Yükseltilmesi" insan toplumunda büyük talep görüyor. Bir konuda deneyimli bir kişiyi aradığımızda, bu onun Sistem 1'inin ihtiyacımız olan sorunları hızlı bir şekilde çözmek için eğitilmiş olduğu anlamına gelir.

Belirli bir kişinin belirli bir bilgi alanındaki Sistem 1'in yeteneklerini değerlendirmenin en iyi yolu olarak zaman sınırlı testlerin olduğunu düşünüyorum. Test tamamlandıktan sonra çok sayıda adayı hızlı bir şekilde değerlendirmenize ve karşılaştırmanıza olanak tanır. Bu, bilgi ve becerilerin kontrolünü dijitalleştirmek için bir araçtır.

İyi bir test nasıl yapılır?

İyi tasarlanmış bir testin amacı, adayın ihtiyaç duyduğunuz bilgi ve beceriler açısından Sistem 1'de ne ölçüde eğitildiğini belirlemektir. Böyle bir test oluşturmak için öncelikle konulara ve gerekli becerilere karar vermeniz, ardından soru ve cevap seçeneklerini oluşturmanız gerekir.

Adayın bilgi ve becerilerini doğru ve etkili bir şekilde değerlendirecek bir test hazırlamak için kriterlerim şunlardır:

  1. Sorular ve cevap seçenekleri basit olmalıdır. Ya doğru cevabı biliyorsunuz ya da bilmiyorsunuz. Karmaşık akıl yürütme ve hesaplama ihtiyacını teste dahil etmemelisiniz.
  2. Testin belirli bir süre içerisinde tamamlanması gerekmektedir. Her cevap hakkında düşündüğünüz süreyi bile sınırlayabilirsiniz. Bir aday, örneğin 30 saniye içinde bir cevaba karar veremezse, uzun süreli müzakerenin ona yardımcı olması pek olası değildir. Google'da 30 saniyede doğru cevabı bulmak da zor olsa gerek.
  3. Sorular işte gerçekten ihtiyaç duyulan uygulamalarla ilgili olmalıdır - soyut ve teorik değil, tamamen pratik.
  4. Her küçük konu için birkaç soru sormanız tavsiye edilir. Bu sorular farklı adaylar için farklılık gösterebilir (bu, okuldaki farklı test versiyonlarına benzer) veya hepsi testin daha uzun bir versiyonunda mevcut olabilir.
  5. Soru sayısı ve testi tamamlama süresi kesin olarak bağlantılı olmalıdır. Soruları ve cevap seçeneklerini okumanın ne kadar sürdüğünü ölçün. Her soru için bu süreye 10-20 saniye ekleyin; bu, düşünme ve bir cevap seçme zamanıdır.
  6. Adayların testi tamamlaması için yeterli süreyi belirlemek amacıyla testi çalışanlarınız üzerinde denemeniz ve tamamlama sürelerini kaydetmeniz önerilir.
  7. Testin kapsamı kullanım amacına bağlıdır. Yeterliliklerin ilk değerlendirmesi için 10-30 dakikalık sürelerle 5-15 soru yeterlidir diye düşünüyorum. Becerilerin daha ayrıntılı teşhisi için 30-45 dakika süren ve 50-100 soru içeren testler uygundur.

Örnek olarak, yakın zamanda bir BT işe alım pozisyonu için aday seçerken geliştirip kullandığım bir testi burada bulabilirsiniz. Testi tamamlamak için 6 dakika ayrıldı; süre manuel olarak ve şartlı tahliyeyle kontrol edildi. Test edilen adayların tümü bu sefer buluştu. Testi hazırlamak 30 dakikamı aldı. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Testi çözebilir ve sonunda nerede hata yaptığınızı görebilirsiniz. Adaylara bu sınavda herhangi bir hata gösterilmemişti, daha sonra 3'ten fazla hata yapmayan adaylarla yapılan görüşmelerde hataları ayıkladık.

Araçlar

Artık Google Formlar'ı kullanarak testler ve anketler oluşturuyorum; bu basit, kullanışlı, çok yönlü ve ücretsiz bir araçtır. Ancak Google Formlar'ı testler oluşturmak için iyi bir araç olarak adlandıracak bazı işlevlerden yoksunum. Google Formlar ile ilgili ana şikayetlerim:

  1. Hem testin tamamına hem de her soruya harcanan zamanın muhasebesi ve kontrolü yoktur. Bu, adayın test sırasındaki davranışı hakkında daha fazla bilgi sağlar.
  2. Google Formlar varsayılan olarak testler için tasarlanmadığından, testler için önemli olan birçok seçeneğin (örneğin, "sorunun yanıtı gerekli" ve "yanıtları karıştır") her soru için tıklatılması gerekir; bu da zaman ve dikkat gerektirir. Her sorunun ayrı bir ekranda sorulabilmesi için her soru için ayrı bölümler oluşturmanız gerekir ve bu da çok sayıda ek tıklamaya neden olur.
  3. Mevcut birkaç testten alınan parçaların bir kombinasyonu olarak yeni bir test yapmanız gerekiyorsa (örneğin, tam yığın geliştirici için bir test, belirli bir dilde ön uç ve arka uç için soruların bir kısmından birleştirilir), o zaman şunları yapmanız gerekir: soruları manuel olarak çoğaltın. Birden fazla bölümü veya soruyu seçip başka bir forma kopyalamanın yolu yoktur.

Meslektaşlarım, testler oluşturmak için en iyi çözümleri biliyorsanız, lütfen yorumlarda bunlar hakkında yazın.

Kaynak: habr.com

Yorum ekle