Verificando competências com testes - por que e como

Em seu artigo Analisei 7 maneiras de testar rapidamente as competências dos profissionais de TI que podem ser aplicadas antes de realizar uma entrevista técnica grande, longa e demorada. Então, expressei minha simpatia pelos testes de tempo limitado. Neste artigo, abordarei o tópico de testes com mais detalhes.

Os testes de tempo limitado são uma ferramenta universal adequada para testar o conhecimento e as habilidades práticas de qualquer especialista em qualquer profissão.

Portanto, a tarefa - temos um fluxo de candidatos a uma vaga, precisamos obter informações adicionais de maneira rápida e fácil sobre as habilidades dos candidatos e sua conformidade com os requisitos de nossa vaga. Queremos que tais testes de competências dos candidatos sejam rápidos, confiáveis ​​em alto grau e convenientes para os candidatos, para que eles concordem em ser testados por nós.

Uma boa solução para esta tarefa são os testes curtos, limitados no tempo. Não é o momento do início da prova que é limitado, mas o tempo em que o candidato deve responder às questões. Um exemplo típico desse teste é o conhecimento das regras do teste de estrada, que é a primeira etapa do teste para a obtenção da carteira de motorista. Você tem 20 perguntas para responder em 20 minutos.

Um pouco de teoria

Em um artigo anterior Falei sobre o modelo híbrido de tomada de decisão do Homo sapiens proposto por Daniel Kahneman e seus colegas. De acordo com esse conceito, o comportamento humano é controlado por dois sistemas interativos de tomada de decisão. O Sistema 1 é rápido e automático, garante a segurança do corpo e não requer esforço significativo para formar uma solução. Este sistema aprende com base na experiência que uma pessoa recebe durante sua vida. A precisão das decisões desse sistema depende da experiência e treinamento pessoal, e a velocidade depende das características do sistema nervoso do indivíduo. O sistema 2 é lento, requer esforço e concentração. Ela nos fornece raciocínios complexos e conclusões lógicas, sua obra revela o potencial da inteligência humana. No entanto, a operação desse sistema consome intensamente recursos - energia e atenção. Portanto, a maioria das decisões são tomadas pelo Sistema 1 - dessa forma o comportamento humano se torna muito mais efetivo. O Sistema 1 aprende por muito tempo devido aos esforços feitos pelo Sistema 2, mas depois dá reações automáticas rápidas. O Sistema 2 é um solucionador de problemas de uso geral, mas é lento e cansativo rapidamente. É possível “bombear” o Sistema 2, mas os limites de melhorias possíveis são muito modestos e demorados e exigem muito esforço. O “bombeamento” do Sistema 1 é muito procurado na sociedade humana.Quando procuramos uma pessoa que tenha experiência em algo, isso significa que seu Sistema 1 é treinado para resolver rapidamente os problemas de que precisamos.

A melhor maneira de avaliar as capacidades do Sistema 1 de uma determinada pessoa em uma determinada área do conhecimento, acho que os testes são limitados no tempo. Depois de compilado, o teste permite avaliar e comparar rapidamente um grande número de candidatos. Esta é uma ferramenta para digitalizar o controle de conhecimentos e habilidades.

Como fazer um bom teste?

O objetivo de um teste bem planejado é determinar o grau em que o candidato do Sistema 1 é treinado no conhecimento e nas habilidades de que você precisa. Para criar esse teste, primeiro você precisa decidir sobre os tópicos e as habilidades necessárias e, em seguida, escrever perguntas e opções de resposta.

Então, aqui estão meus critérios para preparar um teste que avalie com precisão e precisão os conhecimentos e habilidades de um candidato:

  1. As perguntas e as opções de resposta devem ser simples. Ou você sabe a resposta correta ou não. Você não deve testar a necessidade de raciocínios e cálculos complexos.
  2. O teste deve ser limitado no tempo. Você pode até limitar o tempo para pensar em cada resposta. Se um candidato não conseguir decidir sobre uma resposta em, digamos, 30 segundos, é improvável que muita reflexão o ajude. Pesquisar no Google a resposta certa em 30 segundos também deve ser difícil.
  3. As perguntas devem ser sobre práticas realmente necessárias no trabalho - não abstratas e teóricas, mas puramente práticas.
  4. É desejável que haja várias perguntas para cada pequeno tópico. Essas perguntas podem mudar para diferentes candidatos (isso é semelhante a diferentes versões de testes na escola) ou todas estão presentes em uma versão mais longa do teste.
  5. O número de perguntas e o tempo para fazer o teste devem estar intimamente ligados. Meça quanto tempo leva para ler as perguntas e as opções de resposta. Adicione a esse tempo 10 a 20 segundos para cada pergunta - esse é o momento de pensar e escolher uma resposta.
  6. É aconselhável experimentar o teste em seus funcionários e acompanhar o tempo de passagem para determinar o tempo suficiente para os candidatos passarem no teste.
  7. O escopo do teste depende da finalidade de sua aplicação. Para a avaliação inicial de competências, na minha opinião, 10 a 30 perguntas são suficientes com um limite de tempo de 5 a 15 minutos. Para um diagnóstico mais detalhado das habilidades, são adequados testes de 30 a 45 minutos contendo 50 a 100 perguntas.

Por exemplo, aqui está um teste que desenvolvi e usei recentemente ao selecionar candidatos para o cargo de recrutador de TI. O teste foi dado 6 minutos, o tempo foi controlado manualmente e em liberdade condicional. Todos os candidatos testados se enquadram nesse prazo. Levei 30 minutos para concluir o teste. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Você pode fazer o teste e no final pode ver onde errou. Quando os candidatos passaram neste teste, nenhum erro foi mostrado a eles, analisamos os erros posteriormente em entrevistas com candidatos que cometeram no máximo 3 erros.

Ferramentas

Agora crio testes e pesquisas usando o Google Forms - é uma ferramenta simples, conveniente, versátil e gratuita. No entanto, me falta alguma funcionalidade para chamar o Google Forms de uma boa ferramenta para criar testes. Minhas principais reclamações sobre o Google Forms:

  1. Não há contabilização e controle do tempo gasto tanto em todo o teste quanto em cada questão. Isso dá mais informações sobre o comportamento do candidato durante o teste.
  2. Como o Formulários Google não é projetado para testes por padrão, muitas opções importantes para testes (por exemplo, "resposta de pergunta obrigatória" e "respostas aleatórias") precisam ser "clicadas" para cada pergunta - o que requer tempo e atenção. Para que cada pergunta seja feita em uma tela separada, você precisa criar seções separadas para cada pergunta, o que também leva a um grande número de cliques adicionais.
  3. Se você precisar fazer um novo teste como uma combinação de fragmentos de vários testes existentes (por exemplo, um teste para um desenvolvedor fullstack coletar uma parte das perguntas para o front-end e o back-end em um determinado idioma), será necessário duplicar as perguntas à mão. Não há como selecionar e copiar várias seções ou perguntas para outro formulário.

Colegas, se você conhece as melhores soluções para criar testes, escreva sobre elas nos comentários.

Fonte: habr.com

Adicionar um comentário