{"id":95924,"date":"2020-10-05T01:42:16","date_gmt":"2020-10-04T23:42:16","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij"},"modified":"2020-10-05T01:42:16","modified_gmt":"2020-10-04T23:42:16","slug":"progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pt\/blog\/administrirovanie\/progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij","title":{"rendered":"Uma caminhada sobre os obst\u00e1culos: 10 erros cr\u00edticos na elabora\u00e7\u00e3o de testes para verifica\u00e7\u00e3o de conhecimentos","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"<p><noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/skillfactory\/blog\/519748\/\"><img decoding=\"async\" alt=\"Uma caminhada sobre os obst\u00e1culos: 10 erros cr\u00edticos na elabora\u00e7\u00e3o de testes para verifica\u00e7\u00e3o de conhecimentos\" src=\"\/wp-content\/uploads\/2020\/10\/e3547e90a2a706eaf5c29ea9498a1331.jpeg\" style=\"display:block;margin: 0 auto;\" \/><\/a><\/noindex><br \/>\nAntes de se inscrever em um novo curso de Machine Learning Avan\u00e7ado, testamos os futuros alunos para determinar seu n\u00edvel de prontid\u00e3o e entender o que exatamente precisamos oferecer para prepar\u00e1-los para o curso. Mas surge um dilema: por um lado, precisamos verificar o conhecimento em Data Science, por outro, n\u00e3o podemos aplicar um exame completo de 4 horas.<\/p>\n<p>Para resolver essa quest\u00e3o, estabelecemos um escrit\u00f3rio de TestDev diretamente na equipe de desenvolvimento dos cursos de Data Science (e parece que isso \u00e9 apenas o come\u00e7o). Apresentamos a voc\u00eas uma lista de 10 \"tranqueiras\" que podem atrapalhar no desenvolvimento de testes para avaliar o conhecimento. Esperamos que o mundo do ensino online melhore um pouco ap\u00f3s isso.<br \/>\n<noindex><a rel=\"nofollow\" name=\"habracut\"><\/a><\/noindex><\/p>\n<h2>Tranqueira 1: N\u00e3o definir claramente os objetivos da avalia\u00e7\u00e3o<\/h2>\n<p>\nPara definir corretamente os objetivos e criar um teste que os leve em considera\u00e7\u00e3o, na fase de planejamento devemos nos fazer algumas perguntas:<\/p>\n<ol>\n<li>O que estamos realmente avaliando?\u00a0<\/li>\n<li>Em qual ambiente a avalia\u00e7\u00e3o ocorrer\u00e1 e que mec\u00e2nicas ser\u00e3o utilizadas? Quais s\u00e3o as limita\u00e7\u00f5es desse ambiente? Esse ponto tamb\u00e9m ajudar\u00e1 a entender os requisitos t\u00e9cnicos para o dispositivo no qual a avalia\u00e7\u00e3o ser\u00e1 realizada, al\u00e9m de incluir o conte\u00fado (se o teste for realizado em celulares, as imagens devem ser leg\u00edveis mesmo em telas pequenas, deve haver a possibilidade de aument\u00e1-las, etc.).<\/li>\n<li>Quanto tempo durar\u00e1 a avalia\u00e7\u00e3o? \u00c9 necess\u00e1rio pensar nas condi\u00e7\u00f5es em que o usu\u00e1rio far\u00e1 o teste. Pode haver a situa\u00e7\u00e3o em que ele precise interromper o processo da avalia\u00e7\u00e3o e depois continuar?<\/li>\n<li>Haver\u00e1 feedback? Como o formamos e entregamos? O que \u00e9 necess\u00e1rio para receb\u00ea-lo? Existe um intervalo de tempo entre a realiza\u00e7\u00e3o do teste e o feedback?<\/li>\n<\/ol>\n<p>\nNo nosso caso, ao responder a essas perguntas, definimos para o teste a seguinte lista de objetivos:<\/p>\n<ol>\n<li>O teste deve mostrar se os futuros alunos est\u00e3o prontos para realizar o curso, se possuem conhecimento e habilidades suficientes.<\/li>\n<li>O teste deve nos fornecer material para feedback, indicando o tema em que os alunos cometeram erros, para que possam melhorar seus conhecimentos. Como elabor\u00e1-lo \u2013 n\u00f3s explicaremos a seguir.<\/li>\n<\/ol>\n<p><\/p>\n<h2>Tranqueira 2: N\u00e3o elaborar um TZ para o especialista \u2013 criador do teste<\/h2>\n<p>\nPara a elabora\u00e7\u00e3o de tarefas de teste, \u00e9 muito importante envolver um especialista na \u00e1rea cujos conhecimentos est\u00e3o sendo verificados. E para o especialista, \u00e9 necess\u00e1rio um briefing (descri\u00e7\u00e3o) bem estruturado, que inclua os t\u00f3picos do teste, os conhecimentos\/habilidades a serem verificados e seu n\u00edvel. <\/p>\n<p>O especialista n\u00e3o ir\u00e1 elaborar esse briefing para si mesmo, pois seu trabalho \u00e9 criar as tarefas, n\u00e3o a estrutura do teste. Al\u00e9m disso, ainda h\u00e1 poucos que desenvolvem testes de forma profissional, mesmo durante o ensino. Isso \u00e9 ensinado em uma especialidade separada \u2014 psicometria.<\/p>\n<p><i>Se voc\u00ea deseja se familiarizar rapidamente com psicometria, na R\u00fassia h\u00e1<noindex><a rel=\"nofollow\" href=\"https:\/\/letnyayashkola.org\/testovaya\/\"> uma escola de ver\u00e3o<\/a><\/noindex> para todos os interessados. Para um estudo mais aprofundado, no Instituto de Educa\u00e7\u00e3o h\u00e1 <noindex><a rel=\"nofollow\" href=\"https:\/\/www.hse.ru\/ma\/psyedu\/\">um mestrado<\/a><\/noindex> e doutorado.<\/i><\/p>\n<p>Ao preparar o briefing, reunimos uma descri\u00e7\u00e3o detalhada do teste para o especialista (ou melhor, junto com ele): t\u00f3picos das tarefas, tipo das tarefas, sua quantidade.<\/p>\n<p>Como escolher o tipo de tarefa: ap\u00f3s determinar os t\u00f3picos, decidimos quais tarefas podem verificar isso da melhor forma? As op\u00e7\u00f5es cl\u00e1ssicas incluem: tarefa de resposta aberta, tarefa de m\u00faltipla ou \u00fanica escolha, correspond\u00eancias, etc. (n\u00e3o esque\u00e7amos das limita\u00e7\u00f5es t\u00e9cnicas do ambiente em que o teste est\u00e1 sendo realizado!). Ap\u00f3s a defini\u00e7\u00e3o e descri\u00e7\u00e3o do tipo de tarefa, temos um briefing pronto para o especialista. Podemos cham\u00e1-lo de especifica\u00e7\u00e3o do teste.<\/p>\n<h2>Armadilha 3: N\u00e3o envolver o especialista no desenvolvimento do teste<\/h2>\n<p>\nAo envolver o especialista no desenvolvimento do teste, \u00e9 muito importante n\u00e3o apenas definir para ele \"o escopo do trabalho\", mas envolv\u00ea-lo no pr\u00f3prio processo de desenvolvimento.<\/p>\n<p>Como maximizar a efic\u00e1cia do trabalho com o especialista:<\/p>\n<ul>\n<li>Prepar\u00e1-lo com anteced\u00eancia e gastar algum tempo explicando a ci\u00eancia do desenvolvimento de testes, psicometria.<\/li>\n<li>Focar a aten\u00e7\u00e3o do especialista na cria\u00e7\u00e3o de uma ferramenta de avalia\u00e7\u00e3o v\u00e1lida e confi\u00e1vel, em vez de uma lista de perguntas.<\/li>\n<li>Deixar claro que seu trabalho inclui uma fase preparat\u00f3ria, n\u00e3o apenas a elabora\u00e7\u00e3o das tarefas em si.<\/li>\n<\/ul>\n<p>\nAlguns especialistas (devido \u00e0 sua natureza) podem interpretar isso como uma verifica\u00e7\u00e3o de seu pr\u00f3prio trabalho, e para eles explicamos que mesmo ao criar tarefas excelentes, estas podem simplesmente n\u00e3o se adequar a objetivos espec\u00edficos de teste.<\/p>\n<p>Para que o processo seja r\u00e1pido, preparamos com um especialista uma tabela de cobertura dos temas (conhecimentos e habilidades), que faz parte da especifica\u00e7\u00e3o do teste. Essa tabela permite elaborar quest\u00f5es de forma precisa, determinando o que vamos medir. Em cada caso espec\u00edfico, ela pode ser montada de forma um pouco diferente. Nossa tarefa \u00e9 verificar o quanto a pessoa compreende os conhecimentos e habilidades dos cursos anteriores, para entender o qu\u00e3o preparada ela est\u00e1 para o novo curso. <\/p>\n<h2>Armadilha 4: Pensar que o especialista \"sabe melhor\"<\/h2>\n<p>\nSabe mais sobre o assunto. Mas nem sempre explica de forma clara. \u00c9 muito importante verificar as formula\u00e7\u00f5es das tarefas. Escrever instru\u00e7\u00f5es claras, como \"Escolha 1 op\u00e7\u00e3o correta\". Em 90% dos casos, os especialistas preparam as quest\u00f5es da maneira que lhes \u00e9 compreens\u00edvel. E isso \u00e9 normal. Mas antes de entregar o teste para aqueles que o far\u00e3o, \u00e9 necess\u00e1rio revisar e polir tudo, para que as pessoas que realizam o teste compreendam exatamente o que se espera delas, sem cometer erros apenas pela possibilidade de interpretar mal o texto da tarefa.<\/p>\n<p>Para evitar ambiguidade nas tarefas, realizamos \"laborat\u00f3rios cognitivos\". Pedimos a pessoas do nosso p\u00fablico-alvo que fa\u00e7am o teste, verbalizando em voz alta o que pensam, e registramos isso detalhadamente. Nos \"laborat\u00f3rios cognitivos\", \u00e9 poss\u00edvel identificar perguntas confusas, formula\u00e7\u00f5es ruins e receber o primeiro retorno sobre o teste.<\/p>\n<h2>Armadilha 5: N\u00e3o considerar o tempo de realiza\u00e7\u00e3o do teste<\/h2>\n<blockquote><p>modo sarcasmo: ativado<br \/>\nClaro, nosso teste \u00e9 o melhor, todos sonham em faz\u00ea-lo! Sim, todos os 4 horas.<br \/>\nmodo sarcasmo: desativado\n<\/p><\/blockquote>\n<p>Quando h\u00e1 uma lista de tudo o que pode ser verificado, o principal \u00e9 n\u00e3o fazer isso (aparentemente soa estranho, n\u00e3o \u00e9?). \u00c9 preciso cortar sem piedade, destacando com o especialista os conhecimentos e habilidades-chave (sim, uma s\u00e9rie de habilidades tamb\u00e9m pode ser verificadas no teste). Observamos o tipo de tarefas e estimamos o tempo alvo para execu\u00e7\u00e3o: se tudo ainda estiver al\u00e9m dos limites razo\u00e1veis \u2014 cortamos!<\/p>\n<p>Para reduzir o volume, tamb\u00e9m \u00e9 poss\u00edvel tentar (com cuidado) verificar duas habilidades com uma \u00fanica tarefa. Nesse caso, \u00e9 dif\u00edcil entender por que a pessoa cometeu um erro, mas se realizado corretamente, \u00e9 poss\u00edvel considerar ambas as habilidades. \u00c9 importante garantir que essas 2 habilidades perten\u00e7am a uma mesma \u00e1rea de conhecimento. <\/p>\n<h2>Armadilha 6: N\u00e3o pensar no sistema de pontua\u00e7\u00e3o<\/h2>\n<p>\nFrequentemente, ao elaborar testes de avalia\u00e7\u00e3o, \u00e9 utilizada a cl\u00e1ssica sistem\u00e1tica de pontua\u00e7\u00e3o, por exemplo, 1 ponto para tarefas f\u00e1ceis e 2 pontos para as dif\u00edceis. No entanto, essa abordagem n\u00e3o \u00e9 universal. Simplesmente somar os pontos obtidos no teste pouco nos dir\u00e1: n\u00e3o sabemos quais tarefas geraram essas pontua\u00e7\u00f5es e apenas podemos determinar a quantidade de respostas corretas. Precisamos ter uma compreens\u00e3o precisa das habilidades que os participantes do teste est\u00e3o demonstrando. Al\u00e9m disso, queremos fornecer feedback sobre quais t\u00f3picos precisam ser revisados.<\/p>\n<p>Estamos criando um teste que dividir\u00e1 as pessoas entre aquelas que est\u00e3o prontas e aquelas que n\u00e3o est\u00e3o para passar pelo programa; para alguns, sugeriremos uma prepara\u00e7\u00e3o para o curso de forma gratuita. \u00c9 importante para n\u00f3s que apenas aqueles que realmente precisam e est\u00e3o prontos sejam inclu\u00eddos nesse grupo.<\/p>\n<p>O que fazemos na nossa situa\u00e7\u00e3o: definimos dentro do grupo de trabalho de desenvolvedores do teste quais grupos de pessoas precisam ser destacados (por exemplo, prontos para o aprendizado, parcialmente prontos) e formamos uma tabela de caracter\u00edsticas desses grupos, indicando quais habilidades e conhecimentos ser\u00e3o relevantes para o grupo que est\u00e1 pronto para aprender. Assim podemos determinar a 'dificuldade' das tarefas para esses testes.<\/p>\n<h2>Armadilhas 7: Avaliar os resultados apenas automaticamente<\/h2>\n<p>\nCertamente, a avalia\u00e7\u00e3o deve ser o mais objetiva poss\u00edvel, portanto, parte dos materiais dos alunos \u00e9 avaliada automaticamente, 'por chave' \u2014 comparando com as respostas corretas. Mesmo que n\u00e3o exista um sistema especial de testes, h\u00e1 uma infinidade de solu\u00e7\u00f5es gratuitas. E se houver uma compreens\u00e3o dos princ\u00edpios de reda\u00e7\u00e3o de scripts, \u00e9 poss\u00edvel fazer qualquer coisa com formul\u00e1rios do Google e resultados em planilhas. Se parte das tarefas for revisada por especialistas, precisamos planejar a entrega das respostas para os especialistas, sem informa\u00e7\u00f5es sobre os candidatos. E pensar em como integrar os resultados da avalia\u00e7\u00e3o dos especialistas na avalia\u00e7\u00e3o final.<\/p>\n<p>Inicialmente, quer\u00edamos criar algumas tarefas abertas com c\u00f3digo, onde os especialistas avaliam as solu\u00e7\u00f5es com base em crit\u00e9rios pr\u00e9-definidos. Chegamos a preparar um sistema que exporta as respostas individuais dos participantes do teste para uma tabela especial para os especialistas e depois importa os resultados para uma tabela com o c\u00e1lculo das notas. Contudo, ap\u00f3s conversas com representantes do p\u00fablico-alvo, o gerente de produto e o designer instrucional, conclu\u00edmos que realizar uma entrevista t\u00e9cnica com feedback imediato do especialista e discuss\u00e3o do c\u00f3digo, assim como quest\u00f5es espec\u00edficas, seria muito mais eficaz e \u00fatil para os participantes. <\/p>\n<p>Agora, o especialista verifica a conclus\u00e3o do teste, esclarecendo algumas perguntas. Para isso, preparamos um guia de perguntas e crit\u00e9rios de avalia\u00e7\u00e3o para a entrevista t\u00e9cnica. Antes da entrevista t\u00e9cnica, o especialista recebe um mapa das respostas do participante do teste para escolher as perguntas que devem ser feitas.<\/p>\n<h2>Armando 8: N\u00e3o explicar os resultados do teste.<\/h2>\n<p>\nApresentar feedback aos participantes \u00e9 uma quest\u00e3o \u00e0 parte. Precisamos n\u00e3o apenas informar sobre a pontua\u00e7\u00e3o do teste, mas tamb\u00e9m fornecer uma compreens\u00e3o dos resultados do teste.<br \/>\nEstas podem ser:\u00a0<\/p>\n<ul>\n<li>Tarefas nas quais o participante errou, mas tamb\u00e9m aquelas que ele realizou corretamente.<\/li>\n<li>Temas em que o participante cometeu erros.<\/li>\n<li>Sua classifica\u00e7\u00e3o entre os que est\u00e3o fazendo o exame.<\/li>\n<li>Descri\u00e7\u00e3o do n\u00edvel do participante, de acordo com, por exemplo, a descri\u00e7\u00e3o de n\u00edveis de especialistas (com base nas descri\u00e7\u00f5es de vagas).<\/li>\n<\/ul>\n<p>\nDurante o lan\u00e7amento piloto do nosso teste, para aqueles que queriam se inscrever no programa, mostramos, junto com os resultados, uma lista de temas que precisavam ser revisados. Mas isso, claro, n\u00e3o \u00e9 o ideal; iremos aprimorar e tornar o feedback melhor.<\/p>\n<h2>Armando 9: N\u00e3o discutir o teste com os desenvolvedores.<\/h2>\n<p>\nSem d\u00favida, os erros mais cr\u00edticos a evitar - enviar o teste, a descri\u00e7\u00e3o e a escala de contagem para os desenvolvedores em seu estado 'como est\u00e1'.<br \/>\nO que exatamente precisa ser discutido:<\/p>\n<ul>\n<li>A apar\u00eancia das perguntas, estrutura, disposi\u00e7\u00e3o gr\u00e1fica, como se apresenta a escolha da resposta correta.<\/li>\n<li>Como a pontua\u00e7\u00e3o \u00e9 calculada (se necess\u00e1rio), se h\u00e1 condi\u00e7\u00f5es adicionais.<\/li>\n<li>Como o feedback \u00e9 formado, de onde obter os textos, se h\u00e1 blocos adicionais que se formam automaticamente.<\/li>\n<li>Que informa\u00e7\u00f5es adicionais voc\u00ea precisa coletar e em que momento (contatos, por exemplo).<\/li>\n<\/ul>\n<p>\nPara evitar mal-entendidos, pedimos aos nossos desenvolvedores que codifiquem 2 ou 3 perguntas diferentes, para que possamos ver como elas ficam antes de programar o pr\u00f3prio teste.<\/p>\n<h2>Armadilhas 10: N\u00e3o testar antes de colocar em produ\u00e7\u00e3o<\/h2>\n<p>\n3 vezes, pessoal, o teste deve ser verificado 3 vezes por pessoas diferentes, ou melhor \u2014 cada um por 3. Esta verdade foi conquistada com sangue, suor e pixels de linhas de c\u00f3digo. <\/p>\n<p>Nosso teste verifica este trio:<\/p>\n<ol>\n<li>Product Owner \u2014 verifica o teste quanto \u00e0 funcionalidade, apar\u00eancia e mec\u00e2nicas.<\/li>\n<li>Desenvolvedor do teste \u2014 verifica o texto das perguntas, a ordem, a forma de intera\u00e7\u00e3o com o teste, os tipos de perguntas, as respostas corretas, a legibilidade e a visualiza\u00e7\u00e3o adequada dos gr\u00e1ficos.<\/li>\n<li>Autor das perguntas (especialista) \u2014 verifica o teste quanto \u00e0 precis\u00e3o a partir de uma posi\u00e7\u00e3o especializada.<\/li>\n<\/ol>\n<p>\nUm exemplo pr\u00e1tico: somente na terceira execu\u00e7\u00e3o, o autor das perguntas percebeu que 1 pergunta permaneceu na antiga formula\u00e7\u00e3o. Todas as anteriores tamb\u00e9m foram ativamente corrigidas. Mas quando o teste foi codificado, ele parecia diferente do que inicialmente se imaginava. Com alta probabilidade, algo precisar\u00e1 ser ajustado. Isso deve ser levado em considera\u00e7\u00e3o.<\/p>\n<h2>Resultado<\/h2>\n<p>\nEvitando cuidadosamente todas essas \"armadilhas\", criamos um <noindex><a rel=\"nofollow\" href=\"https:\/\/teleg.run\/SkillTedbot?start=restart_BLZJkUuo\">bot no Telegram<\/a><\/noindex>, para teste de conhecimento de candidatos. Qualquer interessado pode test\u00e1-lo enquanto preparamos o pr\u00f3ximo material, onde contaremos o que aconteceu dentro do bot e como tudo isso se transformou depois.<\/p>\n<blockquote><p><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=banner&amp;utm_term=regular&amp;utm_content=banner\"><img decoding=\"async\" alt=\"Uma caminhada sobre os obst\u00e1culos: 10 erros cr\u00edticos na elabora\u00e7\u00e3o de testes para verifica\u00e7\u00e3o de conhecimentos\" src=\"\/wp-content\/uploads\/2020\/10\/7d6245756b99f06c516a6df2dc9d77ad.jpeg\" style=\"display:block;margin: 0 auto;\" \/><\/a><\/noindex><br \/>\nAdquirir uma profiss\u00e3o demandada do zero ou fazer um Level Up nas habilidades e no sal\u00e1rio pode ser feito ao participar dos cursos online da SkillFactory:<\/p>\n<ul>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/ml-programma-machine-learning-online?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=ML&amp;utm_term=regular&amp;utm_content=021020\">Curso de Machine Learning<\/a><\/noindex> (12 semanas)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/ml-and-dl?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=MLDL&amp;utm_term=regular&amp;utm_content=021020\">Curso avan\u00e7ado \"Machine Learning Pro + Deep Learning\"<\/a><\/noindex> (20 semanas)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/math_and_ml?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=MATML&amp;utm_term=regular&amp;utm_content=021020\">Curso \"Matem\u00e1tica e Machine Learning para Data Science\"<\/a><\/noindex> (20 semanas)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/data-scientist?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=DST&amp;utm_term=regular&amp;utm_content=021020\">Forma\u00e7\u00e3o para a profiss\u00e3o de Data Science desde o b\u00e1sico<\/a><\/noindex> (12 meses)<\/li>\n<\/ul>\n<p><\/p>\n<p>                        <b class=\"spoiler_title\">Mais cursos<\/b><\/p>\n<ul>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/data-scientist?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=DST&amp;utm_term=regular&amp;utm_content=021020\">Forma\u00e7\u00e3o para a profiss\u00e3o de Data Science desde o b\u00e1sico<\/a><\/noindex> (12 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/data-science-camp?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=DSC&amp;utm_term=regular&amp;utm_content=021020\">Bootcamp online em Data Science<\/a><\/noindex> (14 semanas)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/business-analytics-camp?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=BAC&amp;utm_term=regular&amp;utm_content=021020\">Bootcamp online em Data Analytics<\/a><\/noindex> (5 semanas)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/dataanalystpro?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=DAPR&amp;utm_term=regular&amp;utm_content=021020\">A profiss\u00e3o de analista com qualquer n\u00edvel de entrada<\/a><\/noindex> (18 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/analytics?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=SDA&amp;utm_term=regular&amp;utm_content=021020\">Curso em An\u00e1lise de Dados<\/a><\/noindex> (6 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/devops?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=DEVOPS&amp;utm_term=regular&amp;utm_content=021020\">Curso em DevOps<\/a><\/noindex> (12 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/webdev?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=WEBDEV&amp;utm_term=regular&amp;utm_content=021020\">Profiss\u00e3o Desenvolvedor Web<\/a><\/noindex> (8 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/python-for-web-developers?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=PWS&amp;utm_term=regular&amp;utm_content=021020\">Curso 'Python para Desenvolvimento Web'<\/a><\/noindex> (9 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/iosdev?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=IOSDEV&amp;utm_term=regular&amp;utm_content=021020\">Profiss\u00e3o Desenvolvedor iOS desde o b\u00e1sico<\/a><\/noindex> (12 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/android?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=ANDR&amp;utm_term=regular&amp;utm_content=021020\">Profiss\u00e3o Desenvolvedor Android desde o b\u00e1sico<\/a><\/noindex> (18 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/java?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=JAVA&amp;utm_term=regular&amp;utm_content=021020\">Profiss\u00e3o Desenvolvedor Java desde o b\u00e1sico<\/a><\/noindex> (18 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/skillfactory.ru\/javascript?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=FJS&amp;utm_term=regular&amp;utm_content=021020\">Curso em JavaScript<\/a><\/noindex> (12 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/contented.ru\/edu\/uxdesigner?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=UXS&amp;utm_term=regular&amp;utm_content=021020\">A carreira de UX Designer do zero<\/a><\/noindex> (9 meses)<\/li>\n<li><noindex><a rel=\"nofollow\" href=\"https:\/\/contented.ru\/edu\/webdesigner?utm_source=infopartners&amp;utm_medium=habr&amp;utm_campaign=WBDS&amp;utm_term=regular&amp;utm_content=021020\">A carreira de Web Designer<\/a><\/noindex> (7 meses)<\/li>\n<\/ul>\n<\/blockquote>\n<p>Fonte: <a content=\"nofollow\" rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/skillfactory\/blog\/519748\/\">habr.com<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"<p>\u041f\u0435\u0440\u0435\u0434 \u0437\u0430\u043f\u0438\u0441\u044c\u044e \u043d\u0430 \u043d\u043e\u0432\u044b\u0439 \u043a\u0443\u0440\u0441 Machine Learning Advanced \u043c\u044b \u0442\u0435\u0441\u0442\u0438\u0440\u0443\u0435\u043c \u0431\u0443\u0434\u0443\u0449\u0438\u0445 \u0441\u0442\u0443\u0434\u0435\u043d\u0442\u043e\u0432, \u0447\u0442\u043e\u0431\u044b \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0438\u0442\u044c \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u0438\u0445 \u0433\u043e\u0442\u043e\u0432\u043d\u043e\u0441\u0442\u0438 \u0438 \u043f\u043e\u043d\u044f\u0442\u044c, \u0447\u0442\u043e \u0438\u043c\u0435\u043d\u043d\u043e \u0438\u043c \u043d\u0435\u043e\u0431\u0445\u043e\u0434\u0438\u043c\u043e \u043f\u0440\u0435\u0434\u043b\u043e\u0436\u0438\u0442\u044c \u0434\u043b\u044f \u043f\u043e\u0434\u0433\u043e\u0442\u043e\u0432\u043a\u0438 \u043a \u043a\u0443\u0440\u0441\u0443. \u041d\u043e \u0432\u043e\u0437\u043d\u0438\u043a\u0430\u0435\u0442 \u0434\u0438\u043b\u0435\u043c\u043c\u0430: \u0441 \u043e\u0434\u043d\u043e\u0439 \u0441\u0442\u043e\u0440\u043e\u043d\u044b, \u043c\u044b \u0434\u043e\u043b\u0436\u043d\u044b \u043f\u0440\u043e\u0432\u0435\u0440\u0438\u0442\u044c \u0437\u043d\u0430\u043d\u0438\u044f \u043f\u043e Data Science, \u0441 \u0434\u0440\u0443\u0433\u043e\u0439 \u2014 \u043c\u044b \u043d\u0435 \u043c\u043e\u0436\u0435\u043c \u0443\u0441\u0442\u0440\u043e\u0438\u0442\u044c \u043f\u043e\u043b\u043d\u043e\u0446\u0435\u043d\u043d\u044b\u0439 4-\u0445 \u0447\u0430\u0441\u043e\u0432\u043e\u0439 \u044d\u043a\u0437\u0430\u043c\u0435\u043d. \u0414\u043b\u044f \u0440\u0435\u0448\u0435\u043d\u0438\u044f \u0442\u0430\u043a\u043e\u0439 [&hellip;]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":95925,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-95924","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t<!-- All in One SEO 5.0.4 - aioseo.com -->\n\t<meta name=\"robots\" content=\"max-image-preview:large\" \/>\n\t<meta name=\"author\" content=\"Yuri Gagarin\"\/>\n\t<link rel=\"canonical\" href=\"https:\/\/prohoster.info\/pt\/blog\/administrirovanie\/progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij\" \/>\n\t\t<meta name=\"generator\" content=\"All in One SEO (AIOSEO) 5.0.4\" \/>\n\t\t<meta property=\"og:locale\" content=\"pt_PT\" \/>\n\t\t<meta property=\"og:site_name\" content=\"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b\" \/>\n\t\t<meta property=\"og:type\" content=\"article\" \/>\n\t\t<meta property=\"og:title\" content=\"\ud83e\udd47\u041f\u0440\u043e\u0433\u0443\u043b\u043a\u0430 \u043f\u043e \u0433\u0440\u0430\u0431\u043b\u044f\u043c: 10 \u043a\u0440\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0445 \u043e\u0448\u0438\u0431\u043e\u043a \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0442\u0435\u0441\u0442\u0430 \u0434\u043b\u044f \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0438 \u0437\u043d\u0430\u043d\u0438\u0439 | ProHoster\" \/>\n\t\t<meta property=\"og:url\" content=\"https:\/\/prohoster.info\/pt\/blog\/administrirovanie\/progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij\" \/>\n\t\t<meta property=\"og:image\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:secure_url\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:width\" content=\"350\" \/>\n\t\t<meta property=\"og:image:height\" content=\"350\" \/>\n\t\t<meta property=\"article:published_time\" content=\"2020-10-04T23:42:16+00:00\" \/>\n\t\t<meta property=\"article:modified_time\" content=\"2020-10-04T23:42:16+00:00\" \/>\n\t\t<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<meta property=\"article:author\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<!-- All in One SEO -->\n\n","aioseo_head_json":{"title":"\ud83e\udd47Passando pelas armadilhas: 10 erros cr\u00edticos no desenvolvimento de testes de conhecimento | ProHoster","description":"","canonical_url":"https:\/\/prohoster.info\/pt\/blog\/administrirovanie\/progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"pt_PT","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041f\u0440\u043e\u0433\u0443\u043b\u043a\u0430 \u043f\u043e \u0433\u0440\u0430\u0431\u043b\u044f\u043c: 10 \u043a\u0440\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0445 \u043e\u0448\u0438\u0431\u043e\u043a \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0442\u0435\u0441\u0442\u0430 \u0434\u043b\u044f \u043f\u0440\u043e\u0432\u0435\u0440\u043a\u0438 \u0437\u043d\u0430\u043d\u0438\u0439 | ProHoster","og:url":"https:\/\/prohoster.info\/pt\/blog\/administrirovanie\/progulka-po-grablyam-10-kriticheskih-oshibok-razrabotki-testa-dlya-proverki-znanij","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-10-04T23:42:16+00:00","article:modified_time":"2020-10-04T23:42:16+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"95924","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 10:55:39","updated":"2022-09-30 20:19:26","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/posts\/95924","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/comments?post=95924"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/posts\/95924\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/media\/95925"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/media?parent=95924"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/categories?post=95924"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/pt\/wp-json\/wp\/v2\/tags?post=95924"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}