{"id":1693,"date":"2013-04-03T23:49:27","date_gmt":"2013-04-04T02:49:27","guid":{"rendered":"http:\/\/scienceblogs.com.br\/vqeb\/?p=1693"},"modified":"2013-04-03T23:49:27","modified_gmt":"2013-04-04T02:49:27","slug":"as-maquinas-de-corrigir-provas","status":"publish","type":"post","link":"https:\/\/www.blogs.unicamp.br\/vqeb2\/2013\/04\/03\/as-maquinas-de-corrigir-provas\/","title":{"rendered":"As m\u00e1quinas de corrigir provas"},"content":{"rendered":"


\n\"Caf\u00e9<\/a><\/p>\n

Voc\u00eas todos devem ter visto o caso dos alunos que publicaram receita de pizza na reda\u00e7\u00e3o do ENEM e ganharam nota m\u00e1xima. O MEC ficou na maior ‘saia justa’ e demitiram um monte de professores. Disseram tamb\u00e9m que a partir agora tem que ter doutorado para corrigir reda\u00e7\u00e3o (um absurdo!) e as reda\u00e7\u00f5es com nota m\u00e1xima ser\u00e3o revisadas ainda mais uma vez.<\/p>\n

Bom, eu tenho que confessar que fizemos algo parecido ao que esses estudantes fizeram uma vez na faculdade:\u00a0“…porque as raz\u00f5es de f\u00f3sforo e nitrog\u00eanio no lago ‘e se o professor ler esse trabalho vai ganhar uma caixa de cerveja<\/span>‘ n\u00e3o responderam de maneira esperada…”.<\/em><\/p>\n

Ele nunca veio cobrar o pr\u00eamio e tiramos 7 no trabalho.\u00a0Se eu tivesse que apostar, apostaria que nesse caso espec\u00edfico da receita de pizza, os professores que corrigiram a reda\u00e7\u00e3o na verdade n\u00e3o corrigiram nada.<\/p>\n

Mas… e nos outros casos onde o professor realmente corrigiu a reda\u00e7\u00e3o e h\u00e1 uma grande discrep\u00e2ncia entre o que (a qualidade do que) o aluno escreveu e a nota, ou boa ou ruim, que ele tirou? Ser\u00e1 que colocar mais de um corretor ou repetir a corre\u00e7\u00e3o resolve a quest\u00e3o da discrep\u00e2ncia entre notas?<\/p>\n

O caso foi bem retratato por Leonard Modlinow em seu livro ‘O andar do b\u00eabado’.<\/a> Depois que uma professora de ingl\u00eas deu 9,3 para um trabalho que ele, um escritor profissional, tinha feito no lugar do filho, ele se questionou sobre os erros de medi\u00e7\u00e3o dos professores ao corrigir trabalhos:<\/p>\n

\n“Se aceitarmos\u00a0que \u00e9\u00a0poss\u00edvel\u00a0de\u00a0alguma forma definir\u00a0a\u00a0qualidade\u00a0de um\u00a0trabalho,\u00a0devemos ainda assim reconhecer\u00a0que a\u00a0nota n\u00e3o\u00a0\u00e9 uma\u00a0descri\u00e7\u00e3o\u00a0do seu grau de qualidade, mas sim uma medi\u00e7\u00e3o<\/span> dessa qualidade, e uma das mais importantes maneiras pelas quais a aleatoriedade nos afeta \u00e9 por meio de sua influ\u00eancia nas medi\u00e7\u00f5es. Neste caso, o aparelho de medi\u00e7\u00e3o era a professora e a avalia\u00e7\u00e3o de qualquer profiossional, como qualquer medi\u00e7\u00e3o, est\u00e1 sujeita a varia\u00e7\u00f5es e erros aleat\u00f3rios.”<\/em>
\nEle conta o caso em que dois amigos do filho apresentaram trabalhos id\u00eanticos para a professora e ela, al\u00e9m de n\u00e3o ter notado, deu nota 9,0 para um e 7,9 para outro. Como \u00e9 que pode?! Sim… pode.\n<\/div>\n

Outros estudos<\/a>\u00a0mostram que o ambiente que nos rodeia no momento de uma avalia\u00e7\u00e3o, influencia nessa avalia\u00e7\u00e3o.<\/p>\n

\n

“se uma professora d\u00e1 notas numa escada de 0,0 a 10,0; essas minimas distin\u00e7\u00f5es entra as notas devem realmente significar alguma coisa. Mas se 10 editores puderam considerar que o manuscrito do primeiro Harry potter nao merecia ser publicado, como \u00e9 poss\u00edvel que a professor conseguisse distinguir os trabalhos com tranta precis\u00e3o, dando nota 9,2 a um e 9,3 a outro?”<\/em><\/p>\n

E na verdade, quando um grupo de pesquisadores da universidade de Clarion distribuiu 120 monografias para serem avaliadas, independentemente, pasmem, por 80 professores; os conceitos resultantes, numa escala de A a F, por vezes apresentaram varia\u00e7\u00f5es de 2 ou mais graus! Em m\u00e9dia, a diferen\u00e7a foi de quase 1 grau. Treinar os professores em crit\u00e9rios de avalia\u00e7\u00e3o mais objetivos tamb\u00e9m n\u00e3o funciona! Um grupo de doutores em ret\u00f3rica e comunica\u00e7\u00e3o da universidade de Iowa foi treinado em 10 par\u00e2metros de corre\u00e7\u00e3o para dar notas de 1 a 4 em reda\u00e7\u00f5es. O resultado foi que as notas de dois avaliadorespara uma mesma reda\u00e7\u00e3o concordavam em apenas 50% dos casos. A lista de estudo desses tipo \u00e9 enorme e todos chegam as mesmas conclus\u00f5es.<\/p>\n

Ser\u00e1 que \u00e9 assim que queremos corrigir os trabalhos de nossos alunos? Decidir se sabem ou n\u00e3o? Se aprenderam ou n\u00e3o? Se for pra corrigir assim, prefiro ensin\u00e1-los a fazer videos. Garanto que v\u00e3o aprender melhor a contar hist\u00f3rias, se comunicar por escrito, responder quest\u00f5es de prova e perguntas em entrevistas de emprego.<\/p>\n

Corrigir reda\u00e7\u00f5es \u00e9 um problema e uma preocupa\u00e7\u00e3o em todo o mundo, j\u00e1 que os testes padronizados s\u00e3o uma importante ferramenta para a educa\u00e7\u00e3o em massa, mas a capacidade de corre\u00e7\u00e3o dos professores n\u00e3o \u00e9 t\u00e3o maci\u00e7a assim. E por isso, todos os anos a funda\u00e7\u00e3o\u00a0William and Flora Hewlett (sim, o ‘H’ da ‘HP’) lan\u00e7am um concurso programas de computador para corre\u00e7\u00e3o automatizada de reda\u00e7\u00f5es (Automated Student Assessment Prize<\/em>\u00a0em ingl\u00eas ou\u00a0ASAP<\/em>, o que \u00e9 um jogo de palavras com a express\u00e3o ‘As soon as possible<\/em>‘ que significa ‘o mais r\u00e1pido poss\u00edvel’, que \u00e9 exatamente quando queremos os resultados dos testes – qualquer teste).<\/p>\n

No ano passado foi a primeira vez que o programa vencedor realmente chegou pr\u00f3ximo aos resultados das corre\u00e7\u00f5es por professores.\u00a0“Este concurso me deu a oportunidade de pensar criativamente sobre como podemos usar a tecnologia para avaliar de maneira f\u00e1cil, r\u00e1pida e barata, qual a pontua\u00e7\u00e3o que um professor daria a uma reda\u00e7\u00e3o corrigida a m\u00e3o”<\/em>, disse o\u00a0vencedor do concurso,\u00a0Jason Tigg,\u00a0um f\u00edsico de part\u00edculas ingl\u00eas que tinha virado corretor de bolsas de apostas em esportes.\u00a0“Eu adorei trabalhar em um problema real que tem o potencial de revolucionar a forma como a educa\u00e7\u00e3o \u00e9 oferecida.”<\/em><\/p>\n

Para os organizadores do concurso, a finalidade n\u00e3o \u00e9 substituir os professores, mas para dar \u00a0ferramentas para que possam passar mais trabalhos escritos nas salas de aula. Hoje, os alunos (nos EUA) escrevem uma m\u00e9dia de tr\u00eas reda\u00e7\u00f5es por semestre. Com at\u00e9 40 alunos em cada classe, as reda\u00e7\u00f5es levam tempo demais para serem corrigidas. Atualmente, o ASAP est\u00e1 sendo aplicado apenas em testes padronizados, como o ENEM e ENEAD deles, mas a id\u00e9ia \u00e9 levar essa tecnologia para sala de aula, para que os alunos pratiquem mais reda\u00e7\u00f5es por ano, com feedback r\u00e1pido e acurado sobre a sua escrita, antes de chegarem no momento do teste.<\/p>\n<\/div>\n","protected":false},"excerpt":{"rendered":"

Voc\u00eas todos devem ter visto o caso dos alunos que publicaram receita de pizza na reda\u00e7\u00e3o do ENEM e ganharam nota m\u00e1xima. O MEC ficou na maior ‘saia justa’ e demitiram um monte de professores. Disseram tamb\u00e9m que a partir agora tem que ter doutorado para corrigir reda\u00e7\u00e3o (um absurdo!) e as reda\u00e7\u00f5es com nota […]<\/p>\n","protected":false},"author":553,"featured_media":1750,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_monsterinsights_skip_tracking":false,"pgc_sgb_lightbox_settings":"","_vp_format_video_url":"","_vp_image_focal_point":[],"footnotes":""},"categories":[10],"tags":[],"class_list":["post-1693","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-educacao"],"jetpack_featured_media_url":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-content\/uploads\/sites\/223\/2013\/04\/caf\u00e9-quente-1133482_21065776.jpg","_links":{"self":[{"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/posts\/1693","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/users\/553"}],"replies":[{"embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/comments?post=1693"}],"version-history":[{"count":0,"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/posts\/1693\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/media\/1750"}],"wp:attachment":[{"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/media?parent=1693"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/categories?post=1693"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.blogs.unicamp.br\/vqeb2\/wp-json\/wp\/v2\/tags?post=1693"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}