Os meninos têm melhor desempenho do que as meninas em testes compostos de questões de múltipla escolha.

As questões de múltipla escolha são consideradas objetivas e fáceis de marcar. Mas minha pesquisa mostra que eles dão uma vantagem aos homens.

Eu comparei cerca de 500, 000 resultados de testes de meninos e meninas que fizeram o mesmo teste internacional, mas cujas provas de exame diferiam em detalhes (embora não em dificuldade). A diferença incluiu uma proporção variada de questões de múltipla escolha em oposição a questões abertas.

Descobri que a lacuna de gênero nas notas de matemática aumentou com a participação de questões de múltipla escolha no exame - homens favorecidos.

Isso mostra que o desempenho geralmente melhor dos homens em exames de matemática tem mais a ver com o formato do teste do que com seus conhecimentos de matemática.

Como conduzi minha pesquisa

Exames padronizados são amplamente usados ​​para testar alunos e selecionar candidatos a empregos. Os australianos fazem vários testes padronizados ao longo de sua educação, como o NAPLAN, Certificado de Ensino Médio (HSC) e Programa da OCDE para Avaliação Internacional de Alunos (PISA).

Tais exames, especialmente quando a matemática está envolvida, regularmente incluem questões de múltipla escolha.

Por exemplo, mais de 70% da seção de numeramento de 2016 da NAPLAN foi composta de questões de múltipla escolha. Todo ano, os testes de matemática HSC incluem uma seção com questões de múltipla escolha.

Isso faz com que os alunos identifiquem a resposta correta em um conjunto de respostas possíveis.

Eu analisei os dados do PISA 2012 e 2015. O PISA é o maior teste padronizado internacional em matemática, leitura e ciência. A cada três anos, mais de 500, 000 alunos com 15 anos, de mais de 60 países, incluindo Austrália, Faça o teste.

Cada aluno que faz o PISA recebe um conjunto diferente de perguntas de contexto e dificuldade semelhantes. Mas há uma variação aleatória na proporção de questões de múltipla escolha que cada aluno recebe em seu livreto de teste.

Por exemplo, em 2015, alguns alunos receberam um exame composto principalmente de questões de múltipla escolha (70%), enquanto os testes de outros alunos continham apenas 30% de questões de múltipla escolha.

Explorei essa variação aleatória na proporção de questões de múltipla escolha para investigar como as diferenças de gênero no desempenho em matemática variam.

O que eu encontrei

As mulheres tiveram um desempenho pior do que os homens nas questões de múltipla escolha - esse foi especialmente o caso quando elas receberam um livreto de exame com 60% ou mais questões de múltipla escolha.

Um aumento na proporção de questões de múltipla escolha em dez pontos percentuais (como de 50% para 60%) aumentou a diferença de gênero nas pontuações de matemática em 50% em favor dos meninos.

Por que isso está acontecendo?

Também analisei como os alunos abordaram as respostas, monitorando o tempo que levaram para responder a uma pergunta, bem como o número de questões que cada aluno pulou.

Os dados do PISA me permitem identificar os alunos que respondem às perguntas muito rápido (digamos, em menos de três segundos, o que não permite uma leitura atenta da questão).

Responder às perguntas muito rápido ou ignorá-las totalmente pode ser visto como um sinal de pouco esforço ou falta de atenção.

Encontrei uma diferença de gênero na abordagem que os alunos adotaram para responder às perguntas.

Geral, os meninos participaram menos do teste do que as meninas. Eles responderam às perguntas mais rápido e pularam mais delas. Contudo, essa diferença começou a reverter as questões de múltipla escolha que havia no teste.

As meninas que receberam um exame com mais questões de múltipla escolha tinham maior probabilidade de mostrar falta de esforço do que quando havia mais questões abertas.

Pesquisas anteriores apóiam a ideia de que as meninas podem se envolver menos com questões de múltipla escolha. As meninas tendem a preferir perguntas que requerem mais análise e soluções variadas, enquanto os meninos tendem a apenas dar suas respostas.

A confiança também é importante

A confiança do aluno em seu conhecimento de matemática também pode influenciar seu desempenho. Por exemplo, um nível mais alto de confiança afeta a rapidez com que os alunos podem descartar respostas incorretas.

O PISA 2015 não forneceu uma medida dos níveis de confiança dos alunos.

Contudo, pesquisas anteriores mostraram meninas com mães trabalhando em ciências, tecnologia, ocupações de engenharia ou matemática (STEM) são mais confiantes em matemática e menos propensas a acreditar nos estereótipos que os meninos são melhores do que as meninas.

Então, Usei a ocupação materna como uma medida do nível de confiança e crenças das meninas em suas habilidades matemáticas. Descobri que o efeito negativo das perguntas de múltipla escolha sobre o desempenho das meninas na verdade desapareceu nas meninas cujas mães trabalhavam em ocupações relacionadas a STEM.

Essas descobertas sugerem que exames de múltipla escolha podem não ser as ferramentas mais adequadas para medir os níveis de conhecimento dos alunos.

Este artigo foi republicado de The Conversation sob uma licença Creative Commons. Leia o artigo original.