| Journal: | Educacao e pesquisa |
| Database: | |
| System number: | 000539684 |
| ISSN: | 1517-9702 |
| Authors: | Barichello, Leonardo1 Guimarães, Rita Santos2 Figueiredo Filho, Dalson Britto3 |
| Institutions: | 1Instituto Federal de Educação Ciência e Tecnologia de São Paulo, Jundiaí, São Paulo. Brasil 2Universidade Estadual de Campinas, Campinas, São Paulo. Brasil 3Universidade Federal de Pernambuco, Recife, Pernambuco. Brasil |
| Year: | 2022 |
| Volumen: | 48 |
| Country: | Brasil |
| Language: | Portugués, inglés |
| Portuguese abstract | Este artigo analisa o impacto da posição em que as questões são apresentadas sobre o desempenho dos estudantes no Exame Nacional do Ensino Médio (Enem) no Brasil em 2016. A partir de uma amostra de 4.427.790 casos, calculamos o índice de acerto por questão para os diferentes cadernos de prova da área de Matemática e suas Tecnologias. Os resultados indicam a presença do efeito fadiga na prova do Enem 2016, ou seja, a ordem de apresentação das questões afeta a proporção de respostas corretas, que diminui à medida que o item é apresentado mais próximo do final da prova. As evidências exploratórias também sugerem que o efeito fadiga se manifesta tanto em estudantes de baixo quanto de alto desempenho. Por exemplo, a posição do item reduziu o índice de acerto em até 18 pontos percentuais, controlando pelo nível de desempenho. Este artigo faz a primeira avaliação empírica do efeito fadiga no Enem e os resultados representam uma contribuição para a literatura sobre influências não cognitivas em avaliação e são úteis para fundamentar estudos mais sistemáticos sobre o impacto do efeito fadiga em testes padronizados de larga escala, inclusive para além do caso específico analisado. Ao final, sugerimos medidas que podem mitigar esse efeito no Enem. |
| English abstract | This paper analyzes the impact of the position of questions on students’ performance on the National Secondary Education Examination (Enem) in 2016. From a sample of 4,427,790 cases, we calculated the hit rate per question for the different workbooks in the Mathematics and its Technologies test. The results indicate presence of the fatigue effect on the 2016 Enem, that is, the order in which the questions are presented affects the proportion of correct answers, which is diminished as an item is presented closer to the end of the test. The exploratory evidence also suggests that the fatigue effect is manifested in students of both low and high performance. For example, the position of an item reduced the hit rate up to 18%, controlling for performance level. This paper conducts the first empirical evaluation of the fatigue effect during the Enem. The results contribute to the literature on the non-cognitive influences in evaluation, being useful to substantiate more systematic studies on the fatigue effect’s impact on large-scale standardized tests, beyond the case analyzed. At the end, we suggest measures that can mitigate this effect during the Enem. |
| Keyword: | Fatigue effect, Standardized tests, Enem, Microdata, Educational performance |
| Full text: | Texto completo (Ver HTML) Texto completo (Ver PDF) |
