Does the Response Options Placement Provide Clues to the Correct Answers in Multiple-choice Tests? A Systematic Review

Los Efectos Posicionales en Ítems de Opción Múltiple: el Orden de los Distractores Afecta a la Dificultad

“…El reparto aproximadamente uniforme de la OC se considera una práctica adecuada, aunque sería preferible que se incluyesen además los distractores (Gierl et al, 2017). Otros autores, por el contrario, defienden el uso preferente de la aleatorización, por su mayor rapidez y para evitar nuevos sesgos propios de los desarrolladores y las estrategias de testwiseness por compensación de las posiciones de la OC a lo largo del test (Lions et al, 2022). No obstante, es cierto que cualquier reorganización posicional puede a su vez inducir nuevos sesgos y afectar a las propiedades psicométricas del ítem (Hagenmüller, 2020), razón por la cual la reorganización aplicada de manera distinta para cada estudiante quedaría desaconsejada, y por lo que se recomienda analizar el funcionamiento de los ítems siempre que se modifique la posición de sus opciones.…”

“…Además, cuidar la construcción de ítems con este tipo de directrices contribuye a que sus propiedades psicométricas sean adecuadas. Cabe decir, sin embargo, que las directrices no siempre se aplican de forma generalizada (Lions et al, 2022). Las propiedades psicométricas, por otra parte, dan información sobre si en la evaluación se diferencia eficazmente a los estudiantes con un grado elevado o bajo de conocimiento o habilidad.…”

Hollow-Pass: A Dual-View Pattern Password Against Shoulder-Surfing Attacks

“…The difference in results between the online and offline tests may be due to the consistent option placement in the online test. A systematic review [21] has shown that test takers perform better when the correct answer is consistently placed in a specific location, as opposed to randomly placed. The study also found that placing the correct answer at the top or bottom of the options may increase the likelihood of the test taker choosing it, leading to potential bias.…”

Position of Correct Option and Distractors Impacts Responses to Multiple-Choice Items: Evidence From a National Test

“…The main principle behind these suggestions is that the position of item options should never lead examinees to detect the correct response. The fact that not all test developers adhere to this principle and that position biases are observable in the distribution of answer keys and strong distractors is an issue of concern (Attali & Bar-Hillel, 2003;Lions et al, 2021Lions et al, , 2022Mentzer, 1982;Metfessel & Sax, 1958).…”