A competence-based test to assess historical thinking in secondary education: design, application, and validation

Abstract

This paper presents the theoretical framework, application and final outcomes of a pilot test designed as a possible model for assessing students' historical thinking in Secondary Education. It is based both on widely accepted historical thinking concepts and on the assessment framework developed by PISA. The test tries to assess what could be named as the three major competences in history: "explain historically", "use of sources as historical evidence" and "understanding the features of historical knowledge". It includes several stimuli (texts, images...) and a total of 39 items. The field trial of the test was applied to a convenience sample of 893 10 th and 11th grade students, aged 16 to 18 years. Their answers were analysed statistically according to the item Response theory (IRT), and the results uphold the validity and reliability of the test instrument. The IRT analysis also enablesus to take a first step towards defining level of achievement and progress for the learning and acquisition of those competences. One implication of note of this research is the possible adoption of this model for assessing history, based both on applied content knowledge and historical thinking concepts and skills. Such a model of assessment would also stimulate more active, problem-based and motivating teaching approaches approaches.

En este artículo se presenta el marco teórico, la aplicación y los resultados finales de una prueba piloto diseñada como posible modelo para evaluar el pensamiento histórico de los estudiantes de Educación Secundaria, basada tanto en conceptos de pensamiento histórico ampliamente aceptados como en el marco de evaluación desarrollado por PISA. La prueba trata de evaluar lo que podríamos denominar las tres grandes competencias en historia: “explicar históricamente”, “utilizar fuentes como evidencia histórica” y “comprender las características del conocimiento histórico”. Incluye varios estímulos (textos, imágenes…) y un total de 39 ítems. La prueba de campo de la prueba se aplicó a una muestra de conveniencia de 893 estudiantes de 10º y 11º grado, de 16 a 18 años. Sus respuestas fueron analizadas estadísticamente según la Teoría de Respuesta al Ítem (TRI), y los resultados confirman la validez y fiabilidad del instrumento de prueba. El análisis de la TRI también nos permite dar un primer paso hacia la definición de niveles de logro y progreso para el aprendizaje y adquisición de dichas competencias. Una de las implicaciones de esta investigación es la posible adopción de este modelo para evaluar la historia, basado tanto en el conocimiento aplicado del contenido como en los conceptos y habilidades del pensamiento histórico. Este modelo de evaluación también estimularía enfoques de enseñanza más activos, motivadores y basados ​​en problemas.