[email protected] | |
3275638434 | |
Paper Publishing WeChat |
This work is licensed under a Creative Commons Attribution-NonCommercial 4.0 International License
Math Test Items’ Validation for Admission to Higher Education
Yurico Dulce Teresa Rivera Fernández, Omar Cuevas Salazar, Maria Esther Velarde Flores, Eduardo Guzmán de los Riscos, Daniel Mocencahua Mora
Full-Text PDF XML 425 Views
DOI:10.17265/2161-6248/2022.04.006
Instituto Tecnológico de Sonora, Campus Náinari, Ciudad Obregón, México; Universidad de Málaga, Málaga, España; Benemérita Universidad Autónoma de Puebla, Puebla, México
This study presents the validation of a math test items, whose function is to diagnose students in their admission to higher education. The test consists of 22 multiple choice items divided into seven main units. It was applied to a population of 940 students. Methodology comprised of three phases. The first one was the validation by experts, one from mathematics field and another expert in development of computerized adaptative tests. The second phase was the pilot testing. The third phase consisted of the process to get the validation and reliability by analyzing items’ difficulty and discrimination levels through a biserial correlation. Reliability was proved through a Rasch model developed with the support of R and SPSS software. The findings presented a positive difficulty asymmetry of 0.59, a discrimination index of 0.48, and a test reliability of 0.74. So, it is established that the test is suitable to be applied.
admission tests, higher education, item validation, mathematics, Rasch model
Yurico Dulce Teresa Rivera Fernández, Omar Cuevas Salazar, Maria Esther Velarde Flores, Eduardo Guzmán de los Riscos, & Daniel Mocencahua Mora. (2022). Math Test Items’ Validation for Admission to Higher Education. US-China Education Review B, July-Aug. 2022, Vol. 12, No. 4, 119-129.
Attorresi, H., Lozzia, G., Abal, F., Galibert, M., & Aguerri, M. (2009). Teoría de Respuesta al Item. Conceptos básicos y aplicaciones para la medición de constructos psicológicos. Revista Argentina de Clínica Psicológica, XVIII(2), 179-188. Retrieved from http://www.redalyc.org/html/2819/281921792007/
Backhoff, E., Aguilar, J., & Larrazolo, N. (2006). Metodología para la validación de contenidos de exámenes normativos. Revista Mexicana de Psicología, 23(1), 79-86. Retrieved from www.redalyc.org/pdf/2430/243020646010.pdf
Backhoff, E., Larrazolo, N., & Rosas, M. (2000). Nivel de dificultad y poder de discriminación del Examen de Habilidades y Conocimientos Básicos (EXHCOBA). Revista Electrónica de Investigación Educativa, 2(1), 10-29. Retrieved from http://redie.uabc.mx/vol2no1/contenido-backhoff.html
Birnbaum, E. (1957). The cost of a foreign exchange standard or of the use of a foreign currency as the circulating medium. IMF Staff Papers, 5(3), 477-491.
Cronbach, L. J. (1971). Test validation. In R. Thorndike (Ed.), Educational measurement (2nd ed., p. 443). Washington DC: American Council on Education.
Debera, L., & Nalbarte, L. (2006). Pruebas diagnósticas: una aplicación a la teoría de respuesta al item, aproximación clásica y bayesiana. Instituto de Estadística. F.C.E. y A. Universidad de la República. Retrieved from http://www.iesta.edu.uy/wp-content/uploads/2010/03/0601.pdf
Ebel, R. L., & Frisbie, D. A. (1986). Essentials of education measurement. Englewood Cliffs, NJ: Prentice Hall.
Feedback. (2018). Conceptos básicos sobre Análisis de Item, Datos Estadísticos y Calificación Sustractiva. Retrieved from http://www.sistemafeedback.com.ar/descargas/Evaluando_al_Examen.pdf
Godino, J., Batanero, C., & Font, V. (2003). Fundamentos de la enseñanza y el aprendizaje de las Matemáticas para maestros. Matemáticas y su didáctica para maestros (p. 79, 81). España: Departamento de Didáctica de la Matemática, Facultad de Ciencias de la Educación, Universidad de Granada. Retrieved from https://www.ugr.es/~jgodino/edumat-maestros/manual/1_Fundamentos.pdf
Guzmán, D. (2005). Un modelo de evaluación cognitiva basado en Tests Adaptativos para el diagnóstico en Sistemas Tutores Inteligentes (PhD thesis, Recuperada de Universidad de Málaga, 2005). Retrieved from http://www.lcc.uma.es/repository/fileDownloader?rfname=LCC1406.pdf
Henrysson, S. (1971). Gathering, analysing, and using data on test items. In R. L. Thorndike (Ed.), Educational measurement. Washington, DC: American Council on Education.
Hidalgo-Montesinos, M., & French, B. (2016). Una introducción didáctica a la Teoría de Respuesta al Item para comprender la construcción de escalas. Revista de Psicología Clínica con Niños y Adolescentes, 3(2), 13-21. Retrieved from http://www.revistapcna.com/sites/default/files/16-11.pdf
Hurtado, L. (2018). Relación entre los índices de dificultad y discriminación. Revista Digital de Investigación en Docencia Universitaria, 12(1), 273-300. Retrieved from http://www.scielo.org.pe/scielo.php?script=sci_arttext&pid=S2223-25162018000100016
Jara, M. (2015). Validez y confiabilidad en la construcción de reactivos utilizados en pruebas de opción múltiple (POM). Retrieved from https://www.researchgate.net/publication/282367035
Jiménez, K., & Montero, E. (2013). Aplicación del modelo de Rasch, en el análisis psicométrico de una prueba de diagnóstico en matemática. Revista digital Matemática, Educación e Internet, 13(1), 1-24. Retrieved from https://tecdigital.tec.ac.cr/revistamatematica/ARTICULOS_V13_N1_2012/RevistaDigital_Montero_V13_n1_2012/RevistaDigital_Montero_V13_n1_2012.pdf
Leyva, Y. (2011). Una reseña sobre la validez de constructo de pruebas referidas a criterio. Perfiles Educativos, 33(131), 131-154. Retrieved from http://www.scielo.org.mx/scielo.php?script=sci_arttext&pid=S0185-26982011000100009
Lira, R. I. (2013). Diseño de un enfoque modélico de evaluación institucional para el Instituto Tecnológico de Costa Rica: Construcción y validación de los indicadores de proceso y de Producto de las áreas de formación universitaria y de impacto que forman dicho modelo (PhD thesis, Universidad de Valencia, España, 2013). Retrieved from http://roderic.uv.es/handle/10550/27379
Macías, E. (2011). Validación y confiabilidad de pruebas de opción múltiple para la evaluación de habilidades (M.Sc. thesis, Centro de investigación en Matemáticas, 2011). Retrieved from https://cimat.repositorioinstitucional.mx/jspui/bitstream/1008/245/2/TE%20373.pdf
Márquez, A., Ramos, Á., & López, A. (2015). Qué sabe Ud. acerca de… la validación de pruebas diagnósticas? Revista Mexicana de Ciencias Farmacéuticas, 46(3), 86-90. Retrieved from http://www.redalyc.org/pdf/579/57945705010.pdf
Niño, L., Hakspiel, M., Mantilla, L., Cárdenas, M., & Guerrero, N. (2017). Adaptación y validación de instrumento para evaluar habilidades psicosociales y hábitos saludables en escolares. Universidad y Salud, 19(3), 366-377. Retrieved from http://www.scielo.org.co/pdf/reus/v19n3/0124-7107-reus-19-03-00366.pdf
Nunnally, J. C., & Bernstein, I. H. (1995). Chapter 3: Validity. Psychometric Theory, 3(1), 83-103.
Pedrosa, I., Suárez, J., & García, E. (2013). Evidencias sobre la validez de contenido: avances teóricos y métodos para su estimación. Acción psicológica, 10(2), 3-18. Retrieved from http://scielo.isciii.es/scielo.php?script=sci_arttext&pid=S1578-908X2013000200002
Presedo, C., Arméndariz, A., López-Cuadrado, J., & Pérez, T. (2015). Calibración de items vía expertos utilizando Moodle. Revista Iberoamericana de Educación, 69(1), 117-132. Retrieved from https://rieoei.org/RIE/article/view/158
Prieto, G., & Delgado, A. (2003). Análisis de un test mediante el modelo de Rasch. Psicothema, 15(1), 94-100. Retrieved from http://www.psicothema.com/pdf/1029.pdf
Razel, M., & Eylon, B. S. (1987). Validating alternative modes of scoring for coloured progressive matrices. American Educational Research Association, Washington.
Rasch, G. (1960). Probabilistic models for some intelligence and attainment tests. Copenhagen: Denmarks Paedagogiske Institut.
Rivera, J., Flores, F., Alpuche, A., & Martínez, A. (2017). Evaluación de reactivos de opción múltiple en medicina. Evidencia de validez de un instrumento. Investigación en educación médica, 6(21), 8-15. Retrieved from http://www.scielo.org.mx/scielo.php?script=sci_arttext&pid=S2007-50572017000100008&lng=es&nrm=iso
Rizo, F. (2001). Evaluación educativa y pruebas estandarizadas. Elementos para enriquecer el debate. Revista de la Educación Superior, 30(120), 1-12. Retrieved from http://publicaciones.anuies.mx/pdfs/revista/Revista120_S3A3ES.pdf
Rojas, M., Manríquez, G., & Gatica, Y. (2004). Curso de UML Multiplataforma Adaptativo Basado en la Teoría de Respuesta al Item. Revista Ingeniería Informática, 10, 1-10. Retrieved from http://inf.udec.cl/~revista/ediciones/edicion10/psalcedo01.pdf