Prueba adaptativa para medir el progreso de los estudiantes: Colegios en Bogotá, Colombia

• Cristian Harrison Orjuela Roa
• Óscar Mauricio Lesmes Martínez
• Nicolas Marcel Tarazona G.
• Juan Gabriel Castañeda Polanco

DOI: https://doi.org/10.31876/rcs.v26i0.34132

Abstract

En el ámbito escolar la pérdida de fiabilidad de la evaluación ha venido constituyéndose en una problemática cada vez más evidente. En ese sentido, esta investigación tuvo como objetivo analizar los resultados de aplicación de una prueba adaptativa, en estudiantes de ciclo III de algunos colegios de Bogotá, Colombia. Para lo cual, se utilizó un diseño metodológico cuantitativo-transeccional con alcance correlacional, y se seleccionó una muestra intencionada no-probabilística. El instrumento de prueba correspondió al de una técnica Rasch, con modelo logístico de un parámetro asociado a la teoría de respuesta al ítem, desde el cual se obtuvieron los datos de desempeño de 544 estudiantes, los cuales fueron interpretados con base en el análisis estadístico. Los resultados evidenciaron que: El test diseñado pudo identificar y adaptarse a las características de los estudiantes considerando los criterios curriculares de evaluación; entre los hallazgos de los estudiantes no se muestran diferencias significativas que indiquen algún factor de inestabilidad en la prueba aplicada. Se concluye, que la aplicación de esta prueba en Instituciones Educativas de Colombia, puede ayudar a fortalecer componentes de la evaluación escolar y progreso de los alumnos, frente a los aprendizajes esperados para el proceso, si se enfocan en desempeños de competencia.

Abstract

In the school environment, the loss of reliability of the evaluation has become an increasingly evident problem. In this sense, this research aimed to analyze the results of the application of an adaptive test, in students of cycle III of some schools in Bogotá, Colombia. For which, a quantitative-transectional methodological design with correlational scope was used, and an intentional non-probabilistic sample was selected. The test instrument corresponded to that of a Rasch technique, with a logistic model of a parameter associated with the item response theory, from which the performance data of 544 students were obtained, which were interpreted based on the statistical analysis. The results showed that: The designed test could identify and adapt to the characteristics of the students considering the curricular evaluation criteria; There are no significant differences among the students' findings that indicate some factor of instability in the applied test. It is concluded that the application of this test in Educational Institutions of Colombia can help to strengthen components of the school evaluation and student progress, compared to the expected learning for the process, if they focus on competency performances.

Keywords: Adaptive test; evaluation; computerized test; students; Colombia.

References

Abad, F. J., Olea, J., Real, E. y Ponsoda, V. (2002). Estimación de habilidad y precisión en test adaptativos informatizados y test óptimos: Un caso práctico. Revista Electrónica de Metodología Aplicada, 7(1), 1-20.

Casanova, I., Canquiz, L., Paredes, Í., e Inciarte, A. (2018). Visión general del enfoque por competencias en Latinoamérica. Revista de Ciencias Sociales (Ve), XXIV(4), 114-125.

Castañeda, J. G., Camargo, J. A., y Londoño, M. K. (2019). Análisis bibliométrico como herramienta para el seguimiento de instrumentos psicológicos validados en Colombia. Revista Ibérica de Sistemas e Tecnologías de Informação, (E-18), 38-46.

Castro, H., Martínez, E., y Figueroa, Y. (2009). Fundamentaciones y orientaciones para la implementación del Decreto 1290 del 16 de abril de 2009. Documento No. 11. Ministerio de Educación Nacional. https://www.mineducacion.gov.co/1759/articles-213769_archivo_pdf_evaluacion.pdf

Cejas, M. F., Rueda, M. J., Cayo, L. E., y Villa, L. C. (2019). Formación por competencias: Reto de la educación superior. Revista de Ciencias Sociales (Ve), XXV(1), 94-101.

Celman, S. (2005). ¿Es posible mejorar la evaluación y transformarla en una herramienta de conocimiento? En A. R. de Camilloni (Ed.), La evaluación de los aprendizajes en el debate didáctico contemporáneo (pp. 35-66). Paidós Educador.

Clares, J. (2008). Propuesta de desarrollo de test informatizado adaptándolo a las respuestas del usuario. Pixel-Bit: Revista de Medios y Educación, (31), 19-30.

Correa, J. (2016). Desempeño académico y diferencias de género en Colombia: Un análisis con base en las pruebas TIMSS 2007. Sociedad y Economía, (30), 15-42.

Cortes, J. E., Castañeda, J. G., y Daza, J. (2019). Comprensión lectora de estudiantes universitarios. Factores asociados y mecanismos de acción. Revista Venezolana de Gerencia, 24(87), 874-889.

Cortes, J. E., Daza, J., y Castañeda, J. G. (2019). Relación del entorno socioeconómico con el desempeño de la comprensión lectora en universitarios. Revista de Ciencias Sociales (Ve), XXV(4), 119-133.

Covacevich, C. (2014). Cómo seleccionar un instrumento para evaluar aprendizajes estudiantiles. Banco Interamericano de Desarrollo BID. Recuperado de https://publications.iadb.org/publications/spanish/document/C%C3%B3mo-seleccionar-un-instrumento-para-evaluar-aprendizajes-estudiantiles.pdf

Daza, J., Castañeda, J. G., Torres, C., Segovia, C., y Cortes, E. (2019). Diseño y análisis psicométrico de una prueba para medir la percepción de clases frente a la formación integral de estudiantes universitarios «PCFI». Revista Espacios, 40(2), 18-29.

Escamilla, J., Calleja, B., Villalbam, E., Venegas, E., Fuerte, K., Román, R., y Madrigal, Z. (2014). Aprendizaje y evaluación adaptativos. Reporte Edu Trends. Observatorio de Innovación Educativa del Tecnológico de Monterrey. https://observatorio.tec.mx/edutrendsaprendizajeadaptativo

Guzmán, D. (2005). Un modelo de evaluación cognitiva basado en Tests Adaptativos para el diagnóstico en Sistemas Tutores Inteligentes (Tesis doctoral). Universidad de Málaga, España.

Harrison, P. M. C., Collins, T., y Müllensiefen, D. (2017). Applying modern psychometric techniques to melodic discrimination testing: Item response theory, computerised adaptive testing, and automatic item generation. Scientific Reports, 7, 3618. https://doi.org/10.1038/s41598-017-03586-z

Hernández, S., Fernández, C., y Baptista, L. (2014). Metodología de la investigación. McGraw-Hill.

Herrera, A. N., Barajas, R., y Jiménez, G. J. (2015). Validez en test adaptativos informatizados: Alternativa para evaluar población con limitaciones visuales. Avaliação Psicológica, 14(3), 299-307.

Instituto Colombiano para la Evaluación de la Educación - ICFES (2013). Sistema Nacional de Evaluación Estandarizada de la Educación Alineación del examen SABER 11°. https://www.icfes.gov.co/documents/20143/193784/Alineacion%20examen%20Saber%2011.pdf

Instituto Colombiano para la Evaluación de la Educación - ICFES (2014). Pruebas Saber 3°, 5° y 9° Lineamientos para las aplicaciones muestral y censal 2014. https://www.icfes.gov.co/documents/20143/176813/Guia+de+lineamientos+para+las+aplicaciones+muestral+y+censal+-+saber+359+2014.pdf/7455a026-8308-5d4d-4975-a53a86e4c56b

Instituto Colombiano para la Evaluación de la Educación - ICFES (2018). Avancemos 4°, 6° y 8°: Hacia un proceso formativo. Boletín Saber en Breve. Edición 31. http://www.icfes.gov.co/edicion-31-boletin-saber-en-breve

Jiménez, M. (2009). Un modelo de evaluación adaptativa del nivel de conocimientos en Sistemas Tutoriales Inteligentes (Tesis de maestría). Universidad Nacional de Colombia, Colombia.

López, C., Pérez, T., y Armendariz, A. (2005). Evaluación mediante tests: ¿Por qué no usar el ordenador? Revista Iberoamericana de Educación, 36(11), 1-16.

López, J. (2008). Evaluación mediante test adaptativos informatizados en el contexto de un sistema adaptativo para el aprendizaje de la lengua vasca (Tesis doctoral). Universidad del País Vasco, San Sebastián, España.

López, R., Sanmartín, P., y Méndez, F. (2014). Revisión de las evaluaciones adaptativas computarizadas (CAT). Educación y Humanismo, 16(26), 27-40.

Millán, E., y Pérez, J. L. (2014). Un algoritmo de diagnóstico para modelado del alumno basado en test adaptativos y redes bayesianas. http://www.lcc.uma.es/~eva/doc/materiales/millane.pdf

Ministerio de Educación Nacional - MEN (2004). Formar en Ciencias: ¡El desafío! Estándares básicos de competencias en Ciencias Naturales y Ciencias Sociales. Serie guías No. 7. https://www.mineducacion.gov.co/1759/articles-81033_archivo_pdf.pdf

Ministerio de Educación Nacional - MEN (2009). Decreto 1290. Por el cual se reglamenta la evaluación del aprendizaje y promoción de los estudiantes de los niveles de educación básica y media. https://www.mineducacion.gov.co/1621/articles-187765_archivo_pdf_decreto_1290.pdf

Muñiz, J. (2010). Las teorías de los tests: Teoría Clásica y Teoría de Respuesta a los ítems. Papeles del Psicólogo, 31(1), 57-66.

Olea, J., y Ponsoda, V. (1998). Tests informatizados y adaptativos informatizados: Investigación en España. Relieve, 4(2), 1-3.

Olea, J., y Ponsoda, V. (2002). Test adaptativos informatizados. En J. Muñiz (Coord.), Psicometría (pp. 729-784). Universitas.

Orjuela, C. H., Araque, G. A., Lesmes, O. M., y Castañeda, J. G. (2020). Estrategias de aprendizaje adaptativo en educación y ciencias sociales: pruebas adaptativas computarizadas. Revista Venezolana de Gerencia, 25(E-3), 482-492.

Ortiz-Colón, A. M., Ortega-Tudela, J. M., y Román, S. (2019). Percepciones del profesorado ante la alfabetización mediática. Revista de Ciencias Sociales (Ve), XXV(1), 11-20.

Restrepo, J. L., Barbosa, J. L., y Arenas, J. (2016). Aplicación de una prueba adaptativa computarizada en la asignatura Estática. 14th LACCEI International Multi-Conference for Engineering, Education, and Technology: “Engineering Innovations for Global Sustainability”, San José, Costa Rica.

Rodríguez, C., Muñoz, M., y Castillo, V. (2014). Test informatizados y su contribución a la acción evaluativa en educación. RED. Revista de Educación a Distancia, (43), 136-152.

Ruiz, M. (2009). Los tests adaptativos informatizados y su utilidad en el contexto clínico. Conexionismo. http://www.conexionismo.com/leer_articulo.php?ref=los_tests_adaptativos_informatizados_y_su_utilidad_en_el_contexto_clinico-2picnex0

Shepard, L. A. (2006). La evaluación en el aula. En R. L. Brennan (ed.), Educational Measurement (pp. 623-646). Praeger Publishers.

Sierra-Matamoros, F. A., Valdelamar-Jiménez, J. R., Hernández-Tamayo, F. A., y Sarmiento-García, L. M. (2007). Test adaptativos informatizados. Avances en Medición, 5(1), 157-162.

Soloman, B., Felder, R. (2005). Index of Learning Styles Questionnaire. NC State University. http://www4.ncsu.edu/unity/lockers/users/f/felder/public/ILSpage.html

Toledo, G., Mezura, C., Cruz, N., y Benítez, E. (2013). Modelo de evaluación adaptativa y personalizada mediante razonamiento probabilista. https://docplayer.es/16128419-Modelo-de-evaluacion-adaptativa-y-personalizada-mediante-razonamiento-probabilista.html

Vasco, C. (2015). Diez retos de la educación colombiana para 2025. En J. Zubiría (Comp.), La calidad de la educación bajo la lupa (pp. 23-32). Editorial Magisterio. 246 pp.

Weiss, D. J. (2004). Computerized adaptive testing for effective and efficient measurement in counseling and education. Measurement and Evaluation in Counseling and Development, 37(2), 70-84.

Yovane, K. (2000). La evaluación de los aprendizajes en la reforma curricular de la Educación Básica. Acción Pedagógica, 9(1y2), 12-16.