Registro

Validación de Pruebas de Inglés EFL de Bajo Riesgo

Garcés , Pablo

Validación de Pruebas de Inglés EFL de Bajo Riesgo




Autores Garcés , Pablo

Tema Validez
Tema Validación
Tema Instrumentos de evaluación
Tema Pruebas de inglés
Tema EFL
Tema Pruebas de bajo riesgo
Tema Pruebas de alto riesgo
Tema Validity
Tema Validation
Tema Evaluation instruments
Tema English tests
Tema EFL
Tema Low stakes test
Tema High stake tests

Descripción Whether a candidate is taking a "high stakes" test such as the TOEFL or a "low stakes" test such as an end-of-level test, the repercussions of a wrong score always have a significant impact. That's why high-stake tests are constantly subjected to validation processes, while their low-stakes counterparts rarely are. This research has focused its attention on an EFL program of a Panamanian institution with the objective of determining the validity of the tests used, which are considered to be "low" stakes. The type of research carried out is applied, descriptive, mixed, non-experimental, and transversal. The following types of validity were evaluated: validity based on the context, validity based on the theory, reliability of test results, and characteristics of the candidates. The institutional tests of the EFL courses of a Panamanian institution were studied. In this institution, most of the teachers use the Schoology LMS platform to administer their end-of-course exams. A sample was taken in June 2018 that contained the record of the final tests of levels 1, 2, 3, 4, 5, 6, 7, 9, 11, 12, 13, and 15; since only the teachers of these levels used the platform in that period. The sample contained a total of 340 administrations. Important deficiencies were found in regards to context-based validity and score reliability, while the results of the evaluation of theory-based validity and the characteristics of the candidates were rather positive. A series of recommendations were provided, among which are the creation of institutional oral tests, the inclusion of a section to evaluate listening comprehension, and the application of greater reliability studies, among others.
Descripción Ya sea que un candidato esté presentando una prueba de “alto” riesgo como el TOEFL o una de “bajo” riesgo, como el examen de final de un nivel, las repercusiones de una calificación errada siempre tienen un impacto importante. Es por eso que las pruebas de alto riesgo son constantemente sometidas a procesos de validación, mientras que sus contrapartes de bajo riesgo rara vez lo son. Este trabajo de investigación ha dirigido su atención a un curso de inglés EFL de una institución panameña con el objetivo de determinar la validez de las pruebas utilizadas en el programa, consideradas de “bajo” riesgo. El tipo de investigación realizado es aplicada, descriptiva, mixta, no experimental y transversal. Se evaluó: la validez basada en el contexto, la validez basada en la teoría, la confiabilidad de los resultados y las características de los candidatos. Se estudiaron las pruebas institucionales del curso de inglés EFL de una institución panameña. En la misma, la mayoría de los profesores utilizan la plataforma LMS Schoology para aplicar sus exámenes de fin de curso. Se tomó una muestra en junio de 2018 que contenía el registro de las pruebas finales de los niveles 1, 2, 3, 4, 5, 6, 7, 9, 11, 12, 13 y 15; ya que estos son los niveles cuyos profesores utilizaron la plataforma en ese período. La muestra contenía un total de 340 aplicaciones. Se encontraron importantes deficiencias en la evaluación de validez basada en el contexto y en la confiabilidad de los resultados; mientras que en la evaluación de validez basada en teoría y la de las características de los candidatos se obtuvieron resultados muy positivos. Se aportaron una serie de recomendaciones entre las cuales se encuentran: la creación de pruebas orales institucionales, la creación de una sección de evaluación auditiva y la profundización de los estudios de confiabilidad, entre otras.

Editorial QLU

Fecha 2020-01-06

Tipo info:eu-repo/semantics/article
Tipo info:eu-repo/semantics/publishedVersion

Formato application/pdf

Identificador https://revistas.qlu.ac.pa/index.php/latitude/article/view/107
Identificador 10.55946/latitude.v1i13.107

Fuente Latitude; Vol. 1 No. 13 (2020): Latitude: Multidisciplinary Research Journal ; 31-62
Fuente Latitude; Vol. 1 Núm. 13 (2020): Latitude: Multidisciplinary Research Journal ; 31-62
Fuente 2644-4038
Fuente 2644-4038

Idioma spa

Relación https://revistas.qlu.ac.pa/index.php/latitude/article/view/107/83
Relación /*ref*/Alderson, J.C. (1991). Dis-sporting Life. Response to Alistair Pollit’s paper. In Alderson and North
Relación /*ref*/American Educational Research Association, American Psychological Association, and National Council on Measurement in Education (1974, 1985, 1999). Standards for Educational and Psychological Testing. Washington, DC: Author.
Relación /*ref*/Anastasi, A. (1988). Psychological Testing (6th edition). New York: Macmillan.
Relación /*ref*/Bachman, L.F. (1990). Fundamental Considerations in Language Testing. Oxford: Oxford University Press.
Relación /*ref*/Bachman, L. and Palmer, A. (1996). Language Testing in Practice. Oxford: Oxford University Press.
Relación /*ref*/Brown, J. D. (1996). Testing in language programs. Upper Saddle River, NJ: Prentice Hall Regents.
Relación /*ref*/Chapelle C., Jamieson J. y Hegelheimer V. (2003); Validation of a web-based EFL test
Relación /*ref*/Kokhan K.(2013); An argument against using standardized test scores for placement of international undergraduate students in (ESL) courses.
Relación /*ref*/Kuder, G.F. y Richardson, M.W. Psychometrika (1937) The theory of the estimation of test reliability 2: 151. https://doi-org.echo.louisville.edu/10.1007/BF02288391
Relación /*ref*/O’Sullivan, B. (2000). Towards a Model of Performance in Oral Language Testing. Unpublished PhD Dissertation. University of Reading.
Relación /*ref*/Pennington, D. (2003). Essential Personality. Arnold. p. 37. ISBN 0-340-76118-0.
Relación /*ref*/Weir, C. (2005); Language Testing and Validation: An Evidence-Based Approach. Springer

Derechos https://creativecommons.org/licenses/by-nc-sa/4.0/deed.es