La evaluación de la competencia pragmática en lengua extranjera a través de una prueba adaptativa

Zusammenfassung

La mayoría de pruebas estandarizadas de inglés como segunda lengua (ISL) y /o lengua extranjera (ILE) son pruebas de alto impacto, y un número cada vez mayor de éstas ofrece dos versiones: una tradicional en papel, y otra informatizada. Algunos cuerpos examinadores implementan además pruebas adaptativas. El avance tecnológico de estas pruebas estandarizadas, por lo general comerciales, es evidente y beneficioso a priori. Sin embargo, algunos aspectos importantes del currículo como la competencia pragmática no suelen ser medidos por este tipo de pruebas. Las únicas pruebas informatizadas que incluyen ítems que miden ésta competencia en sus pruebas escritas son el Next generation TOEFL® iBT test, y el Oxford Online Placement Test (OOPT). En la presente tesis se pretende en primer lugar, comprobar si el OOP, utilizado para certificar niveles de ILE/ISL, es un indicador válido de las habilidades de interés tales como la competencia pragmalingüística, así como también evidenciar si esta habilidad es medida apropiadamente para el uso que se pretende. Por otra parte, se profundiza en las causas por las que un grupo de 44 estudiantes que cursan la asignatura de Lengua Inglesa para Maestros de primer curso en la Facultat de Magisteri (Universitat de València) yerran las preguntas del OOPT que evalúan específicamente su competencia pragmálingüística. A diferencia de estudios anteriores, el interés de la presente tesis estriba en que en ella se investiga desde una perspectiva cognitiva y metalingüística, no solo qué tipo de factores de método pueden influir en la producción de errores de los examinandos, sino también, qué factores individuales intervienen según su propia percepción. Para tal fin se diseñó y administró a los examinandos un cuestionario retrospectivo. Se implementaron varios análisis cuantitativos (correlacional, de regresión múltiple y de correspondencia) para analizar la validez concurrente de la prueba, el peso en la evaluación de la parte de pragmática y los motivos de error respectivamente. Por otra parte se realizó un análisis descriptivo de las preguntas de pragmática para comprobar la validez de contenido de la parte de pragmática del OOPT. Los resultados obtenidos señalan claramente cuáles son las habilidades que requieren mayor atención por parte tanto de los profesores como de los diseñadores de este tipo de pruebas. El análisis indica que el bloque de pragmática es, junto con el de comprensión oral, el que mayor número de errores cometidos por los examinandos ostenta. Por otra parte, el motivo fundamental destacado por los examinandos como causa de error es el desconocimiento de ciertas unidades léxicas contenidas en los ítems de pragmática. Finalmente en esta tesis se presentan propuestas en consonancia con los resultados obtenidos que pueden redundar en una mejora de la calidad de las pruebas de lengua adaptativas y en la superación de algunas limitaciones actuales en la enseñanza de la competencia pragmalingüística en ILE/ISL en contextos académicos formales.