EVALUACIÓN DE COMPETENCIA LINGÜÍSTICA A TRAVÉS DE LAS TIC: VALORACIÓN Y ESTRATEGIAS DE MEJORA

Abstract

[EN] Title: Assessment of language competence through ICT: analysis and strategies for improvement. Author: Antonio Martínez Ramírez Director: Dr. Cristina Perez- Guillot PhD programme: Languages and Technology. Department of Applied Linguistics. Universitat Politècnica de València.

The aim of this research study was to analyze different ways of assessing language competence using computer tools. For this purpose, the various procedures used to date were first studied. We then attempted to design a system ensuring quality, safety and reliability for the benefit of all parties involved, including teachers and students, as well as technical and administrative staff. This study was carried out in the Language Centre of the Universitat Politècnica de València, using the centre's resources to research and develop the alternatives proposed. In the first phase of the study the initial manner in which language competence tests were developed in the center was examined to detect the existing problems. Strategies for improvement were defined and a number of working hypotheses considered for computerized evaluation environments. The improvements and hypotheses are related to topics as diverse as time saved by teaching staff, system security, the reliability of the results, the increase in multimedia capabilities, the benefits of monitoring and the need for proper feedback. During the second phase, specific software was developed to to meet the specified requirements, following which pilot tests were conducted to check the validity of the system designed. In the third phase, this software was used on all language competence level tests carried out at the center in English, French, and German. The tests for which the software was developed are used to provide access to language courses offered by the center, scholarships for academic exchange students (ERASMUS), and high academic performance (ARA) subjects for which English is the medium of instruction. Users were also requested to take a satisfaction survey using a web page developed for this purpose. In the fourth and final phase of this study, the results and opinions gathered were analyzed to check the validity of our assumptions and offer a number of conclusions based on the experience gained.

[ES] Título: Evaluación de competencia lingüística a través de las TIC: valoración y estrategias de mejora. Autor: Antonio Martínez Ramírez Directora: Dra. Cristina Pérez- Guillot Programa de Doctorado: Lenguas y Tecnología. Departamento de Lingüística Aplicada. Universitat Politécnica de València.

Nuestro objetivo en este trabajo de investigación ha sido analizar las posibilidades de evaluación de la competencia lingüística mediante herramientas informáticas, estudiando los diversos procedimientos utilizados hasta el momento y posteriormente intentar diseñar un sistema que cumpla con una serie de garantías de calidad, seguridad y fiabilidad, en beneficio de todos los sujetos implicados, como son profesores y alumnos, así como personal técnico y administrativo. El estudio lo hemos llevado a cabo en el Centro de Lenguas de la Universitat Politècnica de València, utilizando los recursos del centro para investigar y desarrollar las alternativas propuestas. La primera fase de la tesis se ha basado en examinar el estado inicial en el que se desarrollaban las pruebas de competencia lingüística en el centro para detectar la problemática existente, definir estrategias de mejora y plantear una serie de hipótesis de trabajo que pensamos pueden ser válidas en un entorno de evaluación informatizada. Las mejoras e hipótesis están relacionadas con aspectos tan diversos como el ahorro de tiempo que se puede ofrecer al profesorado, la seguridad del sistema, la fiabilidad de los resultados, el incremento de la capacidad multimedia, las ventajas de la monitorización y la necesidad de un feedback adecuado. Durante la segunda fase hemos desarrollado un software específico que cumpliera con los requerimientos especificados y hemos realizado pruebas piloto para comprobar la validez del sistema diseñado. En la tercera fase hemos utilizado el software masivamente en las pruebas de nivel de competencia lingüística realizadas en el centro para los idiomas inglés, francés y alemán. Las pruebas en que hemos intervenido estaban relacionadas con el acceso a los cursos de idiomas que ofrece el centro, las becas para alumnos de intercambio académico (ERASMUS) y el acceso de alumnos a los grupos de alto rendimiento académico (ARA), cuya docencia es en Inglés. También hemos solicitado la opinión de los usuarios mediante una encuesta de satisfacción a través de una página web elaborada con esa finalidad. La cuarta y última fase de este trabajo ha servido para analizar los resultados obtenidos y las opiniones recibidas, comprobar la validez de nuestras hipótesis y ofrecer una serie de conclusiones basadas en la experiencia adquirida.

[CA] Títol: Avaluació de competència lingüística a través de les TIC: valoració i estratègies de millora. Autor: Antonio Martínez Ramírez Directora: Dra. Cristina Pérez-Guillot Programa de Doctorat: Llengües i Tecnologia. Departament de Lingüística Aplicada. Universitat Politècnica de València.

El nostre objectiu en este treball d'investigació ha sigut analitzar les possibilitats d'avaluació de la competència lingüística per mitjà de ferramentes informàtiques, estudiant els diversos procediments utilitzats fins al moment i posteriorment intentar dissenyar un sistema que complisca amb una sèrie de garanties de qualitat, seguretat i fiabilitat, en benefici de tots els subjectes implicats, com són professors i alumnes, així com personal tècnic i administratiu. L'estudi ho hem dut a terme en el Centre de Llengües de la Universitat Politècnica de València, utilitzant els recursos del centre per a investigar i desenrotllar les alternatives proposades. La primera fase de la tesi s'ha basat en examinar l'estat inicial en què es desenvolupaven les proves de competència lingüística en el centre per a detectar la problemàtica existent, definir estratègies de millora i plantejar una sèrie d'hipòtesis de treball que pensem poden ser vàlides en un entorn d'avaluació informatitzada. Les millores i hipòtesis estan relacionades amb aspectes tan diversos com l'estalvi de temps que es pot oferir al professorat, la seguretat del sistema, la fiabilitat dels resultats, l'increment de la capacitat multimèdia, els avantatges de la monitorització i la necessitat d'un feedback adequat. Durant la segona fase hem desenrotllat un programa específic que complira amb els requeriments especificats i hem realitzat proves pilot per a comprovar la validesa del sistema dissenyat. En la tercera fase hem utilitzat el programa massivament en les proves de nivell de competència lingüística realitzades en el centre per als idiomes anglés, francés i alemany. Les proves en què hem intervingut estaven relacionades amb l'accés als cursos d'idiomes que oferix el centre, les beques per a alumnes d'intercanvi acadèmic (ERASMUS) i l'accés d'alumnes als grups d'alt rendiment acadèmic (ARA), la docència de les quals és en Anglés. També hem sol·licitat l'opinió dels usuaris per mitjà d'una enquesta de satisfacció a través d'una pàgina web elaborada amb eixa finalitat. La quarta i última fase d'este treball ha servit per a analitzar els resultats obtinguts i les opinions rebudes, comprovar la validesa de les nostres hipòtesis i oferir una sèrie de conclusions basades en l'experiència adquirida