Analysis of Assessment Instruments Used in Foreign Language Teaching

Abstract

ABSTRACT: This article presents partial results of a research project on foreign language teachers’ discourse and practices with respect to assessment, the aim of which is to improve teachers’ assessment practices. The study, conducted in two Colombian universities, has various components: analysis of documents interviews with teachers and students, and workshops with participating teachers in order to qualify them and agree on an improved assessment system. In this report we discuss the analysis made of tests, grids, registers, and forms and other kinds of instruments that teachers use to assess their students. For the analysis of instruments we used an inductive-deductive procedure whereby categories emerging from a first analysis of instruments were then refined by comparing them to those proposed by Bachman and Palmer (1996) and other authors. In general, teachers seem to prefer “hard” over “soft” types of assessment. Moreover, the qualities of assessment on which they seem to rely the most are practicality and reliability; and the ones least taken into consideration are authenticity and interactivity.

RESUMEN: Este artículo presenta resultados parciales de un proyecto de investigación acerca del discurso y las prácticas evaluativas de los profesores de lenguas extranjeras cuyo objetivo es mejorar sus prácticas evaluativas. El estudio, llevado a cabo en dos universidades colombianas, tiene varios componentes: análisis de documentos, entrevistas con profesores y estudiantes y talleres con los profesores participantes con el fin de cualificarlos y acordar un mejor sistema de evaluación. En este informe discutimos el análisis que se hizo de los exámenes, parrillas, registros, formatos y otros tipos de instrumentos que usan los profesores para evaluar a sus estudiantes. Para el análisis de los instrumentos utilizamos un método inductivo-deductivo en el cual las categorías emergentes de un primer análisis de los instrumentos se refinaron comparándolas con las propuestas por Bachman y Palmer (1996) y otros autores. En general, los profesores tienden a preferir tipos de evaluación “hard” más que “soft”. Además, las cualidades de la evaluación en las que parecen confiar más son la viabilidad y la fiabilidad, y las que menos tienen en cuenta son la autenticidad y la interactividad.

RÉSUMÉ: Cet article présente les résultats partiels d’un projet de recherche concernant le discours et les pratiques évaluatives des professeurs de langues étrangères dont l’objectif est d’améliorer leurs pratiques évaluatives. L’étude, menée dans deux universités colombiennes, se compose de divers aspects: analyse de documents, entretiens avec des professeurs et des étudiants, et ateliers avec les professeurs participants dans le but de les former et de mettre au point un meilleur système d’évaluation. Dans cet article, on discutera l’analyse faite d’examens, de grilles d’évaluation, de registres, de formats et d’autres types d’instruments utilisés par les professeurs pour évaluer leurs étudiants. Pour l’analyse de ces instruments, on utilise une méthode inductive-déductive qui permet l’amélioration des catégories émergentes d’une première analyse des instruments, celles-ci ont été améliorées en les comparant aux propositions de Bachman, Palmer (1996), ainsi que d’autres auteurs. En général, les professeurs tendent à préférer des évaluations de type “hard” à celles de type “soft”. De plus, les qualités d’évaluation auxquelles ils semblent tenir le plus sont la viabilité et la fiabilité et le moins l’authenticité et l’interactivité.