Error coding in the TREACLE project

Penny MacDonald, Susana Jiménez‐Múrcia, María Boquera Matarredona, Ana Botella Trelis, Laura Inmaculada Cardona Sanchís, Rebeca García Nieto, María Esther Mediero Durán, Mick O’Donnell, Ainhoa Robles Baena, Keith Douglas Stuart · Dialnet (Universidad de la Rioja) · 2011

espanolEste articulo presenta el enfoque del analisis de errores del proyecto TREACLE, cuyo objetivo es proporcionar perfiles de competencia de aprendices con el objeto de poder informar el diseno curricular. Se presente la metodologia utilizada en la anotacion de errores de un corpus de aprendices escrito por estudiantes espanoles de ingles a nivel universitario. Despues de una breve introduccion a los corpus computerizados de aprendices y al analisis de errores, se relacionan los principios subyacentes al esquema de codificacion de errores y se proporcionan mas detalles sobre el esquema de codificacion mismo. Para asegurar que los codificadores anotan los textos de la misma manera, se siguieron dos pasos. En primer lugar, se realizo una amplia descripcion de los criterios de codificacion que contiene detalles sobre como codificar ciertos casos. En segundo lugar, realizamos dos estudios de fiabilidad inter-codificadores que nos permitieran identificar aquellas areas en las que los codificadores discrepaban, de modo que pudieramos aclararlas. Se presentan los resultados preliminares del analisis de errores y se discuten las posibles repercusiones de estos resultados para la ensenanza de la gramatica. EnglishThis paper presents the approach to error analysis within the TREACLE project, the aim of which is to profile learner proficiency to help inform teaching curriculum design. We will introduce the error annotation methodology used on a corpus of texts written by Spanish learners of English at University level. After a short introduction concerning Computer Learner Corpora and error analysis, we will discuss the underlying principles of the error coding scheme and then provide more details about the coding scheme itself. To ensure coders are annotating the texts in the same way, two steps were followed. Firstly, we developed a comprehensive coding criteria description giving full details as to how to code particular instances. Secondly, we performed two inter-coder reliability studies to help us identify areas where coders were differing, so that we could address these areas. We will present the preliminary results of the error analysis and discuss the repercussions of these results for grammar teaching.

Read the paper · More papers on PaperTik