Toward a New Process-Based Indicator for Measuring Writing Fluency: Evidence from L2 Writers' Think-Aloud Protocols

Abstract

This article reports on a study aimed at testing the hypothesis that, because of strategic and temporal variables, composing rate and text quantity may not be valid measures of writing fluency. A second objective was to validate the mean length of writers' translating episodes as a process-based indicator that mirrors their fluent written production rather than the factors that may be related to it. The translating episode is defined as any chunk that has been written down and terminated by a pause of three or more seconds or by any composing behaviour. Data for the study were drawn from the think-aloud protocols generated by 30 Egyptian university students writing in their second language (L2) and from their retrospective interviews. To examine the validity of the three indicators, the participants' composing rates, text quantity, and translating episodes were related to their scores on an argumentative writing task and on three linguistic tests. The results of the quantitative and qualitative analyses confirm the hypothesis tested and provide evidence for the validity of this newly developed indicator of writing fluency. Implications and suggestions for further research are presented. Resume: Cet article rapporte les resultats d'une etude visant a tester l'hypothese que, du fait de variables strategiques et temporelles, le rythme de composition et la longueur du texte redige ne sont peut-etre pas des mesures valides des competences a l'ecrit ; un autre objectif de la recherche decrite dans cet article etait de valider la longueur moyenne des episodes de traduction, chez les redacteurs, a titre d'indice du processus d'ecriture refletant leurs competences en expression ecrite, plutot que les facteurs qui y sont relies. Un episode de traduction est defini comme tout segment qui a ete ecrit puis interrompu par une pause de trois secondes ou plus ou par tout comportement de composition. Les donnees ont ete recueillies aupres de 30 etudiants egyptiens au niveau universitaire, qui ont effectue des reflexions a voix haute pendant qu'ils redigeaient dans leur langue seconde et qui ont participe a des entrevues retrospectives. Pour evaluer la validite des trois indices, le rythme de composition, la longueur du texte redige et les episodes de traduction ont ete mis en relation avec les scores qu'ont obtenus les participants dans une tâche de redaction argumentative et dans trois tests de langue. Les resultats des analyses quantitatives et qualitatives confirment l'hypothese qui a ete testee et ils attestent de la validite de ce nouvel indice des competences en expression ecrite. L'article se termine par une discussion des implications de cette etude et des suggestions de recherche.