{"title":"Influencia de la Longitud, la Complejidad y la Inferencia en la Resolución de Pruebas de Comprensión Lectora Inferencial","authors":"Alejandra Platas-García, J.-Martín Castro-Manzano, Verónica Reyes-Meza, Irene Gaona-Gordillo","doi":"10.15366/riee2018.11.1.006","DOIUrl":null,"url":null,"abstract":"Este trabajo surge a partir de nuestra experiencia docente a nivel superior con las tareas de revision y elaboracion de pruebas de opcion multiple para medir comprension lectora. Nuestros objetivos son dos: 1) determinar si las variables de longitud, complejidad e inferencia de una prueba de comprension lectora inferencial tienen efectos en el desempeno de los estudiantes y, consecuentemente, 2) argumentar a favor de la elaboracion de pruebas que promuevan o incluyan el uso de inferencias no-deductivas en adicion a las deductivas. Para lograr estos objetivos llevamos a cabo un estudio con 187 estudiantes universitarios a los que les aplicamos una prueba de comprension lectora inferencial de opcion multiple. Los datos obtenidos fueron analizados con un modelo lineal generalizado mixto. Entre los resultados generales encontramos que los estudiantes tienen un mejor desempeno en la prueba de comprension lectora cuando se les solicita realizar inferencias no-deductivas y los textos son complejos y largos; mientras que su desempeno decrece cuando se les solicita realizar inferencias deductivas y los textos son simples y cortos. Estos resultados parecen soportar la tesis de que existe un efecto de las caracteristicas de las pruebas en la comprension lectora de los estudiantes, lo cual, a su vez, nos permite sugerir que el diseno de pruebas de comprension lectora podria enriquecerse tomando en cuenta un concepto mas incluyente de inferencia que seria consistente con el concepto de racionalidad acotada. Palabras clave: Evaluacion de estudiantes; Razonamiento, Deduccion; Tests de lectura; Tests de eleccion multiple; Comprension lectora; Inferencias. Effects of Length, Complexity, and Inference in the Resolution of Inferential Reading Comprehension Tests Our interest in this research comes from our experience at reviewing and developing multiple-choice tests in order to measure reading comprehension skills at an undergraduate level. We have two goals: 1) to determine if the variables of length, complexity, and inference, of a reading comprehension test have an effect over students’ performance and, consequently, 2) to argue in favour of tests that promote or include non-deductive inference in addition to deductive inference as a parameter of their design. To reach these goals we have applied an inferential reading comprehension test to a group of 187 undergraduate students. The obtained data was analysed with a generalized linear mixed model. Among the general results, we find that students perform better when the test requires them to carry out a non-deductive inference over complex and long texts; whereas their performance decreases when the test calls for a deductive inference over simple and short texts. These results seemingly support the claim that there is an influence of the properties of the test over the students reading comprehension, which, in turn, allows us to suggest that the design of reading comprehension tests might be enriched by taking into account a more inclusive concept of inference consistent with the notion of bounded rationality. Keywords: Student evaluation; Reasoning; Deduction; Reading tests; Multiple choice tests; Reading comprehension; Inferences.","PeriodicalId":166932,"journal":{"name":"Revista Iberoamericana de Evaluación Educativa","volume":"38 1","pages":"0"},"PeriodicalIF":0.0000,"publicationDate":"2018-02-09","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"2","resultStr":null,"platform":"Semanticscholar","paperid":null,"PeriodicalName":"Revista Iberoamericana de Evaluación Educativa","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.15366/riee2018.11.1.006","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"","JCRName":"","Score":null,"Total":0}
引用次数: 2
Abstract
Este trabajo surge a partir de nuestra experiencia docente a nivel superior con las tareas de revision y elaboracion de pruebas de opcion multiple para medir comprension lectora. Nuestros objetivos son dos: 1) determinar si las variables de longitud, complejidad e inferencia de una prueba de comprension lectora inferencial tienen efectos en el desempeno de los estudiantes y, consecuentemente, 2) argumentar a favor de la elaboracion de pruebas que promuevan o incluyan el uso de inferencias no-deductivas en adicion a las deductivas. Para lograr estos objetivos llevamos a cabo un estudio con 187 estudiantes universitarios a los que les aplicamos una prueba de comprension lectora inferencial de opcion multiple. Los datos obtenidos fueron analizados con un modelo lineal generalizado mixto. Entre los resultados generales encontramos que los estudiantes tienen un mejor desempeno en la prueba de comprension lectora cuando se les solicita realizar inferencias no-deductivas y los textos son complejos y largos; mientras que su desempeno decrece cuando se les solicita realizar inferencias deductivas y los textos son simples y cortos. Estos resultados parecen soportar la tesis de que existe un efecto de las caracteristicas de las pruebas en la comprension lectora de los estudiantes, lo cual, a su vez, nos permite sugerir que el diseno de pruebas de comprension lectora podria enriquecerse tomando en cuenta un concepto mas incluyente de inferencia que seria consistente con el concepto de racionalidad acotada. Palabras clave: Evaluacion de estudiantes; Razonamiento, Deduccion; Tests de lectura; Tests de eleccion multiple; Comprension lectora; Inferencias. Effects of Length, Complexity, and Inference in the Resolution of Inferential Reading Comprehension Tests Our interest in this research comes from our experience at reviewing and developing multiple-choice tests in order to measure reading comprehension skills at an undergraduate level. We have two goals: 1) to determine if the variables of length, complexity, and inference, of a reading comprehension test have an effect over students’ performance and, consequently, 2) to argue in favour of tests that promote or include non-deductive inference in addition to deductive inference as a parameter of their design. To reach these goals we have applied an inferential reading comprehension test to a group of 187 undergraduate students. The obtained data was analysed with a generalized linear mixed model. Among the general results, we find that students perform better when the test requires them to carry out a non-deductive inference over complex and long texts; whereas their performance decreases when the test calls for a deductive inference over simple and short texts. These results seemingly support the claim that there is an influence of the properties of the test over the students reading comprehension, which, in turn, allows us to suggest that the design of reading comprehension tests might be enriched by taking into account a more inclusive concept of inference consistent with the notion of bounded rationality. Keywords: Student evaluation; Reasoning; Deduction; Reading tests; Multiple choice tests; Reading comprehension; Inferences.
这项工作来自于我们在高等教育水平的教学经验,我们的任务是修改和开发多项选择测试来衡量阅读理解。我们有两个目的:(1)确定变量的长度、复杂度和推理证明他们理解inferencial读者影响desempeno学生和2)深恶痛绝,因此有利于测试elaboracion促进或包括推论no-deductivas在adicion deductivas。为了实现这些目标,我们对187名大学生进行了一项研究,对他们进行了推理阅读理解多项选择测试。本研究的目的是评估在墨西哥恰加斯州(恰加斯州)和恰加斯州(恰加斯州)进行的研究的结果。在总体结果中,我们发现学生在阅读理解测试中表现更好,当被要求进行非演绎推理,文本复杂而长;而当被要求进行演绎推理和文本简单而简短时,他们的表现就会下降。这些研究结果似乎支持论文存在效应测试的caracteristicas在学生理解读者,这反过来,使我们能够意味着理解测试的设计,读者可以发财的推理考虑到一个更包容的概念将是符合这个概念的合理性约束。关键词:学生评价;推理,Deduccion;阅读测试;多项选择测试;理解读者;推论。我们对这项研究的兴趣来自于我们回顾和开发多项选择测试的经验,以测量本科生水平的阅读理解技能。We have two目标:(1)确定,若变量length, complexity and inference、of reading comprehension test have an effect over students’performance and, consequently争辩的,(2)年8 tests that促进or include non-deductive inference in addition to deductive inference as a parameter of design。为了达到这些目标,我们对187名本科生进行了推理阅读理解测试。= =地理= =根据美国人口普查局的数据,该镇总面积为,其中土地和(1.)水。在一般结果中,我们发现当考试要求学生对复杂而冗长的文本进行非演绎推理时,学生表现更好;= =地理= =根据美国人口普查,这个县的面积为。这些成果seemingly support the claim that there is an影响of the properties of the test over the students reading comprehension, which in turn, allows us to suggest that the design of reading comprehension测试可能是考虑到的by a more包括概念inference一致with the notion of bounded rationality。关键词:学生评价;-;重叠;阅读测试;多项选择测试;Reading comprehension;Inferences。