THE ADJUSTMENT OF A CLOZE TEST TO THE RASCH MODEL: CALIBRATION, ADJUSTMENT ITEMS AND DIF ANALYSIS

Authors

  • Katya Luciane Oliveira Universidade Estadual de Londrina
  • Fabián Javier Marín Rueda Universidade São Francisco
  • Acácia Aparecida Angeli Santos Universidade São Francisco

DOI:

https://doi.org/10.22235/cp.v6i1.58

Keywords:

Item theory response, Cloze technique, reading comprehension

Abstract

The objective of the present study were to investigate the goodness of fit of a Cloze test to the Rasch Model, as well as to evaluate the item difficulty in relation to gender (DIF). The sample was composed of 1022 college students of the São Paulo and Minas Gerais States, Brazil.  The cloze test was applied collectively. The analysis of the instrument revealed its goodness of fit to the Rasch Model and that the items were responded according to the expected pattern, showing good adjustment, as well. Regarding DIF, only five items differentiated by gender.   Taken together, results indicated a balance in the biases for both man and woman.

Downloads

Download data is not yet available.

References

Abraham, R. G., & Chapelle, C. A. (1992). The meaning of Cloze test scores: An item difficulty perspective. The Modern Language Journal, 76(4), 468-479.

Anderson, R. C., & Pearson, D. P. (1984). A Schema-theoretic view of basic processes in reading comprehension. En P. D. Pearson & cols. (Eds.), Handbook of reading research (pp. 255-290). New York: Longman.

Andrade, D.F., Tavares, H. R. & Valle, R.C. (2000). Teoria de Resposta ao Item: conceitos e aplicações. São Paulo: Associação Brasileira de Estatística.

Araújo, E. A. C., Andrade, D. F., & Bortolotti, S. L. V. (2009). Teoria da Resposta ao Item. Revista da Escola de Enfermagem, 43 (N.Especial),1000-1008.

Boruchovitch, E., Santos, A. A. A., & Oliveira, K. L. (2007). Análise da fidedignidade entre dois tipos de pontuação do Teste de Cloze. Psicologia em Pesquisa-UFJF, 1(1), 41-51.

Conselho Nacional de Saúde. Resolução 196/96. Diretrizes e Normas Regulamentadoras de Pesquisa. Retirado da Web em 19 de outubro de 2005. http://www.conselho.saude.gov.br.

Cunha, V. L. O., & Capellini, S. A. (2010). Análise psicolinguística e cognitivo-linguística das provas de habilidades metalinguísticas e leitura realizadas em escolares de 2ª a 5ª série. Revista CEFAC, 12(5), 772-783.

Cunha, N. B., & Santos, A. A. A. (2006). Relação entre a compreensão da leitura e a produção escrita em universitários. Psicologia: Reflexão e Crítica, 19(2), 237-245.

Dias, A. S., & Vendramini, C. M. M. (2008). Análise Fatorial com informação completa de uma prova de Compreensão em Leitura em Estatística Psicologia Escolar e Educacional, 12(2), 357-367.

Duke, N.K., & Pearson, P.D. (2002). Effective practices for developing reading compreehension. En A E. Farstrup & S.J. Samuels (Eds.) What research has to say about reading instruction (pp. 205-242). Newark: International Reading Association.

Embretson, S. E., & Reise, S. P. (2000). Item response theory for psychologists. New Jersey: Lawrence Erblbaum.

Flippo, R. F. (1998). Points of agreement: a display of professional unity in our field. The Reading Teacher, 52, 30-40.

Gomes, M. A. M., & Boruchovitch, E. (2009). Proficiência em leitura: um panorama da situação. En A. A. A. Santos, E. Boruchovitch & Oliveira, K. L. (Eds.), Cloze: um instrumento de diagnóstico e intervenção (pp. 23-46). São Paulo: Casa do Psicólogo.

Hambleton, R. K., Swaminathan, H. & Rogers, H. J. (1991). Fundamentals of item response theory. Newbury Park, CA: Sage.

Holland, P. W., & Thayer, D. T (1988). Differential item performance and the Mantel-Haenszel procedure. En H. Wainer & H. I. Braum (Eds.), Test Validity (pp. 339-352). Hillsdale, NJ: Lawrence Erlbaum.

Hoskins, S. L., Newstead, S. E., & Denni, I. (1997). Degree performance as a function of age, gender, prior qualifications and discipline studied. Assessment & Evaluation in Higher Education, 22 (3), 317-328.

Kintsch, W. (1994). Text comprehension, memory and learning. American Psychologist, 49(4), 294-303.

Linacre, J. M. (2002). What do infit na outfit, nmean-square and standardized mean? Rasch Measurement Transactions, 16(2), 887.

Navas, A. L. G. P., Pinto, J. C. B. R., & Dellisa, P. R. R. (2009). Avanços no conhecimento do processamento da fluência em leitura: da palavra ao texto. Revista da Sociedade Brasileira de Fonoaudiologia, 14(4), 553-559.

Nicholson, T. (1999). Reading comprehension processes. En G. B. Thompson & T. Nicholson (Eds.), Learning to read (pp. 127-149). Newark: IRA.

Oliveira, K. L. (2011). Considerações acerca da compreensão em leitura no ensino superior. Psicologia: Ciência e Profissão, 31 (4), 690-701.

Oliveira, K. L., Cantalice, L. M., & Freitas, F. A. (2009). Compreensão em leitura no ensino médio: análise de acertos por item. En A. A. A. Santos, E. Boruchovitch & Oliveira, K. L. (Eds.), Cloze: um instrumento de diagnóstico e intervenção (pp. 163-185). São Paulo: Casa do Psicólogo.

Oliveira, K. L., Boruchovitch, E., & Santos, E. (2009). A técnica de Cloze na avaliação da compreensão em leitura. En A. A. A. Santos, E. Boruchovitch & Oliveira, K. L. (Eds.), Cloze: um instrumento de diagnóstico e intervenção (pp. 47-77). São Paulo: Casa do Psicólogo.

Oliveira, K. L., Santos, A. A. A., & Primi, R. (2003). Estudo das relações entre compreensão em leitura e desempenho em disciplinas na universidade. Revista Interação em Psicologia, 7(1), 19-25.

Oliveira, K. L., & Santos, A. A. A. (2005). Compreensão em leitura e avaliação da aprendizagem em universitários. Psicologia: Reflexão e Crítica, 18(1), 118-124.

Oliveira, K. L., & Santos, A. A. A. (2006). Compreensão de textos e desempenho acadêmico. Psic-Revista de Psicologia da Vetor Editora, 7(1), 19-27.

Oliveira, K. L., & Santos, A. A. A. (2009). Estudo de intervenção para a compreensão em leitura e produção de textos na universidade. No prelo.

Primi, R. (2004). Avanços na interpretação de escalas com a aplicação da Teoria de Resposta ao Item. Avaliação Psicológica, 3(1), 53-58.

Rasch, G. (1960). Probabilistic models for some intelligence and attainment test. Copenhagen, Denmark: Danmarks Paedogogiske Institut.

Reeve, J., & Jang, H. (2006). What teachers say and do to support student’s autonomy during a learning activity. Journal of Educational Psychology, 98 (1), 289-218.

Ruddell, R.B., Ruddell, M.R. & Singer, H. (2001) Theorical models and process of reading. Newark, DE: International Reading Association.

Santos, A. A. A., Primi, R., Taxa, F. & Vendramini, C. M. M. (2002). O teste de Cloze na avaliação da compreensão em leitura. Psicologia: Reflexão e Crítica, 15(3), 549-560.

Silva, E.. M. T., & Witter, G. P. (2008). Compreensão de texto e desempenho acadêmico em estudantes de psicologia Estudos de Psicologia (Campinas), 25(3), 395-403.

Silva, E. M. T., & Witter, G. P. (2009). Eficiência de um curso de português no desenvolvimento da leitura e escrita. En A. A. A. Santos, E. Boruchovitch & Oliveira, K. L. (Eds.), Cloze: um instrumento de diagnóstico e intervenção (pp. 311-342). São Paulo: Casa do Psicólogo.

Silva, M. J. M., & Santos, A. A. A. (2004). A avaliação da compreensão em leitura e o desempenho acadêmico de universitários. Psicologia em Estudo, 9(3), 459-457.

Spinillo, A. G., & Mahon, E. R. (2007). Compreensão de texto em crianças: comparações entre diferentes classes de inferência a partir de uma metodologia on-line. Psicologia: Reflexão e Crítica, 20(3), 463-471.

Spira, E. G. Bracken, S. S., & Fischel, J. E. (2005). Predicting improvement after first-grade reading difficulties: the effects of oral language, emergent literacy, and behavior skills. Developmental Psychology, 41(1), 225-234.

Taylor, W.L. (1953) Cloze procedures: a new tool for measuring reability. Journalis Quarterly, 30, 415-433.

Van der Linden, W. J., & Hambleton, R. K. (1997). Handbook of modern item response theory. New York: Springer.

Venezky, R. L. (1990). Definitions of literacy. En R. L. Venezky, D., A. Wagner & B. S. Ciliberti (Eds.), Toward defining literacy (pp. 2-16). Newark: IRA.

Veríssimo, L. F. (1995). Desentendimento. Ícaro Revista de bordo da Varig, XII(136), 11.

Published

2012-05-30

How to Cite

Oliveira, K. L., Marín Rueda, F. J., & Angeli Santos, A. A. (2012). THE ADJUSTMENT OF A CLOZE TEST TO THE RASCH MODEL: CALIBRATION, ADJUSTMENT ITEMS AND DIF ANALYSIS. Ciencias Psicológicas, 6(1), 7–15. https://doi.org/10.22235/cp.v6i1.58

Issue

Section

ORIGINAL ARTICLES

Most read articles by the same author(s)

Similar Articles

<< < 

You may also start an advanced similarity search for this article.