Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi
Yıl: 2010 Cilt: 10 Sayı: 2 Sayfa Aralığı: 989 - 1019 Metin Dili: Türkçe İndeks Tarihi: 29-07-2022
Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi
Öz: Araştırmada, matematik başarısının ölçülmesiyle elde edilen puanların güvenirliğini belirlemede klasik test kuramı ve genellenebilirlik kuramından yararlanılmıştır. TIMSS- 1999’da yer alan açık uçlu matematik sorularından 24’ü, 2007 yılı bahar döneminde 203 öğrenciye uygulanmıştır. Klasik test kuramına göre elde edilen puanların iç tutarlılığının 0.92 gibi oldukça yüksek bir değer olduğu görülmüştür. Puanlayıcılar arası uyum ise Kendall’ın uyuşum (konkordans) kat sayısı ile belirlenmiş ve 0.52 olarak bulunmuştur. Genellenebilirlik kuramına göre matematik başarısının ölçülmesiyle elde edilen puanların genellenebilirlik kat sayı 0.92 ve güvenirlik kat sayı 0.90 bulunmuştur. Puanlayıcı değişkenlik kaynağının toplam varyansı açıklama oranı % 2,1 olup, oldukça düşüktür. Elde edilen bulgular, kullanılan ölçme aracının, öğrencilerin matematik başarısını belirlemede güvenilir sonuçlar verdiğini göstermektedir. Çalışmada yer alan dört puanlayıcının puan ortalamaları arasında fark olmakla birlikte, birbirleriyle uyumlu puanlama yaptıkları belirlenmiştir.
Anahtar Kelime: Konular:
Studying reliability of open ended mathematics items according to the classical test theory and generalizability theory
Öz: In this study, the Classical test theory and generalizability theory were used for determination to reliability of scores obtained from measurement tool of mathematics success. 24 open-ended mathematics question of the TIMSS-1999 was applied to 203 students in 2007-spring semester. Internal consistency of scores was found as 0.92. For determination of interrater consistency, Kendall’s concordance coefficient was calculated as 0.52. Generalizability coefficient for mathematics scores was 0.92 and phi coefficient was 0.90. The variance component of raters accounted for 2.1% of the total variance. According to all results, it was seen that measurement tool of mathematics success was reliable for determination of students’ mathematics success. Although there was a difference between means of four raters’ scores, it was found that there was consistency of their scores.
Anahtar Kelime: Konular:
Belge Türü: Makale Makale Türü: Araştırma Makalesi Erişim Türü: Bibliyografik
- Alharby, E. R. (2006). A comparison between two scoring methods, holistic vs. analytic using two measurement models, the generalizability theory and the many facet rasch measurement within the context of performance asssessment. Unpublished doctoral dissertation, The Pennsylvenia State University, USA.
- Allal, L., & Cardinet, J. (1997). Generalizability theory. In J. P. Keeves (Ed.), Educational research methodology and measurement an ınternational handbook (2nd ed., pp. 734-741). Cambridge University Press.
- Anastasi, A. & Urbina, S. (1997). Psychological testing (7th ed.). Upper Saddle River, NJ.: Prentice Hall.
- Baykul, Y. (2000). Eğitimde ve psikolojide ölçme: Klasik test teorisi ve uygulaması. Ankara: ÖSYM.
- Brennan, R. L. (2001). Generalizability theory. Iowa City, IA: ACT Publications.
- Büyüköztürk, Ş. (2006). Sosyal bilimler için veri analizi el kitabı, İstatistik, araştırma deseni, SPSS uygulamaları ve yorumu (6. baskı). Ankara: PegemA Yayıncılık.
- Cooper, M. (1997). Nonparametric and distribution-free statistics. In J. P. Keeves (Ed.), Educational research methodology and measurement an ınternational handbook (2nd ed., pp. 607-612). Cambridge University Press.
- Cronbach, J. L., Gleser, G. C., Nanda, H., & Rajaratman, N. (1972). The dependability of behavioral measurements: Theory of generalizability for scores and profiles. New York: John Wiley and Sons.
- Goodwin, L. D. (2001). Interrater agreement and reliability. Measurement in Psychical Education and Exercises Science, 5(1), 13-14.
- Güler, N. (2008). Klasik test kuramı genellenebilirlik kuramı ve Rasch modeli üzerine bir araştırma. Yayımlanmamış doktora tezi, Hacettepe Üniversitesi, Sosyal Bilimler Enstitüsü, Ankara.
- Güler, N. (2009). Genellenebilirlik kuramı ve SPSS ile GENOVA programlarıyla hesaplanan G ve K çalışmalarına ilişkin sonuçların karşılaştırılması. Eğitim ve Bilim, 34, 154.
- Howell, D. C. (2002). Statistical methods for psychology (5th ed.). Pacific Grove, CA: Th omson Learning Academic Research Center.
- Mushquash, C. & O’Connor, B. P. (2006). SPSS and SAS programs for generalizability theory analysis. Behavior Research Methods, 38, 542-547.
- Shavelson, R. J., & Webb, N. M. (1991). Generalizability theory: A primer. California: Sage Publications.
- Sudweeks, R. R., Reeve, S. & Bradshaw, W. S. (2005). A comparison of generalizability theory and many facet measurement in an anlaysis of college sophomore writing. Assessing Writing. 9, 239-261.
- Wiggins, G. (1998). Educative assessment: Designing assessment to inform and improve student performance. San Francisco: Jassey-Bass Publishers.
| APA | GÜLER N, Gelbal S (2010). Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. , 989 - 1019. |
| Chicago | GÜLER Neşe,Gelbal Selahattin Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. (2010): 989 - 1019. |
| MLA | GÜLER Neşe,Gelbal Selahattin Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. , 2010, ss.989 - 1019. |
| AMA | GÜLER N,Gelbal S Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. . 2010; 989 - 1019. |
| Vancouver | GÜLER N,Gelbal S Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. . 2010; 989 - 1019. |
| IEEE | GÜLER N,Gelbal S "Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi." , ss.989 - 1019, 2010. |
| ISNAD | GÜLER, Neşe - Gelbal, Selahattin. "Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi". (2010), 989-1019. |
| APA | GÜLER N, Gelbal S (2010). Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. Kuram ve Uygulamada Eğitim Bilimleri, 10(2), 989 - 1019. |
| Chicago | GÜLER Neşe,Gelbal Selahattin Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. Kuram ve Uygulamada Eğitim Bilimleri 10, no.2 (2010): 989 - 1019. |
| MLA | GÜLER Neşe,Gelbal Selahattin Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. Kuram ve Uygulamada Eğitim Bilimleri, vol.10, no.2, 2010, ss.989 - 1019. |
| AMA | GÜLER N,Gelbal S Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. Kuram ve Uygulamada Eğitim Bilimleri. 2010; 10(2): 989 - 1019. |
| Vancouver | GÜLER N,Gelbal S Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi. Kuram ve Uygulamada Eğitim Bilimleri. 2010; 10(2): 989 - 1019. |
| IEEE | GÜLER N,Gelbal S "Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi." Kuram ve Uygulamada Eğitim Bilimleri, 10, ss.989 - 1019, 2010. |
| ISNAD | GÜLER, Neşe - Gelbal, Selahattin. "Açık uçlu matematik sorularının güvenirliğinin klasik test kuramı ve genellenebilirlik kuramına göre incelenmesi". Kuram ve Uygulamada Eğitim Bilimleri 10/2 (2010), 989-1019. |
