Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*
Yıl: 2020 Cilt: 15 Sayı: 3 Sayfa Aralığı: 1951 - 1961 Metin Dili: Türkçe DOI: 10.29228/TurkishStudies.41821 İndeks Tarihi: 11-06-2021
Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*
Öz: Bu çalışmanın amacı, ortaokul düzeyindeki öğrencilerin üretmiş oldukları kurmaca türündeki metinlerinbütüncül bir anlayışla, doğru ve nesnel bir biçimde değerlendirilmesine olanak tanıyan bir rubrik geliştirilmesive geliştirilen rubriğin geçerlik ve güvenirlik çalışmalarının yapılmasıdır. Bu amaç doğrultusunda ilk olarakilgili alanyazını taranarak madde havuzu oluşturulmuş, rubriğin kapsam geçerliğini sağlamak üzere bumaddeler dört alan uzmanının görüşlerine sunulmuştur. Uzmanlardan gelen dönütler doğrultusunda maddelereson biçimi verilmiş, böylece rubrik 25 maddeden oluşan ve dörtlü likert tipinde performans değerlendirmesineolanak tanıyan bir yapıya bürünmüştür. Ardından Van il merkezinde bulunan bir ortaokulda, farklı sınıfdüzeylerinde öğrenim gören toplam 40 öğrenciye konu sınırlaması olmaksızın kurmaca metinler yazdırılmış,öğrencilerin ürettikleri bu kurmaca metinler geliştirilen rubrik yardımıyla iki farklı Türkçe öğretmenitarafından puanlanmıştır. Türkçe öğretmenlerinin puanlamaları arasındaki tutarlılığa bakmak amacıylaKrippendorff’un alfa katsayısı ve Pearson momentler çarpımı korelasyon katsayısı hesaplanmıştır. Yapılançözümlemeler sonucunda Krippendorff’un alfa katsayısı 0,92, Pearson momentler çarpımı korelasyon katsayısı0,94 olarak bulunmuştur. Buna göre bu çalışma kapsamında geliştirilen rubriğin, ortaokul düzeyindekiöğrencilerin yazmış olduğu kurmaca metinlerin değerlendirilmesinde kullanılabilecek geçerli ve güvenilir birölçme aracı olduğu sonucuna ulaşılmıştır. Geçerli ve güvenilir bir ölçme aracı olduğu çeşitli işlemlersonucunda kanıtlanan bu rubrik, ortaokul düzeyindeki öğrencilerin üretmiş oldukları kurmaca metinlerindeğerlendirilmesinde Türkçe öğretmenleri tarafından kullanılabilir. Türkçe öğretmenleri, bu rubrik yoluylahem öğrencilerinin yazmış oldukları kurmaca nitelikli metinleri doğru ve nesnel olarak değerlendirme hem dekolaylıkla puanlayabilme olanağı bulabileceklerdir.
Anahtar Kelime: Rubric Development for Evaluating Fictional Texts: Validity and Reliability Study
Öz: This study aims to develop a rubric that enables the evaluation of the fictional texts produced by middle school students with a holistic view, accurately and objectively, and to perform the validity and reliability studies of the developed rubrics. For this aim, firstly the relevant body of literature was reviewed and an item pool was created. Then, these items were represented to the opinions of four domain experts to ensure the validity of the rubric. In line with the feedback from the domain experts, the items were given their final form. Therefore, the rubric has a structure consisting of 25 items and enabling performance evaluation in 4-point likert scale. Then, in a secondary school in the city center of Van, fictional texts were written, without topic limitation, in a total of 40 students studying at different grade levels. These fictional texts were given points by two different Turkish teachers using rubric developed. To look at the consistency between the scores of Turkish language teachers, Krippendorff's Alpha Coefficient and Pearson Moments Multiplication Correlation Coefficient were used. As a result of the analysis, Krippendorff's Alpha Coefficient was 0,92 and Pearson Moments Multiplication Correlation Coefficient was 0,94. Consequently, it was concluded that the rubric developed within the scope of this study is a valid and reliable measurement tool that can be used in the evaluation of fictional texts written by middle school students. This rubric, which has been tested as a result of various procedures as a valid and reliable measurement tool, can be used by Turkish language teachers in evaluating the fictional texts produced by middle school students. Turkish language teachers, with the help of this rubric, can evaluate the fictional texts written by students correctly and objectively and find the opportunity to score easily.
Anahtar Kelime: Belge Türü: Makale Makale Türü: Araştırma Makalesi Erişim Türü: Erişime Açık
- Ada, S. (2015). Klasik test kuramına göre sayısal ve sözel alanlar için puanlama güvenirliğinin kayıp veri durumu kapsamında incelenmesi. Yayımlanmamış yüksek lisans tezi, Gazi Üniversitesi Eğitim Bilimleri Enstitüsü, Ankara. https://doi.org/10.1501/egifak_0000001322
- Adalı, O. (2011). Anlamak ve anlatmak. Pan Yayıncılık.
- Akaydın, Ş. ve Çeçen, M. A. (2016). “Ortaokul öğrencileri için kelime bilgi düzeyi bütüncül dereceli puanlama anahtarı geliştirme çalışması.” Millî Eğitim, 210: 337-349.
- Aktaş, M. ve Alıcı, D. (2018). “Yazılan hikâyeyi değerlendirmeye yönelik analitik rubrik geliştirme: geçerlik ve güvenirlik çalışması.” Mersin Üniversitesi Eğitim Fakültesi Dergisi, 14(2): 597- 610. https://doi.org/10.17860/mersinefd.424198
- Applebee, A. N., Bermudez, A. B., Blau, S., Caplan, R., Elbow, P., Hynds, S., et al. (2002). The language of literature (british literature). McDougal Littell.
- Aslan, C. (2006). Yazınsal nitelikli çocuk kitaplarının çocuğun okuduğunu anlama ve yazılı anlatım becerilerine etkisi. Yayımlanmamış doktora tezi, Ankara Üniversitesi Sosyal Bilimler Enstitüsü. https://doi.org/10.1501/egifak_0000000440
- Aşkın Balcı, H. (2018). Metindilbilimin ABC’si. Say Yayınları.
- Bahar, M., Nartgün, Z., Durmuş, S. ve Bıçak, B. (2014). Geleneksel-tamamlayıcı ölçme ve değerlendirme teknikleri öğretmen el kitabı. Pegem Akademi Yayınları. https://doi.org/10.14527/9786052415825.06
- Beard, A. (2003). The language of literature. Routledge Publisher.
- Bıkmaz Bilgen, Ö. ve Doğan, N. (2017). “Puanlayıcılar arası güvenirlik belirleme tekniklerinin karşılaştırılması.” Eğitimde ve Psikolojide Ölçme ve Değerlendirme Dergisi, 8 (1): 63-78. https://doi.org/10.21031/epod.294847
- Büyüköztürk, Ş., Kılıç Çakmak, E., Akgün, Ö. E., Karadeniz, Ş. ve Demirel, F. (2009). Bilimsel araştırma yöntemleri. Pegem Akademi Yayınları. https://doi.org/10.14527/9789944919289
- Coşkun, E. (2009). “Türkçe öğretiminde metin bilgisi.” İlkğretimde Türkçe Öğretimi (Ed.) A. Kırkkılıç ve H. Akyol. PegemA Yayıncılık. 231-283.
- Çıralı Sarıca, H. ve Koçak, Y. (2016). “Eğitsel bağlamda dijital hikâye anlatımı: bir rubrik geliştirme çalışması.” Eğitim Teknolojisi Kuram ve Uygulama, 6(2): 65-84. https://doi.org/10.17943/etku.12600
- Dilidüzgün, Ş. (2008). Türkçe öğretiminde metindilbilimsel bağlamda uygulamalı bir yaklaşım. Yayımlanmamış doktora tezi, İstanbul Üniversitesi Sosyal Bilimler Enstitüsü. Goodrich Andrade, H. (1997). “Understanding rubrics.” Educational Leadership, 54(4): 14-17.
- Goodrich Andrade, H. (2011). “The effects of instructional rubrics on learning to write.” Current Issues in Education.https://cie.asu.edu/ojs/index.php/cieatasu/issue/view/34. Günay, D. (2017). Metin bilgisi. Papatya Yayıncılık.
- Jago, C., Shea, R. H., Scanlon, L., & Aufses, R. D. (2011). Literature & composition (reading, writing, thinking). Bedford/St. Martin's Publisher.
- Jonsson, A. & Svingby, G. (2007). “The use of scoring rubrics: Reliability, validity and educational consequences.” Educational Research Review, 2(2): 130-144. https://doi.org/10.1016/j.edurev.2007.05.002
- Kan, A. (2007). “Performans değerlendirme sürecine katkıları açısından yeni program anlayışı içerisinde kullanılabilecek bir değerlendirme yaklaşımı: rubrik puanlama yönergeleri.” Kuram ve Uygulamada Eğitim Bilimleri, 7(1): 129-152. https://doi.org/10.1501/egifak_0000001449
- Kanık, E. A., Örekici Temel, G. ve Ersöz Kaya, İ. (2010). “Fleiss kappa ve krippendorf alpha uyum katsayılarının örneklem genişliği, değerlendirici sayısı ve kullanılan ölçeğin kategori sayısından etkilenme durumları üzerine bir benzetim çalışması.” Türkiye Klinikleri Biyoistatistik Dergisi, 2 (2): 74-81. https://doi.org/10.5336/biostatic.2014-41410
- Karasar, N. (2009). Bilimsel araştırma yöntemi. Nobel Yayın Dağıtım.
- Keklik, S. (2016). “Yazma eğitimiyle ilgili iki ders önersi: düşünceye dayalı metin yazma ve kurmaca metin yazma dersi.” Uluslararası Türkçe Eğitimi ve Öğretimi Dergisi, 1 (1): 86-109. https://doi.org/10.14527/9786052414484.09
- Kıran, Z. ve Kıran, A. (2007). Yazınsal okuma süreçleri. Seçkin Yayıncılık.
- Krippendorf, K. (2011). Computing Krippendorff’s alpha-reliability. Retrieved from http://repository.upenn.edu/asc_papers/43.
- Llosa, M. V. (2012). Genç bir romancıya mektuplar. Can Yayınları.
- Melanlıoğlu, D. (2016). “Yabancı öğreniciler için dinleme becerisine yönelik üstbilişsel dereceli puanlama anahtarı.” Erzincan Üniversitesi Eğitim Fakültesi Dergisi, 18 (2): 1206-1229. https://doi.org/10.17556/jef.20880
- MEB. (2018). Türkçe dersi öğretim programı. Milli Eğitim Bakanlığı.
- Öztürk, D. ve Güdek, B. (2016). “Viyolensel performans değerlendirmesine yönelik dereceli puanlama anahtarının (rubrik) geliştirilmesi.” Akademik Müzik Araştırmaları Dergisi, 2 (3): 1-20. https://doi.org/10.5578/amrj.10447
- Sazyek, H. (2013). Roman terimleri sözlüğü (roman sanatından yüz terim). Ankara: Hece Yayınları.
- Sever, S. (2013). Çocuk ve edebiyat. Tudem Yayıncılık.
- Szymanski, E. M. & Linkowski, D. C. (1995). “Rehabilitation counseling accreditation: validity and reliability.” The Journal of Rehabilitation, 61(1): 12-17.
- Şen, E. (2018). “Metin yapısı.” Kuram ve Uygulamada Türk Dili I. (Ed.) M. N. Kardaş ve R. Koç. PegemA Yayıncılık. 125-169.
- Şen, E. (2020). Çocuk edebiyatında kurmaca gerçeklik. Nobel Akademik Yayıncılık.
- Tavşancıl, E. (2014). Tutumların ölçülmesi ve SPSS ile veri analizi. Nobel Yayın Dağıtım.
- Wolf, K. ve Stevens, E. (2007). “The role of rubrics in advancing and assessing student learning.” The Journal of Effective Learning, 7(1): 3-14.
APA | ŞEN E, KARAGÜL S (2020). Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. , 1951 - 1961. 10.29228/TurkishStudies.41821 |
Chicago | ŞEN Erhan,KARAGÜL Sedat Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. (2020): 1951 - 1961. 10.29228/TurkishStudies.41821 |
MLA | ŞEN Erhan,KARAGÜL Sedat Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. , 2020, ss.1951 - 1961. 10.29228/TurkishStudies.41821 |
AMA | ŞEN E,KARAGÜL S Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. . 2020; 1951 - 1961. 10.29228/TurkishStudies.41821 |
Vancouver | ŞEN E,KARAGÜL S Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. . 2020; 1951 - 1961. 10.29228/TurkishStudies.41821 |
IEEE | ŞEN E,KARAGÜL S "Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*." , ss.1951 - 1961, 2020. 10.29228/TurkishStudies.41821 |
ISNAD | ŞEN, Erhan - KARAGÜL, Sedat. "Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*". (2020), 1951-1961. https://doi.org/10.29228/TurkishStudies.41821 |
APA | ŞEN E, KARAGÜL S (2020). Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. Turkish Studies - Educational Sciences , 15(3), 1951 - 1961. 10.29228/TurkishStudies.41821 |
Chicago | ŞEN Erhan,KARAGÜL Sedat Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. Turkish Studies - Educational Sciences 15, no.3 (2020): 1951 - 1961. 10.29228/TurkishStudies.41821 |
MLA | ŞEN Erhan,KARAGÜL Sedat Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. Turkish Studies - Educational Sciences , vol.15, no.3, 2020, ss.1951 - 1961. 10.29228/TurkishStudies.41821 |
AMA | ŞEN E,KARAGÜL S Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. Turkish Studies - Educational Sciences . 2020; 15(3): 1951 - 1961. 10.29228/TurkishStudies.41821 |
Vancouver | ŞEN E,KARAGÜL S Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*. Turkish Studies - Educational Sciences . 2020; 15(3): 1951 - 1961. 10.29228/TurkishStudies.41821 |
IEEE | ŞEN E,KARAGÜL S "Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*." Turkish Studies - Educational Sciences , 15, ss.1951 - 1961, 2020. 10.29228/TurkishStudies.41821 |
ISNAD | ŞEN, Erhan - KARAGÜL, Sedat. "Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması*". Turkish Studies - Educational Sciences 15/3 (2020), 1951-1961. https://doi.org/10.29228/TurkishStudies.41821 |