Analytical Rubric Development for Story Writing: Validity and Reliability Study

Abstract

Bu çalışmanın amacı, beşinci sınıf düzeyindeki çocukların hikâye yazma becerilerini değerlendirmeye yönelik analitik bir rubrik geliştirilmesi ve geliştirilen rubriğin geçerlik ve güvenirlik kanıtlarının sağlanmasına yönelik çalışmalar yapılmasıdır. Araştırmanın verileri, gönüllü 45 sınıf öğretmeninin yaptığı değerlendirmeler sonucu elde edilmiştir. Rubriğin geliştirilmesi aşamasında yazılan hikâyeyi değerlendirmede göz önüne alınması gereken ölçütler (davranış göstergelerinin) uzman görüşleri ve literatür taraması yapılarak belirlenmiş ve yazılan hikâyeyi değerlendirmeye yönelik listelenen her bir ölçüte yönelik üçer kategori (0-1-2) için davranış göstergeleri yazılmıştır. Geliştirilen analitik rubriğin geçerlik kanıtı olması için 9 öğretmenin her ölçüt/alt ölçüt için yaptığı değerlendirmeler arasındaki uyum, basit uyum katsayısı ile incelenmiştir. Uzman görüşleri ile son hâli verilen rubrik için yine geçerlik kanıtı sağlayabilmek amacıyla Açımlayıcı Faktör Analizi yapılmıştır. Hikâye yazmaya ilişkin analitik rubriğin güvenirliği için kanıt sağlamak amacıyla ana ölçütler ve tüm ölçek için Cronbach Alfa katsayıları hesaplanmıştır. Tüm ölçek bazında elde edilen Cronbach Alfa katsayıları .919 ile .961 arasında değiştiği dolayısıyla ölçeğin oldukça yüksek derecede iç tutarlığa sahip olduğu görülmektedir. Puanlayıcılar arası güvenirliğe kanıt sağlamak amacıyla ise iki sınıf öğretmeninin yaptığı puanlamalar üzerinden Ağırlıklandırılmış Kappa hesaplanmıştır. Yapılan hesaplamalar sonucu elde edilen Ağırlıklandırılmış Kappa katsayısı 0.933'tür. Yapılan analizler ışığında geliştirilen analitik rubriğin, hikâye yazma becerisi değerlendirilirken kullanılabilecek geçerli ve güvenilir bir araç olduğu sonucuna ulaşılmıştır.

Mobil Tasarım Uygulamalarının Yaratıcılığa Katkısına Yönelik Dereceli Puanlama Anahtarının (Rubric) Geliştirilmesi

“…When the studies on this subject are examined, it can be seen that rubrics are used in many stages of the education (instructional design, evaluation, eliminating learning deficiencies, etc.) (Aktaş & Alıcı, 2018;Arter, 2002;Brooks ve Miller, 2006;Çelik, et al, 2014;Çıralı Sarıca & Koçak Usluel Dunbar, 2016;Hall ve Salmon, 2003;Moskal ve Leydens, 2000;Oaklef, 2009;Öztürk & Güdek, 2016;Parlak & Doğan, 2014;Şen & Karagül, 2020;Yılmaz ve İnceağaç, 2017;Wolf ve Steven, 2007). Additionally, creativity is a high-level mental process that includes skills such as flexibility and originality.…”

Kurmaca Metinleri Değerlendirmeye Yönelik Rubrik Geliştirilmesi: Geçerlik ve Güvenirlik Çalışması

“…Buna göre "çok iyi" (4 puan), "iyi" (3 puan), "geliştirilmeli" (2 puan)" ve "yetersiz" (1 puan) olmak üzere dört genel düzeyde değerlendirilebilen bir rubrik oluşturulmasına karar verilmiştir. Benzer rubrikler (Akaydın ve Çeçen, 2016;Çıralı Sarıca ve Koçak, 2016;Melanlıoğlu, 2016;Öztürk ve Güdek, 2016;Aktaş ve Alıcı, 2018) incelendiğinde de puanlamanın üç ya da dört performans düzeyinde değerlendirildiği görülmektedir. Son aşamada ilgili alanyazın taranmış ve alanyazındaki bilgiler doğrultusunda madde havuzu oluşturulmuştur.…”

“…bu tür çalışmalarda örneklem büyüklüğü için gerekli bir alt sınır olmadığını belirtse de benzer çalışmalarda(Kanık, Örekici Temel ve Ersöz Kaya, 2010;Akaydın ve Çeçen, 2016;Melanlıoğlu, 2016;Aktaş ve Alıcı, 2018) genellikle çalışma grubunu oluşturan kişi sayısının 30'dan az olmamasına özen gösterildiği görülmektedir. Araştırmanın çalışma grubunu oluşturan öğrencilerin cinsiyet ve sınıf düzeyine ilişkin bilgiler, Tablo 1'de verilmiştir: Çalışma Grubunu Oluşturan Öğrencilerin Cinsiyet ve Sınıf Düzeylerinin Sayısal Dağılımı Araştırmanın çalışma grubunu oluşturan öğrenciler tarafından üretilen kurmaca metinler; cinsiyet, yaş, kıdem gibi özellikler bakımından denk nitelikteki iki farklı Türkçe öğretmeni tarafından taslak rubrik yardımıyla değerlendirilmiştir.…”

Yazılı Anlatım Becerilerinin Değerlendirilmesi İçin Dereceli Puanlama Anahtarı Geliştirme Çalışması

“…İlgili alan yazın incelendiğinde öğrencilerin dil becerilerinin ölçülmesi kapsamında okuma, dinleme ve konuşma becerilerinin ölçülmesinde dereceli puanlama anahtarının sıklıkla kullanıldığı (Bozkurt ve Arıca-Akkök, 2019;Tok ve Erdoğan, 2017;Yıldız, 2018) görülmüştür. Ayrıca alan yazın incelendiğinde ilgili araştırmalarda (Ağan Haykır, 2014;Aktaş ve Alıcı, 2018;Topuzkanamış, 2014) yazılı anlatım becerilerinin kompozisyon ya da hikâyeler üzerinden değerlendirildiği görülmektedir. Bu bakımdan yazılı anlatım becerilerini farklı zihinsel düzeylere ve farklı metin türlerine göre değerlendiren bir çalışmaya rastlanılmamıştır.…”