Vee Diyagramından Elde Edilen Puanların Güvenirliğinin Klasik Test Kuramı ve Genellenebilirlik Kuramına Göre İncelenmesi

Demir, Betül Polat

doi:10.21031/epod.280199

Cited by 4 publications

(1 citation statement)

References 1 publication

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…Alanyazında puanlayıcılar arası güvenirliğin KTK ve G kuramına göre karşılaştırıldığı çalışmalara rastlanılmaktadır (Rae & Hyland, 2001;Yelboğa & Tavşancıl, 2010;Öztürk, 2011;Deliceoğlu & Çıkrıkçı-Demirtaşlı 2012;Yıldıztekin, 2014, Polat-Demir, 2016 (Irmak, Sütçü, Aydın & Sorias, 2007;Girli & Atasoy, 2010;Sucuoğlu & Demir, 2017). Alanyazında birden fazla puanlayıcının değerlendirme yaptığı çalışmalarda G kuramı, KTK'ya göre daha kapsamlı ve güvenilir sonuçlar üretmesi nedeniyle daha çok önerilmektedir (Shavelson & Webb, 1991;Yelboğa & Tavşancıl, 2010;Güler & Gelbal, 2010;Güler, 2011).…”

Section: Genellenebilirlik Kuramıunclassified

Otizm Sosyal Beceriler Profili Ölçeğinde Puanlayıcılar Arası Güvenirliğin Farklı Kuramlara Göre Karşılaştırılması

Pekin¹,

Çetin²,

Güler³

2018

Eğitimde Ve Psikolojide Ölçme Ve Değerlendirme Dergisi

View full text Add to dashboard Cite

ÖzBu araştırmada, "Otizm Sosyal Beceriler Profili" (OSBP) ölçeğinin beş puanlayıcı tarafından puanlanması ile elde edilen puanların klasik test kuramı ve genellenebilirlik (G) kuramı ile puanlayıcılar arası güvenirliğinin karşılaştırılması amaçlanmıştır. G kuramında puanlayıcıların birlikte ve dönüşümlü puanlama yapmasıyla oluşturulan farklı desenlerden ve klasik test kuramından elde edilen güvenirlik katsayılarının düzeyleri saptanmış ve hangi kuramın daha fazla bilgi sunduğu belirlenmeye çalışılmıştır. Araştırmada elde edilen veriler klasik test kuramında her bir puanlayıcı için puanların iç tutarlılık güvenirliği Cronbach-alfa (α) katsayısı; puanlayıcılar arası güvenirlik, Kendall'ın uyuşum katsayısı, puanlayıcılar arası korelasyon katsayısı ve puanlayıcıların verdikleri puanlar arasında fark olup olmadığı ise ilişkili örneklemlerde varyans analizi ile hesaplanmıştır. Genellenebilirlik teorisinde, değerlendiricilerin ortaklaşa ve alternatif derecelendirmelerine göre iki farklı tasarım oluşturulmuştur. G kuramı kapsamında bireylerin (b) aynı maddeler (m) doğrultusunda puanlayıcıların (p) her biri tarafından puanlandığı bxmxp çapraz deseni ve bireylerin tüm maddeler doğrultusunda farklı puanlayıcılar tarafından puanlandığı (p:b)xm yuvalanmış deseni için ayrı ayrı G ve K çalışmaları yapılmış ve sonuçlar birbirleriyle karşılaştırılmıştır.Anahtar Kelimeler: Klasik test kuramı, genellenebilirlik kuramı, puanlayıcılar arası güvenirlik, Kendall'ın uyuşum katsayısı, sosyal becerilerin değerlendirilmesi AbstractIn this study, interrater reliability was compared based on both classical test theory and generalizability theory according to the scores which were obtained from five raters' ratings with Autism Social Skills Profile. Levels of reliability coefficients obtained from classical test theory and different designs in generalizability theory formed by five raters' jointly and alternatively ratings were determined and which theory presented more information was tried to be specified. In the classical test theory, Cronbach-Alpha (α) coefficient for internal consistency, Kendall's coefficient of concordance for inter-rater reliability and correlation coefficients of five raters' scores were calculated and it was investigated whether there was a difference among the means of raters' scores with F test. In the generalizability theory, two different designs were formed according to raters' jointly and alternatively ratings. Several G and D studies were made for crossed design pxixr (p: person, i: item and r: rater) which people were scored by all raters through all items and nested design (r:p)xi which people were scored by different raters through all items and the results were compared to each other.

show abstract

Section: Genellenebilirlik Kuramıunclassified

Otizm Sosyal Beceriler Profili Ölçeğinde Puanlayıcılar Arası Güvenirliğin Farklı Kuramlara Göre Karşılaştırılması

Pekin¹,

Çetin²,

Güler³

2018

Eğitimde Ve Psikolojide Ölçme Ve Değerlendirme Dergisi

View full text Add to dashboard Cite

show abstract

Çoklu Gösterimlerin Kullanıldığı Matematik Problemlerine Ait Çözümlerin Puanlayıcı Güvenirliği Açısından İncelenmesi

Gümüş

Arıkan

2020

Necatibey Eğitim Fakültesi Elektronik Fen Ve Matematik Eğitimi Dergisi

View full text Add to dashboard Cite

The main purpose of this study is to examine the inter-rater reliability of the math problems, presented with four different representations (graphs, tables, equations, and verbal) on the basis of multiple representations in mathematics education. For this purpose, the generalizability theory is used in the scoring of the problem solutions and it is aimed to compare the G and Phi coefficients obtained in cases where crossed design is used.The open-ended mathematics problems are used in the research and students' solutions are graded by using a rubric. 54 students in the eighth grade of a public school participated in the study by solving the problems, and five mathematics teachers participated as a rater of students' solutions. As a result of the research, it was found that the problems in all representation types were effective on the inter-rater reliability, while the biggest difference was in the graphic representation.

show abstract

Comparison of G and Phi coefficients estimated in generalizability theory with real cases

Deniz

Ilican

2021

International Journal of Assessment Tools in Education

View full text Add to dashboard Cite

This study aims to compare the G and Phi coefficients as estimated by D studies for a measurement tool with the G and Phi coefficients obtained from real cases in which items of differing difficulty levels were added and also to determine the conditions under which the D studies estimated reliability coefficients closer to reality. The study group for this research consisted of 80 seventh-grade students from various public and private secondary schools in the provinces of Ankara, Istanbul, and Adana in Turkey. Four raters who served as Turkish teachers in various public secondary schools in Ankara were included in this study. A data collection tool consisting of 12 tasks was prepared to measure the participating seventh grade students' written expression skills in Turkish. The equation of the G and Phi coefficients estimated in the D study and obtained through the real cases was observed only when six tasks with item difficulty indexes close to the mean difficulty of the test were added in such a way that the mean difficulty of the test never changed. In other cases, where the mean difficulty of the test changed because of the addition of easy or difficult tasks, it was determined that the reliability coefficients estimated in the D study and obtained in real cases were similar, but they had different values.

show abstract

Vee Diyagramından Elde Edilen Puanların Güvenirliğinin Klasik Test Kuramı ve Genellenebilirlik Kuramına Göre İncelenmesi

Cited by 4 publications

References 1 publication

Otizm Sosyal Beceriler Profili Ölçeğinde Puanlayıcılar Arası Güvenirliğin Farklı Kuramlara Göre Karşılaştırılması

Otizm Sosyal Beceriler Profili Ölçeğinde Puanlayıcılar Arası Güvenirliğin Farklı Kuramlara Göre Karşılaştırılması

Çoklu Gösterimlerin Kullanıldığı Matematik Problemlerine Ait Çözümlerin Puanlayıcı Güvenirliği Açısından İncelenmesi

Comparison of G and Phi coefficients estimated in generalizability theory with real cases

Contact Info

Product

Resources

About