Comparison of equating methods for multidimensional tests which contain items with differential item functioning
Değişen madde fonksiyonu gösteren maddeler içeren çok boyutlu testlerin eşitlenmesinde kullanılan yöntemlerin karşılaştırılması
- Tez No: 656957
- Danışmanlar: DOÇ. DR. BURCU ATAR
- Tez Türü: Doktora
- Konular: Eğitim ve Öğretim, Education and Training
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2020
- Dil: İngilizce
- Üniversite: Hacettepe Üniversitesi
- Enstitü: Eğitim Bilimleri Enstitüsü
- Ana Bilim Dalı: Eğitim Bilimleri Ana Bilim Dalı
- Bilim Dalı: Eğitimde Ölçme ve Değerlendirme Bilim Dalı
- Sayfa Sayısı: 142
Özet
Değişen madde fonksiyonu ve test eşitleme çalışmaları test puanlarının adil değerlendirilmesine hizmet etmektedirler. Ancak bu iki kavram psikometrik literatürde çoğunlukla ayrı ayrı ele alınmıştır. Literatürde değişen madde fonksiyonu ve eşitleme arasındaki ilişkiyi araştıran çalışma sayısı oldukça azdır. Dahası bunu çok boyutlu perspektifte ele alan çalışmaya henüz rastlanmamıştır. Literatürdeki bu eksikliği gidermeye yönelik olarak bu araştırmanın amacı değişen madde fonksiyonu ve eşitleme arasındaki ilişkiyi çok boyutlu perspektifte ortaya koymaktır. Bu ilişkiyi doğru ve açık bir şekilde ortaya koyabilmek için eşitlemenin popülasyon değişmezliği özelliği araştırılmıştır. Çalışmada kullanılan veriler basit yapılı-çok boyutlu madde tepki kuramına uygun olacak şekilde üretilmiştir. Çalışmada dört farklı eşitleme yöntemi kullanılmıştır: basit yapılı-çok boyutlu madde tepki kuramı gözlenen puan, tek boyutlu madde tepki kuramı gözlenen puan, tek boyutlu madde tepki kuramı gerçek puan ve eşit yüzdelikli eşitleme. Çalışmada kullanılan eşitleme yöntemlerinin performansları çeşitli simülasyon koşulları altında (formlar arası farklılaşan değişen madde fonksiyonu, boyutlar arası korelasyon, formlar arası grup yetenek ortalamaları farkı) popülasyon değişmezlik sonuçlarına göre karşılaştırılmıştır. Araştırmanın sonuçlarına göre değişen madde fonksiyonu ve eşitleme arasındaki ilişkiyi en doğru şekilde yansıtan yöntem 0.5 korelasyon koşulu için çok boyutlu eşitleme yöntemidir. 0.8 ve 0.95 korelasyon koşullarında ise, eşit yüzdelikli eşitleme yönteminin düşük frekanslı puanlarda verdiği sonuçlar dışında tüm yöntemler benzer sonuçlar vermektedir. Formlar arasındaki grup yetenek ortalaması farkının ise yöntemlerin popülasyon değişmezlik sonuçları üzerinde bir etkisi bulunmamaktadır.
Özet (Çeviri)
Differential item functioning (DIF) and test equating are two important subjects for fairness in reported test scores. However, they have been treated separately in the psychometric literature. Hence, studies investigating the relationship between DIF and equating are quite rare. Moreover, there is no study addressing this relationship in multidimensional perspective, yet. The purpose of this study is to reveal the relationship between DIF and equating in multidimensional perspective, and contribute to the literature. In order to reveal this relationship accurately and clearly, population invariance of equating was investigated. The data used in the study were generated in accordance with the simple structure multidimensional item response theory (SS-MIRT) model. Four different equating methods were used in the study: simple structure-multidimensional item response theory observed score, unidimensional item response theory observed score, unidimensional item response theory true score and equipercentile equating. The performances of the equating methods were compared according to their population invariance under various simulation conditions (differential form DIF, correlation between dimensions, group mean ability differences between two forms). According to the results, the method that most accurately reflects the relationship between DIF and equating is the multidimensional equating method for the 0.5 correlation condition. On the other hand, under 0.8 and 0.95 correlation conditions, all methods give similar results except the results of equipercentile equating method at scores with low frequencies. Also, group mean ability difference between two forms has no effect on the population invariance of the methods.
Benzer Tezler
- Çok boyutlu karma-format testlerin ölçeklenmesini etkileyen faktörlerin incelenmesi
An investigation of the factors affecting the scaling of multidimensional mixed format tests
AKİF AVCU
Doktora
Türkçe
2016
Eğitim ve ÖğretimHacettepe ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
PROF. DR. HÜLYA KELECİOĞLU
- Madde Tepki Kuramı'na dayalı test eşitleme yöntemlerinin karma modeller üzerinde karşılaştırılması
Comparison of irt test equating methods for mixed format tests
İBRAHİM UYSAL
Yüksek Lisans
Türkçe
2014
Eğitim ve ÖğretimAbant İzzet Baysal ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
YRD. DOÇ. DR. SEVİLAY KİLMEN
- Madde Tepki Kuramı'na dayalı test eşitleme yöntemlerinden kestirilen eşitleme hatalarının örneklem büyüklüğü ve yetenek dağılımı değişkenlerine göre karşılaştırılması
Comparison of equating errors estimated from test equation methods based on Item Response Theory according to the sample size and ability distribution
SEVİLAY KİLMEN
Doktora
Türkçe
2010
Eğitim ve ÖğretimAnkara ÜniversitesiEğitim Bilimleri Bölümü
DOÇ. DR. NÜKHET ÇIKRIKÇI DEMİRTAŞLI
- Küçük örneklemlerde çok kategorili puanlanan maddelerden oluşan testlerde klasik test eşitleme yöntemlerinin karşılaştırılması
Comparison of classical test equating methods with polytomously scored tests and small samples
ALİ EMRE KARAGÜL
Yüksek Lisans
Türkçe
2020
Eğitim ve ÖğretimAnkara ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
DOÇ. DR. ERGÜL DEMİR
- Kernel eşitleme ve madde tepki kuramına dayalı eşitleme yöntemlerinin karşılaştırılması
Comparison of kernel equating and item response theory equating methods
ÇİĞDEM AKIN ARIKAN
Doktora
Türkçe
2017
Eğitim ve ÖğretimHacettepe ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
PROF. DR. SELAHATTİN GELBAL