Geri Dön

Çok boyutlu madde tepki kuramı test eşitleme yöntemlerinin karşılaştırılması

Comprasion of multidimensional item response theory test equating methods

  1. Tez No: 903009
  2. Yazar: BURCU DEMİRÖZ
  3. Danışmanlar: PROF. DR. NURİ DOĞAN
  4. Tez Türü: Doktora
  5. Konular: Eğitim ve Öğretim, Education and Training
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2024
  8. Dil: Türkçe
  9. Üniversite: Hacettepe Üniversitesi
  10. Enstitü: Eğitim Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Eğitim Bilimleri Ana Bilim Dalı
  12. Bilim Dalı: Eğitimde Ölçme ve Değerlendirme Bilim Dalı
  13. Sayfa Sayısı: 137

Özet

Bu araştırmada, çok boyutlu testlerden elde edilen puanların eşitlenmesinde kullanılan bi-faktör ÇB-MTK gözlenen puan eşitleme (BF-MIRT), tam ÇB-MTK gözlenen puan (MOSE) ve ÇB-MTK gözlenen puan eşitleme tek boyutlu yaklaşım (AOSE) yöntemlerinden denk olmayan gruplarda ortak madde deseni altında elde edilen eşitlenmiş puanlar ve bu puanlara ait eşitlemenin standart hatası (SEE), yanlılık (BIAS) ve hata kareler ortalamasının karekökü (RMSE) değerlerinin çeşitli faktörlere göre karşılaştırılması amaçlanmıştır. Sonuçların, ÇB-MTK test eşitleme yöntemlerinden hangi koşullarda daha doğru sonuçlar elde edilebileceğine dair bazı yönergeler sağlaması hedeflenmiştir. Araştırmada simülasyon verileri kullanılmıştır. Simülasyon veri setleri için örneklem büyüklüğü, ortak madde oranı, boyutlar arasındaki ilişki düzeyi, kalibrasyon ve test eşitleme yöntemleri manipüle edilen faktörler olarak ele alınmıştır. 162 (3x3x3x2x3) koşul incelenmiştir. Veri setlerinin üretilmesi ve eşitleme çalışmaları R programlama dili kullanılarak gerçekleştirilmiştir. Eş zamanlı kalibrasyon yöntemi kullanılarak gerçekleştirilen test eşitleme uygulamaları sonucunda elde edilen eşitlenmiş puanların benzer olduğu gözlenmiştir. İki kalibrasyon yöntemi içinde örneklem büyüklüğü arttıkça hata değerlerinin azaldığı gözlenmiştir. Örneklem büyüklüğünün en az 3000 olması önerilmektedir. Eş zamanlı kalibrasyon yöntemi kullanılarak gerçekleştirilen test eşitleme uygulamalarında ortak madde oranı %20 olduğunda en küçük yanlılık değerleri gözlenmiştir. Ayrı zamanlı kalibrasyon yöntemi kullanılarak gerçekleştirilen test eşitleme uygulamalarında ortak madde oranı %50 olduğunda en hata değerleri gözlenmiştir. Ortak madde oranı eş zamanlı kalibrasyonda en çok %20; ayrı kalibrasyonda en az %50 olmalıdır. Eş zamanlı kalibrasyonda ayrı kalibrasyon yönteminden daha küçük hata değerleri gözlenmiştir.

Özet (Çeviri)

MIRT observed score equating (BF-MIRT), the full MIRT observed score equating (MOSE), and the unidimensional approximation observed score equating (AOSE) methods under common item non-equivalent groups design in terms of standard error of equating (SEE), BIAS, and root mean square error (RMSE) of these equated scores across various conditions. The results aim to provide guidelines on which MIRT test equating methods yield more accurate results under specific conditions. In the study, simulation data were used. Sample size, ratio of common items, level of relationship between dimensions, calibration methods, and test equating methods are the factors that were manipulated. 162 conditions were examined. The data generation and equating studies were conducted using the R programming language. It was observed that the equated scores obtained using concurrent calibration were similar. For both calibration methods, it was found that as the sample size increased, the error values decreased. A sample size of at least 3000 is recommended. In test equating applications performed using concurrent calibration, the smallest bias values were observed when the proportion of common items was 20%. In test equating applications performed using separate calibration, the lowest error values were observed when the proportion of common items was 50%. The proportion of common items should be at most 20% in concurrent calibration and at least 50% in separate calibration. Smaller error values were observed in concurrent calibration compared to separate calibration.

Benzer Tezler

  1. Comparison of equating methods for multidimensional tests which contain items with differential item functioning

    Değişen madde fonksiyonu gösteren maddeler içeren çok boyutlu testlerin eşitlenmesinde kullanılan yöntemlerin karşılaştırılması

    SEÇİL UĞURLU

    Doktora

    İngilizce

    İngilizce

    2020

    Eğitim ve ÖğretimHacettepe Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    DOÇ. DR. BURCU ATAR

  2. Çok boyutlu karma-format testlerin ölçeklenmesini etkileyen faktörlerin incelenmesi

    An investigation of the factors affecting the scaling of multidimensional mixed format tests

    AKİF AVCU

    Doktora

    Türkçe

    Türkçe

    2016

    Eğitim ve ÖğretimHacettepe Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    PROF. DR. HÜLYA KELECİOĞLU

  3. Testlerin boyutluluğunun, ortak madde formatının, yetenek dağılımının ve ölçek dönüştürme yöntemlerinin karma testlerin eşitlenmesine etkisi

    The effects of test dimensionality, common item format, ability distribution and scale transformation methods on mixed - format test equating

    NEŞE ÖZTÜRK GÜBEŞ

    Doktora

    Türkçe

    Türkçe

    2014

    Eğitim ve ÖğretimHacettepe Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    PROF. DR. HÜLYA KELECİOĞLU

  4. Çok boyutlu madde tepki kuramı modelleri ve paket programları için karşılaştırmalı analizler

    Comparative analyses of multidimensional item response theory models and software

    GÜLER YAVUZ

    Doktora

    Türkçe

    Türkçe

    2014

    Eğitim ve ÖğretimHacettepe Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    DOÇ. DR. NURİ DOĞAN

  5. Öğrenci başarılarının belirlenmesi sınavından (ÖBBS) klasik test kuramı, tek boyutlu ve çok boyutlu madde tepki kuramı modelleri ile kestirilen başarı puanlarının karşılaştırılması

    Comparison of estimated achivement scores obtained from student achievement assessment test utilizing classical test theory, unidimensional and multidimensional item response theory models

    YEŞİM ÖZER

    Doktora

    Türkçe

    Türkçe

    2012

    Eğitim ve ÖğretimAnkara Üniversitesi

    Ölçme ve Değerlendirme Ana Bilim Dalı

    PROF. DR. EZEL TAVŞANCIL