Madde parametre kaymasının bulunduğu durumlarda test eşitlemede farklı kalibrasyon yöntemleriyle elde edilen kestirimlerin karşılaştırılması
A comparison of estimates obtained with different calibration methods in test equating in the presence of item parameter drift
- Tez No: 839827
- Danışmanlar: DOÇ. DR. ERGÜL DEMİR
- Tez Türü: Doktora
- Konular: Eğitim ve Öğretim, Education and Training
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2023
- Dil: Türkçe
- Üniversite: Ankara Üniversitesi
- Enstitü: Eğitim Bilimleri Enstitüsü
- Ana Bilim Dalı: Eğitim Bilimleri Ana Bilim Dalı
- Bilim Dalı: Eğitimde Ölçme ve Değerlendirme Bilim Dalı
- Sayfa Sayısı: 172
Özet
Araştırmada, ortak maddeli eşdeğer olmayan gruplar deseninde, ortak maddelerde madde parametre kaymasının (MPK) varlığında, Madde Tepki Kuramı (MTK)'na dayalı test eşitlemede kullanılan farklı kalibrasyon yöntemleriyle elde edilen kestirimlerin karşılaştırılması amaçlanmıştır. Bu amaçla araştırmanın ilk bölümünde, MPK'nin kalibrasyon yöntemleriyle (Haebara (H), Stocking-Lord (SL), Ortalama-Ortalama (OO), Ortalama-Standart Sapma (OS)) kestirilen a-b parametresi ile A-B sabiti üzerine etkisi; MPK'li madde oranının (%0, %25, %50, %75), MPK türünün (“a”,“b”,“axb”) ve yetenek dağılımının (N(0,1), N(.2,1), N(-.2,1)) değişimlendiği farklı koşullar altında incelenmiştir. Benzetim tabanlı araştırma modelindeki bu araştırmada kullanılan MTK modeli (2PL), örneklem büyüklüğü (1000), ortak madde sayısı (20) ve test uzunluğu (100) sabit tutulan koşullardır. Araştırmanın ikinci bölümünde, elde edilen bulguların gerçek veriyle desteklenmesi amacıyla TIMSS 2011'deki kitapçık 5 ve 6'nın verileri kullanılmıştır. Ardından, tüm veri setlerine ilişkin geçerlik çalışmalarıyla eşitlemenin varsayımları sınanmıştır. Varsayımların sınanmasından sonra farklı koşullar altında elde edilen A-B sabiti ile a-b parametresine ilişkin standart hata, yanlılık ve ortalama hata kareleri kökü (OHKK) değerleri bulguların değerlendirilmesinde ölçüt olarak kullanılmıştır. Hata değerlerinin elde edilmesinin ardından, değişkenlerin etkilerinin ortaya konulması amacıyla faktöriyel ANOVA; varyans kaynaklarının detaylı incelenebilmesi amacıyla Tukey- LSD testi kullanılmıştır. Araştırmanın sonucunda, farklı MPK oranları, MPK türü-büyüklükleri ve yetenek dağılımlarının hata değerlerinin üzerinde manidar etkisi olduğuna; yöntemlerden elde edilen hataların ise manidar olarak farklılaştığına ulaşılmıştır. MPK oranının yüksek olduğu koşullarda, SL ve OS yöntemleri daha tutarlı bulunurken; H ve OS yöntemlerinin daha hassas olduğuna ve bazı koşullarda en düşük hataları verirken bazı koşullarda en yüksek hataları üreterek, farklılaşan bulgular ürettiklerine ulaşılmıştır. Değişimlenen MPK türlerinde ise en tutarlı bulgular, OO yöntemiyle elde edilmiştir. Farklılaşan yetenek dağılımları dikkate alındığında ise benzer yetenek dağılımına sahip bireylere uygulanan formların yanlılık değerlerinin daha düşük olduğuna ulaşılmıştır.
Özet (Çeviri)
Within the scope of the current research, it was aimed to examine the effect of item parameter drift (IPD) in common items on the estimates obtained by different calibration methods in test equating based on Item Response Theory (IRT) in a Non-Equivalent groups with Anchor Test. Within the scope of this purpose, in the first part of the study, the effect of IPD on a-b parameters estimated by four different equating methods (Haebara (H), Stocking-Lord (SL), Mean-Mean (MM) and Mean-Sigma (MS)) and the effect of equating on A-B constants; The effect of the proportion of item with IPD (0%, 25%, 25%, 50%, 75%), the type of IPD (“a”,“b”,“axb”) and the ability distribution (N(0,1), N(.2,1), N(-.2,1)) under different conditions. The IRT model (2PL), sample size (1000), number of common items (20) and test length (100) are the conditions fixed in this simulation-based research model. In the second part of the study, in order to support the findings obtained within the scope of the simulation design with real data, the data of booklet 5 and booklet 6 of TIMSS 2011 were included in the study. Then, the validity studies for the real and generated data sets and the assumptions of equating were tested. After testing the assumptions, the standard error, bias and Root Mean Square Error (RMSE) values of the constants A-B and the estimated parameters a-b obtained under different conditions were used as criteria for the evaluation of the findings. Following the obtaining of the error values, factorial analysis of variance (ANOVA) was utilized to reveal the effects of the variables and Tukey LSD test was used to examine in detail the variance sources. As a result of the findings, it was found that different IPD ratios, IPD types and sizes, and ability distributions had a significant effect on the error values in test equating, while the errors obtained from the methods differed significantly. While SL and MS were found to be the more consistent methods when the IPD ratio was high, H and OO methods were found to be more sensitive and produced quite different findings by producing the lowest errors in some conditions and the highest errors in some conditions. Considering the differentiated ability distributions, it was found that the bias values of the forms applied to individuals with similar ability distributions were lower.
Benzer Tezler
- Sismik sıvılaşma deney numuneleri için otomatik huni tasarımı ve deney sonuçlarına etkisi
Development of automatic funnel system for cyclic simple shear tests on sandy soils
ŞENAY YENİGÜN
Yüksek Lisans
Türkçe
2018
İnşaat Mühendisliğiİstanbul Teknik Üniversitesiİnşaat Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ ESRA ECE BAYAT
DOÇ. DR. MEHMET MURAT MONKUL
- Kuzey Marmara Otoyolu Liman bağlantı yolu-İzmit Kavşağı arası (5. kesim) kütle hareketleri – mekanik iyileştirme uygulamaları
Slope mass movements and mechanical improvement applications between port connection road and Izmit Junction (section 5) on the North Marmara Motorway project
MÜGE ÇAKINER
Yüksek Lisans
Türkçe
2021
Jeoloji Mühendisliğiİstanbul Teknik ÜniversitesiJeoloji Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ ERKAN BOZKURTOĞLU
- İstanbul grovaklarına soketlenen fore kazıkların taşıma kapasitesi
Bearing capacity of large diameter bored piles socketed in Istanbul graywackes
YALÇIN EYİGÜN
Doktora
Türkçe
2014
İnşaat Mühendisliğiİstanbul Teknik Üniversitesiİnşaat Mühendisliği Ana Bilim Dalı
PROF. DR. AHMET SAĞLAMER
- Metal sektöründe faaliyet gösteren KOBİ'lerin rekabet gücünün otomotiv sanayii örneğinde araştırılması
Investigation of competition power of small and medium sized enterprises (SME) in an example of automotive supplier industry
SUAT CANOĞULLARI
- Ağır ticari araçlarda kullanılan fren disklerinin sürtünme ve aşınma özelliklerinin incelenmesi
Examination of the friction and wear properties of brake discs used in heavy commercial vehi̇cles
EMİN EMRE GÖKTEPE
Yüksek Lisans
Türkçe
2024
Metalurji MühendisliğiSakarya ÜniversitesiMetalurji ve Malzeme Mühendisliği Ana Bilim Dalı
DOÇ. DR. MEHMET UYSAL