A comparability and classification analysis of computerized adaptive and conventional paper-based versions of an English language proficiency reading subtest
Bir İngilizce yeterlilik sınavı okuma alt testinin bilgisayar ortamında bireyselleştirilmiş test ve geleneksel kağıt kalem test uygulamalarının karşılaştırılabilirliği ve sınıflandırma analizi
- Tez No: 709531
- Danışmanlar: DR. ÖĞR. ÜYESİ İLKER KALENDER
- Tez Türü: Doktora
- Konular: Eğitim ve Öğretim, Education and Training
- Anahtar Kelimeler: Bilgisayar ortamında bireyselleştirilmiş testler, sınıflandırma tutarlılığı, sınıflandırma doğruluğu, Rudner yaklaşımı, dil yeterliliği, Bilgisayar destekli, Bilgisayar destekli ölçme, Bireyselleştirilmiş testler, Dil yetkinliği, Sınav, Testler, Yeterlilik, Yeterlilik sınavı, Ölçme-değerlendirme, İngilizce, Computerized adaptive testing, comparability, classification consistency, classification accuracy, Rudner approach, language proficiency, Computer aided, Computer aided measurement, Individual tests, Language competence, Examination, Tests, Sufficiency, Proficiency exam, Measurement and evaluation, English
- Yıl: 2022
- Dil: İngilizce
- Üniversite: İhsan Doğramacı Bilkent Üniversitesi
- Enstitü: Eğitim Bilimleri Enstitüsü
- Ana Bilim Dalı: Eğitim Programları ve Öğretim Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Bu araştırma bir İngilizce yeterlilik okuma alt testinin bilgisayar ortamında bireyselleştirilmiş test (CAT) ve geleneksel kağıt kalem test olarak uygulanmasından elde edilen puanları çeşitli psikometrik özellikler açısından karşılaştırmakta ve sınıflandırma yapmak amacıyla tasarlanmamış tipik CAT uygulamalarının sınıflandırma performansını kağıt kalem testiyle kıyaslayarak incelemektedir. Bu amaçla farklı test sonlandırma kuralları uygulayarak gerçek veriye dayalı simulasyonlar yapılmıştır. Sonuçlar CAT ve PBT uygulamalarından elde edilen yetenek kestirimlerinin benzer olduğunu ortaya koymuştur. CAT uygulamasında 0,50 ve 0,40 standart hata eşikleriyle sonlandırılan testlerde soru sayısında göreceli olarak daha fazla bir azalma elde edildiği ve sabit soru sayısı kuralıyla sonlandırılan testlerde 20, 25 ve 30 soru sayılarının kabul edilebilir standart hata değerleri ile birlikte iyi sonuçlar verdiği gözlemlenmiştir. CAT uygulamalarından elde edilen yetenek kestirimlerinin güvenilirliği ile kağıt kalem test uygulamasından elde edilen kestirimlerin güvenilirliği benzer ve yüksek düzeyde ilişkili çıkmıştır. Sınıflandırma analizi kapsamında, çalışmada sınıflandırma doğruluğu (CA) ve tutarlılığı (CC) Rudner yöntemi ile kestirilmiştir. Farklı sayı ve noktalarda kesme puanı göz önünde bulundurulmuştur. Sonuçlar tek bir kesme puanının kullanılmasının, özellikle yüksek ve düşük yetenek gruplarında, daha iyi bir sınıflandırma performansına yol açtığını göstermiştir. Öte yandan, tek seferde birden çok kesme puanının aynı anda kullanılmasının ise sınıflandırma performansını önemli derecede düşürdüğü görülmştür. Genel olarak, sonuçlar sınıflandırma yapmak için tasarlanmamış tipik CAT uygulamalarının da sınıflandırma potansiyelini ortaya koymuş ve ileride yapılabilecek olası araştırma alanlarını da belirlemiştir.
Özet (Çeviri)
The current study compares the computerized adaptive test (CAT) and paper-based test (PBT) versions of an English language proficiency reading subtest in terms of psychometric qualities. The study also investigates classification performance of CATs not designed for classification purposes with reference to its PBT version. Real data-based simulations were conducted under varying test conditions. The results demonstrate that ability levels estimated by CATs and PBT are similar. A relatively larger item reduction can be obtained with 0.50 and 0.40 standard error thresholds and CATs terminated with 20, 25, and 30 items performed well with acceptable SE values. Reliability of CAT ability estimates was comparable and highly correlated with PBT estimates. For classification analysis, classification accuracy (CA) and classification consistency (CC) was also estimated using the Rudner method. Classification analyses were conducted on single and multiple cut-off points. The results showed that the use of a single cut-off score produced better classification performance, particularly for high and low ability groups. On the other hand, the use of multiple cut-off scores simultaneously yielded significantly lower classification performance. Overall, the results highlight the potential for CATs not designed specifically for classification to serve classification purposes and indicate avenues for further research.
Benzer Tezler
- Standardize yağış indisinin çarpıklık ve basıklık açısından yorumlanması ve yeni bir kuraklık indisinin geliştirilmesi
Interpretation of the standardized precipitation index in terms of skewness and kurtosis and the development of a new drought index
MURAT GÜL
Doktora
Türkçe
2026
İnşaat Mühendisliğiİstanbul Teknik Üniversitesiİnşaat Mühendisliği Ana Bilim Dalı
DOÇ. DR. YAVUZ SELİM GÜÇLÜ
- Solunum sesi sınıflandırması için klasik ve derin öğrenme modellerinin karşılaştırılması
Comparison of classical and deep learning models for respiratory sound classification
EREN AYGÜN
Yüksek Lisans
Türkçe
2026
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolGümüşhane ÜniversitesiYapay Zeka ve Akıllı Sistemler Ana Bilim Dalı
DR. ÖĞR. ÜYESİ HAYATİ TÜRE
- İç mekan bitirme malzemelerinin üretim ve kullanım süreci çevresel etkileri doğrultusunda seçimine yönelik bir model önerisi
A model proposal for the selection of interior finishing materials based on the environmental impacts of their production and use stages
NİL KOKULU
Doktora
Türkçe
2025
Mimarlıkİstanbul Teknik ÜniversitesiMimarlık Ana Bilim Dalı
PROF. DR. SEDEN ACUN ÖZGÜNLER
- İskelet displazisi tanısıyla Ege Üniversitesi Çocuk Genetik Bilim Dalı tarafından takip edilen hastaların geriye dönük incelenmesinde üçüncü basamak merkez deneyimi
A tertiary center experience in the retrospective evaluation of patients followed with a diagnosis of skeletal dysplasia by the Division of Pediatric Genetics at Ege University
PERİN MESTANOĞLU
Tıpta Uzmanlık
Türkçe
2026
Çocuk Sağlığı ve HastalıklarıEge ÜniversitesiÇocuk Sağlığı ve Hastalıkları Ana Bilim Dalı
PROF. DR. MUHSİN ÖZGÜR ÇOĞULU
- Ülkelerin eğitim sistemi performanslarının çok kriterli karar analizi teknikleri ile değerlendirilmesi
Cross-country evaluation of education systems? performances with multicriteria decision analysis methods
SERDAR POLAT
Yüksek Lisans
Türkçe
2010
Eğitim ve ÖğretimHacettepe Üniversitesiİşletme Ana Bilim Dalı
DOÇ. DR. AYDIN ULUCAN