A study on assessment tools and evaluation of essay writing skill in foreign language education
Yabancı dil egitiminde essay yazma becerisinin degerlendirilmesi ve degerlendirme araçları uzerine bir çalışma
- Tez No: 262255
- Danışmanlar: PROF. DR. MUSTAFA AKSAN
- Tez Türü: Doktora
- Konular: Eğitim ve Öğretim, Education and Training
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2010
- Dil: İngilizce
- Üniversite: Mersin Üniversitesi
- Enstitü: Sosyal Bilimler Enstitüsü
- Ana Bilim Dalı: Eğitim Bilimleri Bölümü
- Bilim Dalı: Yabancı Diller Eğitimi Ana Bilim Dalı
- Sayfa Sayısı: 113
Özet
Bu çalışmada essay yazma becerisini ölçmek için kullanılabilecek geçerli ve güvenilir bir puanlama ölçeği geliştirilmiş ve söz konusu ölçek essay yazma becerisini ölçmek için kullanılan diğer puanlama araçları ?genel izlenim ve kontrol listesi- ile puanlayıcı güvenirliği açısından karşılaştırılmıştır. Kontrol listesi ve ölçeğin geliştirilme aşamasında üniversite öğretim elemanlarının görüşlerine başvurulmuştur. Yargıcılar Kontrol listesi ve ölçeği performans göstergelerine gore incelemiş ve uygunluk derecelerine karar vermişlerdir. Puanlama aşamasında ise 10 puanlayıcı İngilizce öğretmenliği bölümü öğrencilerinin yazdığı 44 essay ürününü genel izlenim, kontrol listesi ve ölçek kullanarak puanlamışlardır. Her puanlama türüne ilişkin puanlayıcı güvenirliğini belirlemek için puanlamalar arasındaki ilişki Pearson Momentler Çarpımı Korelasyon Katsayısı ile hesaplanmıştır. Farklı puanlama araçları için elde edilen sonuçlar Fischer'ın z dönüşümü kullanılarak z puanlarına dönüştürülerek incelenmiştir. Ayrıca, puanlayıcıların puanlamanın her bir aşamasına ilişkin görüşleri standard açık uçlu bir madde ile ortaya çıkarılmıştır. Analiz sonuçları genel izlenimle yapılan puanlamalar arasında bir tutarlılık olmadığını göstermiştir. Control listesi ve ölçekle yapılan puanlamalarda ise tutarsızlıklar olmakla birlikte genel izlenimle gerçekleştirilen puanlamalara göre çok daha yüksek korelasyon gösterdikleri görülmüştür. Control listesi ve ölçekle yapılan puanlamalar arasında ise küçük farklılıklar görülmüş ve sonuçların ölçekle puanlama lehine olduğu ortaya çıkmıştır. Buna rağmen, Fischer'ın z dönüşümü sonuçları farklı zamanlarda farklı puanlama araçları ile yapılan ölçmeler arasında tutarlı ve karalı puanlama yapılamadığını ortaya koymuştur. Bu durum, puanlayıcıların aynı essay ürünlerine farklı zamanlarda aynı ya da farklı ölçme araçlarıyla da puanlasalar farklı sonuçlar atadıklarını göstermektedir. Yine de, puanlamada ölçek kullanımının puanlayıcıları belli bir ölçüt ve puanlama çerçevesi içine alarak öznelliği sistematik hale getirdiği söylenebilir.
Özet (Çeviri)
In this study, a valid and reliable scoring scale which can be used to assess essay writing skill was developed, and compared to the other assessing tools -general impression marking and checklist, used for essay writing skill considering scorer/rater reliability. In the development phase of the checklist and the scale, 103 faculty members took place. They evaluated the checklist and the scale criteria with performance indicators, and decided the acceptability levels of them in the scale. In the assessment phase, 10 scorers assessed 44 essays, written by ELT students, by using general impression marking, checklist, and scale. In order to determine the scorer reliability of each type of assessment, the relationship between the scorings was computed by using Pearson Product Moments correlation coefficient. Later, the results for different assessment tools were examined by converting to z scores by using Fischer?s z transformation. Employing a standardized open-ended question about each phase of the scoring process revealed the views and/or reactions of the scorers by their responses on using each scoring tool. Statistical analyses indicate that there is not a consistency between scorings done by using general impression marking. The scorings done by using checklist and scale include inconsistencies but the correlation coefficients are remarkably higher than the ones obtained from the scorings done by using general impression marking. There is a slight difference between the correlation coefficients obtained from the scorings done by using the checklist and the scorings done by using the scale in favor of the scale. However, no consistent and decisive scorings were done by the scorers using different tools in different time distances according to the results of Fischer?s z transformation. This may mean scorers assign different scores to the same essays when they use the same or different assessment tools in different time distances but scale use systematizes subjectivity by framing particular concerns of scorers while scoring.
Benzer Tezler
- Yabancı dil olarak Türkçe öğretiminde değerlendirme görev biçimleri: Ders kitaplarındaki görünümü, öğretim elemanı ve öğrencilerin öğretici bulma durumları, öğretim ve öğrenim sürecine etkisi konusundaki algıları üzerine bir inceleme
Assessment task formats in teaching Turkish as a foreign language: A study on their appearance in textbooks, perceptions of instructors and students' regarding their instructiveness and their effect on the teaching and learning process
ÖZLEM YOLCUSOY
Doktora
Türkçe
2024
Eğitim ve ÖğretimPamukkale ÜniversitesiTürkçe ve Sosyal Bilimler Eğitimi Ana Bilim Dalı
PROF. DR. GÖKHAN ÇETİNKAYA
- Investigating the contribution of combined teacher-automated feedback to students' writing skills in an EFL class
Birleşik öğretmen-otomatik geribildirimin bir yabancı dil olarak İngilizce sınıfında öğrencilerin yazma becerilerine katkısının incelenmesi
EZGİ DERYA TERTEMİZ
Yüksek Lisans
İngilizce
2023
Eğitim ve ÖğretimÇağ Üniversitesiİngiliz Dili Eğitimi Ana Bilim Dalı
PROF. DR. JÜLİDE İNÖZÜ
- The impact of automated writing evaluation and combined automated – teacher feedback on EFL learners' writing performance
Otomatı̇k yazma değerlendı̇rme ve otomatı̇k - öğretmen gerı̇ bı̇ldı̇rı̇mı̇nı̇n yabancı dil olarak İngilizce öğrenicilerinin yazma performansı üzerı̇ndekı̇ etkı̇sı̇
MERVE BAKO
Yüksek Lisans
İngilizce
2023
Eğitim ve ÖğretimYıldız Teknik ÜniversitesiYabancı Diller Eğitimi Ana Bilim Dalı
DOÇ. DR. SUZAN KAVANOZ
- The significance and the contribution of 6+1 traits of writing to the success of the students in writing courses in English language teaching
Yazmanın 6+1 özelliğinin İngilizce öğretiminde yazılı anlatım derslerindeki öğrenci başarısına katkısı ve önemi
ÖZLEM YAZAR
Yüksek Lisans
İngilizce
2004
Eğitim ve ÖğretimGazi Üniversitesiİngiliz Dili Eğitimi Ana Bilim Dalı
YRD. DOÇ. DR. PAŞA TEVFİK CEPHE
- A cross-sectional evaluation of syntactic complexity and lexical diversity as predictors of foreign language writing quality: A study with pre-service teachers of English
Sözdizimsel karmaşıklık ve sözcük çeşitliliğinin yabancı dilde yazma kalitesi göstergeleri olarak çapraz-kesişimsel incelenmesi: İngilizce öğretmen adayları ile yapılan bir çalışma
ZAFER SUSOY
Doktora
İngilizce
2022
DilbilimAnadolu Üniversitesiİngiliz Dili Eğitimi Ana Bilim Dalı
PROF. DR. GÜL DURMUŞOĞLU KÖSE