A comparative analysis of human graders and a large language model in assessing English as a foreign language (EFL) journal writing in secondary school
Ortaokulda yabancı dil olarak İngilizce günlük yazımı değerlendirmesinde insan değerlendiricileri ve üretken yapay zeka karşılaştırmalı bir analizi
- Tez No: 876530
- Danışmanlar: DR. ÖĞR. ÜYESİ AYŞEGÜL LİMAN KABAN
- Tez Türü: Yüksek Lisans
- Konular: Eğitim ve Öğretim, Education and Training
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2024
- Dil: İngilizce
- Üniversite: Bahçeşehir Üniversitesi
- Enstitü: Lisansüstü Eğitim Enstitüsü
- Ana Bilim Dalı: Eğitsel Tasarım ve Değerlendirme Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: 108
Özet
Bu çalışma, ortaokul düzeyinde yabancı dil olarak İngilizce (EFL) alanında günlük yazımının değerlendirilmesine ilişkin kapsamlı bir analiz yapmayı amaçlamaktadır. Üretken Yapay Zeka (GAI) platformunun performansını, iki insan derecelendirme uzmanının performansıyla karşılaştırmayı amaçlıyor. Çalışmada nicel ve nitel veri toplama ve analiz yaklaşımlarını birleştiren yakınsak paralel karma yöntem tasarımı kullanılmaktadır. Nicel veriler, 2023-2024 eğitim-öğretim yılının ilk döneminde İstanbul'daki özel bir okuldaki Üretken Yapay Zeka (GAI) platformu ve insan derecelendirmeleri kullanan 91 öğrenciden alınan 389 makalenin değerlendirilmesi yoluyla toplanmıştır. Niteliksel veriler, hem GAI platformu hem de gerçek kişiler tarafından sağlanan geri bildirimlerin tematik analizi yoluyla toplanmıştır. Çalışma, GAI platformunun performansını, öğrenci ödevlerine not vermede insan not verenlerle karşılaştırmayı, GAI platformunun tutarlılığını ve etkinliğini değerlendirmeyi ve hem GAI platformu hem de insan not verenler tarafından sağlanan geri bildirimin kalitesini incelemeyi amaçladı. Sonuçlar, GAI platformu ile insan derecelendirme yapanlar arasında yüksek düzeyde bir anlaşma olduğunu gösterdi; bu da GAI platformunun, Yabancı Dil Olarak İngilizce (EFL) öğrenme bağlamında bir İngilizce öğretmeninin rolünü etkili bir şekilde simüle edebileceğini ortaya koydu.
Özet (Çeviri)
This study attempts to conduct a comprehensive analysis of the assessment of journal writing in English as a foreign language (EFL) at the secondary school level. It aims to compare the performance of a generative Artificial Intelligence (GAI) platform with that of two human graders. The study uses a convergent parallel mixed methods design combining quantitative and qualitative data collection and analysis approaches. Quantitative data were collected through the evaluation of 389 assignments of 91 students in a private school in Istanbul during the first semester of the 2023-2024 academic year using the Generative Artificial Intelligence (GAI) platform and human graders. Qualitative data were collected through the analysis of feedback provided by both the GAI platform and human graders with thematic analysis. The study aimed to compare the performance of the GAI platform in grading student papers with the performance of human graders, to assess the consistency and effectiveness of the GAI platform, and to examine the quality of the feedback provided by both the GAI platform and human graders. The results showed a high level of agreement between the GAI platform and human graders, suggesting that the GAI platform can effectively simulate the role of an English teacher in an English as a Foreign Language (EFL) learning context.
Benzer Tezler
- Ortaokul öğrencilerinin biyolojik çeşitlilik konusu ile ilgili bilişsel yapılarının karşılaştırmalı olarak belirlenmesi
Comparative determination of middle school students' cognitive structures related to biological diversity
ZEYNEP ÇAM
Yüksek Lisans
Türkçe
2022
Eğitim ve ÖğretimBursa Uludağ ÜniversitesiMatematik ve Fen Bilimleri Eğitimi Ana Bilim Dalı
DOÇ. DR. DİLEK ZEREN ÖZER
- Relational and comparative analysis on social networking, smartphone, and game addictions
Sosyal ağ, akıllı telefon ve oyun bağımlılıkları üzerine ilişkisel ve karşılaştırmalı analiz
BÜLENT ERTAŞ
Yüksek Lisans
İngilizce
2018
Eğitim ve ÖğretimBahçeşehir ÜniversitesiEğitim Teknolojileri Ana Bilim Dalı
YRD. DOÇ. DR. YAVUZ SAMUR
- Üstün zekâ/yetenekli ve normal öğrencilerde insani değerler, duyarlı sevgi, sosyal güven ve memnuniyet düzeylerinin karşılaştırılması
The comparasion of human values, compassionate love, social safeness and pleasure in gifted and normal students
ADNAN ÖZBEY
Doktora
Türkçe
2016
Eğitim ve ÖğretimDumlupınar Üniversitesiİlköğretim Ana Bilim Dalı
YRD. DOÇ. DR. HAKAN SARIÇAM
- Type-2 fuzzy logic based linguistic pursuing strategy design with a real world application
Gerçek zamanlı bir uygulama ile tip-2 bulanık mantık tabanlı dilsel kovalama strateji tasarımı
AYKUT BEKE
Yüksek Lisans
İngilizce
2018
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiKontrol ve Otomasyon Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ TUFAN KUMBASAR
- A Comparative Analysis Of Beckett's Waiting For Godot,Bulatovic's Godot Has Arrived, Sensoy's Bye Bye Godot, Atay's Not Waiting For Godot And Hanson's Waiting For Waiting For Godot: A Quest For Meaning In The Absurd
Beckett'ın Godot'yu Beklerken, Bulatovic'in Godot Geldı̇,Şensoy'un Güle Güle Godot, Atay'ın Godot'yu Beklemezken ve Hanson'un Godot'yu Beklerkenı̇ Beklerken oyunlarının karşılaştırmalı analizi: Saçma içinde anlam arayışı
YUSUF ÜNVER
Yüksek Lisans
İngilizce
2022
Batı Dilleri ve EdebiyatıSüleyman Demirel ÜniversitesiBatı Dilleri ve Edebiyatları Ana Bilim Dalı
PROF. DR. ÖMER ŞEKERCİ