Geri Dön

Lise öğrencilerinin akademik başarılarının ChatGPT ve KNIME kullanılarak makine öğrenmesi modelleriyle tahmin sonuçlarının karşılaştırılması

Comparison of the results of predicting the academic achievements of high school students with machine learning models using ChatGPT and KNIME

  1. Tez No: 944403
  2. Yazar: ENGİN BAZ
  3. Danışmanlar: DOÇ. DR. ÖZGÜR YILMAZ
  4. Tez Türü: Yüksek Lisans
  5. Konular: Eğitim ve Öğretim, Education and Training
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2025
  8. Dil: Türkçe
  9. Üniversite: İstanbul Üniversitesi-Cerrahpaşa
  10. Enstitü: Lisansüstü Eğitim Enstitüsü
  11. Ana Bilim Dalı: Bilgisayar ve Öğretim Teknolojileri Eğitimi Ana Bilim Dalı
  12. Bilim Dalı: Bilgisayar ve Öğretim Teknolojileri Eğitimi Bilim Dalı
  13. Sayfa Sayısı: 147

Özet

Yapay zekâ teknolojilerindeki hızlı gelişmeler yalnızca günlük yaşantıyı değil, eğitimde veri temelli karar verme süreçlerini de köklü biçimde dönüştürmektedir. Bu değişim, öğretmenlerin büyük hacimli öğrenci verilerini etkili biçimde analiz edebilmesini ve öğrenme ortamlarını kanıta dayalı olarak iyileştirmesini zorunlu kılmaktadır. Bu araştırmanın amacı, üretken yapay zekâ aracı ChatGPT ile geleneksel açık-kaynak platformu KNIME'ın, lise öğrencilerinin akademik başarılarını makine öğrenmesi yoluyla tahmin etmedeki performanslarını karşılaştırmalı olarak incelemektir. Çalışma, nicel-ilişkisel tarama yaklaşımıyla tasarlanmış; CRISP-DM sürecine bağlı olarak işletilmiştir. Veriler, Portekiz'de iki derse (Matematik n = 395 | Portekizce n = 649) ait 33 akademik ve sosyo-demografik değişkenden oluşan kamuya açık verilerden sağlanmıştır. Beş gözetimli algoritma (KA, RF, NB, KNN, SVM) her iki araçta da hem ikili hem de çoklu sınıflama amacıyla dört senaryoda (A-tüm değişkenler; B-Not2 hariç; C-Not1 hariç; D-Not1ve Not2 hariç) uygulanmış; doğruluk, hatırlama ve F1 skorları ZeroR taban değeriyle karşılaştırılmıştır. Bulgular; (i) KNIME, ikili sınıflamada ortalama F1 = 0,92→0,85 aralığıyla ChatGPT'nin 0,07-0,15 puan önünde seyrederken çoklu sınıflamada da micro-F1'de ~0,07 üstünlük sağlamıştır; (ii) Akademik not değişkenlerinin çıkarılması doğrulukta 10-15 puan düşüşe yol açmış, devamsızlık ile aile ilişkisi KNIME modellerinde, ebeveyn eğitim düzeyi ise ChatGPT modellerinde öne çıkmıştır. Sonuç olarak, akademik ve sosyo-demografik verilerden hareketle akademik başarı tahmini gerçekleştirmek mümkündür. Üretken yapay zekâ araçları şimdilik veri madenciliği yazılımlarından daha düşük performans gösterirken erken keşif ve hız kazanımı sağlayan tamamlayıcı bir rol üstlenebilir. Bu çalışmanın, eğitim verisi analitiği alanında yapay zekâ çalışanlarına, politika yapıcılara ve gelecekteki araştırmalara yol gösterici nitelikte katkılar sunması beklenmektedir.

Özet (Çeviri)

Rapid developments in artificial intelligence technologies are radically transforming not only daily life but also data-driven decision-making in education. This change requires teachers to effectively analyze large volumes of student data and improve learning environments based on evidence. The purpose of this study is to comparatively examine the performance of the generative artificial intelligence tool ChatGPT and the traditional open-source platform KNIME in predicting high school students' academic achievement through machine learning. The study was designed with a quantitative correlational survey approach and operated based on the CRISP-DM process. Data were obtained from publicly available data consisting of 33 academic and socio-demographic variables for two Portuguese subjects (Mathematics n = 395 | Portuguese n = 649). Five supervised algorithms (KA, RF, NB, KNN, SVM) were applied in four scenarios (A - all variables; B - excluding Note2; C - excluding Note1; D - excluding Note1 and Note2) for both binary and multiclassing on both instruments, and accuracy, recall and F1 scores were compared to the ZeroR baseline. Results; (i) KNIME outperformed ChatGPT by 0.07-0.15 points in binary classification with an average F1 = 0.92→0.85, and by ~0.07 points in micro-F1 in multiclass classification; (ii) Removing academic grade variables led to a 10-15 point decrease in accuracy, while family relationship with absenteeism was prominent in KNIME models and parental education level was prominent in ChatGPT models. In conclusion, it is possible to predict academic achievement based on academic and socio-demographic data. Generative artificial intelligence tools, while currently underperforming data mining software, can play a complementary role, providing early discovery and speed gains. This study presents findings in the field of educational data analytics that provide guidance for artificial intelligence professionals, policy makers and future research.

Benzer Tezler

  1. Lise öğrencilerinin akademik başarılarının akıllı telefon, internet, oyun ve sosyal medya bağımlılıkları ile ilişkisinin incelenmesi

    Investigation of the relationship between high school students' academic achievement and their smartphone, internet, game and social media addictions

    RUKEN POLAT ÇALIŞKAN

    Yüksek Lisans

    Türkçe

    Türkçe

    2024

    Eğitim ve ÖğretimKocaeli Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    DOÇ. DR. GÜLŞAH TURA

  2. Lise öğrencilerinin akademik yönelimlerinin belirlenmesinde mükemmeliyetçilik özellikleriyle başarı amaç yöneliminin etkisi

    The effect of achievement goal orientation with perfectionism characteristics in determining the academic orientations of high school students

    AYLİN SALTÜRK

    Doktora

    Türkçe

    Türkçe

    2021

    Eğitim ve ÖğretimAnkara Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    PROF. DR. SELAHİDDİN ÖĞÜLMÜŞ

  3. Lise öğrencilerinin akademik başarı, siber aylaklık, problemli ı̇nternet tüketimi ve ı̇nternet katılım profillerinin ı̇ncelenmesi

    An investigation of academic achievement, cyberloafing, problematic internet consumption, and internet engagement profiles of high school students

    MAHMUT SAMİ SARIYILDIZ

    Yüksek Lisans

    Türkçe

    Türkçe

    2023

    Eğitim ve ÖğretimKırşehir Ahi Evran Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    DR. ÖĞR. ÜYESİ AHMET SALİH ŞİMŞEK

  4. Artırılmış gerçeklik uygulamalarının lise öğrencilerinin akademik başarı, motivasyon ve öz yeterlik düzeylerine etkisi

    The effect of augmented reality applications on the levels of academic achievement, motivation and self efficacy of high school students

    MEHMET KARAKAŞ

    Doktora

    Türkçe

    Türkçe

    2020

    Eğitim ve ÖğretimGazi Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    PROF. DR. MEHMET ARİF ÖZERBAŞ

  5. Öğrencilerin akademik güdülenme, özyeterlik ve sınav kaygı düzeylerinin bazı değişkenler açısından incelenmesi –Kayseri ili örneği-

    Analysis of effects of students' academic motivation, self-efficacy and levels in terms of some variables –Sample of Kayseri province-

    BURCU MERTOĞLU

    Yüksek Lisans

    Türkçe

    Türkçe

    2019

    Eğitim ve ÖğretimErciyes Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    DOÇ. DR. MUSTAFA ÇELEBİ