Geri Dön

İnsan eli hareketlerinin derin öğrenme ile sınıflandırılması

Classification of human hand movements with deep learning

PDF İndir

  1. Tez No: 955403
  2. Yazar: MÜSLÜM YILDIZBAKAN
  3. Danışmanlar: DR. ÖĞR. ÜYESİ NURİ BİNGÖL
  4. Tez Türü: Yüksek Lisans
  5. Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Mekatronik Mühendisliği, Computer Engineering and Computer Science and Control, Mechatronics Engineering
  6. Anahtar Kelimeler: Eğitsel robot, Hareketli robotlar, İnsan-robot etkileşim, Educational robot, Mobile robots, Human-robot interaction
  7. Yıl: 2025
  8. Dil: Türkçe
  9. Üniversite: Üsküdar Üniversitesi
  10. Enstitü: Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Yapay Zeka Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Yapay Zeka Mühendisliği Bilim Dalı
  13. Sayfa Sayısı: Belirtilmemiş.

Özet

Bu çalışmada, insan el hareketlerinin sınıflandırılması amacıyla yüzeyel elektromiyografi (sEMG) ve eldiven sensör verileri kullanılarak derin öğrenme tabanlı üç farklı model karşılaştırılmıştır: CNN-LSTM, CNN-ResNet ve Transformer. NinaPro DB1 veri kümesinden elde edilen sinyaller segmentasyon, normalizasyon ve filtreleme adımlarından geçirilmiştir. Ardından her model eğitim ve test aşamasında sınıflandırma performansları açısından değerlendirilmiştir. Değerlendirme metrikleri olarak doğruluk, F1 skoru, karışıklık matrisi ve ROC eğrileri kullanılmıştır. ROC eğrileri hem mikro ortalama hem de seçilen sınıflar özelinde incelenmiş, tüm modellerde AUC değerlerinin yüksek olduğu gözlemlenmiştir. Sonuçlar, CNN-ResNet modelinin doğruluk ve F1 skoru açısından en iyi performansı gösterdiğini ortaya koymuştur. CNN-LSTM modeli zamansal bağımlılıkları başarıyla yakalarken Transformer modeli karmaşık yapısıyla dikkat çekmiş, ancak sınırlı veri miktarı nedeniyle görece düşük performans sergilemiştir. Bu bulgular, sEMG ve eldiven verilerinin doğru işlenmesi ve uygun model seçimiyle el hareketlerinin yüksek doğrulukla sınıflandırılabileceğini göstermektedir. Elde edilen sonuçların robotik biyonik protez kontrolü, rehabilitasyon sistemleri ve insan-makine arayüzleri (HMI) gibi alanlarda uygulanabilirliği yüksektir

Özet (Çeviri)

In this study, three deep learning-based models CNN-LSTM, CNN-ResNet, and Transformer were compared for the classification of human hand movements using surface electromyography (sEMG) and glove sensor data. Signals from the NinaPro DB1 dataset were segmented, normalized, and filtered as part of the preprocessing pipeline. Each model was evaluated during training and testing phases in terms of classification performance. Evaluation metrics included accuracy, F1 score, confusion matrix, and ROC curves. ROC curves were analyzed both as micro-averaged and for selected individual classes, and high AUC values were observed across all models. Results revealed that the CNN-ResNet model achieved the highest performance in terms of accuracy and F1 score. While the CNN-LSTM model effectively captured temporal dependencies, the Transformer model demonstrated its complexity and attention mechanism capabilities, though its performance was relatively lower due to the limited dataset size. These findings indicate that, with proper preprocessing and model selection, hand movements can be classified with high accuracy using sEMG and glove data. The results highlight the high applicability of such methods in areas such as robotic bionic prosthesis control, rehabilitation systems, and human-machine interfaces (HMI).

Benzer Tezler

  1. Tez No

    458895

    El hareketlerinin elektromyogram sinyalleri ve yardımcı sensör verileri ile sınıflandırılması

    Classification of hand movements via electromyogram and auxiliary sensor data

    SİNAN YAĞCIOĞLU

    Yüksek Lisans

    Türkçe

    Türkçe

    2016

    Biyomühendislikİstanbul Teknik Üniversitesi

    Elektronik ve Haberleşme Mühendisliği Ana Bilim Dalı

    DOÇ. İLKER BAYRAM

  2. Tez No

    612139

    Classification of the motor EEG signals by using deep neural networks

    Derin sinir ağları kullanarak motor EEG sinyallerinin sınıflandırılması

    LEYLA ABILZADE

    Yüksek Lisans

    İngilizce

    İngilizce

    2019

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik Üniversitesi

    Bilişim Uygulamaları Ana Bilim Dalı

    PROF. DR. TAMER ÖLMEZ

  3. Tez No

    613254

    A comprehensive dataset including force cues for gesture recognition and skills assessment in robotic surgery

    Robotik cerrahiide kuvvet ipuçları içeren kapsamlı bir veri seti hareket tanıma ve beceri değerlendirmesi

    DENİZ EKİN CANBAY

    Yüksek Lisans

    İngilizce

    İngilizce

    2019

    Mekatronik Mühendisliğiİstanbul Teknik Üniversitesi

    Mekatronik Mühendisliği Ana Bilim Dalı

    DR. ÖĞR. ÜYESİ NAZIM KEMAL ÜRE

    DR. ÖĞR. ÜYESİ FANNY FICUCIELLO

  4. Tez No

    718312

    Educational reforms in Ethiopia: From the imperial era to the present

    Etiyopya'da eğitim reformları: Emperyal dönemden günümüze

    SALİH AHMED MAHAMMODA

    Doktora

    İngilizce

    İngilizce

    2022

    Eğitim ve ÖğretimNecmettin Erbakan Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    PROF. DR. İSA KORKMAZ

  5. Tez No

    1025061

    Evrişimsel sinir ağı kullanarak sürekli dalga radar tabanlı el hareketi sınıflandırma

    Continuous wave radar based hand gesture classification using convolutional nueral network

    İSMAİL YILDIZ

    Yüksek Lisans

    Türkçe

    Türkçe

    2026

    Elektrik ve Elektronik MühendisliğiKonya Teknik Üniversitesi

    Elektrik-Elektronik Mühendisliği Ana Bilim Dalı

    DR. ÖĞR. ÜYESİ İBRAHİM ŞEFLEK

Geri Dön