Deep learning approaches for autism spectrum dis-order diagnosis: Ensemble archtectures and multi-modal analysis
Otizm spektrum bozukluğu teşhisi için derin öğrenme yaklaşımları: Topluluk mimarileri ve multimodal analiz
- Tez No: 816241
- Danışmanlar: PROF. DR. MD BAHARUL ISLAM
- Tez Türü: Yüksek Lisans
- Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Computer Engineering and Computer Science and Control
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2023
- Dil: İngilizce
- Üniversite: Bahçeşehir Üniversitesi
- Enstitü: Lisansüstü Eğitim Enstitüsü
- Ana Bilim Dalı: Yapay Zeka Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: 83
Özet
Bu tez, çocuklarda Otizm Spektrum Bozukluğu (OSB) teşhisinin hassasiyetini ve verimliliğini artırmak için yeni çoklu-modal derin öğrenme yaklaşımlarını sunmaktadır. İlk yaklaşım olan ASD-CVH, hibrit bir görüntü dönüştürücü ve evrişimsel sinir ağı (CNN) mimarisini birleştirerek, ses örneklerinden yüksek seviyeli özellikler ve dikkat haritaları çıkararak, OSB ve tipik olarak gelişen (TD) çocuklar arasında ayrım yapmak-ta mükemmel bir doğruluk sağlamaktadır. İkinci yaklaşım olan ASD-EVNet, yüz tabanlı bir OSB veri kümesinde (FADC) ince ayarlanmış en son Görüntü Dö-nüştürücü (ViT) modelleri ile ensemble öğrenme kullanarak, yüz ifadelerine dayalı OSB teşhisinde en sonuçları elde etmektedir. Ses temelli ve görüntü temelli derin öğrenme modellerinin entegrasyonuyla, bu araştırma, doğruluğu ve güvenilirliği art-tıran çoklu-modal bir perspektif sağlayarak, OSB teşhisi için kapsamlı bir çerçeve oluşturmaktadır. Bulgular, OSB için objektif ve verimli teşhis araçlarının geliştirilme-sine katkı sağlayarak, erken müdahale ve OSB'li çocuklar için daha iyi bakımı desteklemektedir.
Özet (Çeviri)
This thesis presents novel multi-modal deep learning approaches for enhancing the precision and efficiency of Autism Spectrum Disorder (ASD) diagnosis in children. The first approach, ASD-CVH, combines a hybrid vision transformer and convolu-tional neural network (CNN) architecture to extract high-level features and attention maps from audio samples, achieving excellent accuracy in differentiating between ASD and typically developing (TD) children. The second approach, ASD-EVNet, utilizes ensemble learning with state-of-the-art Vision Transformer (ViT) models fine-tuned on a face-based ASD dataset for children (FADC), achieving state-of-the-art results in ASD diagnosis based on facial expressions. By integrating audio-based and visual-based deep learning models, this research establishes a comprehensive framework for ASD diagnosis, providing a multi-modal perspective that enhances accuracy and relia-bility. The findings contribute to the development of objective and efficient diagnostic tools for ASD, supporting early intervention and improved care for children with ASD.
Benzer Tezler
- Machine-learning approaches for neurological disorder diagnosis from genomic and neuroimaging data
Genomik ve nörogörüntüleme verilerinden nörolojik bozukluk teşhisi için makine öğrenmesi yaklaşımları
İSMAİL BİLGEN
Doktora
İngilizce
2024
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
PROF. DR. BEHÇET UĞUR TÖREYİN
- Medikal veri setleri için yeni bir aşırı öğrenme makinesi otomatik kodlayıcı tasarımı
A new extreme learning machine auto encoder design for medical datasets
BERNA ARI
Doktora
Türkçe
2022
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolFırat ÜniversitesiElektrik ve Elektronik Mühendisliği Ana Bilim Dalı
PROF. DR. ABDULKADİR ŞENGÜR
- Emotion recognition process analysis by using eye tracker, sensor and application log data
Göz izleme cihazı, sensör ve uygulama verileri ile insanlarda duygu tanıma analizi
MAHİYE ÖZTÜRK
Doktora
İngilizce
2019
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
PROF. DR. ZEHRA ÇATALTEPE
- Otizm spektrum bozukluklarında kendini uyarıcı hareketlerin görsel kelime çantası yaklaşımı ve derin öğrenme yöntemleri ile tanınması
Recognition of self- stimulatory behaviours with bag-0f-visual-words approach and deep learning methods in Autism Spectrum Disorders
SİBEL KAÇDIOĞLU
Yüksek Lisans
Türkçe
2020
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolAtatürk ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ BARIŞ ÖZYER
DR. ÖĞR. ÜYESİ SAEID AGAHIAN
- Drama liderlerinde, işitme engelli bireylerde, normal işiten bireylerde ve otizm spektrum bozukluğunda derin öğrenme ile ses duygu analizi
Voice emotion analysis with deep learning in drama leaders, hearing-impaired individuals, normal hearing individuals and autism spectrum disorder
MİNA GÖK
Yüksek Lisans
Türkçe
2021
Kulak Burun ve Boğazİstanbul Aydın ÜniversitesiOdyoloji Ana Bilim Dalı
PROF. DR. BAHRİYE ÖZLEM KONUKSEVEN