An iterative transformer framework for isolated turkish sign language recognition
İzole türk işaret dili tanıma için yinelemeli transformer çerçevesi
- Tez No: 1005536
- Danışmanlar: DOÇ. DR. HACER YALIM KELEŞ
- Tez Türü: Yüksek Lisans
- Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Computer Engineering and Computer Science and Control
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2026
- Dil: İngilizce
- Üniversite: Hacettepe Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Bilgisayar Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Bilgisayar Mühendisliği Bilim Dalı
- Sayfa Sayısı: Belirtilmemiş.
Özet
İzole İşaret Dili Tanıma, işaretçiye ait el, yüz ve vücut hareketlerinin karmaşık uzamsal ve zamansal yapısının modellenmesini gerektiren zorlu bir bilgisayarlı görü problemidir. Son yıllarda bu problem üzerine yapılan çalışmalar arasında Transformer modellerinin kullanımı yaygınlaşmıştır. Transformer tabanlı modeller bu alanda başarılı sonuçlar elde etmiş olsa da, mimari yapılarından kaynaklanan bazı sınırlılıkları bulunmaktadır. Literatürde, Transformer mimarilerinde yer alan artık bağlantılar matematiksel olarak adi diferansiyel denklemlerin nümerik çözümlerinden olan Euler yöntemi ile eşleştirilmektedir. Birinci dereceden bir yöntem olan Euler metodu ile elde edilen yaklaşık çözüm yüksek oranda sayısal hata içermektedir. Benzer bir yakınsama sorunu, artık bağlantılar nedeniyle Transformer tabanlı mimarilerde, özellikle derin modellerde katman sayısının artmasıyla oluşan küresel hata birikimi şeklinde gözlemlenmektedir. ODE Transformer yaklaşımı, bu hata oranını düşürmek amacıyla, standart artık bağlantı yapısı yerine matematiksel olarak daha yüksek mertebeli bir sayısal çözüm sunan Runge-Kutta yöntemine dayanan yinelemeli bir çerçeve önerir. Doğal Dil İşleme alanındaki çeşitli görevlerde başarısı kanıtlanmış olan bu yaklaşımın, İşaret Dili Tanıma alanındaki etkinliği literatürde henüz araştırılmamıştır. Bu tez çalışmasında, İzole İşaret Dili Tanıma problemine sunulan Transformer tabanlı çözümler, ODE Transformer çerçevesi ile birleştirilmiş ve AUTSL veri seti üzerinde test edilmiştir. Elde edilen deneysel bulgular, önerilen çerçevenin İzole İşaret Dili Tanıma problemindeki etkinliğini ve başarısını göstermektedir.
Özet (Çeviri)
Isolated Sign Language Recognition is a challenging computer vision problem that requires modeling the complex spatial and temporal structure of the signer's hand, face, and body movements. In recent years, the use of Transformer models has become widespread in studies on this problem. Although Transformer-based models have achieved successful results in this field, they have some limitations arising from their architectural structures. In the literature, residual connections in Transformer architectures are mathematically associated with the Euler method, which is a numerical solution for ordinary differential equations. Since the Euler method is a first-order method, the obtained approximate solution contains a high rate of numerical error. A similar convergence problem is observed in Transformer-based architectures due to residual connections, appearing as global error accumulation with the increase of layers, especially in deep models. To reduce this error rate, the ODE Transformer approach proposes an iterative framework based on the Runge-Kutta method, which offers a mathematically higher-order numerical solution instead of the standard residual connection structure. The effectiveness of this approach, which has proven success in various tasks in the field of Natural Language Processing, has not yet been investigated in the field of Sign Language Recognition. In this thesis study, Transformer-based solutions for the Isolated Sign Language Recognition problem were combined with the ODE Transformer framework and tested on the AUTSL dataset. The obtained experimental findings demonstrate the effectiveness and success of the proposed framework in the Isolated Sign Language Recognition problem.
Benzer Tezler
- Türkiye'nin ve Fransa'nın paylaşılan / ortak kültürel mirasının korunmasına yönelik bir değerlendirme: Beyoğlu (Pera) Tomtom mahallesi örneği
Assessing the preservation of shared cultural heritage between Türkiye and France: The case of Tomtom neighborhood, Beyoğlu (Pera)
BERCESTE KALAFAT
Yüksek Lisans
Türkçe
2026
MimarlıkMimar Sinan Güzel Sanatlar ÜniversitesiMimarlık Ana Bilim Dalı
DOÇ. DR. KORAY GÜLER
- İslam botanik tarihi üzerine oryantalist çalışmalar: Fuat Sezgin'in eserleri ışığında bir inceleme
Orientalist studies on the history of Islamic botany:an analysis in the light of Fuat Sezgi̇n's works
SÜMEYYE BAYBARA KHEERDALI
Yüksek Lisans
Türkçe
2025
Bilim ve Teknolojiİstanbul Teknik ÜniversitesiBilim ve Teknoloji Tarihi Ana Bilim Dalı
DOÇ. DR. HASAN KARATAŞ
- E-tı̇caret ekonomı̇sı̇nde kentsel lojı̇stı̇k faalı̇yetlerı̇nı̇n yer seçı̇mı̇ belı̇rleyı̇cı̇lerı̇ ve mekânsal etkı̇ tahmı̇n modelı̇ (EKLOTEM)
Determinants of urban logistics location selection and spatial impact prediction model in e-commerce economy (EKLOTEM)
BÜŞRA GÜVEN GÜNEY
Doktora
Türkçe
2026
Şehircilik ve Bölge Planlamaİstanbul Teknik ÜniversitesiŞehir ve Bölge Planlama Ana Bilim Dalı
PROF. DR. MEHMET ALİ YÜZER
- Applications of artificial intelligence for the security of networks
Ağ güvenliği için yapay zeka uygulamalari
SELEN GEÇGEL ÇETİN
Doktora
İngilizce
2025
Elektrik ve Elektronik Mühendisliğiİstanbul Teknik ÜniversitesiElektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
PROF. DR. GÜNEŞ ZEYNEP KARABULUT KURT
- Automated plastic waste detection and visualization in coastal areas using UAVs and deep learning
İnsansız hava araçları ve derin öğrenme kullanılarak kıyı bölgelerinde otomatik plastik atık tespiti ve görselleştirilmesi
HESAM HATAMZADEH KHANGHAHI
Yüksek Lisans
İngilizce
2026
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiVeri Mühendisliği ve İş Analitiği Ana Bilim Dalı (disiplinlerarası)
PROF. DR. ŞULE ITIR SATOĞLU