Python pyaudio modülü kullanarak konuşma dilinden işaret diline makine öğrenmesi tabanlı tercüme sistemi
Machine learning-based speech to sign language interpretation system using python pyaudio module
- Tez No: 784624
- Danışmanlar: DR. ÖĞR. ÜYESİ RANA ORTAÇ KABAOĞLU
- Tez Türü: Yüksek Lisans
- Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
- Anahtar Kelimeler: Doğal dil işleme, Makine öğrenmesi, İşaret dili, Natural language processing, Machine learning, Sign language
- Yıl: 2022
- Dil: Türkçe
- Üniversite: İstanbul Üniversitesi-Cerrahpaşa
- Enstitü: Lisansüstü Eğitim Enstitüsü
- Ana Bilim Dalı: Elektrik ve Elektronik Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Elektrik Elektronik Mühendisliği Bilim Dalı
- Sayfa Sayısı: Belirtilmemiş.
Özet
Sağırlar ve işitme engelliler, belirli ihtiyaçlardan oluşan oldukça büyük bir topluluk oluşturur, ancak işaret dilinde iletişim süreci pek çok insan için zahmetlidir, bu nedenle operatörler ve teknoloji son zamanlarda bu topluluğu hedeflemeye başlamıştır. Ancak bu günlere kadar, konuşulan sözcüklerin yüksek doğrulukta ve daha az hatayla gerçek zamanlı olarak anlaşılabilir işaret diline yorumlanmasını sağlayacak makul maliyetli, özgürce güvenilir bir web sitesi veya tek bir yazılım yoktur. İşaret dili konularında çok sayıda mevcut araştırma vardır. Ancak araştırma alanlarının çoğu, işaretleri metne veya konuşmaya dönüştürmekle ilgilidir. Bu tezde bunun tam tersi yapılırken, konuşmayı metinle birlikte bir makine öğrenme algoritması kullanarak işaret diline çeviren ve iletişim süreci problemine etki edecek ve daha da basitleştirecek olan bunun tersi yapılmıştır. Yukarıda belirtilenlerden dolayı bu tez, python ve Django modülleri aracılığıyla bir makine öğrenmesi yaklaşımı kullanarak konuşmadan işaret diline çeviri sistemi sağlayarak bu soruna bir çözüm önermektedir. Sistemin önerilen tasarımı, konuşmadan metne API'leri kullanıp ses sinyallerini metne dönüştürmekle başlayarak, web konuşma API'sı olacak ve ardından Yapay Zeka parçası olarak makine Öğreniminde Doğal Dil İşleme semantiğini kullanacak, kodlama xiv için Python, ve çeviri sürecini gerçek zamanlı olarak gerçekleştirecek bir web sitesi geliştirmek ve işaret dilini her bir cümle veya kelimenin karşılık gelen metniyle birlikte video formatında görüntülemek için Django kullanılacaktır. Bu tez, öncelikle sağır insanlara Amerikan işaret dilinde (ASL) bilgi ve hizmet sağlamaya odaklanacak ve manuel ve manuel olmayan işaretler aracılığıyla ASL'nin tüm kelime dağarcığını kapsayacak şekilde genişletilebilecek ölçeklenebilir bir proje geliştirecektir.
Özet (Çeviri)
The deaf and hearing-impaired make up a sizable community of specific needs, yet the process of communicating in sign language is cumbersome to so many people, therefor operators and technology have recently begun to target this community. But until these current days there is no freely reliable accessible websites or a solitary software with a sensible cost to make an interpretation of spoken words into understandable sign language and in real time with high accuracy and less errors. There is a wealth of existing researches in sign language topic but most of the research areas concern with converting signs to text or speech while in this thesis the opposite has been done which is converting the speech into sign language along with text using machine learning algorithm. and that will have an impact on the communicating process problem and make it even simpler. Due to what stated above, this thesis proposes a solution to this problem by providing a speech to sign language translation system using machine learning approach through python and Django module. The proposed design of the system will start by changing over the sound signals into text utilizing speech to text Application Programming Interface (APIs) which will be web speech API, and then using the semantics of Natural Language Processing (NLP) in machine Learning as the Artificial Intelligence part, with Python for coding and Django for
Benzer Tezler
- Python programlama dili kullanılarak uzaktan algılama amaçlı arayüz tasarımı
Designing graphical user interfaces for remote sensing applications using python programming language
EKREM SARALIOĞLU
Yüksek Lisans
Türkçe
2015
Jeodezi ve FotogrametriKaradeniz Teknik ÜniversitesiHarita Mühendisliği Ana Bilim Dalı
DOÇ. DR. OĞUZ GÜNGÖR
- Python'da arayüzlü minimum/maksimum zamanı belirleme programı: Xtrema
A python-based gui software to calculate minima and maxima times: Xtrema
ENGİN BAHAR
Yüksek Lisans
Türkçe
2015
Astronomi ve Uzay BilimleriAnkara ÜniversitesiAstronomi ve Uzay Bilimleri Ana Bilim Dalı
DOÇ. DR. HAKAN VOLKAN ŞENAVCI
- Symbolic mathematics with python
Python ile sembolik matematik uygulamaları
FATİH KÜRŞAT CANSU
Yüksek Lisans
İngilizce
2017
MatematikAbant İzzet Baysal ÜniversitesiMatematik Ana Bilim Dalı
DOÇ. DR. EROL YILMAZ
- Python ve Julia programlarının doğrusal olmayan deprem analizleri ve paralel programlamaya uygunluklarının araştırılması
Applicability of Python and Julia languages to nonlinear seismic analysis of structures and parallel programing
BARIŞ KASAPOĞLU
Yüksek Lisans
Türkçe
2017
İnşaat Mühendisliğiİstanbul Teknik Üniversitesiİnşaat Mühendisliği Ana Bilim Dalı
YRD. DOÇ. DR. BARIŞ ERKUŞ
- Python ve OpenCv ile yüz tanima ve otomatik Blur uygulaması
An application recognizing faces and applying Gaussian Blur in OpenCv and Python
MUHAMMED EMİN TOMBAK
Yüksek Lisans
Türkçe
2019
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolKırıkkale ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
DOÇ. DR. ATİLLA ERGÜZEN