Geri Dön

Python pyaudio modülü kullanarak konuşma dilinden işaret diline makine öğrenmesi tabanlı tercüme sistemi

Machine learning-based speech to sign language interpretation system using python pyaudio module

  1. Tez No: 784624
  2. Yazar: AATIF OSMAN ALTAHIR BAKR
  3. Danışmanlar: DR. ÖĞR. ÜYESİ RANA ORTAÇ KABAOĞLU
  4. Tez Türü: Yüksek Lisans
  5. Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2022
  8. Dil: Türkçe
  9. Üniversite: İstanbul Üniversitesi-Cerrahpaşa
  10. Enstitü: Lisansüstü Eğitim Enstitüsü
  11. Ana Bilim Dalı: Elektrik ve Elektronik Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Elektrik Elektronik Mühendisliği Bilim Dalı
  13. Sayfa Sayısı: 66

Özet

Sağırlar ve işitme engelliler, belirli ihtiyaçlardan oluşan oldukça büyük bir topluluk oluşturur, ancak işaret dilinde iletişim süreci pek çok insan için zahmetlidir, bu nedenle operatörler ve teknoloji son zamanlarda bu topluluğu hedeflemeye başlamıştır. Ancak bu günlere kadar, konuşulan sözcüklerin yüksek doğrulukta ve daha az hatayla gerçek zamanlı olarak anlaşılabilir işaret diline yorumlanmasını sağlayacak makul maliyetli, özgürce güvenilir bir web sitesi veya tek bir yazılım yoktur. İşaret dili konularında çok sayıda mevcut araştırma vardır. Ancak araştırma alanlarının çoğu, işaretleri metne veya konuşmaya dönüştürmekle ilgilidir. Bu tezde bunun tam tersi yapılırken, konuşmayı metinle birlikte bir makine öğrenme algoritması kullanarak işaret diline çeviren ve iletişim süreci problemine etki edecek ve daha da basitleştirecek olan bunun tersi yapılmıştır. Yukarıda belirtilenlerden dolayı bu tez, python ve Django modülleri aracılığıyla bir makine öğrenmesi yaklaşımı kullanarak konuşmadan işaret diline çeviri sistemi sağlayarak bu soruna bir çözüm önermektedir. Sistemin önerilen tasarımı, konuşmadan metne API'leri kullanıp ses sinyallerini metne dönüştürmekle başlayarak, web konuşma API'sı olacak ve ardından Yapay Zeka parçası olarak makine Öğreniminde Doğal Dil İşleme semantiğini kullanacak, kodlama xiv için Python, ve çeviri sürecini gerçek zamanlı olarak gerçekleştirecek bir web sitesi geliştirmek ve işaret dilini her bir cümle veya kelimenin karşılık gelen metniyle birlikte video formatında görüntülemek için Django kullanılacaktır. Bu tez, öncelikle sağır insanlara Amerikan işaret dilinde (ASL) bilgi ve hizmet sağlamaya odaklanacak ve manuel ve manuel olmayan işaretler aracılığıyla ASL'nin tüm kelime dağarcığını kapsayacak şekilde genişletilebilecek ölçeklenebilir bir proje geliştirecektir.

Özet (Çeviri)

The deaf and hearing-impaired make up a sizable community of specific needs, yet the process of communicating in sign language is cumbersome to so many people, therefor operators and technology have recently begun to target this community. But until these current days there is no freely reliable accessible websites or a solitary software with a sensible cost to make an interpretation of spoken words into understandable sign language and in real time with high accuracy and less errors. There is a wealth of existing researches in sign language topic but most of the research areas concern with converting signs to text or speech while in this thesis the opposite has been done which is converting the speech into sign language along with text using machine learning algorithm. and that will have an impact on the communicating process problem and make it even simpler. Due to what stated above, this thesis proposes a solution to this problem by providing a speech to sign language translation system using machine learning approach through python and Django module. The proposed design of the system will start by changing over the sound signals into text utilizing speech to text Application Programming Interface (APIs) which will be web speech API, and then using the semantics of Natural Language Processing (NLP) in machine Learning as the Artificial Intelligence part, with Python for coding and Django for

Benzer Tezler

  1. Python'da arayüzlü minimum/maksimum zamanı belirleme programı: Xtrema

    A python-based gui software to calculate minima and maxima times: Xtrema

    ENGİN BAHAR

    Yüksek Lisans

    Türkçe

    Türkçe

    2015

    Astronomi ve Uzay BilimleriAnkara Üniversitesi

    Astronomi ve Uzay Bilimleri Ana Bilim Dalı

    DOÇ. DR. HAKAN VOLKAN ŞENAVCI

  2. Mobil tabanlı programlama öğrenme uygulamaları seçiminde bulanık karar analizi

    Fuzzy decision analysis for the selection of mobile-based programming learning applications

    HALUK ŞAHİN

    Yüksek Lisans

    Türkçe

    Türkçe

    2024

    Eğitim ve ÖğretimAmasya Üniversitesi

    Bilgisayar ve Öğretim Teknolojileri Eğitimi Ana Bilim Dalı

    DR. ÖĞR. ÜYESİ HAKAN ÖZCAN

  3. Python kullanarak makine öğreniminde özellik seçimi

    Feature selection in machine learning using python

    EMEL UĞURLU

    Yüksek Lisans

    Türkçe

    Türkçe

    2025

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolYıldız Teknik Üniversitesi

    Matematik Mühendisliği Ana Bilim Dalı

    PROF. DR. AYLA ŞAYLI

  4. Python ile CRISPR/Cas nükleaz RNA kılavuzlu genom düzenleme kütüphanesi geliştirilmesi

    Development of CRISPR/Cas nuclease RNA guided genome editing library with python

    SEZER İSLAMBEY

    Yüksek Lisans

    Türkçe

    Türkçe

    2022

    BiyoteknolojiÇukurova Üniversitesi

    Biyoteknoloji Ana Bilim Dalı

    PROF. DR. ZEYNEL CEBECİ

  5. Python ve opencv ile yüz tanıma ve otomatik blur uygulaması

    Face recognition and automatic blur application with python and opencv

    MUHAMMED EMİN NECİPSOY

    Yüksek Lisans

    Türkçe

    Türkçe

    2024

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolKırıkkale Üniversitesi

    Bilgisayar Mühendisliği Ana Bilim Dalı

    DOÇ. DR. ATİLLA ERGÜZEN