Geri Dön

İnsan bilgisayar etkileşimi uygulamaları için göz merkezinin belirlenmesi ve kafa pozu tahmini

Eye center localization and head pose estimation for human computer interaction applications

  1. Tez No: 609190
  2. Yazar: FATİH DURSUN
  3. Danışmanlar: DOÇ. DR. GÖKHAN GELEN
  4. Tez Türü: Yüksek Lisans
  5. Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Mekatronik Mühendisliği, Computer Engineering and Computer Science and Control, Mechatronics Engineering
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2020
  8. Dil: Türkçe
  9. Üniversite: Bursa Teknik Üniversitesi
  10. Enstitü: Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Mekatronik Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Belirtilmemiş.
  13. Sayfa Sayısı: 71

Özet

Göz merkezinin belirlenmesi ve kafa pozunun tahmini, görüntü temelli insan bilgisayar etkileşimi uygulamaları için önemli bir problemdir. Bu tezde, düşük çözünürlüklü görüntülerden göz merkezi yerini ve baş pozunu tespit eden bir sistem önerilmiştir. Bu sistem kullanıcıya rahatsızlık verebilecek herhangi bir harici donanıma ihtiyaç duymadan, sadece tek kamera ile çalışabilmektedir. Göz merkezlerini belirlemek için, kameradan alınan görüntüye yüz algılama, göz alanı algılama, kaba göz merkezi lokalizasyonu ve hassas göz merkezi lokalizasyonundan oluşan çok aşamalı bir yaklaşım uygulanmaktadır. Tez kapsamında, göz merkezi belirleme çalışmalarında yaygın olarak kullanılan iki farklı yöntemin avantajlarından aynı anda faydalanacak yeni bir amaç fonksiyonu oluşturulmuştur. Kafa pozunun algılanması için kafanın rijit bir silindir olarak dikkate alındığı model tabanlı bir yaklaşım kullanılmıştır. Poz algılama işlemi, yüzdeki belirli öznitelik noktalarının ardışık resimler üzerinde takip edilmesine dayanmaktadır. Göz merkezi tespiti ve kafa pozu tahmini için önerilen yöntemlerin her ikisi de, literatürde yaygın olarak kullanılan veri setleri üzerinde test edilmiştir. Benzer çalışmalar ile yapılan karşılaştırmalar, önerilen yöntemlerin doğruluk, hız ve uygulanabilirlik açısından önde olduğunu göstermektedir. Geliştirilen sistemin gerçek zamanlı çalışması hedeflendiği için veri setleri kullanılarak elde edilen sonuçların yanında, sistemin çalışma performansı gerçek zamanlı olarak da test edilmiştir. Önerilen sistem kullanıcıyı en az seviyede kısıtlamakta, ortam şartlarından en az seviyede etkilenmekte ve düşük çözünürlükteki resimlerde bile doğru ve hızlı sonuçlar üretebilmektedir.

Özet (Çeviri)

Detection of eye center and estimation of head pose is an important problem for image-based human-computer interaction applications. In this thesis, a system that detects eye center location and head pose from low-resolution images is proposed. The system can be operated with only one camera without any external equipment which may cause discomfort to the user. To determine eye centers, a multi-stage approach consisting of face detection, eye area detection, coarse eye center localization and precise eye center localization to the image taken from the camera is applied. Within the scope of the thesis, a new objective function has been proposed to benefit from the advantages of two different methods which are commonly used in eye center determination studies. A model-based approach is used for the detection of head pose where the head is considered as a rigid cylinder. Pose detection is based on tracking of specific feature points on the face from consecutive images. Both of the proposed methods for eye center detection and head exposure estimation have been tested on data sets commonly used in the literature. Comparisons with similar studies show that the proposed methods are leading in terms of accuracy, speed, and applicability. Since the real-time operation of the developed system is aimed, in addition to the results obtained by using data sets, the operating performance of the system is also tested in real-time. The proposed system minimally restricts the users, is minimally influenced by the ambient conditions and can produce accurate and fast results even in low-resolution images.

Benzer Tezler

  1. Aerodynamics of cross-flow with side jets

    Yan jetli çapraz akışkanın aerodinamiği

    FATİH GÜNEŞ

    Yüksek Lisans

    İngilizce

    İngilizce

    1998

    Makine Mühendisliğiİstanbul Teknik Üniversitesi

    Makine Mühendisliği Ana Bilim Dalı

    DOÇ. DR. İ. BEDİ ÖZDEMİR

  2. Yeni Cami'nin akustik açıdan performans değerlendirmesi

    Evaluation of the acoustical performance of the New Mosque

    EVREN YILDIRIM

    Yüksek Lisans

    Türkçe

    Türkçe

    2003

    Mimarlıkİstanbul Teknik Üniversitesi

    Mimarlık Ana Bilim Dalı

    PROF. DR. SEVTAP YILMAZ DEMİRKALE

  3. A comparative study of nonlinear model predictive control and reinforcement learning for path tracking

    Yol izleme için doğrusal olmayan model öngörülü kontrol ve pekiştirmeli öğrenmenin karşılaştırmalı çalışması

    GAMZE TÜRKMEN

    Yüksek Lisans

    İngilizce

    İngilizce

    2022

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik Üniversitesi

    Kontrol ve Otomasyon Mühendisliği Ana Bilim Dalı

    PROF. DR. OVSANNA SETA ESTRADA

  4. Yapay sinir ağı sonuçlarının oylanarak gerçek zamanlı göz bebeği merkezinin tespiti

    Real time estimation of the eye pupil center by voting over neural network results

    NECMEDDİN SAİD KARAKOÇ

    Yüksek Lisans

    Türkçe

    Türkçe

    2019

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolGebze Teknik Üniversitesi

    Bilgisayar Mühendisliği Ana Bilim Dalı

    PROF. DR. YUSUF SİNAN AKGÜL

  5. Creation of web-based application for earthquake hazard analysis by GIS and AHP

    CBS ve AHP yardımıyla deprem tehlike analizi için web tabanlı bir uygulamanın oluşturulması

    IBRAHIM S.M. FARROUKH IBRAHIM S. M. FARROUKH

    Yüksek Lisans

    İngilizce

    İngilizce

    2019

    Coğrafyaİstanbul Teknik Üniversitesi

    Bilişim Uygulamaları Ana Bilim Dalı

    DOÇ. DR. TURAN ERDEN