Geri Dön

Facial feature point tracking based on a graphical model framework

Grafiksel model tabanlı yüz öznitelik nokta takibi

  1. Tez No: 223777
  2. Yazar: SERHAN COŞAR
  3. Danışmanlar: PROF. DR. AYTÜL ERÇİL, YRD. DOÇ. DR. MÜJDAT ÇETİN
  4. Tez Türü: Yüksek Lisans
  5. Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2008
  8. Dil: İngilizce
  9. Üniversite: Sabancı Üniversitesi
  10. Enstitü: Mühendislik ve Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Elektrik ve Elektronik Mühendisliği Bölümü
  12. Bilim Dalı: Elektronik Mühendisliği Ana Bilim Dalı
  13. Sayfa Sayısı: 99

Özet

Bu tezde önerilen yöntem, insan-bilgisayar arayüzü, mimik analiz sistemleri, sürücü yorgunluğu algımalara sistemlerinde kullanılabilecek bir yüz öznitelik takip yöntemidir. Önerilen yöntemin tabanı grafiksel modellere dayanmaktadır. Zamandaki istatistiksel ilişkiler ve öznitelikler arasındaki uzamsal ilişkiler kullanılarak öznitelik noktalarının yerleri takip edilmektedir. Yukarıda bahsedilen bir çok uygulama alanında takip, bütün sistemin başarımını etkileyebilecek kadar önemli bir role sahiptir. Bu nedenle iyi bir takip algoritması gerçekte meydana gelebilecek şartları (keyfi kafa hareketleri ve yüz üzerinde oluşabilecek engeller) göz önüne almalıdır. Varolan bir çok yöntemde öznitelik noktaları ayrı ayrı takip edilmekte ve engel olma durumu düzgün şekilde ele alınmamaktadır. Bu, keyfi kafa hareketlerinde ve engel durumlarında kaymalara sebep olmaktadır. Burada önerilen yöntem öznitelikler arasındaki uzamsal bilgiyi de hesaba katarak bu tarz durumlarda gürbüzlük sağlamaktadır. Engeller yüzünden oluşabilecek kaymalar Gabor öznitelikleri üzerine kurulu bir engel algılayıcı ile düzgün bir şekilde bertaraf edilebilmektedir.Önerilen yöntemin başarımı bir çok farklı şartlar altında kaydedilmiş videolar üzerinde değerlendirilmiştir. Bu farklı şartlar; özniteliklerin engellenerek sahnede görülmediği durumları, düşük çözünürlüklü verileri, sahnede aydınlanma değişimi olan durumları, düzlemsel kafa hareketi ve düzlem dışı kafa hareketlerinin olduğu durumları içermektedir. Yöntem ayrıca otomobil ortamında kaydedilen videolarda da denenerek, yöntemin pratik bir uygulamadaki başarımı değerlendirilmiştir. Bu sonuçlardan yola çıkarak, önerilen yöntemin yüz öznitelik takibi için yaygın kullanılabilecek, gelecek vaadeden bir yöntem olduğu sonucuna varılabilmekte ayrıca engel ve kafa hareketi içeren mimik video dizilerindeki başarımına göre de gürbüz bir yöntem olduğu sonucuna varılabilmektedir. Otomobilde sürüş şartlarında kaydedilen videolardaki başarıma bakılırsa yöntemin, sürücü davranışı analiz sistemlerinde veya sürücü yorgunluk algılama sistemlerinde kullanılabilecek kuvvette bir yöntem olduğu kanısına varılabilir.

Özet (Çeviri)

In this thesis a facial feature point tracker that can be used in applications such as human-computer interfaces, facial expression analysis systems, driver fatigue detection systems, etc. is proposed. The proposed tracker is based on a graphical model framework. The position of the facial features are tracked through video streams by incorporating statistical relations in time and the spatial relations between feature points. In many application areas, including those mentioned above, tracking is a key intermediate step that has a significant effect on the overall system performance. For this reason, a good practical tracking algorithm should take into account real-world phenomena such as arbitrary head movements and occlusions. Many existing algorithms track each feature point independently, and do not properly handle occlusions. This causes drifts in the case of arbitrary head movements and occlusions. By exploiting the spatial relationships between feature points, the proposed method provides robustness in a number of scenarios, including e.g. various head movements. To prevent drifts because of occlusions, a Gabor feature based occlusion detector is developed and used in the proposed method.The performance of the proposed tracker has been evaluated on real video data under various conditions. These conditions include occluded facial gestures, low video resolution, illumination changes in the scene, in-plane head motion, and out-of-plane head motion. The proposed method has also been tested on videos recorded in a vehicle environment, in order to evaluate its performance in a practical setting. Given these results it can be concluded that the proposed method provides a general promising framework for facial feature tracking. It is a robust tracker for facial expression sequences in which there are occlusions and arbitrary head movements. The results in the vehicle environment suggest that the proposed method has the potential to be useful for tasks such as driver behavior analysis or driver fatigue detection.

Benzer Tezler

  1. Stereo based 3D head tracking using the scale invariant feature transform

    Ölçekten bağımsız öznitelik dönüşümü kullanarak stereo kamera ile üç boyutlu kafa takibi

    BATU AKAN

    Yüksek Lisans

    İngilizce

    İngilizce

    2008

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolSabancı Üniversitesi

    Mühendislik Bilimleri Bölümü

    PROF. DR. AYTÜL ERÇİL

    YRD. DOÇ. DR. MÜJDAT ÇETİN

  2. Facial expression recognition based on facial anatomy

    Yüz anatomisine dayalı ifade tanıma

    KRİSTİN SURPUHİ BENLİ

    Doktora

    İngilizce

    İngilizce

    2013

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolIşık Üniversitesi

    Bilgisayar Mühendisliği Ana Bilim Dalı

    YRD. DOÇ. DR. MUSTAFA TANER ESKİL

  3. Şizofreni spektrumunda affektif komorbiditenin işlevsellik ve nörokgnisyona etkisi

    The effect of affective comorbidity on functioning and neurocognition in the schizophrenia spectrum

    ZİNNETİ YAĞMUR DOKUYAN

    Tıpta Uzmanlık

    Türkçe

    Türkçe

    2023

    PsikiyatriDokuz Eylül Üniversitesi

    Ruh Sağlığı ve Hastalıkları Ana Bilim Dalı

    PROF. DR. İBRAHİM EMRE BORA

  4. Design of an image acquisition setup for mimic tracking

    Yüz hareketlerini takip etmek için bir görüntü toplama düzeneği tasarımı

    ÖZGÜLER MİNE AKÖNER

    Yüksek Lisans

    İngilizce

    İngilizce

    2007

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolOrta Doğu Teknik Üniversitesi

    Makine Mühendisliği Ana Bilim Dalı

    YRD. DOÇ. DR. A. BUĞRA KOKU

  5. Üç boyutlu yüz tanımada lokal özellik temelli yöntemlerin kullanımı ve karşılaştırılması

    Comparison and usage of local feature based methods for 3d face recognition

    MUHAMMED ENES ATİK

    Yüksek Lisans

    Türkçe

    Türkçe

    2018

    Jeodezi ve Fotogrametriİstanbul Teknik Üniversitesi

    Geomatik Mühendisliği Ana Bilim Dalı

    DOÇ. DR. ZAİDE DURAN