Geri Dön

Multimodal analysis of the JESTKOD database for affective and dyadic interactions

İkili iletişimler için JESTKOD veri tabanının çok kipli analizi

  1. Tez No: 442457
  2. Yazar: SİNAN KEÇECİ
  3. Danışmanlar: DOÇ. DR. ENGİN ERZİN
  4. Tez Türü: Yüksek Lisans
  5. Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2016
  8. Dil: İngilizce
  9. Üniversite: Koç Üniversitesi
  10. Enstitü: Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Elektrik-Elektronik Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Belirtilmemiş.
  13. Sayfa Sayısı: 41

Özet

Jestler, konuşma ile beraber insan-insan arası iletişimin doğallığı ve duygusal algısı açısından önemli bir unsurdur. Vücut jestleri incelemesi adına yapılan bir çalışmanın insanmakine iletişiminin doğallığının arttırılmasına katkıda bulunacağını düşünüyoruz. Bu çalışmada jest, konuşma ve bunlarla beraber duygu değişimlerini incelediği JESTKOD veri tabanı için yapılmış olan duygu etiketleme çalışmaları ve bu çalışmalar sonucunda elde ettiğimiz verilerin değerlendirilme aşamalarını anlatılmaktadır. Bu çalışmada sunduğumuz değerlendirme sonuçları JESTKOD veri tabanının kullanılabileceği analiz ve modelleme çalışmaları açısından önem taşımaktadır. Aynı zamanda bu çalışmada JESTKOD veri tabanının Kinect gibi diğer sensör teknolojilerine de uyum sağlaması için yapılmış olan eşleştirme çalışmalarına yer verilmiştir.

Özet (Çeviri)

Gesticulation, together with the speech, is an important part of natural and affective human-human interaction. In human-computer interaction systems, natural, affective and believable use of gestures would be a valuable key component in adopting and emphasizing human-centered aspects. However, natural and affective multimodal data, for studying computational models of gesture and speech, is limited. In this study, the JESTKOD database is introduced, which consists of speech and full-body motion capture data recordings in dyadic interaction setting under agreement and disagreement scenarios. Each participant of the recordings are rated in dimensional affect space. This study includes the evaluations that are performed on the annotations of the database. These evaluations suggest important findings of usability of the JESTKOD database for investigating gesture and speech. Accordingly it is a valuable asset for designing more natural and affective humancomputer interaction systems. Second part of this study also investigates mapping of human body motion observation across different sensor technologies to adapt the JESTKOD database knowledge to other sensors, such as the Kinect.

Benzer Tezler

  1. Ousmane Sembene sinemasında Postkolonyal söylemin çok katmanlı analizi

    Multimodal analysis of Postcolonial discourse in Ousmane Sembene's cinema

    YUNUS NAMAZ

    Doktora

    Türkçe

    Türkçe

    2018

    Sahne ve Görüntü SanatlarıErciyes Üniversitesi

    İletişim Bilimleri Ana Bilim Dalı

    PROF. DR. YUSUF GÜRHAN TOPÇU

  2. Multimodal analysis of Turkish efl textbooks for elementary, intermediate and high school grades

    İlkokul, ortaokul ve lise düzeyindeki İngilizce ders kitaplarının çoklu ortam analizi

    DERYA COŞKUN

    Yüksek Lisans

    İngilizce

    İngilizce

    2018

    Eğitim ve ÖğretimSüleyman Demirel Üniversitesi

    Yabancı Diller Eğitimi Ana Bilim Dalı

    DOÇ. DR. NAZLI BAYKAL

  3. Multimodal analysis of translation of sociolects in the case of Bir Başkadır / Ethos

    Bir Başkadır / Ethos dizisindeki sosyal ağızların çevirisinin çok düzgülülük çerçevesinden analizi

    SEMİHA ÖZ

    Yüksek Lisans

    İngilizce

    İngilizce

    2022

    Mütercim-TercümanlıkAnkara Hacı Bayram Veli Üniversitesi

    Mütercim Tercümanlık Ana Bilim Dalı

    DR. ÖĞR. ÜYESİ FATMA BÜŞRA SÜVERDEM

  4. YouTube içeriklerinde hikâye anlatıcılığının multimodal analizi

    Multimodal analysis of storytelling in YouTube content

    AYŞE GÜL ZEREN KOSAL

    Yüksek Lisans

    Türkçe

    Türkçe

    2023

    Sahne ve Görüntü SanatlarıSakarya Üniversitesi

    İletişim Bilimleri Ana Bilim Dalı

    DOÇ. DR. KADRİYE KOBAK

  5. A multimodal analysis of pictures in an elt coursebook: Teenwise 9 th grade student's book

    Bir İngilizce ders kitabındaki resimlerin çokmodlu analizi: Teenwise 9. sınıf öğrenci kitabı

    HİLAL KARADAYI

    Yüksek Lisans

    İngilizce

    İngilizce

    2022

    Eğitim ve ÖğretimMaltepe Üniversitesi

    Yabancı Dil Olarak İngilizce Öğretimi Ana Bilim Dalı

    PROF. DR. AYSU ARYEL ERDEN