Videolarda devinim ve ivme büyütme yöntemleri
Motion and acceleration magnification methods in videos
- Tez No: 642765
- Danışmanlar: PROF. DR. TAYFUN AKGÜL
- Tez Türü: Yüksek Lisans
- Konular: Mühendislik Bilimleri, Engineering Sciences
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2020
- Dil: Türkçe
- Üniversite: İstanbul Teknik Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Elektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Biyomedikal Mühendisliği Bilim Dalı
- Sayfa Sayısı: 87
Özet
İnsan gözü, çevresinde meydana gelen çok küçük devinimleri anlamada ve yorumlamada yetersiz kalmaktadır. Video devinim büyütme ise algılanması zor veya imkansız hareketlerin uygun bir yöntemle büyütülüp videolarda gözle görülür hale getirilmesi işlemidir. Bir büyüteç görevi gören bu yöntemler; inşaat mühendisliğinde bina salınımları ve köprü titreşimlerini saptamada, suç biliminde yüz ifadelerini tanıma ve insan canlılık testinde; yapay zeka alanında kullanılan dokunma sensörlerinin hassasiyetini arttırmada ve sağlık hizmetleri alanında nabız tespiti, sesötesi (ultrasound) görüntülerinde küçük sapmaların algılanıp büyütülmesi veya insan vücut sıcaklığı belirleme gibi envai çeşit çalışmalarda kullanılmaktadır. Ayrıca saniyede 1 000 ile 20 000 arasında görüntü karesi alan yüksek hızlı kameraların gelişmesi ile birlikte herhangi bir nesneden ses geriçatımı da yapılabilir hale gelmiştir. Video çerçeveleri kullanılarak ses basıncının bir nesnede meydana getirdiği titreşimlerin büyütülmesi ile gerçekleştirilen bu çalışmalar görsel mikrofon olarak da adlandırılmaktadır. Videolarda algılanamayan sinyalleri ortaya çıkarmak ve büyütmek için çeşitli yöntemler geliştirilmiştir. Bu çalışmada ise temel video devinim büyütme yöntemleri ayrıntılarıyla açıklanmış ve karşılaştırmaları yapılmıştır. Devinim büyütmenin yanı sıra ivme büyütme yöntemleri de ayrıntılarıyla özetlenmiş ve başarımları kontrollü deneyler yardımıyla sınanmıştır. En bilinen ve sıkça kullanılan Euler temelli yaklaşım (Doğrusal devinim büyütme), video çerçevelerini hem uzamsal hem de zamansal alanda işleme tabi tutarak küçük devinim ve titreşimlerin büyütülüp videoya geri gömülmesi temeline dayanmaktadır. Bu yaklaşımda uzamsal alanda görüntü ayrıştırma, zamansal alanda ise süzgeçleme işlemi yapılmaktadır. Tez çalışmasında ise zamansal alanda süzgeçleme için alternatif sinyal işleme yöntemi Bölünmüş İzge İşleme kullanılmıştır. Radar ve sesötesi gibi sinyal işleme alanlarında uygulanan ve sinyal-gürültü oranını arttıran Bölünmüş İzge İşleme yöntemi, doğrusal devinim büyütme yönteminin zamansal işleme katmanında başarıyla kullanılmıştır. Önerilen yöntem ve doğrusal devinim büyütme yöntemi, büyütme işlemi için kayda alınan nabız videosu ve kontrollü deney üzerinde uygulanmıştır. Değerlendirme yöntemlerinden yapısal benzerlik indeksi ile en büyük işaret gürültü oranı üzerinden sonuçlar karşılaştırılmış ve iyileştirmeler gösterilmiştir.
Özet (Çeviri)
Human eye is inadequate in understanding and interpreting the subtle changes occurring around it. Video motion magnification is the process of making these changes, which are difficult or impossible to perceive, to be enlarged by a suitable method and made visible in videos. The techniques acting as a magnifying glasses have been using in many areas such as detecting oscillations of buildings and vibrations of bridges in civil engineering; testing human viability and recognition of facial expressions in crime science; increasing sensibility of touch sensors in the field of artificial intelligence; magnifiying small fluctuations in ultrasound images, the detection of respiratory rate from video frames, enlarging little variances on human wrist stemming from pumping blood to body. In addition, with the development of high speed cameras that take between 1 000 and 20 000 frames per second, sound reconstruction from any object could be done by using video frames. These studies which are performed by magnifying vibrations caused by the sound pressure on an object by using video frames are also named as a visual microphone. Various methods have been developed to reveal and magnify undetectable signals in videos. In this study, basic video motion magnification methods were explained and compared at length. In addition to motion magnification, acceleration magnification methods are summarized in details and their performances have been examined with the help of controlled experiments. The most known and widely used Eulerian approximation (Linear motion magnification) is based on the ground of magnification of small motion and vibrations by means of embedding them back into the video by processing video frames both in spatial and temporal space. In this approach, two separate operations are carried out as spatial decomposing and temporal processing, respectively. In this thesis, an alternative signal processing method called Split spectrum processing is used for filtering in temporal field. Split spectrum processing method, which is used to increase the signal-to-noise ratio of returning signals in radar and ultrasound, is successfully employed on the temporal processing layer of linear motion magnification technique. The proposed method and linear motion magnification method have been applied on the recorded pulse video and a controlled experiment, for amplification. The results were compared on the structural similarity index and peak signal to noise ratio and improvements were shown.
Benzer Tezler
- Isparta Uygulamalı Bilimler Üniversitesi tanıtım videosunda hareketli grafik uygulaması
Motion graphic application in the promotional video of Isparta University of Applied Sciences
ÖZER DURAN
Yüksek Lisans
Türkçe
2022
Güzel SanatlarKütahya Dumlupınar ÜniversitesiSanat ve Tasarım Ana Bilim Dalı
PROF. DR. UĞUR ATAN
- Stereo based 3D head tracking using the scale invariant feature transform
Ölçekten bağımsız öznitelik dönüşümü kullanarak stereo kamera ile üç boyutlu kafa takibi
BATU AKAN
Yüksek Lisans
İngilizce
2008
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolSabancı ÜniversitesiMühendislik Bilimleri Bölümü
PROF. DR. AYTÜL ERÇİL
YRD. DOÇ. DR. MÜJDAT ÇETİN
- Optimization of integer-pel motion estimation for H.264 video encoding on TMS 320C6416T digital signal processor
H.264 kodlayıcısı için tam sayı pixel değerli devinim kestiriminin TMS 320C6416T işlemcisi üzerinde optimizasyonu
MUHAMMET YAZICI
Yüksek Lisans
İngilizce
2007
Elektrik ve Elektronik MühendisliğiIşık ÜniversitesiElektronik Mühendisliği Ana Bilim Dalı
Y.DOÇ.DR. HASAN FEHMİ ATEŞ
- Robust video transmission using data hiding
Bilgi saklama ile dayanıklı video iletimi
AYHAN YILMAZ
Yüksek Lisans
İngilizce
2003
Elektrik ve Elektronik MühendisliğiOrta Doğu Teknik ÜniversitesiElektrik-Elektronik Mühendisliği Ana Bilim Dalı
DOÇ. DR. AYDIN ALATAN
- Afet yönetiminde insani diplomasi: Türkiye örneği
Humanitarian diplomacy in disaster management: The case of Turkey
TARIK EREN YILMAZ
Yüksek Lisans
Türkçe
2020
Kamu YönetimiAnkara Hacı Bayram Veli ÜniversitesiAmme İdaresi Ana Bilim Dalı
DR. ÖĞR. ÜYESİ İHSAN KELEŞ