Content-based video copy detection using multimodal analysis
Çok kipli analiz ile içerik tabanlı video kopya sezimi
- Tez No: 246718
- Danışmanlar: DOÇ. DR. UĞUR GÜDÜKBAY, PROF. DR. ÖZGÜR ULUSOY
- Tez Türü: Yüksek Lisans
- Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Computer Engineering and Computer Science and Control
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2009
- Dil: İngilizce
- Üniversite: İhsan Doğramacı Bilkent Üniversitesi
- Enstitü: Mühendislik ve Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Bilgisayar Mühendisliği Bölümü
- Bilim Dalı: Bilgisayar Mühendisliği Ana Bilim Dalı
- Sayfa Sayısı: 90
Özet
Yüksek ve artan oranlarda videonun çeşitli ağlarda serbestçe yayımlanması, telif haklarının korunması için otomatik video kopya sezimi ihtiyacını beraberinde getirmiştir. Çoklu ortam teknolojilerindeki gelişmeler, filigram yaklaşımına alternatif olarak içerik tabanlı video kopya sezimi yöntemini ortaya sürmüştür.Bu tez çalışmasında video kliplerini eşleştirmeyi sağlayan çok kipli bir sistem önerilmektedir. İlk olarak bir yüz detektörü kullanılarak yüz içeren video bölümleri belirlenir. Yüz ve bedenin yüze yakın belirli bir kısmını eşleştirmek, aynı kişiyi (örneğin, sunucu veya politik lider) farklı olaylarda veya sahnelerde ayırma esnekliği sağlar. İkinci olarak, harekete bağlı benzerliği olan video bölümlerini eşleştirmek için uzaysal ve zamansal dizileri eşleyen bir teknik kullanılır. Son olarak, yüz içermeyen video bölümleri düşük seviyeli görsel öznitelikler ile eşleştirilmektedir. Bunlara ek olarak, videoları bölütlemek için kullanılan renk diklemlerinde bulanık mantıktan yararlanılmaktadır. Gürültüleri, silinen film karelerini, iç içe geçmiş çerçeveleri tespit etmek ve durağan bölgeler için maske oluşturmak için de yöntemler önerilmiştir.Tanıtılan sistem, TRECVID 2008 yarışmasında İçerik Tabanlı Kopya Sezimi görevi için hazırlanan sorgu ve referans videoları üzerinde test edilmiş, sonuçlarımız bu göreve katılan en iyi 8 teknikle karşılaştırılmıştır. Bu deneylerde sistemimizin diğer birçok modern teknikten daha verimli ve etkili çalıştığı gösterilmiştir.
Özet (Çeviri)
Huge and increasing amount of videos broadcast through networks has raised the need of automatic video copy detection for copyright protection. Recent developments in multimedia technology introduced content-based copy detection (CBCD) as a new research field alternative to the watermarking approach for identification of video sequences.This thesis presents a multimodal framework for matching video sequences using a three-step approach: First, a high-level face detector identifies facial frames/shots in a video clip. Matching faces with extended body regions gives the flexibility to discriminate the same person (e.g., an anchor man or a political leader) in different events or scenes. In the second step, a spatiotemporal sequence matching technique is employed to match video clips/segments that are similar in terms of activity. Finally the non-facial shots are matched using low-level visual features. In addition, we utilize fuzzy logic approach for extracting color histogram to detect shot boundaries of heavily manipulated video clips. Methods for detecting noise, frame-droppings, picture-in-picture transformation windows, and extracting mask for still regions are also proposed and evaluated.The proposed method was tested on the query and reference dataset of CBCD task of TRECVID 2008. Our results were compared with the results of top-8 most successful techniques submitted to this task. Experimental results show that the proposed method performs better than most of the state-of-the-art techniques, in terms of both effectiveness and efficiency.
Benzer Tezler
- Content based video copy detection using motion vectors
Hareket vektörleri ile içerik tabanlı kopya video sezimi
KASIM TAŞDEMİR
Yüksek Lisans
İngilizce
2009
Elektrik ve Elektronik Mühendisliğiİhsan Doğramacı Bilkent ÜniversitesiElektrik ve Elektronik Mühendisliği Bölümü
PROF. DR. A. ENİS ÇETİN
- Robust content-based copy detection and information theoretic indexing strategies
İçerik tabanlı video kopya sezimi ve bilgi teorisine dayalı dizinleme stratejileri
AHMET SARACOĞLU
Doktora
İngilizce
2015
Elektrik ve Elektronik MühendisliğiOrta Doğu Teknik ÜniversitesiElektrik-Elektronik Mühendisliği Ana Bilim Dalı
PROF. DR. ABDULLAH AYDIN ALATAN
- Negatif olmayan matris ayrıştırma yöntemi ile video parmak izi çıkarımı
Video fingerprinting via non-negative matrix factorizations
ÖZGÜN ÇIRAKMAN
Yüksek Lisans
Türkçe
2010
Elektrik ve Elektronik Mühendisliğiİstanbul Teknik ÜniversitesiElektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
PROF. DR. BİLGE GÜNSEL
- Content-based video copy detection
İçerik tabanlı video kopya bulma
SAVAŞ ÖZKAN
Yüksek Lisans
İngilizce
2014
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolOrta Doğu Teknik ÜniversitesiElektrik-Elektronik Mühendisliği Ana Bilim Dalı
PROF. DR. GÖZDE AKAR
- İçerik tabanlı video kopya tespiti
Content based video copy detection
SEDA TANKIZ
Yüksek Lisans
İngilizce
2012
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolHacettepe ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
PROF. HAYRİ SEVER
YRD. DOÇ. DR. NAZLI İKİZLER CİNBİŞ