Sanal gerçeklikte ilinti operatörleri geliştirilerek yüz tanıma analizi
Face recognition analysis by developing feature operators in virtual reality
- Tez No: 329689
- Danışmanlar: DOÇ. DR. BÜLENT BAYRAM
- Tez Türü: Doktora
- Konular: Bilim ve Teknoloji, Jeodezi ve Fotogrametri, Science and Technology, Geodesy and Photogrammetry
- Anahtar Kelimeler: Yüz ilinti noktaları, ilinti operatörleri, yüz yakalama, yüz tanıma, zenginleştirilmiş gerçeklik, Facial feature points, feature operators, face detection, face recognition, augmented reality
- Yıl: 2013
- Dil: Türkçe
- Üniversite: Yıldız Teknik Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Harita Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Uzaktan Algılama ve Coğrafi Bilgi Sistemleri Bilim Dalı
- Sayfa Sayısı: 193
Özet
İnsan yüzü görüntüleri üzerinde duygu analizi, yaş analizi gibi işlemlerin yapılabilmesi, bir ya da daha fazla sayıda görüntüden otomatik olarak 3B yüz modelinin eldeedilebilmesi, insan yüzü üzerine geliştirilmiş artırılmış gerçeklik uygulamaları, yüz ilinti noktalarının otomatik olarak bulunmasını gerektirmektedir. Sunulan çalışmada, standartlaştırılmış koşullar altında, farklı açı ve mesafelerden alınmış insan yüzü görüntülerinden yüzü yakalayan, ilinti bölgelerini ve noktalarını bularak analiz eden ve tanımlayan hibrid bir algoritma ve yazılım geliştirilmiştir. Test amaçlı olarak kullanılan veriler, Inspeck Mega Capturor II 3B yapısal-ışıklı 3B sayısallaştırıcı cihaz ile 1600x1200 çözünürlüğünde sabit 1000W?lık halojen lamba altında alınan yüz görüntülerinden oluşan bir yüz veritabanından elde edilmiştir. Yüzün belirli bölümlerinin gözlük gibi başka nesneler tarafından kapatılmış olması, ten rengi analizi sırasında ön işlem gerektirecek sakal, bıyık gibi unsurlar, farklı duygu durumları, jest ve mimiklere göre alınmış görüntüler çalışma kapsamı dışında bırakılmıştır. Sunulan çalışma; her adımda arama alanları daraltılarak yüz yakalama, yüz ilini bölgeleri belirleme ve yüz ilinti noktaları belirleme olmak üzere üç ardışık aşamadan oluşmaktadır. 24 kadın 11 erkek toplam 35 kişiye ait, ortalama 1100*1400 piksel boyutlarında, 360 farklı test görüntüsü üzerinde yapılan testler sonucunda yüz yakalamada %100, yüz ilinti noktası belirlemede ortalama 2,04086 piksel doğruluk, üç boyutlu nokta üretiminde 1,83971 xviidoğruluk elde edilmiştir. Akıllı ilinti bölgeleri ve ilinti noktalarının kullanımıyla eşlenik görüntülerin kolayca eşleştirilmesi sağlanmıştır.Stereo görüntülerin eşleştirilmesinin ardından ışın demetleri ile dengeleme işlemi gerçekleştirilmiştir. Dengelenmiş yeni noktalar üzerinde epipolar geometri kuralları uygulanarak, 3B yeniden oluşturma algoritmaları çalıştırılarak 3B yüz nokta bulutu elde edilmiştir. Elde edilen veriler kullanılarak yüz görüntüleri ile bir artırılmış gerçeklik uygulaması geliştirilmiş ve yüz veritabanında yer alan yüz görüntülerinin uygulama tarafından tanınması, ilinti bölgesi ve noktalarının oluşturulması, otomatik işaretçiler oluşturularak görüntüler üzerinde iki ve 3B sanal nesneler oluşturularak gerçek görüntülerin sanal nesneler ile zenginleştirilmesi sağlanmıştır.
Özet (Çeviri)
The face feature points are required to be found automatically to detect human emotion from face images, to detect age by analyzing human face from face image, to reconstruct 3D face model by using multi - human face images, develop augmented reality applications on human face. In the present thesis, an algorithm and software have been developed to detect human face and find interest regions and interes points in face from human face images taken from different angles and distances under standardized conditions automatically. The data used for test purposes is obtained from a face database which is consist of face images taken under a 1000W halogen lamp by a 3D structural-illuminated 3D digitizer device with a resolution of 1600x1200. Some cases are excluded from this study, such as some parts of the face is to be covered by other objects, beard, mustache, facial expressions and gestures. The application developed in presented thesis consists of three sequential steps. Search region is made more narrowed after every step. Algorithms detect faces, search interest regions and facial feature points. As a result of tests carried out on 360 different face images with 1100 * 1400 pixel sizes, which belongs to 35 different people, 34 of them are women and 11 of them are men, it is achieved 100% face detection accuracy; 2,04086 pixel for facial feature points detection and 1,83971 accuracy for 3D point cloud generation. Conjugate images are being matched easily by means of smart feature regions and matching feature points.After stereo matching of images, bundle adjustment algorithm is run. Applying the epipolar geometry rules on the new balanced points, three-dimensional reconstruction algorithms have been run and three-dimensional point cloud face is generated.The data obtained is used in an augmented reality application. Augmented reality application recognizes faces which are defined in application database, creates a marker by using facial feature points automatically and add 2D / 3D virtual objects on real world.
Benzer Tezler
- Şiddetin estetize edilmesinde Amerikan sineması'nın rolü: 21.yüzyılda sinemayla dünyaya anestetik bir bütünsellik kazandırmak
The role of American cinema in the aesthetization of violance: Providing anesthetic integrality to world by cinema in the 21st century
AYTUNA TOSUNOĞLU ÇALIK
Doktora
Türkçe
2015
Sahne ve Görüntü SanatlarıMaltepe Üniversitesiİletişim Bilimleri Ana Bilim Dalı
PROF. DR. SİMTEN GÜNDEŞ
- Sanal gerçeklikte etkileşim
Interaction in virtual reality
BARBAROS BOSTAN
Doktora
Türkçe
2007
Bilim ve TeknolojiMarmara Üniversitesiİletişim Ana Bilim Dalı
PROF.DR. AHMET LÜTFİ ORKAN
- Sanal gerçeklikte fiziksel aktivitenin kullanıcı deneyimi üzerine etkileri
The effects of physical activity in virtual reality on user experience
SEZER MADEN
Yüksek Lisans
Türkçe
2023
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolBahçeşehir Üniversitesiİletişim Tasarımı Ana Bilim Dalı
DOÇ. DR. MEHMET İLKER BERKMAN
- Object manipulation through intuitive hand gestures in virtual reality: The relation between objects' spatial properties and gestures
Sanal gerçeklikte sezgisel el jestleriyle nesne manipülasyonu: Nesnelerin uzamsal özellikleriyle jestlerin ilişkisi
ERKUT SIRDAŞ
Yüksek Lisans
İngilizce
2022
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiOyun ve Etkileşim Teknolojileri Ana Bilim Dalı
PROF. DR. HATİCE KÖSE
DOÇ. DR. SEMA ALAÇAM
- Improving fine motor control in virtual reality: The impact of hand visibility and wrist-worn haptic feedback
Sanal gerçeklikte ince motor kontrolünün geliştirilmesi: El görünürlüğünün ve bilekte giyilen dokunsal geri bildirimin etkisi
AMAL HATIRA
Yüksek Lisans
İngilizce
2024
Elektrik ve Elektronik MühendisliğiKadir Has ÜniversitesiElektronik Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ MİNE SARAC STROPPA