Illumination-guided inverse rendering benchmark: Learning real objects with few cameras
Başlık çevirisi mevcut değil.
- Tez No: 835040
- Danışmanlar: DR. ÖĞR. ÜYESİ MUSTAFA FURKAN KIRAÇ
- Tez Türü: Yüksek Lisans
- Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Computer Engineering and Computer Science and Control
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2023
- Dil: İngilizce
- Üniversite: Özyeğin Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Yapay Zeka Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: 76
Özet
Son dönemde 3B bilgisayar görüsü ve grafik alanında hızlı bir genişleme yaşanmış olup, gerçekçi sanal ortamların ve gerçek dünya nesnelerinin dijital temsillerinin geliştirilmesini mümkün kılmıştır. Bu gelişmenin temelinde, fiziksel nesnelerin şekil, renk ve yüzey özelliklerinin sanal ortama aktarılmasını mümkün kılan 3B rekonstrüksiyon teknikleri yer almaktadır. Mevcut yaklaşımların çoğunluğu, genellikle etkili olsalar da, büyük miktarda görüntüye ihtiyaç duymaları ve ürettikleri 3D rekonstrüksiyonun standart formatlara çevrilmesine ilişkin zorluklarla karşı karşıyadır. Son dönemde dikkat çeken alternatif bir strateji, fiziksel temelli türevlenebilir renderleme (FTTR) ve ters renderleme gibi yöntemlerin kullanılmasıdır. Bu yaklaşımlar, daha az bakış açısı gerektirir ve standart formatlarda sonuçlar verir. Bununla birlikte, 3B rekonstrüksiyondaki mevcut yöntemlerin performansını etkili bir şekilde değerlendirebilmek için standart ölçüt sahneleri kullanmak son derece önemlidir. Mevcut araştırmalarda standart nesne ve sahneler olsa da, FTTR ve ters renderleme tabanlı yöntemlerle yüksek kaliteli 3B rekonstrüksiyonlar için gereken kamera, aydınlatma ve sahne parametrelerini aynı anda yakalayan gerçek dünya ölçüt verilerinin belirgin bir eksikliği bulunmaktadır. Bu çalışmada, gerçek dünya sahnelerinin ışık parametrelerini de içeren sanal ortamlar olarak yakalanması için bir yöntem sunmaktayız. Ayrıca, temel geometrik yapıların, yani konveks, konkav, düz ve bileşik yüzeylerin yer aldığı bir dizi gerçek dünya sahnesi ve bunların karşılık gelen sanal versiyonlarını içeren bir ölçüt seti sunmaktayız. Ayrıca, FTTR kullanarak son teknoloji 3B rekonstrüksiyon tekniklerinin gerçek dünya sahnelerindeki sonuçlarını, mevcut yöntemlerle birlikte önerdiğimiz metodolojileri kullanarak sergilemekteyiz.
Özet (Çeviri)
The field of 3D computer vision and graphics has seen a rapid expansion of late, making the development of realistic virtual environments and digital representations of real-world objects possible. Fundamental to this development are 3D reconstruction techniques that enable the transition of physical objects' form, color, and surface particulars to the virtual domain. Current approaches mainly rely on neural scene representations, which, despite being effective, face challenges such as the need for a large quantity of captured images and the complexity associated with converting these representations into explicit geometric forms. An alternative strategy that has gained traction is the deployment of methods such as physically-based differentiable rendering (PBDR) and inverse rendering. These approaches require fewer viewpoints, yield explicit format results, and ensure a smoother transition to other representation methods. However, in order to effectively assess the performance of the available methods in 3D reconstruction, it is imperative to utilize standard benchmark scenes for comparison. Although there are standard objects and scenes available in existing research, there is a noticeable deficiency of real-world benchmark data that simultaneously captures camera, lighting, and scene parameters — all of which are essential for high-quality 3D reconstructions using methods based on PBDR and inverse rendering. In this study, we present a method for capturing real-world scenes as virtual environments, incorporating lighting parameters along with camera and scene parameters to enhance the veracity of virtual representations. In addition, we provide a set of ten real-world scenes, each with its corresponding virtual counterparts, purposely designed as benchmarks. These benchmarks cover a basic assortment of geometric structures, such as convex, concave, flat, and composite surfaces. Furthermore, we showcase the 3D reconstruction results of cutting-edge 3D reconstruction techniques using PBDR in real-world scenes, using both established methodologies and our proposed one.
Benzer Tezler
- Depth guided 3D descriptor for object classification
Obje sınıflandırması için derinlik güdümlü 3D tanımlayıcı
ERKUT ARICAN
Doktora
İngilizce
2022
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolBahçeşehir ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ TARKAN AYDIN
- Derin obje sezicilerle tümleştirilmiş bayesçi filtreleme ile videoda obje izleme
Integration of bayesian filtering and deep object detection for video object tracking
FİLİZ GÜRKAN GÖLCÜK
Doktora
Türkçe
2021
Elektrik ve Elektronik Mühendisliğiİstanbul Teknik ÜniversitesiElektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
PROF. DR. BİLGE GÜNSEL KALYONCU
- Glycosylated conjugated oligomer and chlorophyll based nanoparticles for photodynamic therapy
Fotodinamik terapi için glikosile konjuge oligomer ve klorofil bazlı nanoparçacıklar
EZGİ ODUNCU
Yüksek Lisans
İngilizce
2023
Biyomühendislikİhsan Doğramacı Bilkent ÜniversitesiMalzeme Bilimi ve Nanoteknoloji Ana Bilim Dalı
PROF. DÖNÜŞ TUNCEL
- Mobil cihazlar ile derin öğrenme mimarisi kullanarak gerçek zamanlı video nesne izleme
Deep learning architectures for real-time video object tracking by mobile devices
ULAŞ TOSUN
Yüksek Lisans
Türkçe
2019
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiElektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
PROF. DR. BİLGE GÜNSEL KALYONCU