Visual semantic segmentation with diminished supervision
Azaltılmış gözetim ile görsel anlamsal bölütleme
- Tez No: 832337
- Danışmanlar: PROF. DR. ABDULLAH AYDIN ALATAN
- Tez Türü: Doktora
- Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2023
- Dil: İngilizce
- Üniversite: Orta Doğu Teknik Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Elektrik ve Elektronik Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Konvansiyonel tam öğreticili algoritmaların umut verici performansına rağmen, anlamsal bölütleme önemli ve zorlu bir görev olmaya devam etmiştir. Son çalışmalar, anlamsal bölütleme gibi yapısal çıkarsama görevleri ile başa çıkmak için görüntü tanıma problemlerinde yaygın olarak yer alan derin öğrenme tekniklerinin yeteneklerini kullanmaya çalışmıştır. Bununla birlikte, derin KSA'ları sınıflandırma gibi üst düzey görevler için ideal hale getiren değişmezlik özellikleri derin öğrenme tekniklerinin görsel tanımlama (resmetme) kapasitelerini sınırlandırmıştır. Bu sorunu çözmek için ise, bu tez kapsamında Katmanlı Sinir Ağlarının (KSA) ve olasılıksal grafiksel modelleme temelli Koşullu Rasgele Alanlarının (KRA) güçlerini birleştiren yeni bir derin sinir ağı formunu araştıracağız. Bununla birlikte, derin öğrenmeye dayanan en son teknoloji yöntemler, eğitim sırasında yeterince büyük miktarlarda etiketlenmiş verilerin kullanılmasına dayanmaktadır. Ancak, piksel seviyesinde veya süper piksel seviyesinde etiketleme işlemi zaman alıcı olduğu ve yoğun emek harcamak gerektiği için (yalnızca bir resim için 15-60 dakika), anlamsal bölütleme kapsamında yeterli sayıda etiketli veri bulunmamaktadır. Tam etiketlenmiş verilerin sınırlı kullanılabilirliğinden dolayı, anlamsal bölütleme için çok daha büyük bir ölçekte hazır bulunan zayıf etiketli verileri dikkate alarak çözümler tasarlamak büyük önem arz etmektedir. Bu tez çalışmasında, piksel bazında bir çıkarsama işlemi için, zayıf denetimin çeşitli türlerini (piksel seviyesi etiketlemenin yanı sıra görüntü seviyesi etiketleri, sınırlayıcı kutular veya kısmi etiketler vb.) bütünleştiren birleşik bir yaklaşım önermekteyiz.
Özet (Çeviri)
Despite the promising performance of conventional fully supervised algorithms, semantic segmentation has remained an important, yet challenging task. Recent approaches have attempted to exploit the capabilities of deep learning techniques for image recognition to tackle structured prediction tasks such as semantic segmentation. However, due to the very invariance properties that make deep CNNs good for high-level tasks such as classification, visual delineation capacities for deep learning techniques are limited. To solve this problem, we will investigate a new form of deep neural network that integrates the strengths of Convolutional Neural Networks (CNNs) and Conditional Random Fields (CRFs)-based probabilistic graphical modeling in the scope of this thesis. Besides, most state-of the-art methods based on deep learning rely on a sufficiently huge amount of annotated samples in training. However, there are not enough labeled samples for this task because pixel-level (or superpixel-level) annotation is time-consuming and labor-intensive (15-60 minutes for just one image). Due to the limited availability of complete annotations, it is of great interest to design solutions for semantic segmentation that take into account weakly labeled data, which is readily available at a much larger scale. In thidissertation, we propose a unified approach that incorporates various forms of weak supervision – image-level tags, bounding boxes, or partial labels as well as pixel-level labels – to produce pixel-wise labeling.
Benzer Tezler
- Crack detection with deep learning: an exemplary study of data design in architecture
Derin öğrenme ile çatlak tespiti: mimarlıkta veri tasarımı örnek çalışması
ÇAĞLAR FIRAT ÖZGENEL
Doktora
İngilizce
2018
Bilim ve TeknolojiOrta Doğu Teknik ÜniversitesiMimarlık Ana Bilim Dalı
PROF. DR. ARZU SORGUÇ
- Semantic segmentation of panoramic images and panoramic image based outdoor visual localization
Panoramik imgelerde anlamsal bölütleme ve panoramik imge tabanlı dış mekan görsel konumlandırma
SEMİH ORHAN
Doktora
İngilizce
2022
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİzmir Yüksek Teknoloji EnstitüsüBilgisayar Mühendisliği Ana Bilim Dalı
DOÇ. DR. YALIN BAŞTANLAR
- Multimodal medical visual question answering: Knowledge spaces and semantic segmentation for improved and explainable AI
Çok-kipli tıbbi görsel soru cevaplama: Bilgi uzayları ve anlamsal bölütleme ile gelişmiş ve açıklanabilir yapay zekâ
ZİYA ATA YAZICI
Yüksek Lisans
İngilizce
2025
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
PROF. DR. HAZIM KEMAL EKENEL
- The effect of language input in semantic segmentation and grading of colorectal cancer with language-vision models
Kolorektal kanser görüntülerinden segmentasyon ve kanser derecesi teşhisi yapan dil-görme modellerinde dil girdisinin etkisi
SİNA ŞEHLAVER
Yüksek Lisans
İngilizce
2024
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolOrta Doğu Teknik ÜniversitesiMühendislik Bilimleri Ana Bilim Dalı
DOÇ. DR. EMRE AKBAŞ
DOÇ. DR. AHMET ACAR
- Mobil robotlarda engelden kaçınma için RGB+HHA verisiyle derin öğrenme tabanlı anlamsal bölütleme
Deep learning based semantic segmentation with RGB+HHA data for obstacle avoidance in mobile robots
HATİCE AYDIN
Doktora
Türkçe
2024
Elektrik ve Elektronik MühendisliğiEskişehir Osmangazi ÜniversitesiElektrik-Elektronik Mühendisliği Ana Bilim Dalı
PROF. DR. MEHMET BİLGİNER GÜLMEZOĞLU
DR. ÖĞR. ÜYESİ BURAK KALECİ