Learning-based methods for multi-modal and multi-spectral data
Çoklu-model ve çoklu-spektral verilerde öğrenme tabanlı yöntemler
- Tez No: 650197
- Danışmanlar: PROF. DR. GÖZDE AKAR
- Tez Türü: Doktora
- Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2020
- Dil: İngilizce
- Üniversite: Orta Doğu Teknik Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Elektrik-Elektronik Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Veriye dayalı çözümler günlük hayatımızın vazgeçilmez bir parçası haline geldi. Bu çözümler genellikle büyük miktarda denetlenen veri tüketmektedir. Ek olarak, insan bilgi düzeyine doğru bir şekilde ulaşabilmek için geniş bir öğrenilebilir parametreler bütünü eğitilmelidir. Bununla birlikte, bu bağımlılıklar, özel öğrenme yapıları aracılığıyla alana özgü özelliklerin tam olarak kullanılmasıyla aşılabilir. Bu tez, özellikle farklı sensör tiplerini ve uygulama alanlarını kullanarak denetimsiz ve çok modlu verileri ele almaktadır. İlk yönümüz, veriye özgü özellikler uygun şekilde modellenebilirse, sağlam temsillerin denetim olmaksızın verilerden hesaplanabileceğini kanıtlamaktır. Bu amaçla, zengin içerik bilgisi sağlayan multispektral veriler kullanılır. Spektral malzeme imzaları ve bunların karışım oranları verilerden kör olarak elde edilirmektedir. İkinci yön, çok modlu verilerin karmaşık görsel görevleri çözmek için teorik ve pratik faydalar sunduğunu göstermektir. Özellikle, biyomedikal verileri çeşitli görsel modalitelerden bölümlere ayırabilen yeni bir NN modeli öneriyoruz. Üstünlük, hem eğitim hem de test aşamalarında veri modaliteleri hakkında hiçbir bilginin sağlanmamasıdır. Bu özellik, kaçınılmaz olarak bu modelin uygulanabilirliğini artırmaktadır. Ayrıca çözüm tek bir modelde birleştirildiği için öğrenilebilir parametrelerin sayısı azalmıştır. Bu amaçla, NN yapısında yeni modifikasyonlar sunuyoruz ve farklı modaliteler için alanları kümelemeyi ve uyarlamayı amaçlayan GAN kullanılır. Son olarak, daha doğru çözümler için büyük miktarda veriye ihtiyaç duyulan multispektral verilerin regresyon optimizasyonu için multimodal öğrenmeyi uygulanmaktadır. Regresyon ve sınıflandırma görevlerini aynı anda çözerek bu sınırlama ortadan kaldırılır. Benzer şekilde, deneysel sonuçlar, her iki yöntemin de bütün önceki yöntemlere kıyasla performansı önemli ölçüde artırdığını göstermektedir.
Özet (Çeviri)
Data-driven solutions have become essential parts of our daily lives. These solutions generally consume a large amount of supervised data. Additionally, a large-body of learnable parameters must be trained to be able to reach the level of human knowledge accurately. However, these dependencies can be overcome by making full use of domain-specific features via specialized learning structures. This thesis addresses unsupervised and multimodal data by utilizing different sensor types and application domains in particular. Our first direction is to prove that robust representations can be computed from data without supervision if data-specific features can be appropriately modeled. For this purpose, multispectral data is used, which provides rich content information. Spectral material signatures and their fractional abundances are obtained from the data blindly. The second direction is to show that multimodal data offers theoretical and practical benefits to solve complicated visual tasks. In particular, we propose a novel NN model that is able to segment biomedical data from diverse visual modalities. The superiority is that no information about data modalities is provided at both train and test phases. This feature inevitably improves the applicability of this model. Furthermore, the number of learnable parameters is decreased since the solution is combined within a single model. For this purpose, we present novel modifications in the NN structure, and GAN is used that aims to cluster and adapt domains for different modalities. Lastly, we apply multimodal learning for the regression optimization of multispectral data, where a large amount of data is mainly required for more accurate solutions. This limitation is eliminated by solving the regression and the classification tasks concurrently. Similarly, experimental results show that both methods significantly improve the performance compared to all baselines.
Benzer Tezler
- Görüntü sınıflandırması için yapay sinir ağlarının analiz ve optimizasyonu
Analysis and optimization of artificial neural networks for image classification
OZAN ARSLAN
Doktora
Türkçe
2001
Jeodezi ve Fotogrametriİstanbul Teknik ÜniversitesiPROF. DR. OĞUZ MÜFTÜOĞLU
PROF. DR. CANKUT ÖRMECİ
- Rastgele orman sınıflandırıcısına doku özellikleri entegre edilerek benzer spektral özellikteki tarımsal ürünlerin sınıflandırılması
Integrating multiple texture methods with random forest classifiication algorithm to classify spectrally smillar agricultural crops
ÖZLEM AKAR
Doktora
Türkçe
2013
Jeodezi ve FotogrametriKaradeniz Teknik ÜniversitesiHarita Mühendisliği Ana Bilim Dalı
DOÇ. DR. OĞUZ GÜNGÖR
- Geodesic based hybrid similarity criteria for approximate spectral geodesic based hybrid similarity criteria for approximate spectral clustering of large medical data sets
Büyük medikal veri setlerinin yaklaşık spektral öbeklenmesi için jeodezik tabanlı benzerlik ölçütleri
BERNA YALÇIN
Yüksek Lisans
İngilizce
2015
Elektrik ve Elektronik Mühendisliğiİstanbul Teknik ÜniversitesiElektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
YRD. DOÇ. DR. İSA YILDIRIM
- Yüksek çözünürlüklü uydu görüntüleri kullanarak benzer spektral özelliklere sahip doğal nesnelerin ayırt edilmesine yönelik bir metodoloji geliştirme
Developing a methodology for discriminating natural objects having spectrally similar features using very high resolution satellite imagery
İSMAİL ÇÖLKESEN
Doktora
Türkçe
2015
Jeodezi ve Fotogrametriİstanbul Teknik ÜniversitesiGeomatik Mühendisliği Ana Bilim Dalı
PROF. DR. TAHSİN YOMRALIOĞLU
- Super resolution methods for remote sensing images
Uzaktan algılama görüntüleri için süper çözünürlük metotları
ÇAĞLAYAN TUNA
Yüksek Lisans
İngilizce
2017
Elektrik ve Elektronik Mühendisliğiİstanbul Teknik Üniversitesiİletişim Sistemleri Ana Bilim Dalı
PROF. DR. ELİF SERTEL
- Development of a unified analysis framework for multicolor flow cytometry data based on quasi-supervised learning
Çok renkli akış sitometrisi verileri için yarıgüdümlü öğrenme temelli tümleşik bir analiz platformu geliştirilmesi
BAŞAK ESİN KÖKTÜRK GÜZEL
Doktora
İngilizce
2017
Elektrik ve Elektronik Mühendisliğiİzmir Yüksek Teknoloji EnstitüsüElektronik ve Haberleşme Mühendisliği Ana Bilim Dalı
PROF. DR. BİLGE KARAÇALI