Geri Dön

İnsansız su üstü aracı için pekiştirmeli öğrenme temelli yörünge planlama

Trajectory planning based on reinforcement learning for unmanned surface vehicle

  1. Tez No: 955728
  2. Yazar: GÜLCE YÜCEL BEDİR
  3. Danışmanlar: PROF. DR. İNCİ SARIÇİÇEK, PROF. DR. AHMET YAZICI
  4. Tez Türü: Doktora
  5. Konular: Endüstri ve Endüstri Mühendisliği, Industrial and Industrial Engineering
  6. Anahtar Kelimeler: Derin öğrenme, Rota optimizasyonu, Deep learning, Route optimization
  7. Yıl: 2025
  8. Dil: Türkçe
  9. Üniversite: Eskişehir Osmangazi Üniversitesi
  10. Enstitü: Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Endüstri Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Üretim ve Servis Sistemleri Bilim Dalı
  13. Sayfa Sayısı: Belirtilmemiş.

Özet

Otonom sistemlerin gelişimiyle birlikte, İnsansız Su Üstü Araçlar (Unmanned Surface Vehicles-USV), deniz ortamında güvenli ve verimli görevlerin gerçekleştirilmesine olanak sağlamaktadır. Bu tez çalışmasında, USV'lerin çarpışma risklerini en aza indirerek, Uluslararası Denizde Çarpışmayı Önleme Kurallarına (COLREGs) uygun şekilde hareket etmelerini sağlayacak otonom bir sistem geliştirilmiştir. Amaç, gerçek zamanlı yörünge planlaması ile çarpışmalardan kaçınan, kurallara uygun ve çevresel koşullara duyarlı bir navigasyon sistemi tasarlamaktır. Geliştirilen sistemde, Derin Q Ağı (Deep Q Network-DQN) modeli tabanlı pekiştirmeli öğrenme yöntemi önerilmiştir. Yörünge üretiminde B-Spline eğrileri kullanılarak aracın manevra kabiliyeti modellenmiş, kontrol noktaları aracılığıyla çevreye uyumlu yumuşak eğriler elde edilmiştir. Pekiştirmeli öğrenme tabanlı yörünge planlamada dalga boyu, rüzgâr ve akıntı hızı gibi çevresel etkenler dikkate alınmaktadır. Önerilen yöntem, farklı simülasyon senaryolarında test edilmiş, doğrusal ve açısal hız değerleri ile theta açısının değişimi gözlemlenmiştir. Farklı öğrenme oranları ve sinir ağı yapılarına göre yapılan karşılaştırmalarda, elde edilen Q değerleri üzerinden sistem performansı analiz edilmiştir. Deneysel sonuçlar, önerilen pekiştirmeli öğrenme tabanlı yörünge planlama sisteminin başarılı sonuçlar verdiğini ortaya koymaktadır. Yöntem, yalnızca tek bir eğitim süreci ile benzer senaryolara doğrudan uygulanabilirlik sunarak, geleneksel yöntemlere kıyasla önemli ölçüde esneklik ve hız avantajı sağlamaktadır. Bu özellikler, otonom deniz araçlarıyla gerçekleştirilen görevlerin operasyonel verimliliğini artıracaktır.

Özet (Çeviri)

The advancement of autonomous systems has enabled unmanned surface vehicles (USVs) to conduct safe and efficient operations in marine environments. In this thesis, an autonomous system is developed to enable USVs to navigate in compliance with the International Regulations for Preventing Collisions at Sea (COLREGs) while minimizing the risk of collisions. The goal is to design a navigation system that performs real-time trajectory planning, avoids collisions, and adapts to environmental conditions. In the developed system, a reinforcement learning method based on the Deep Q-Network (DQN) model is proposed. B-spline curves are used for trajectory generation, modeling the maneuverability of the USV, and producing smooth, adaptive paths through control points. Reinforcement learning-based trajectory planning integrates environmental conditions such as wave height, wind speed, and current velocity. The proposed method was tested in various simulation scenarios, and changes in linear and angular velocity values as well as the theta angle were observed. System performance was evaluated based on Q-values obtained under different learning rates and neural network architectures. Experimental results reveal that the proposed reinforcement learning-based trajectory planning system yields successful outcomes. The system provides direct applicability to similar scenarios with a single training process, offering significant flexibility and speed advantages compared to traditional methods. These features will enhance the operational efficiency of tasks carried out by autonomous maritime vehicles.

Benzer Tezler

  1. Streptozotosin ile deneysel diabet oluşturulan hayvanlarda bazı kan parametrelerinin incelenmesi

    Başlık çevirisi yok

    BELKİS ÜNVER

    Yüksek Lisans

    Türkçe

    Türkçe

    1986

    BiyokimyaMarmara Üniversitesi

    Biyokimya Ana Bilim Dalı

    DOÇ. DR. NESRİN EMEKLİ

  2. Wolfgang Borcherts Stellungnahme zum Krieg in seinen Kurzgeschichten ab 1945

    Başlık çevirisi yok

    ZEKİ KARAKAYA

    Yüksek Lisans

    Almanca

    Almanca

    1988

    Alman Dili ve EdebiyatıHacettepe Üniversitesi

    DOÇ. DR. NURAN ÖZYER

  3. Osmanlı Devleti'nde tarım işçiliği

    Başlık çevirisi yok

    ZAFER ÖZDEM

    Yüksek Lisans

    Türkçe

    Türkçe

    1988

    Tarihİstanbul Üniversitesi

    PROF. DR. LÜTFİ GÜÇER

  4. Endüstri meslek lisesi müdürlerinin yeterlikleri

    Başlık çevirisi yok

    MUSA GÜRSEL

    Doktora

    Türkçe

    Türkçe

    1989

    Eğitim ve ÖğretimSelçuk Üniversitesi

    Eğitim Bilimleri Ana Bilim Dalı

    PROF.DR. NİYAZİ KARASAR