Geri Dön

Reinforcement learning based energy management strategy for fuel cell hybrid vehicles

Hidrojen yakıt hücreli araçlar için pekiştirmeli öğrenmeli enerji kontrol stratejisi

  1. Tez No: 710293
  2. Yazar: ZEKERİYA ENDER EĞER
  3. Danışmanlar: DR. ÖĞR. ÜYESİ TUĞÇE YÜKSEL BEDİZ, PROF. DR. SERHAT YEŞİLYURT
  4. Tez Türü: Yüksek Lisans
  5. Konular: Mekatronik Mühendisliği, Mechatronics Engineering
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2022
  8. Dil: İngilizce
  9. Üniversite: Sabancı Üniversitesi
  10. Enstitü: Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Mekatronik Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Belirtilmemiş.
  13. Sayfa Sayısı: 74

Özet

Son yıllarda içten yanmalı motorların emisyonları sebebiyle çevreye etkisi problem olmaya başlamıştır. Daha temiz enerji teknolojilerilerine olan talep elektrikli ve hibrit araçların araştırma ve geliştirme sürecinin başlamasına sebep olmuştur. Ancak bataryaların karakteristik özellikleri yüzünden elektrikli araçların menzil, şarj etme süresi ve maliyet gibi bazı dezavatajları bulunmaktadır. Buna alternatif olarak bataryalar başka enerji kaynaklarıyla birlikte çalışmaktadır. Diğer enerji kaynakları konusunda yakıt hücreleri temiz, sürdürülebilir ve yüksek enerji yoğunluğuna sahip olması sebebiyle dikkat çekmeye başlamıştır. Yakıt hücreli hibrit araçların, bu sebeplerle içten yanmalı motorla çalışan araçlara alternatif olma potansiyeli vardır, ancak yakıt hücrelerinin yavaş dinamiğe sahip olması gibi bazı dezavantajları olması nedeniyle, bu tarz araçlardaki enerji kaynaklarının birlikte çalışması önem arz etmektedir. Bu tezin öncelikli amacı enerji kontrol stratejisi sorununa odaklanmaktır. Öncelikle aracın güç sistemi modellenmiş olup efektif bir enerji kontrol sistemi tasarlanmıştır. Öğrenme algoritmalarının farklı problemlere uygulanabilir hale gelmesinin avantajı kullanılarak kontrol sistemi modelden bağımsız çalışan derin deerministik ilke türevi (DDPG) algoritması ile eğitilmiştir. Enerji kontrol stratejisinin amacı yakıt hücresini en verimli bölgelerde çalıştırmak ve bunu yaparken bataryanın şarj seviyesindeki sapmaları en aza indirmektir. DDPG algoritmasıyla basit basamak güç girişleriyle eğitilen kontrol sisteminin performansı, farklı sürüş çevrimleri altında denenmiştir ve enerji tüketiminde \% 2.7 ye kadar varan bir azalış gözlemlenmiştir. Bu sonuçlar DDPG algoritmasının bu tarz uygulamalar için potansiyeli olduğunu göstermektedir.

Özet (Çeviri)

There is an increasing concern on the usage of vehicles powered by internal combustion engines due to their high emission levels. The demand for cleaner energy technologies have led to research and development of electric and hybrid vehicles. Among these, fuel cell vehicles have started to draw attention due to the fact that it is clean, sustainable and it has high energy density. Thus, fuel cell hybrid vehicles have the potential to compete with vehicles powered by internal combustion engine in the future, yet there are challenges for fuel cell such as slow dynamics requiring that their operation together should be managed favorably. The primary objective of the thesis is to address the problem of energy management in fuel cell vehicles. For this purpose, first a model of the powertrain is developed. Then, in order to achieve an efficient energy management, a model free reinforcement learning algorithm called deep deterministic policy gradient (DDPG) is employed. The energy management strategy focuses on running the fuel cell in its high efficiency range while limiting the deviation of state of charge of the lithium-ion battery from a target value. It is found that the DDPG agent trained simply with step power inputs can achieve up to 2.7\% less energy consumption compared to commonly used rule-based energy management strategies while maintaining the state of the charge of the battery within a certain interval. Our results show that DDPG algorithm shows promising potential to be utilized in such applications.

Benzer Tezler

  1. Mobil nesnelerin interneti için yeni nesil hücresel ağ tabanlı ağ dilimleme

    Next generation cellular network based network slicing for the mobile internet of things

    WAFA HAMDI

    Doktora

    Türkçe

    Türkçe

    2024

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolEge Üniversitesi

    Bilgisayar Mühendisliği Ana Bilim Dalı

    PROF. DR. HASAN BULUT

    PROF. DR. ORHAN DAĞDEVİREN

  2. Multi-agent reinforcement learning based energy management with P2P/V2G

    P2P/V2G ile çoklu-temsilcili pekiştirmeli öğrenme tabanlı enerji yönetimi

    METE YAVUZ

    Yüksek Lisans

    İngilizce

    İngilizce

    2023

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Okan Üniversitesi

    Otomotiv Mekatroniği ve Akıllı Araçlar Ana Bilim Dalı

    DOÇ. DR. ÖMER CİHAN KIVANÇ

  3. A novel artificial intelligence based energy management system for microgrids

    Mikro şebekeler için yapay zeka temelli yeni bir enerji yönetim sistemi

    NECATİ AKSOY

    Doktora

    İngilizce

    İngilizce

    2023

    Elektrik ve Elektronik Mühendisliğiİstanbul Teknik Üniversitesi

    Elektrik Mühendisliği Ana Bilim Dalı

    PROF. DR. VEYSEL MURAT İSTEMİHAN GENÇ

  4. Enhancing netwok lifetime of underwater wireless sensor networks with smart energy harvesting

    Sualtı duyarga ağlarında akıllı enerji hasadı ile yaşam ömrünün uzatılması

    ÇİĞDEM ERİŞ BALOĞLU

    Doktora

    İngilizce

    İngilizce

    2024

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolBahçeşehir Üniversitesi

    Bilgisayar Mühendisliği Ana Bilim Dalı

    DOÇ. DR. PINAR BOLUK

  5. Traffic aware, utility and machine learning based framework for energy efficiency in software defined networks

    Yazılım tanımlı ağlarda enerji verimliliği için trafik farkında, kullanım ve makine öğrenmesi tabanlı sistem

    BEAKAL GIZACHEW ASSEFA

    Doktora

    İngilizce

    İngilizce

    2019

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolKoç Üniversitesi

    Bilgisayar Mühendisliği Ana Bilim Dalı

    PROF. DR. ÖZNUR ÖZKASAP