Dijital elektrohidrolik sistemlerin popet tipi hidrolik valflerle pekiştirmeli öğrenme kullanılarak denetlenmesi
Control of digital electrohydraulic systems driven by poppet-type hydraulic valves using reinforcement learning
- Tez No: 845261
- Danışmanlar: PROF. DR. MEHMET İTİK
- Tez Türü: Doktora
- Konular: Makine Mühendisliği, Mechanical Engineering
- Anahtar Kelimeler: Derin öğrenme, Elektrohidrolik, Elektrohidrolik sistemler, Makine öğrenmesi yöntemleri, Deep learning, Electrohydraulic, Electrohydraulic systems, Machine learning methods
- Yıl: 2023
- Dil: Türkçe
- Üniversite: Karadeniz Teknik Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Makine Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Bu tez kapsamında, enerji verimliliği ve maliyet açısından geleneksel elektrohidrolik sistemlerin (G-EHS) yerine geçebilecek dijital elektrohidrolik sistemlerin (D-EHS) konum denetimi için bir denetim yöntemi önerilmektedir. Bu sayede, D-EHS'lerin denetiminde sıkça karşılaşılan karmaşık denetleyici tasarım sürecine alternatif bir yaklaşım sunulmaktadır. D-EHS'nin konum denetimi için geniş ve ayrık eylem uzaylarında etkinliği bilinen ikili derin q-ağı (DDQN) pekiştirmeli öğrenme yaklaşımı kullanılmıştır. DDQN denetleyicinin eğitimi için D-EHS'nin matematik modeli kullanılmıştır. Eğitim için farklı yaklaşımlar denenmiş ve en iyi sonuç, benzetim ortamında eğitilen çoklu DDQN denetleyicinin deney düzenindeki eğitim ile birleştirilmesiyle elde edilmiştir. Ayrıca, D-EHS'nin performansı G-EHS ile karşılaştırılmış ve D-EHS'nin G-EHS'ye benzer performans sergilediği benzetim ve deneysel çalışmalarla gösterilmiştir Sürekli eylem çıktısı ile denetlenebilen G-EHS için pekiştirmeli öğrenme tabanlı denetim yöntemi olarak derin deterministik politika gradyanı yöntemi kullanılmıştır. Önerilen DDQN denetleyici ve D-EHS'nin eğitim dışı (farklı konum referansı, valf arızası, besleme basıncı değişimi) durumlardaki davranışları da deneysel çalışmalarla incelenmiştir. Elde edilen sonuçlar, D-EHS'nin önerilen denetleyici ile kullanılması durumunda G-EHS ile kıyaslanabilir performans sunduğunu göstermiştir. Bununla beraber, eğitim dışı koşullar altında dahi konum denetim performansının korunduğu gözlenmiştir.
Özet (Çeviri)
In this thesis, a control method is proposed for the position control of digital electrohydraulic systems (D-EHS) that could replace conventional electrohydraulic systems (C-EHS) in terms of energy efficiency and cost. This offers an alternative approach to the complex controller design process frequently encountered in the control of the D-EHS. The double deep Q-network (DDQN) reinforcement learning approach, known for its effectiveness in controlling large and discrete action spaces, is employed for the position control of the D-EHS. The mathematical model of the D-EHS is obtained and employed for training the DDQN controller. Various training approaches were explored, and the best result was achieved by retraining the multiple DDQN controllers, which had been pretrained in a simulation environment, using an experimental setup. Additionally, the D-EHS's performance is evaluated against the C-EHS, showing comparable results in both simulation and experiments. A deep deterministic policy gradient based controller is employed for the position control of the C-EHS. The behavior of the proposed DDQN controller and the D-EHS under non-training conditions is also examined through experimental studies. The results show that, the D-EHS offers comparable performance to the C-EHS when used with the proposed controller, and the position control performance is maintained even under non-training conditions.
Benzer Tezler
- Dijital hidrolik valf kontrol sistemi kullanılarak bir hidrolik silindirin konum ve hız kontrolü
Position and speed control of a hydraulic cylinder using the digital hydraulic valve control system
ADEM FATİH ÖZALP
Doktora
Türkçe
2022
Makine MühendisliğiKarabük ÜniversitesiMakine Mühendisliği Ana Bilim Dalı
PROF. DR. REFİK POLAT
- Elektrohidrolik bir sisteminin darbe eni modüleli kayan kipli kontrolü
Pulse width modulated sliding mode control of an electrohydraulic system
SALİH DEDEOĞLU
Yüksek Lisans
Türkçe
2015
Mekatronik MühendisliğiBozok ÜniversitesiMekatronik Mühendisliği Ana Bilim Dalı
YRD. DOÇ. DR. İLHAMİ YİĞİT
- Elektrohidrolik bir servo-sistemin simülasyonu
Simülation of an electrohydraulic servo system
İLYAS İSTİF
- Hidrolik bir servo sistemde pol atamalı adaptif konum kontrolü
The Pole assignment adaptive position control in a hydraulic servo system
AYHAN KURAL
- Servo sistemi hidrolik hareketlendiricilerin modellenmesi, sayısal benzetimi ve dinamik davranışlarının analizi
Modelling, simulating and dynamic analysis of hydraulic actuators with servosystems
İLYAS İSTİF
Yüksek Lisans
Türkçe
2001
Makine MühendisliğiYıldız Teknik ÜniversitesiMakine Ana Bilim Dalı
YRD. DOÇ. DR. MUHARREM ERDEM BOĞOÇLU