Beden hareketlerinin sınıflandırılması ve performansının incelenmesi
Classification of body movements and investigation of performance
- Tez No: 868813
- Danışmanlar: DR. ÖĞR. ÜYESİ VEYSEL GÖKHAN BÖCEKÇİ, DOÇ. DR. ERKAN DURSUN
- Tez Türü: Yüksek Lisans
- Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2024
- Dil: Türkçe
- Üniversite: Marmara Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Elektrik-Elektronik Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: 57
Özet
Fiziksel rehabilitasyon teknikleri genel sağlık sistemi, hastalar ve aileler için en zorlu alanlardan biridir. Yoğun nüfus, ekipman ve tıbbi cihaz maliyetlerinin yüksek olması, hekim- fizyoterapist-uzman bakıcı eksikliği gibi sorunlar nedeniyle bu alan daha da zorlaşmaktadır. COVID-19 gibi salgınlar insanların fiziksel aktivitesini azaltarak, özellikle fiziksel rehebilitasyon ihtiyacı duyan hastaların tedavi sürecini de zora sokmaktadır. Bu çalışma uzaktan fiziksel rehabilitasyon için beden hareketlerinin sınıflandırılmasına ve bu hareketlerin performansına odaklanmaktadır. Bu amaçla Google tarafından geliştirilen, canlı ve akışlı medya için açık kaynaklı, platformlar arası, özelleştirilebilir makine öğrenim platformu MediaPipe kullanılmıştır. COVID-19 salgını sırasında tele-sağlık hızlı ve geniş bir şekilde yaygınlaşmakla beraber konuyla alakalı yapılan çalışmalarda artış göstermiştir. Gelişen teknoloji ve onun parçalarından biri olan görüntü işleme sayesinde hasta yüksek maliyetli donanımların ortadan kaldırılmasından maddi olarak faydalanır. Bu çalışmanın temel amacı düşük maliyetli kamera ve MediaPipe vasıtasıyla hastalar tarafından yapılan fizik tedavi egzersizlerinin sürekli uzman nezaretinde olmasının mümkün olmadığı durumlarda tekrar sayısının, sınıflandırılmasının ve literatürde yer alan benzer çalışmalardaki yöntemlere kıyasla değişken ortam dinamiklerinde MediaPipe aygıtının nasıl davranış sergilediği gözlemleyerek performansını belirlemektir. Çalışmada Gebze Teknik Üniversitesi araştırmacıları tarafından fizyoterapist danışmanlığında 5 katılımcıdan toplanan 8 adet egzersize ait görüntüler kullanılmıştır. Söz konusu hareketler önerilen eğitim modeli ile eğitilmiş olup 5 adet katılımcıdan test için ayrılan bir adedi ile sistem test edilmiştir. Son katılımcının hareketlerine ait sınıflandırma işlemi sonucunda önerilen eğitim modelinde % 91,41 oranında başarım elde edilmiştir. Hareketlerin tekrarına ilişkin yapılan sayımlar da ise başarımın kameranın açısına, hareket yardımcısı için nesne bulunmasına ve katılımcının giydiği kıyafet rengine göre değişebildiği ancak çoğu harekette başarılı olduğu görülmüştür. Sonuç olarak, MediaPipe'ın incelenen hareketlerin tekrar sayıları ve eklem açılarının tespiti ile sınıflandırılmasında klasik görüntü işleme yaklaşımlarına göre daha yüksek kararlılıkta ve doğrulukta çıktılar verdiğini göstermektedir. Çalışmamızda ilave olarak yeni bir veriseti oluşturularak goniometre ve MediaPipe vasıtasıyla bulunan açı değerleri irdelenmiştir.
Özet (Çeviri)
Physical rehabilitation techniques are one of the most challenging areas for the general health system, patients and families. This field becomes even more difficult due to problems such as intensive overcrowding, high costs of equipment and medical devices, lack of physicians-physiotherapists-specialised caregivers. Pandemics such as COVID-19 reduce people's physical activity, making the treatment process difficult, especially for patients in need of physical rehabilitation. This study focuses on the classification of body movements for remote physical rehabilitation and the performance of these movements. For this purpose, MediaPipe, an open-source, cross-platform, customisable machine learning platform for live and streaming media developed by Google, was used. During the COVID-19 pandemic, telehealth has become widespread rapidly and widely, and studies on the subject have increased. With emerging technology and image processing as one of its components, the patient benefits financially from the elimination of expensive hardware. The main purpose of this article is to determine the performance of the MediaPipe device by observing the number of repetitions, classification and behaviour of the MediaPipe device in variable environment dynamics compared to the methods in similar studies in the literature, in cases where it is not possible to be under the constant supervision of an expert in physical therapy exercises performed by patients using a low-cost camera and MediaPipe device. In the study, images of 8 exercises collected from 5 participants under the supervision of a physiotherapist by Gebze Technical University researchers were used. These movements were trained with the proposed training model and the system was tested with one of the 5 participants reserved for testing. As a result of the classification process of the movements of the last participant, 91.41% success rate was obtained in the proposed training model. In the counting of the repetition of the movements, it was seen that the success varied depending on the angle of the camera, the presence of an object for the motion aid and the colour of the clothes worn by the participant, but it was successful in most movements. As a result, it is shown that the MediaPipe device provides outputs with higher stability and accuracy than classical image processing approaches in the detection and classification of the repetition counts and joint angles of the movements examined.
Benzer Tezler
- Cooperative control of multi-agent system under time delay
Çok ajanlı sistemlerin zaman gecikmesi altında eş zamanlı kontrolü
ŞİRİN AKKAYA
Doktora
İngilizce
2023
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik ÜniversitesiMekatronik Mühendisliği Ana Bilim Dalı
DOÇ. DR. ALİ FUAT ERGENÇ
- Structural performance evaluation of an existing RC building by non-linear dynamic analysis
Mevcut betonarme bir binanın sismik performansının doğrusal olmayan dinamik analize değerlendirmesi
MOHAMMADREZA KHAJEHPOUR
Yüksek Lisans
İngilizce
2015
İnşaat Mühendisliğiİstanbul Teknik Üniversitesiİnşaat Mühendisliği Ana Bilim Dalı
Assoc. Prof. Dr. BEYZA TAŞKIN AKGÜL
- Hand gesture classification using features of multivariate synchrosqueezing transform based time-frequency matrix
Çok değişkenli senkron sıkıştırma dönüşümüne dayalı zaman-frekans matrisinin özelliklerini kullanarak el hareketi sınıflandırılması
LÜTFİYE SARIPINAR
Yüksek Lisans
İngilizce
2023
Bilim ve Teknolojiİzmir Katip Çelebi ÜniversitesiBiyomedikal Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ ONAN GÜREN
- Probabilistic graphical models for brain computer interfaces
Probabilistic graphical models for brain computer interfaces
JAİME FERNANDO DELGADO SAA
Doktora
İngilizce
2014
Elektrik ve Elektronik MühendisliğiSabancı ÜniversitesiElektronik Mühendisliği Ana Bilim Dalı
DOÇ. DR. MÜJDAT ÇETİN
- Çevresel ve operasyonel koşullara uyarlı mikro doppler veri işleme
Adaptive micro doppler data processing for environmental and operational conditions
BARIŞ EROL
Yüksek Lisans
Türkçe
2015
Elektrik ve Elektronik MühendisliğiTOBB Ekonomi ve Teknoloji ÜniversitesiElektrik-Elektronik Mühendisliği Ana Bilim Dalı
YRD. DOÇ. DR. SEVGİ ZÜBEYDE GÜRBÜZ