Çoklu depo sistemlerinde ölçeklenebilir sorgu yönetimi
Scalable query management in polystore systems
- Tez No: 833384
- Danışmanlar: DOÇ. DR. RIZA CENK ERDUR, PROF. DR. OĞUZ DİKENELLİ
- Tez Türü: Doktora
- Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Bilim ve Teknoloji, Mühendislik Bilimleri, Computer Engineering and Computer Science and Control, Science and Technology, Engineering Sciences
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2023
- Dil: Türkçe
- Üniversite: Ege Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Bilgisayar Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Bilgisayar Mühendisliği Bilim Dalı
- Sayfa Sayısı: 205
Özet
Büyük veri; sahip olduğu hız, çeşitlilik, büyüklük ve doğruluk boyutlarıyla yönetilmesi güç bir olgudur. Büyük veriyi yönetebilmek için tüm bu boyutların belirli ölçülerde ele alınarak çözülmesi gereklidir. Sunulacak olan çözümde büyük boyuttaki veri, yapısına uygun model(ler)deki depo veya depolarda saklanmalı, hızlı sorgulanmanlı, ayrıca doğru ve güvenilir kaynaklardan elde edilmiş olmalıdır. Tam da bu noktada çoklu depo sistemleri büyük verinin yönetimini sağlamak için çözüm olarak ortaya çıkmaktadır. Sistem temel olarak bir çoklu depo ortamı ve bu ortamı depo özelinde tekil veya tümleşik olarak sorgulayan bir sorgu motorundan oluşur. Buradan hareketle büyük veri yönetimine bir çözüm olarak tez kapsamında bir alan odaklı çoklu depo sistemi oluşturulması hedeflenmiştir. Öncelikle yönetilecek büyük veri için sağlık alanı belirlenerek veri kümesi olarak farklı yapılarda ve büyük boyutta veri içeren MIMIC-III seçilmiştir. MIMIC-III'e referans veren tüm çalışmalar taranmış ve önemli kullanım durumu senaryoları belirlenmiştir. Sistemin değerlendirilmesi için; bu senaryolardan tekil ve birleşik sorgular oluşturulmuştur. Böylece verinin doğruluğu ve yapısallığından emin olunduktan sonra içinde bulunduğu alan, büyüklüğü ve yapısı özelinde çözümlenerek bölüneceği veri modelleri belirlenmiştir. Bu veri modellerine uygun saklama teknolojileri seçilmiş ve tüm ilişkili MIMIC-III verisi bu depolara yüklenmiştir. Kurulan bu mimarinin etkinliğini ortaya koymak adına; işleticiler ve dönüştürücüler ile birlikte aktör model yapısı üzerinde ölçeklenebilir bir çoklu depo sorgu motoru geliştirilmiştir. Sistem sorgu işletim süreleri ve ölçeklenebilirlik bakış açılarından değerlendirilmiştir. Sonuçlar çoklu depo sistemlerinin belirli bir alandaki büyük veriyi etkin biçimde yönetebildiğini kanıtlamakta ve hem geliştirilen sistemin hem de bu araştırma alanının önemini ortaya koymaktadır.
Özet (Çeviri)
Big data is a difficult phenomenon to manage by having velocity, variety, volume and veracity dimensions. In order to manage big data, it is necessary to take into account all these dimensions in a certain manner. In the solution to be presented, large-scale data should be persisted in the store(s) suitable for its structure, it should be queried quickly, and it should also be obtained from accurate and reliable sources. At this point, multistore / polystore systems emerge as a solution to manage the big data. The system basically consists of a polystore environment and a query engine that queries this environment as simple or federated. From this point of view, it is aimed to create a domain orineted polystore system within the scope of the thesis in order to provide an exemplary big data management. First of all, the medical domain has been determined for the big data to be managed, and MIMIC-III has been chosen as the dataset which contains large amount of data with various structures. All studies that reference MIMIC-III have been scanned and critical use case scenarios have been determined. For the evaluation of the system; single and compound queries have been generated from these scenarios. Thus, after proving the correctness and structure of the data, its models have been analyzed and determined according to the field, size and structure. Storage technologies suitable for these data models have been selected and all MIMIC-III data associated with these stores have been imported. In order to demonstrate the effectiveness of the proposed architecture, a scalable polystore query engine along with the executors and wrappers for the determined stores has been built on top of the actor model. The system has been evalauted in terms of the query evaluation times and scalability point of views. The results prove that the polystore systems are able to manage the big data in a relevant domain effectively, and put forward both the importance of the developed system and this research field.
Benzer Tezler
- Path and task planning for multiple mobile robots in smart warehouse
Akıllı depoda çoklu robotlar için yol ve görev planlama
ALİ BOLU
Yüksek Lisans
İngilizce
2021
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolMarmara ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ ÖMER KORÇAK
- Joint price and quantity optimization in multi-retailer and multi-period systems
Çoklu dönem ve perakendeci sistemlerinde birleşik fiyat ve miktar eniyilemesi
TUĞBERK TUNÇİNAN
Doktora
İngilizce
2024
Endüstri ve Endüstri MühendisliğiBoğaziçi ÜniversitesiEndüstri Mühendisliği Ana Bilim Dalı
PROF. DR. AHMET REFİK GÜLLÜ
PROF. DR. MUSTAFA NECATİ ARAS
- Bir radar hedef ortam simülatörü için rastgele pürüzlü dünya yüzeyi üzerinde elektromanyetik dalga saçılımının modellenmesi
Modeling of electromagnetic wave scattering over random rough earth surface for a radar target environment simulator
MEHMET FATİH DİNÇ
Yüksek Lisans
Türkçe
2020
Elektrik ve Elektronik MühendisliğiHacettepe ÜniversitesiElektrik-Elektronik Mühendisliği Ana Bilim Dalı
PROF. DR. ÖZLEM ÖZGÜN
PROF. DR. ŞİMŞEK DEMİR
- Akıllı endüstriyel altyapılar için enerji optimizasyonu: Su şebekesi örneği
Energy optimization for smart industrial infrastructure: Water supply network example
HUSSEIN MOHAMMED HUSSEIN QASIM AL-SANABANI
Doktora
Türkçe
2024
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolSakarya ÜniversitesiBilgisayar Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ MURAT İSKEFİYELİ
- Çok yönlü işbirlikçi mobil robotlar için eş zamanlı hareket planlama algoritmasının geliştirilmesi ve uygulaması
Development and implementation of simultaneous motion planning algorithm for omnidirectional collaborative mobile robots
MELTEM EYÜBOĞLU
Yüksek Lisans
Türkçe
2022
Mekatronik MühendisliğiSakarya Uygulamalı Bilimler ÜniversitesiMekatronik Mühendisliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ GÖKHAN ATALI