A comparative study of Hadoop and Spark frameworks
Hadoop ve Spark sistemlerin karşılastırmalı çalışması
- Tez No: 449314
- Danışmanlar: PROF. DR. ALİ YAZICI, YRD. DOÇ. DR. ZİYA KARAKAYA
- Tez Türü: Yüksek Lisans
- Konular: Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrol, Computer Engineering and Computer Science and Control
- Anahtar Kelimeler: Belirtilmemiş.
- Yıl: 2016
- Dil: İngilizce
- Üniversite: Atılım Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Yazılım Mühendisliği Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: 75
Özet
Bu çalışma, büyük veri sistemlerden ikisi olan Hadoop ve Spark'ı karşılaştırarak incelemektedir. Bu çalışmaya dahil edilen sistemler ideal performanslarını gösterebilecek şekilde çeşitli parametrelerle ayarlanmış; performans, donanım kullanımları ve kullanılan donanım sayısının arttırılmasıyla oluşan hızlanma oranları dört farklı uygulamada değerlendirilmiştir. Değerlendirme sonuçları incelendiğinde Spark'ın WordCount ve Sort uygulamaları için daha iyi performans gösterdiği, Hadoop'un Naive-Bayes uygulamasında Spark'tan daha başarılı olduğu gözlenmiştir. Bununla beraber, Grep uygulaması için Hadoop ve Spark arasında göze değer bir fark görülmemiştir.
Özet (Çeviri)
In this thesis, Apache Hadoop and Apache Spark are compared with respect to performance, resource usage, and speedups of four different Big Data workloads. The comparison is done by tuning the parameters with various combinations for the optimum performance of each framework. The evaluations show that, Spark outperforms Hadoop for WordCount, and Sort workloads. However, Hadoop outperforms Spark in Naive-Bayes workload, and there is no a remarkable difference in the performances for Grep workload.
Benzer Tezler
- Türkçe tweetlerin analiz edilebilmesi için hadoop/hive kullanan melez bir sistemin geliştirilmesi
Development of a hybrid system using hadoop/hive for analyzing Turkish tweets
SİNAN KUL
Doktora
Türkçe
2018
İşletmeAtatürk ÜniversitesiYönetim Bilişim Sistemleri Ana Bilim Dalı
PROF. DR. ÜSTÜN ÖZEN
- Comparative performance evaluation of hadoop on PaaS proposals by leveraging HiBench
PaaS temelli hadoop tekliflerinin HiBench kullanılarak karşılaştırmalı performans değerlendirmesi
ULUER EMRE ÖZDİL
Yüksek Lisans
İngilizce
2021
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolBahçeşehir ÜniversitesiBüyük Veri Analitiği ve Yönetimi Ana Bilim Dalı
DR. ÖĞR. ÜYESİ SERKAN AYVAZ
- Genç bayan ve erkeklerde göz çevresi antropometrik ölçümlerinin karşılaştırılmalı olarak incelenmesi
A comparative study of measurements of the soft orbits in young women and men
MELTEM AÇAR GÜDEK
- A comparative study of cuttings transport performance of water versus polymer-based fluids in horizontal well drilling
Yatay kuyu sondajlarında su ve polimer bazlı sondaj sıvılarının kırıntı taşıma performansları üzerine bir karşılaştırma çalışması
PAYAM ALLAHVİRDİZADEH
Yüksek Lisans
İngilizce
2015
Petrol ve Doğal Gaz MühendisliğiOrta Doğu Teknik ÜniversitesiPetrol ve Doğal Gaz Mühendisliği Ana Bilim Dalı
Prof. Dr. MAHMUT PARLAKTUNA
Prof. Dr. ERGUN KURU
- Türkiye ve Azerbaycan'da ilkokulda okutulan ana dili ders kitaplarındaki değerlerin karşılaştırmalı olarak incelenmesi
A comparative study of the values in mother tongue textbooks taught in pri̇mary school i̇n turkey and Azerbai̇jan
ALMAZ ZAKARYAYEVA
Yüksek Lisans
Türkçe
2024
Eğitim ve ÖğretimAnadolu ÜniversitesiTemel Eğitim Ana Bilim Dalı
PROF. DR. ŞERİFE DİLEK BOYACI