Comparison of Apache Hadoop framework distributions

Thesis title: Komparace distribucí frameworku Apache Hadoop
Author: Todorov, Petr
Thesis type: Diplomová práce
Supervisor: Novotný, Ota
Opponents: Bruckner, Tomáš
Thesis language: Česky
Abstract:
Práce se zaměřuje na komparaci distribucí frameworku pro zpracování big data Apache Hadoop. Teoretická část přináší stručný vhled do oblasti big data, detailní popis frameworku a ekosystému Apache Hadoop. Práce rovněž poskytuje přehled o situaci na trhu distribucí frameworku pro zpracování big data Apache Hadoop. Praktická část práce představuje možnosti zpracování big data v reálném čase v rámci vybraných distribucí frameworku Apache Hadoop formou realizace typové úlohy příjmu a zpracování příspěvků ze sociální sítě Twitter. Na základě zjištěných informací a výsledků provedení příjmu a zpracování big data je následně provedena komparace vybraných distribucí frameworku Apache Hadoop. Informace, které práce přináší, lze využít pro rychlou orientaci na trhu distribucí frameworku Apache Hadoop a výběr distribuce frameworku Apache Hadoop vhodné pro zpracování big data v reálném čase.
Keywords: Hortonworks; MapR; zpracování big data v reálném čase; Big data; Apache Hadoop; Cloudera
Thesis title: Comparison of Apache Hadoop framework distributions
Author: Todorov, Petr
Thesis type: Diploma thesis
Supervisor: Novotný, Ota
Opponents: Bruckner, Tomáš
Thesis language: Česky
Abstract:
This thesis focuses on comparison of the Apache Hadoop big data processing framework distributions. The theoretical part brings a brief insight into the big data area, a detailed description of the Apache Hadoop framework and ecosystem. The thesis also provides an overview of the Apache Hadoop big data processing framework distributions market situation. The practical part of the thesis introduces the possibilities of real-time big data processing within selected Apache Hadoop framework distributions in the form of performing a type Twitter social network data ingestion and processing task. Based on information found and data ingestion and processing results the comparison of selected Apache Hadoop framework distributions is accomplished. The information introduced in this thesis can be used in order to get oriented in the Apache Hadoop framework distributions market situation quickly and also for the selection of the distribution suitable for real-time big data processing.
Keywords: Apache Hadoop; Cloudera; Hortonworks; Big data; MapR; real-time big data processing

Information about study

Study programme: Aplikovaná informatika/Podniková informatika
Type of study programme: Magisterský studijní program
Assigned degree: Ing.
Institutions assigning academic degree: Vysoká škola ekonomická v Praze
Faculty: Faculty of Informatics and Statistics
Department: Department of Information Technologies

Information on submission and defense

Date of assignment: 28. 1. 2019
Date of submission: 27. 4. 2020
Date of defense: 11. 6. 2020
Identifier in the InSIS system: https://insis.vse.cz/zp/69387/podrobnosti

Files for download

    Last update: