Evaluation of Azure Stream Analytics for Processing od Archive Data

Thesis title: Posouzení vhodnosti Azure Stream Analytics pro zpracování archivních dat
Author: Vrána, Daniel
Thesis type: Bakalářská práce
Supervisor: Palovská, Helena
Opponents: Kučera, Jan
Thesis language: Česky
Abstract:
Tato bakalářská práce se zabývá čerpáním archivních dat z Azure Storage za použití Azure Streaming Analytics. Zhodnocuje zda je Azure Stream Analytics vhodné řešení pro tento úkol a jaké výhody přináší. Posuzování je provedeno skrze teoretickou analýzu a provedení testů s cílem určit přibližné limity produktu. V teoretické části se práce zabývá představením a vymezením pojmů důležitých k pochopení technologie. Je zde také věnována pozornost cloudovému úložišti Azure Blob Storage. Následně je do větší hloubky představován produkt Azure Stream Analytics. Druhá část práce je zaměřena na sestavování a provádění testů za použití sad testovacích dat. Při těchto testech je zkoumána zejména rychlost a výpočetní náročnost zpracování dat z archivního Azure Blob Storage. Všechny výsledky následně vstupují do diskuze o celkové vhodnosti řešení. Práce dochází k závěru, že řešení je vhodné, avšak uvádí výhrady vůči extrémně velkým objemům dat v řádech desítek miliónů záznamů a počtům souborů v řádech tisíců.
Keywords: archivní data; Azure Blob Storage; Azure Storage; Azure Stream Analytics; cloud; cloudová úložiště; cloudové služby; complex event processing; Microsoft Azure; streaming data
Thesis title: Evaluation of Azure Stream Analytics for Processing od Archive Data
Author: Vrána, Daniel
Thesis type: Bachelor thesis
Supervisor: Palovská, Helena
Opponents: Kučera, Jan
Thesis language: Česky
Abstract:
This bachelor thesis deals with processing of archive data from Azure Storage using Azure Stream Analytics.It evaluates the suitability of Azure Stream Analytics for this task and describes the benefits of used solution. Evaluation is based on theoretical analysis and execution of tests to determine the limits of the product. In the theoretical part the thesis describes and present important terms which are needed to understand the technology. In this part some attention is also given to the Azure Blob Storage. Further, the Azure Stream Analytics is described in greater depth. Second part of this thesis is focused on preparing and executing test based on testing data sets. These tests especially consider the speed and computational resources used during the processing of data from archive Azure Blob Storage. The Results are then evaluated in a discussion about the overall suitability of the solution. The thesis concludes that the solution is suitable, but points out some problems in processing with extreme volumes of data, orderly millions of records and great amounts of files in orders of thousands.
Keywords: archive data; Azure Stream Analytics; cloud; cloud storage; cloud services; complex event processing; Microsoft Azure; streaming data; Azure Blob Storage; Azure Storage

Information about study

Study programme: Aplikovaná informatika/Aplikovaná informatika
Type of study programme: Bakalářský studijní program
Assigned degree: Bc.
Institutions assigning academic degree: Vysoká škola ekonomická v Praze
Faculty: Faculty of Informatics and Statistics
Department: Department of Information Technologies

Information on submission and defense

Date of assignment: 13. 12. 2017
Date of submission: 30. 4. 2018
Date of defense: 21. 6. 2018
Identifier in the InSIS system: https://insis.vse.cz/zp/64236/podrobnosti

Files for download

    Last update: