prikaz prve stranice dokumenta Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka
Rad nije dostupan
diplomski rad
Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka
Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2021. urn:nbn:hr:168:178023
Žaja, Mateo
Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva

Institucijski repozitorij: Repozitorij FER-a

Citirajte ovaj rad

Žaja, M. (2021). Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka (Diplomski rad). Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva. Preuzeto s https://urn.nsk.hr/urn:nbn:hr:168:178023

Žaja, Mateo. "Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka." Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2021. https://urn.nsk.hr/urn:nbn:hr:168:178023

Žaja, Mateo. "Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka." Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2021. https://urn.nsk.hr/urn:nbn:hr:168:178023

Žaja, M. (2021). 'Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka', Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, citirano: 26.11.2024., https://urn.nsk.hr/urn:nbn:hr:168:178023

Žaja M. Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka [Diplomski rad]. Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva; 2021 [pristupljeno 26.11.2024.] Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:178023

M. Žaja, "Mjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka", Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, Zagreb, 2021. Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:178023

Za citiranje koristite ovu mrežnu adresu: https://urn.nsk.hr/urn:nbn:hr:168:178023
Podaci o radu
NaslovMjerenje performanci platforme Apache Beam u obradi prostorno vremenskih tokova podataka
Naslov (engleski)Performance Measurement of the Apache Beam Platform in Processing of Spatio-Temporal Data Streams
AutorMateo Žaja
MentorIgor Čavrak (mentor)
Član povjerenstvaIgor Čavrak (predsjednik povjerenstva)
Član povjerenstvaIvana Bosnić (član povjerenstva)
Član povjerenstvaTomislav Lipić (član povjerenstva)
Ustanova koja je dodijelila
akademski / stručni stupanj		Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
Zagreb
Datum i država obrane2021-02-17, Hrvatska
Znanstveno / umjetničko
područje, polje i grana		TEHNIČKE ZNANOSTI
Računarstvo
Sažetak
Razvojem interneta stvari, počinje se detaljnije razmatrati problematika obrade velikih količina podataka. Sustavi za upravljanje tokom podataka posjeduju mehanizme koji omogućuju obradu podataka u stvarnome vremenu, stoga se koncept toka podataka počinje koristiti za obradu podataka iz domene interneta stvari. Ovisno o zahtjevima sustava, potrebno je odabrati odgovarajući alat za obradu toka podataka. Platforma Apache Beam nudi uniformno sučelje koje omogućava obradu prostorno-vremenskih tokova podataka pomoću većeg broja alata za obradu toka podataka bez poznavanja detalja njihove implementacije. Za mjerenje performanci platforme Apache Beam korišteni su podaci iz domene interneta stvari. Mjerenje se sastojalo od računanja propusnosti alata Apache Flink i Apache Spark koristeći varijabilan broj procesorskih jezgri HTC Cloud infrastrukture. Rezultati su pokazali da povećanjem broja procesorskih jezgri raste propusnost sustava, ali samo do gornje granice broja procesorskih jezgri. Za određivanje optimalnog broja procesorskih jezgri potrebno je poznavati zahtjeve sustava te empirijski testirati performance sustava koristeći varijabilan broj procesorskih jezgri.
Sažetak (engleski)
With the development of the Internet of Things, the issue of processing large amounts of data is beginning to be considered in more detail. Data stream management systems possess mechanisms that allow real-time data processing, so the concept of data stream is beginning to be used in processing data from the domain of the Internet of Things. Depending on the system requirements, it is necessary to select the appropriate data stream management system. The Apache Beam platform offers a uniform interface that allows spatio-temporal data streams to be processed using a number of data stream processing tools without knowing the details of their implementation. Data from the Internet of Things domain was used to measure the performance of the Apache Beam platform. The measurement consisted of calculating the throughput of the Apache Flink and Apache Spark using a variable number of HTC Cloud processor cores. The results showed that increasing the number of processor cores increases system throughput, but only up to the upper limit of the number of processor cores. To determine the optimal number of processor cores, it is necessary to know the requirements of the system and empirically test the performance of the system using a variable number of processor cores.
Ključne riječi
Ključne riječi (engleski)
Jezikhrvatski
URN:NBNurn:nbn:hr:168:178023
Studijski programNaziv: Računarstvo
Vrsta studija: sveučilišni
Stupanj studija: diplomski
Akademski / stručni naziv: magistar/magistra inženjer/inženjerka računarstva (mag.ing.comp.)
Vrsta resursaTekst
Način izrade datotekeIzvorno digitalna
Prava pristupaZatvoreni pristup
Uvjeti korištenjaIkona licence Zaštićeno autorskim pravom.
Javna napomena
Datum i vrijeme pohrane2023-01-13 14:20:08