prikaz prve stranice dokumenta Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka
Rad nije dostupan
diplomski rad
Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka
Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2024. urn:nbn:hr:168:789736
Derdić, Ivan
Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva

Institucijski repozitorij: Repozitorij FER-a

Citirajte ovaj rad

Derdić, I. (2024). Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka (Diplomski rad). Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva. Preuzeto s https://urn.nsk.hr/urn:nbn:hr:168:789736

Derdić, Ivan. "Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka." Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2024. https://urn.nsk.hr/urn:nbn:hr:168:789736

Derdić, Ivan. "Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka." Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2024. https://urn.nsk.hr/urn:nbn:hr:168:789736

Derdić, I. (2024). 'Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka', Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, citirano: 26.11.2024., https://urn.nsk.hr/urn:nbn:hr:168:789736

Derdić I. Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka [Diplomski rad]. Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva; 2024 [pristupljeno 26.11.2024.] Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:789736

I. Derdić, "Sustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka", Diplomski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, Zagreb, 2024. Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:789736

Za citiranje koristite ovu mrežnu adresu: https://urn.nsk.hr/urn:nbn:hr:168:789736
Podaci o radu
NaslovSustav za obradu polustrukturiranih tekstnih datoteka poslovnih transakcijskih podataka
Naslov (engleski)System for processing of semi-structured text files of business transaction data
AutorIvan Derdić
MentorAlan Jović (mentor)
Član povjerenstvaAlan Jović (predsjednik povjerenstva)
Član povjerenstvaNikolina Frid (član povjerenstva)
Član povjerenstvaJan Šnajder (član povjerenstva)
Ustanova koja je dodijelila
akademski / stručni stupanj		Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
Zagreb
Datum i država obrane2024-07-08, Hrvatska
Sažetak
Ovaj diplomski rad bavi se razvojem sustava za obradu polustrukturiranih tekstual- nih datoteka poslovnih transakcijskih podataka. U radu se analiziraju i implementiraju tri modela obrade podataka: ETL (izvuci, obradi, spremi), ELT (izvuci, spremi, obradi) i ETLL (izvuci, obradi i spremi, spremi). Implementacija koristi tehnologije Delta Lake i Apache DataFusion, omogućujući učinkovitu obradu velikih količina podataka i osi- guravajući svojstva ACID. Cilj rada je usporediti performance navedenih modela u kon- tekstu brzine obrade. Eksperimentalni rezultati pokazuju prednosti i nedostatke svakog modela, ovisno o specifičnim uvjetima i zahtjevima obrade podataka. Model ELT2 ima najbolje performance u odnosu na modele ETL, ELT i ETLL. Model ELT2 prvo sekvencijalno obradi datoteke u brončanu tablicu i zatim sve podatke iz bron- čane tablice obradi u srebrne tablice. Model ELT2 je najbrži jer se podaci iz brončane tablice učitavaju u memoriju samo jednom.
Sažetak (engleski)
This thesis addresses the development of a system for processing semi-structured text files of business transaction data. The study analyzes and implements three data process- ing models: including ETL (Extract, Transform, Load), ELT (Extract, Load, Transform), and ETLL (Extract, Transform, Load, Load) models. The implementation utilizes Delta Lake and Apache DataFusion technologies, enabling efficient processing of large data volumes while ensuring ACID properties. The aim is to compare the performance of these models in terms of processing speed. Experimental results highlight the advan- tages and disadvantages of each model, depending on specific conditions and data pro- cessing requirements. The ELT2 model has the best performance compared to the ETL, ELT, and ETLL models. The ELT2 model first sequentially processes files into the bronze table and then processes all the data from the bronze table into the silver tables. The ELT2 model is the fastest because the data from the bronze table is loaded into memory only once.
Ključne riječi
Ključne riječi (engleski)
Jezikhrvatski
URN:NBNurn:nbn:hr:168:789736
Studijski programNaziv: Računarstvo
Vrsta studija: sveučilišni
Stupanj studija: diplomski
Akademski / stručni naziv: magistar/magistra inženjer/inženjerka računarstva (mag.ing.comp.)
Vrsta resursaTekst
Način izrade datotekeIzvorno digitalna
Prava pristupaZatvoreni pristup
Uvjeti korištenjaIkona licence Zaštićeno autorskim pravom.
Javna napomena
Datum i vrijeme pohrane2024-10-12 20:25:47