prikaz prve stranice dokumenta Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model
  Preuzmi
PDF 4.85 MB
disertacija
Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model
Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2023. urn:nbn:hr:168:820088
Zečević, Petar
Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
Zavod za elektroničke sustave i obradbu informacija

Institucijski repozitorij: Repozitorij FER-a

Citirajte ovaj rad

Zečević, P. (2023). Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model (Disertacija). Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva. Preuzeto s https://urn.nsk.hr/urn:nbn:hr:168:820088

Zečević, Petar. "Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model." Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2023. https://urn.nsk.hr/urn:nbn:hr:168:820088

Zečević, Petar. "Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model." Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2023. https://urn.nsk.hr/urn:nbn:hr:168:820088

Zečević, P. (2023). 'Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model', Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, citirano: 22.11.2024., https://urn.nsk.hr/urn:nbn:hr:168:820088

Zečević P. Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model [Disertacija]. Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva; 2023 [pristupljeno 22.11.2024.] Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:820088

P. Zečević, "Fast distributed cross-matching of big astronomical data and parameter estimation of moving point source model", Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, Zagreb, 2023. Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:820088

Za citiranje koristite ovu mrežnu adresu: https://urn.nsk.hr/urn:nbn:hr:168:820088
Podaci o radu
NaslovFast distributed cross-matching of big astronomical data and parameter estimation of moving point source model
Naslov (engleski)Brzo raspodijeljeno uparivanje velikih astronomskih podataka i procjena parametara modela gibajućega točkastog izvora
AutorPetar Zečević
MentorSven Lončarić (mentor)
MentorMario Jurić https://orcid.org/0000-0003-1996-9252 (mentor)
Član povjerenstvaMarko Subašić (predsjednik povjerenstva)
Član povjerenstvaZvonko Kostanjčar (član povjerenstva)
Član povjerenstvaVernesa Smolčić (član povjerenstva)
Ustanova koja je dodijelila
akademski / stručni stupanj		Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
(Zavod za elektroničke sustave i obradbu informacija)
Zagreb
Datum i država obrane2023-11-13, Hrvatska
Znanstveno / umjetničko
područje, polje i grana		TEHNIČKE ZNANOSTI
Računarstvo
Univerzalna decimalna klasifikacija
(UDC)		004 - Računalna znanost i tehnologija. Računalstvo. Obrada podataka
Sažetak
The thesis develops two original methods: “Distributed Zones Algorithm” and “Online Multifit”. “Distributed Zones Algorithm” is a zone-based method for fast distributed crossmatching of big astronomical data. It is developed based on the Zones Algorithm and comprises a distributed data organization scheme and an efficient method of positionally joining data using a moving window. The algorithm is implemented within a system called AXS (Astronomical Extensions for Spark), based on Apache Spark and extended with astronomy-specific functionalities. The system’s cross-matching performance has been extensively tested in single-machine and “cloud” environments. “OnlineMultifit” is a method for parameter estimation of a moving point-source model based on sequential Bayesian updating. It was developed by extending the Multifit method. OnlineMultifit utilizes Bayesian statistics to obtain the full posterior probability distribution of moving point source model parameters but it does so by processing one image at a time using “sequential updating” technique, updating the posteriors after each image. The method approximates posteriors as mixtures of Gaussians and the main challenge here is to reduce the errors introduced by these approximations. The final result is that the method uses less computational resources while obtaining full posterior estimates. Furthermore, the estimates can be stored in a compressed form (the means and covariances of Gaussian distributions).
Sažetak (engleski)
Disertacijom se razvijaju dvije originalne metode: “algoritam baziran na distribuiranim zonama” i “slijedni Multifit”. “Algoritam baziran na distribuiranim zonama” je metoda za brzo distribuirano uparivanje velikih astronomskih podataka, razvijena na temelju “algoritma baziranom na zonama”. Metoda se sastoji od sheme za distribuiranu organizaciju podataka i efikasne metode za poziciono uparivanje podataka pomoću pomičnog prozora. Algoritam je implementiran unutar sustava nazvanog AXS (eng. Astronomical Extensions for Spark), baziranog na Apache Spark platformi koja je proširena funkcionalnostima specifičnim za astronomiju. Performanse sustava u uparivanju detaljno su testirane na jednoj mašini te u okolini “u oblaku”. “Slijedni Multifit” je metoda za estimaciju parametara modela gibajućeg točkastog izvora temeljena na slijednom Bayesovom osvježavanju. Razvijena je nadogradnjom Multifit metode. Slijedni Multifit koristi Bayesovu statistiku za dobivanje pune posteriorne distribucije vjerojatnosti parametara modela gibajućeg točkastog izvora, no to čini obradom jedne po jedne slike, metodom “slijednog osvježavanja”, osvježavajući posterior nakon svake slike. Metoda aproksimira posteriore kao skup Gaussovih distribucija te joj je glavni izazov u smanjenju grešaka koje takva aproksimacija unosi. Krajnji je rezultat taj da metoda koristi manje računalnih resursa, a procjenjuje potpune posteriorne distribucije vjerojatnosti. Štoviše, procjene se mogu spremiti u kompresiranoj formi (u obliku središnjih vrijednosti i kovarijanci Gaussovih distribucija vjerojatnosti).
Ključne riječi
Ključne riječi (engleski)
Jezikengleski
URN:NBNurn:nbn:hr:168:820088
Datum promocije2023
Studijski programNaziv: Računarstvo
Vrsta studija: sveučilišni
Stupanj studija: poslijediplomski znanstveni (doktorski)
Akademski / stručni naziv: Doktor znanosti (dr. sc.)
Vrsta resursaTekst
Opseg101 str. : graf. prikazi u boji ; 30 cm
Način izrade datotekeIzvorno digitalna
Prava pristupaOtvoreni pristup
Uvjeti korištenjaIkona licence Zaštićeno autorskim pravom.
Datum i vrijeme pohrane2024-05-10 13:52:00