prikaz prve stranice dokumenta Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu
  Preuzmi
PDF 17.32 MB
disertacija
Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu
Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2022. urn:nbn:hr:168:127487
Šarić, Josip
Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
Zavod za elektroniku, mikroelektroniku, računalne i inteligentne sustave

Institucijski repozitorij: Repozitorij FER-a

Citirajte ovaj rad

Šarić, J. (2022). Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu (Disertacija). Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva. Preuzeto s https://urn.nsk.hr/urn:nbn:hr:168:127487

Šarić, Josip. "Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu." Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2022. https://urn.nsk.hr/urn:nbn:hr:168:127487

Šarić, Josip. "Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu." Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2022. https://urn.nsk.hr/urn:nbn:hr:168:127487

Šarić, J. (2022). 'Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu', Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, citirano: 22.11.2024., https://urn.nsk.hr/urn:nbn:hr:168:127487

Šarić J. Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu [Disertacija]. Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva; 2022 [pristupljeno 22.11.2024.] Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:127487

J. Šarić, "Združeno prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu", Disertacija, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, Zagreb, 2022. Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:127487

Za citiranje koristite ovu mrežnu adresu: https://urn.nsk.hr/urn:nbn:hr:168:127487
Podaci o radu
NaslovZdruženo prognoziranje značajki i njihova pomaka za predviđanje semantičke budućnosti u videu
Naslov (engleski)Joint forecasting of features and feature motion for semantic future prediction in video
AutorJosip Šarić
MentorSiniša Šegvić (mentor)
Član povjerenstvaZoran Kalafatić (predsjednik povjerenstva)
Član povjerenstvaIvan Marković (član povjerenstva)
Član povjerenstvaTonći Antunović (član povjerenstva)
Ustanova koja je dodijelila
akademski / stručni stupanj		Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
(Zavod za elektroniku, mikroelektroniku, računalne i inteligentne sustave)
Zagreb
Datum i država obrane2022-07-14, Hrvatska
Znanstveno / umjetničko
područje, polje i grana		TEHNIČKE ZNANOSTI
Računarstvo
Univerzalna decimalna klasifikacija
(UDC)		004 - Računalna znanost i tehnologija. Računalstvo. Obrada podataka
Sažetak
Gusto semantičko prognoziranje anticipira događaje u videu predviđanjem semantike na razini piksela u budućem neopaženom slikovnom okviru. Ova disertacija posebnu pažnju posvećuje metodama gustog prognoziranja na razini apstraktnih značajki dubokog modela. Predložena prognostička metoda može se primijeniti na različite oblike gustog raspoznavanja u jednoj slici. Metoda prognozira značajke uz pomoć dva komplementarna modula. Modul F2M (eng. features-to-motion} prognozira gusto polje pomaka koji pomiču značajke iz prošlosti prema njihovim budućim položajima. Modul F2F (eng. features-to-features) izravno regresira buduće značajke i zbog toga ima mogućnost zamišljanja novootkrivenih dijelova scene. Združeni model F2MF kombinira prognoze dvaju modula u skladu s predviđenim poljem težina. Posljedično, model ima mogućnost prepoznavanja novootkrivenih dijelova scene jer u njima težine preferiraju izravno prognoziranje modulom F2F. Prognoziranje defomiranjem dominantno je u dijelovima scene gdje se lako može uspostaviti korespondencija. Predložena metoda je učinkovita jer prognozira najsažetiju i najapstraktniju moguću reprezentaciju modela za gusto raspoznavanje. Prognostičku točnost modela poboljšavaju izvedbeni detalji kao što su deformabilne konvolucije i reprezentacija obogaćena prostorno-vremenskim korelacijskim koeficijentima. Eksperimentalno vrednovanje razmatra prognoziranje semantičke segmentacije, segmentacije instanci i panoptičke segmentacije. Rezultati su pokazali da predložena metoda ostvaruje kompetitivnu točnost na podatkovnom skupu Cityscapes.
Sažetak (engleski)
Dense semantic forecasting anticipates events in video by predicting pixel-level semantics in a future unobserved frame. This dissertation focuses on dense semantic forecasting methods which operate at the level of abstract features of a deep model. The proposed forecasting method can be applied to different single-frame dense recognition models. The method forecasts features through two complementary modules. The F2M (features-to-motion) module forecasts a dense deformation field which warps past features to their future positions. The F2F (features-to-features) module directly regresses future features and therefore has the ability to imagine novel parts of the scene. The joint F2MF model combines the forecasts of the two modules according to the predicted weights. Consequently, the model has the ability to recognize novel parts of the scene because there the weights favor direct forecasting by the F2F module. F2M forecasting is dominant in the parts of the scene where correspondence can be easily established. The proposed method is efficient because it forecasts the best possible concise and abstract representation of the dense recognition model. The forecasting accuracy of the model is improved by implementation details such as deformable convolutions and the representation enriched with spatio-temporal correlation coefficients. Experimental evaluation considers the forecasting of semantic segmentation, instance segmentation and panoptic segmentation. The results show that the proposed method achieves competitive accuracy on the Cityscapes dataset.
Ključne riječi
Ključne riječi (engleski)
Jezikhrvatski
URN:NBNurn:nbn:hr:168:127487
Datum promocije2022
Studijski programNaziv: Računarstvo
Vrsta studija: sveučilišni
Stupanj studija: poslijediplomski znanstveni (doktorski)
Akademski / stručni naziv: Doktor znanosti (dr. sc.)
Vrsta resursaTekst
Opsegx, 86 str. : graf. prikazi ; 30 cm. + CD-ROM.
Način izrade datotekeIzvorno digitalna
Prava pristupaOtvoreni pristup
Uvjeti korištenjaIkona licence Zaštićeno autorskim pravom.
Datum i vrijeme pohrane2022-11-28 09:18:25