prikaz prve stranice dokumenta Noise cancellation in automatic lip sync by speech signal analysis
Rad nije dostupan
magistarski rad
Noise cancellation in automatic lip sync by speech signal analysis
Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2011. urn:nbn:hr:168:877156
Košutić, Tomislav
Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
Zavod za telekomunikacije

Institucijski repozitorij: Repozitorij FER-a

Citirajte ovaj rad

Košutić, T. (2011). Noise cancellation in automatic lip sync by speech signal analysis (Magistarski rad). Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva. Preuzeto s https://urn.nsk.hr/urn:nbn:hr:168:877156

Košutić, Tomislav. "Noise cancellation in automatic lip sync by speech signal analysis." Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2011. https://urn.nsk.hr/urn:nbn:hr:168:877156

Košutić, Tomislav. "Noise cancellation in automatic lip sync by speech signal analysis." Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2011. https://urn.nsk.hr/urn:nbn:hr:168:877156

Košutić, T. (2011). 'Noise cancellation in automatic lip sync by speech signal analysis', Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, citirano: 26.11.2024., https://urn.nsk.hr/urn:nbn:hr:168:877156

Košutić T. Noise cancellation in automatic lip sync by speech signal analysis [Magistarski rad]. Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva; 2011 [pristupljeno 26.11.2024.] Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:877156

T. Košutić, "Noise cancellation in automatic lip sync by speech signal analysis", Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, Zagreb, 2011. Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:877156

Za citiranje koristite ovu mrežnu adresu: https://urn.nsk.hr/urn:nbn:hr:168:877156
Podaci o radu
NaslovNoise cancellation in automatic lip sync by speech signal analysis
Naslov (hrvatski)Poništavanje šuma pri automatskoj sinkronizaciji usana pomoću analize govornog signala
AutorTomislav Košutić
MentorIgor Sunday Pandžić (mentor)
Član povjerenstvaMaja Matijašević (predsjednik povjerenstva)
Član povjerenstvaIgor Sunday Pandžić (član povjerenstva)
Član povjerenstvaKrešimir Matković (član povjerenstva)
Ustanova koja je dodijelila
akademski / stručni stupanj		Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
(Zavod za telekomunikacije)
Zagreb
Datum i država obrane2011-11-04, Hrvatska
Znanstveno / umjetničko
područje, polje i grana		TEHNIČKE ZNANOSTI
Računarstvo
Univerzalna decimalna klasifikacija
(UDC)		004 - Računalna znanost i tehnologija. Računalstvo. Obrada podataka
Sažetak
This master thesis investigates noise cancellation techniques in order to enhance the performance of existing automatic lip synchronization system in noisy environments. Automatic lip synchronization is a method for generating virtual character face animation where animation is driven by the speech signal. The method consists of speech signal analysis, audio to visual mapping and face animation synthesis. Speech signal is mapped to visual representations of speech, visemes, by speech feature recognition. The presence of background noise in the speech signal degrades the speech feature recognition and results in poor lip sync animation quality. The thesis investigates different speech signal enhancement methods, proposes and implements algorithms for noise cancellation as part of the enhanced automatic lip synchronization system. Proposed method based on spectral subtraction effectively tracks and cancels the stationary and nonstationary noise in real time. Additional filters applied on speech features improve the recognition accuracy of the speech signal. Existing speech recognition system performance is improved with the use of dynamic neural networks, resulting in overall better lip sync animation quality. Implemented system is validated with several evaluation methods, showing robustness to different noise environments. Potential applications of the system are discussed in details. Enhanced lip synchronization system is speaker independent and suitable for real-time and offline applications.
Sažetak (hrvatski)
Ovaj rad istražuje tehnike poništavanja šuma s ciljem poboljšanja performansi postojećeg sustava za automatsku sinkronizaciju usana u bučnom okruženju. Automatska sinkronizacija usana je metoda generiranja animacije govora virtualnog lika na temelju zvučnog signala govora. Postupak se sastoji od analize signala govora, mapiranja govora u vizualni skup parametara i sinteze animacije virtualnog lika. Mapiranje signala govora u skup vizualnih parametara ostvaruje se podsustavom za prepoznavanje kodiranog govornog signala. Pozadinska buka u zučnom signalu degradira postupak prepoznavanja kodiranog govornog signala, što rezultira lošijom kvalitetom animacije govora virtualnog lika. U radu su istraženi različiti postupci za poboljšanje zašumljenog zvučnog signala govora. Na temelju istraživanja predložen je odgovarajući algoritam za poništavanje šuma u zvučnom signalu, zasnovan na spektralnoj subtrakciji. Algoritam je implementiran kao nadogradnja postojećeg sustava za automatsku sinkronizaciju usana. Algoritam spektralne subtrakcije efikasno prepoznaje i uspješno poništava šum u stvarnom vremenu. Uz poništavanje šuma dodatnim filtriranjem kodiranog govornog signala pospješuje se prepoznavanje govora u zvučnom signalu. Postojeći podsustav za prepoznavanje kodiranog govornog signala unaprijeđen je korištenjem dinamičkih neuronskih mreža. Rezultat jest kvalitetnija animacija govora virtualnog lika. Implementirani sustav validiran je pomoću različitih metoda za testiranje koje pokazuju otpornost sustava prema različitim razinama buke u zvučnom signalu. Potencijalne primjene sustava za automatsku sinkronizaciju usana izložene su do detalja. Poboljšani sustav za automatsku sinkronizaciju usana neovisan je o govorniku i prikladan za primjenu u stvarnom vremenu.
Ključne riječi
Ključne riječi (hrvatski)
Jezikengleski
URN:NBNurn:nbn:hr:168:877156
ProjektŠifra: 036-0362027-2028
Naziv: Utjelovljeni razgovorni agenti za usluge u umreženim i pokretljivim sustavima
Voditelj: Igor Sunday Pandžić
Pravna nadležnost: Hrvatska
Financijer: MZOS
Linija financiranja: ZP
Studijski programNaziv: Računarstvo
Vrsta studija: sveučilišni
Stupanj studija: poslijediplomski znanstveni (magistarski)
Akademski / stručni naziv: magistar inženjer računarstva (mag. ing. comp.)
URL zapisa u kataloguhttp://lib.fer.hr/cgi-bin/koha/opac-detail.pl?biblionumber=36911
Vrsta resursaTekst
Opseg83 str ; 30 cm
Način izrade datotekeIzvorno digitalna
Prava pristupaZatvoreni pristup
Uvjeti korištenjaIkona licence Zaštićeno autorskim pravom.
Datum i vrijeme pohrane2020-08-25 08:42:48