prikaz prve stranice dokumenta Automatic lip synchronization by speech signal analysis
Rad nije dostupan
magistarski rad
Automatic lip synchronization by speech signal analysis
Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2005. urn:nbn:hr:168:946018
Zorić, Goranka
Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
Zavod za telekomunikacije

Institucijski repozitorij: Repozitorij FER-a

Citirajte ovaj rad

Zorić, G. (2005). Automatic lip synchronization by speech signal analysis (Magistarski rad). Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva. Preuzeto s https://urn.nsk.hr/urn:nbn:hr:168:946018

Zorić, Goranka. "Automatic lip synchronization by speech signal analysis." Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2005. https://urn.nsk.hr/urn:nbn:hr:168:946018

Zorić, Goranka. "Automatic lip synchronization by speech signal analysis." Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, 2005. https://urn.nsk.hr/urn:nbn:hr:168:946018

Zorić, G. (2005). 'Automatic lip synchronization by speech signal analysis', Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, citirano: 25.12.2024., https://urn.nsk.hr/urn:nbn:hr:168:946018

Zorić G. Automatic lip synchronization by speech signal analysis [Magistarski rad]. Zagreb: Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva; 2005 [pristupljeno 25.12.2024.] Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:946018

G. Zorić, "Automatic lip synchronization by speech signal analysis", Magistarski rad, Sveučilište u Zagrebu, Fakultet elektrotehnike i računarstva, Zagreb, 2005. Dostupno na: https://urn.nsk.hr/urn:nbn:hr:168:946018

Za citiranje koristite ovu mrežnu adresu: https://urn.nsk.hr/urn:nbn:hr:168:946018
Podaci o radu
NaslovAutomatic lip synchronization by speech signal analysis
Naslov (hrvatski)Automatska sinkronizacija usana pomoću analize govornog signala
AutorGoranka Zorić
MentorIgor Sunday Pandžić (mentor)
Član povjerenstvaMaja Matijašević (predsjednik povjerenstva)
Član povjerenstvaIgor Sunday Pandžić (član povjerenstva)
Član povjerenstvaRobert Manger (član povjerenstva)
Ustanova koja je dodijelila
akademski / stručni stupanj		Sveučilište u Zagrebu
Fakultet elektrotehnike i računarstva
(Zavod za telekomunikacije)
Zagreb
Datum i država obrane2005-10-21, Hrvatska
Znanstveno / umjetničko
područje, polje i grana		TEHNIČKE ZNANOSTI
Elektrotehnika
Univerzalna decimalna klasifikacija
(UDC)		621.3 - Elektrotehnika
004 - Računalna znanost i tehnologija. Računalstvo. Obrada podataka
Sažetak
This master thesis investigates automatic lip synchronization. It is a method for generating an animation of 3D human face model where the animation is driven only by a speech signal. The whole process is completely automatic and starts from the speech signal. The automatic lip synchronization consists of two main parts: audio to visual mapping and a face synthesis. The thesis proposes and implements a system for the automatic lip synchronization of synthetic 3D avatars based only on the speech input. The speech signal is classified into viseme classes using neural networks. The topology of neural networks is automatically configured using genetic algorithms. Visual representation of phonemes, viseme, defined in MPEG-4 FA, is used for face synthesis. The system is adopted for specificity of the Croatian language. Detailed system validation based on three different evaluation methods is done and potential applications of these technologies are discussed in details. This method is suitable for real-time and offline applications. It is speaker independent and multilingual.
Sažetak (hrvatski)
Ovaj magistarski rad istražuje automatsku sinkronizaciju usana. To je metoda generiranja odgovarajuće animacije 3D modela ljudskog lica s obzirom na postojeći zvučni signal govora, tako da se dobiva animirani lik koji govori. Postupak je potpuno automatiziran i počinje od zvučnog signala govora. Automatska sinkronizacija govora sastoji se od dva dijela: preslikavanja iz ulaznog audio u izlazni vizualni skup parametara i sinteze lica. U radu je predložen i napravljen sistem za automatsku sinkronizaciju usana temeljen samo na govornom signalu. Klasifikacija govornog signala u grupe vizeme izvedena je pomoću neuronskih mreža. Optimalna topologija neuronskih mreža se automatski određuje pomoću genetičkih algoritama. Vizemi, vizualni predstavnici fonema, definirani su u MPEG-4 FA standardu, a koriste se za sintezu lica. Sistem je optimiziran za specifičnosti hrvatskog jezika. Za validaciju sistema korištene su tri različite metode testiranja., a potencijalne primjene ovakvih tehnologija izložene su do detalja. Opisana metoda za sinkronizaciju usana prikladna je za primjene u stvarnom vremenu ali i za offline produkcije. Neovisna je o govorniku i višejezična je.
Ključne riječi
Ključne riječi (hrvatski)
Jezikengleski
URN:NBNurn:nbn:hr:168:946018
Studijski programNaziv: Elektrotehnika
Vrsta studija: sveučilišni
Stupanj studija: poslijediplomski znanstveni (magistarski)
Akademski / stručni naziv: Magistar znanosti elektrotehnike (mag. ing. el.)
Vrsta resursaTekst
Način izrade datotekeIzvorno digitalna
Prava pristupaZatvoreni pristup
Uvjeti korištenjaIkona licence Zaštićeno autorskim pravom.
Datum i vrijeme pohrane2019-07-04 07:21:57