USER PASSWORD
Testo
 

  CALENDARIO
FEB 2020
L
M
M
G
V
S
D
12
3456789
10111213141516
17181920212223
242526272829
EVENTI SIM&VR
HOME PAGE
INFO GENERALI
 Benvenuto
 Chi Mimos
 Un po' di Storia
 Statuto
 Regolamento
 Consiglio Direttivo
 Per Associarsi
LAVORI IN CORSO
 Spring School 2019
 MIMOS Simulation Day 2019
 Salento AVR 2019
 SimulTech 2019
 BIC 19
ARTICOLI e NEWS
 2003
 2002
 2004
 2006
 2007
 2008
 2009
 2010
 2011
 2012
 2013
 2014
 2015
 2016
 2017
 2018
CONVEGNI MIMOS
 2001 Annuale
 2002 Annuale
 2003 Annuale
 2004 Annuale
 2005 Annuale
 2006 Annuale
 2006 HLA
 2007 Annuale
 2008 Convegni
 2009 Convegni
 2010 Convegni
 2011 Convegni
 2012 Convegni
 2012 Il Decennale
 2014 Convegni
 2013 Convegni
 2015 Convegni
 2016 Convegni
 2017 Convegni
 2018 Convegni
EVENTI SIM&VR
 2006
 2007
 2009
 2008
 2010
 2011
 2012
 2013
 2014
 2015
 2017
 2016
 2018
 2019
Pubblicazioni
 Pubblicazioni 2009
 Atti pubblicati 2011
PREMIO MIMOS
 2004
 2005
 2006
 2009
 2011
 2013
 2016
 2018
TESI E RICERCHE
 2003
 2007
 2008
 2009
CORPORATE CORNER
 Le Aziende di MIMOS
CONTATTI
 E-mail
 Pubblica con noi
 Segnala chi fa 3D!
ENGLISH NEWSLETTER
 2014
 2015
NEWSLETTER
 2007
 2008
 2009
 2010
 2011
 2012
 2013
 2014
 2015
 2016
AFFILIATI & PARTNER
CONTENUTI
MEDIA GALLERY
Autore: M. Malcangi   —  DSP

Autore: R. De Tintis   —  DSP

Sincronizzazione labiale e modellazione facciale in tempo reale per l'animazione di personaggi virtuali
Abstract:

Nel seguente contributo viene presentato un approccio innovativo alla animazione facciale di personaggi virtuali. Tutte le informazioni necessarie al controllo automatico del volto di modelli 3-D virtuali vengono ottenute in tempo reale a partire dall'analisi di flussi di parlato continuo. Utilizzando l'analisi numerica dei segnali congiuntamente con metodologie del soft computing (logica fuzzy e reti neurali), è stato possibile realizzare un sistema flessibile e a basso costo per l'estrazione delle informazioni inerenti le posizioni labiali e di alcune delle caratteristiche utili per la modellazione del volto. Il principale vantaggio nell'impiego di tecnologie basate sull'analisi di flussi di parlato continuo è rappresentato dalla non invasività, dal momento che il segnale può essere acquisito mediante un semplice microfono e nessun dispositivo deve essere applicato sul corpo dello speaker limitandone le possibilità di movimento (nessuna presenza di sensori magnetici o marker rilevabili da telecamere). In una prima fase dello sviluppo è stato realizzato il sistema (LipSyncä) dedicato alla sincronizzazione labiale, in seguito, l'automazione è stata estesa ad alcune delle espressioni facciali di base.

Nel seguente contributo viene presentato un approccio innovativo alla animazione facciale di personaggi virtuali. Tutte le informazioni necessarie al controllo automatico del volto di modelli 3-D virtuali vengono ottenute in tempo reale a partire dall'analisi di flussi di parlato continuo. Utilizzando l'analisi numerica dei segnali congiuntamente con metodologie del soft computing (logica fuzzy e reti neurali), è stato possibile realizzare un sistema flessibile e a basso costo per l'estrazione delle informazioni inerenti le posizioni labiali e di alcune delle caratteristiche utili per la modellazione del volto. Il principale vantaggio nell'impiego di tecnologie basate sull'analisi di flussi di parlato continuo è rappresentato dalla non invasività, dal momento che il segnale può essere acquisito mediante un semplice microfono e nessun dispositivo deve essere applicato sul corpo dello speaker limitandone le possibilità di movimento (nessuna presenza di sensori magnetici o marker rilevabili da telecamere). In una prima fase dello sviluppo è stato realizzato il sistema (LipSyncä) dedicato alla sincronizzazione labiale, in seguito, l'automazione è stata estesa ad alcune delle espressioni facciali di base.

 
Paper   visualizza
Slides   visualizza

MIMOS Movimento Italiano Modellazione e Simulazione - Associazione culturale senza scopo di lucro - Corso Marche 41 10146 Torino - CF 97623370018