LIPSIA
Anima la bocca di personaggi 2d seguendo in modo preciso il parlato di un file audio.
Trascrive un file audio e genera un video con sfondo trasparente, pronto per essere sovrapposto alle tue produzioni video.
Pensata in particolare per l’italiano, offre un lip-sync naturale e pensato apposta per la lingua italiana.
Come funziona
Carica in Lipsia un file audio e ottieni la trascrizione completa in pochi secondi senza collegarsi a internet e senza account (lingue supportate: Italiano e Inglese).
In automatico, a partire dalla trascrizione, Lipsia associa a ogni parola i corretti movimenti labiali, seguendo regole fonetiche specifiche per la lingua italiana.
Partendo dalla trascrizione completa, puoi suddividere il testo in blocchi e assegnare a ciascuno un puppet o un’espressione diversa, adattando l’aspetto del personaggio sia al contenuto del racconto sia all’emozione del tuo personaggio.
In aggiunta, è possibile intervenire manualmente sul lip-sync per modificare pause, prolungare le vocali o apportare qualsiasi altra correzione ad hoc.
Lip sync in italiano: come creare il puppet per Lipsia
Lipsia utilizza la libreria Rhubarb Lip Sync, che analizza automaticamente il parlato e lo traduce in una sequenza di 9 posizioni della bocca, sincronizzate con l’audio.
Riposo, neutra, per silenzi e pause
M, B, P
D, T, S, Z, R, C, G, Q, K, J, W, X, Y, più la “i” come vocale
E (Semiaperta)
A (Aperta)
O (Arrotondata, aperta)
U (Labbra arrotondate in avanti “a bacio”)
F (Labbro superiore sui denti inferiori)
L, e i gruppi “gli“/”gl” (Mascella aperta, lingua dietro i denti)
Pensato per la fonetica italiana
l motore di Lipsia non si limita a leggere le lettere una per una: applica regole fonetiche specifiche della lingua italiana, così da interpretare correttamente anche i casi in cui scrittura e pronuncia non coincidono.
Due esempi, gestiti automaticamente:
- Lettere mute o senza una forma labiale dedicata: la H non produce alcun movimento, mentre la N, essendo un suono nasale, non richiede una forma della bocca specifica. Per questo, in parole come “ho” o “mano”, non viene generata una posizione dedicata per queste lettere.
- Gruppi di lettere che rappresentano un unico suono: CH, GH, SC e GN vengono riconosciuti come unità fonetiche e non elaborati lettera per lettera. Allo stesso modo, GL/GLI vengono trattati secondo la loro pronuncia italiana.
In questo modo il motore non anima semplicemente ciò che è scritto, ma cerca di riprodurre ciò che viene realmente pronunciato in italiano.
Questa ultima frase, secondo me, è quella che comunica meglio il valore del motore.
Se invece lavori in inglese, oppure preferisci inserire e correggere manualmente il testo che guiderà l’animazione, Lipsia mantiene disponibile anche il motore originale Rhubarb Lip Sync.
Perchè usare Lipsia
Lip-sync pensato per l’italiano
Lipsia utilizza un motore fonetico progettato specificamente per la lingua italiana, capace di gestire correttamente suoni, lettere mute e gruppi di lettere tipici dell’italiano.
Lavora offline
Lipsia funziona completamente offline. Il tuo audio e i tuoi progetti rimangono sul computer e non vengono inviati a server esterni. Una volta installato il modello necessario, puoi elaborare tutti gli audio che vuoi senza acquistare crediti o pagare per ogni elaborazione. Il lip-sync non viene “inventato” da un’intelligenza artificiale.
Tieni sotto controllo le eccezioni
L’automazione fa il lavoro pesante, ma puoi intervenire manualmente quando vuoi: correggere una forma della bocca, modificare una pausa, allungare una vocale o sistemare qualsiasi dettaglio.
Personaggi ed espressioni personalizzabili
Crea la tua libreria di puppet, assegna diverse espressioni alle varie parti del video e utilizza transizioni per rendere i cambi più naturali.
Pronto per il montaggio video
Esporta direttamente con sfondo trasparente e canale alpha, green screen o colore personalizzato. Puoi inoltre esportare solo una parte del progetto o dividere automaticamente i video più lunghi. Tutto è raccolto in un’unica applicazione: trascrizione, lip-sync, espressioni, correzioni ed esportazione, senza dover gestire separatamente i diversi strumenti che lavorano dietro le quinte.
Transizioni e animazioni automatiche
Lipsia consente di preparare dei frame di transizione (“in between”) da inserire automaticamente quando cambia il puppet o l’espressione. I frame vengono posizionati a cavallo del cambio, riducendo drasticamente il lavoro di editing manuale e rendendo le transizioni più fluide.
Dai vita al personaggio, oltre al lip-sync
Con Lipsia puoi aggiungere animazioni ed elementi extra alle tue espressioni, sincronizzandoli automaticamente con la durata di ogni scena.
Puoi creare fino a 5 animazioni personalizzate per ogni espressione, ideali per ammiccamenti, movimenti, gesti, tic o piccoli effetti, che vengono riprodotte automaticamente mentre il tuo puppet sta parlando.
Puoi inoltre aggiungere animazioni in loop, perfette per elementi che devono continuare a muoversi per tutta la durata dell’espressione: un respiro, un battito, un effetto luminoso o qualsiasi movimento ripetuto.
E non finisce qui: puoi anche cambiare lo sfondo automaticamente durante una specifica espressione, senza dover intervenire manualmente sul montaggio.
Il risultato? Il personaggio non si limita a muovere la bocca: può cambiare espressione, muoversi, reagire e animarsi in modo più ricco, tutto coordinato automaticamente da Lipsia.
A chi è rivolto
Lipsia è pensato per studi di animazione, grafici, animatori e creator che vogliono realizzare personaggi parlanti in modo rapido, preciso e facilmente personalizzabile.
È particolarmente utile anche per V-Tuber e content creator, che possono sincronizzare automaticamente il movimento della bocca dei propri personaggi con la voce, mantenendo comunque il pieno controllo sull’animazione.