Lintelligenza artificiale di Alibaba trasforma le foto in suoni e canti

EMO (Emotive Portrait Alive) è una nuova intelligenza artificiale generativa studiata dall'Institute of Intelligent Computing (IIC) di Alibaba, dotata della capacità di trasformare "magicamente" qualsiasi immagine in un parlato o un canto realistico.

In altre parole, l'intelligenza artificiale di Alibaba è in grado di trasformare un'immagine di riferimento statica e un audio vocale in un video in grado di parlare e cantare con espressioni naturali.

Le IA precedenti modificavano solo la bocca e parte del viso, mentre EMO può creare espressioni facciali, espressioni naturali della bocca, una sincronizzazione labiale precisa, muovere le sopracciglia, aggrottare la fronte o persino ondeggiare a ritmo di musica.

Alibaba ha pubblicato alcuni video che mostrano come le immagini vengono trasformate in video e come vengono cantate al volo le canzoni importate. EMO supporta inglese, cinese e molte altre lingue.

Alibaba ha rivelato che, per poter creare espressioni facciali realistiche, EMO è stato addestrato con una grande quantità di dati di immagini, audio e video attraverso il suo modello di diffusione chiamato Audio2Video.

Per affrontare l'attuale grande sfida del realismo e dell'espressività nella generazione di video da immagini e suoni, il team di ricerca si è concentrato sulla relazione e sulle sfumature tra segnali audio e movimenti facciali, bypassando il collegamento intermedio del modello 3D o i punti di riferimento facciali, effettuando transizioni fluide tra i fotogrammi e preservando la coerenza nel video.

Alibaba non ha ancora rivelato quando renderà pubblica questa intelligenza artificiale, ma ha pubblicato i dati di EMO su Github e i documenti di ricerca su ArXiv.

Lascia un commento

L'Europa verrebbe coinvolta in un'ipotetica guerra nucleare tra Stati Uniti, Israele e Iran? Le regole della NATO spiegate.

L'Europa verrebbe coinvolta in un'ipotetica guerra nucleare tra Stati Uniti, Israele e Iran? Le regole della NATO spiegate.

Una guida agli articoli 4 e 5 della NATO, alle norme ONU sull'autodifesa e al perché la consultazione non implica l'ingresso automatico dell'Europa in guerra.

L'Iran potrebbe già possedere armi nucleari? Come interpretare le prove

L'Iran potrebbe già possedere armi nucleari? Come interpretare le prove

Valutare le affermazioni riguardanti l'Iran in sei fasi, distinguendo tra arricchimento dell'uranio, sviluppo di armi e possesso accertato.

Autorità nucleare statunitense e israeliana: cosa spiegano realmente le fonti pubbliche

Autorità nucleare statunitense e israeliana: cosa spiegano realmente le fonti pubbliche

Comprendere l'autorità decisionale in materia nucleare in sei fasi, inclusi il controllo civile statunitense e i limiti dell'informazione pubblica su Israele.

Stretto di Hormuz nel 2026: cosa dicono le fonti ufficiali in merito alle interruzioni della navigazione

Stretto di Hormuz nel 2026: cosa dicono le fonti ufficiali in merito alle interruzioni della navigazione

Una guida alle prove ufficiali del 2026 relative all'interruzione del traffico marittimo a Hormuz, alle accuse legate all'Iran, agli incidenti confermati e a ciò che rimane incerto.

Un ipotetico attacco nucleare congiunto tra Stati Uniti e Israele contro l'Iran scatenerebbe la Terza Guerra Mondiale?

Un ipotetico attacco nucleare congiunto tra Stati Uniti e Israele contro l'Iran scatenerebbe la Terza Guerra Mondiale?

Una guida basata su fonti attendibili sui rischi di escalation nucleare, le norme della Carta delle Nazioni Unite e l'articolo 5 della NATO in uno scenario puramente ipotetico relativo all'Iran.

Come prepararsi a un'ipotetica interruzione di corrente causata da un impulso elettromagnetico (EMP): 5 passi da compiere per i civili.

Come prepararsi a un'ipotetica interruzione di corrente causata da un impulso elettromagnetico (EMP): 5 passi da compiere per i civili.

Segui cinque passaggi per prepararti a un'interruzione di corrente; gli scenari nucleari e EMP sono ipotetici e le istruzioni ufficiali per il rifugio hanno la priorità.

Come valutare le interruzioni informatiche senza presumere la terza guerra mondiale: una guida in 5 passaggi

Come valutare le interruzioni informatiche senza presumere la terza guerra mondiale: una guida in 5 passaggi

Segui 5 semplici passaggi difensivi per verificare un attacco informatico, proteggere gli account domestici ed evitare di confondere un'interruzione di servizio con una guerra.

Inverno nucleare: come valutare gli effetti sul clima globale di un ipotetico attacco iraniano

Segui questi 5 passaggi per valutare gli effetti sul clima di un ipotetico attacco iraniano, confrontare le ipotesi dei modelli ed evitare previsioni infondate.

Quanto tempo impiegherebbe la Terra a riprendersi dopo un'ipotetica guerra nucleare?

Quanto tempo impiegherebbe la Terra a riprendersi dopo un'ipotetica guerra nucleare?

Scopri sei passaggi per leggere le ricerche sul clima, l'alimentazione e il recupero degli ecosistemi dopo un ipotetico conflitto nucleare.

Lista di controllo per la preparazione alle ricadute nucleari: forniture essenziali e misure per il rifugio

Lista di controllo per la preparazione alle ricadute nucleari: forniture essenziali e misure per il rifugio

Crea un pratico kit di sopravvivenza in caso di apocalisse in sei semplici passaggi, con cibo e acqua sigillati, una radio, forniture mediche e istruzioni per la costruzione di un rifugio.