Sostituire con la AI un personaggio di un video con un'altra persona

Mixare una foto con un video con la AI di Viggle facendo compiere alla persona della foto i movimenti di quella nel video per poi scaricare il filmato

Uno strumento ancora in Beta, ma molto interessante basato sulla intelligenza artificiale, è Viggle. Nel post appena linkato abbiamo mostrato come con Viggle si possa selezionare un movimento tra quelli della loro libreria, scegliere una immagine di una persona dal computer quindi, mediante l'utilizzo di un prompt, far compiere alla persona della foto i movimenti mostrati nel video. Per fare in modo che l'intelligenza artificiale porti a termine il processo, occorre che nella foto la persona si visualizzi dalla testa ai piedi. Il video risultante poi potrà essere scaricato.

Si potrà scegliere se scaricarlo con lo sfondo bianco o con quello verde, in questo caso poi potrà essere applicato il Green Screen con uno strumento di video editing per posizionare il soggetto in movimento sopra uno sfondo.

La sintassi del prompt per questa funzionalità deve iniziare con la stringa /animate. In questo post invece mi occuperò della funzionalità attivabile con la stringa /mix con cui far compiere al personaggio di una foto i movimenti fatti da una persona in un altro video. Dovremo quindi caricare su Viggle una immagine e un filmato.

Per accedere a Viggle si apre la pagina appena linkata quindi si clicca sul pulsante Join The Beta. Si aprirà un'altra scheda in cui vedremo un messaggio di invito su Discord. Se abbiamo già un account di Discord, potremo accedere, in caso contrario dovremo crearlo sul momento. Dopo essere andati su Apri Discord, nella colonna di sinistra della sua interfaccia, visualizzeremo tutti i servizi che stiamo utilizzando come Midjourney, Leonardo.ai, Adobe Firefly, Ideogram, ecc... Ci sarà anche Viggle su cui dovremo cliccare per aprine le stanze disponibili.

Ho pubblicato sul mio Canale Youtube un tutorial in cui illustro come mixare foto e video con la AI di Viggle.

Si sceglie una delle stanze visualizzate nella seconda colonna a partire da sinistra. Al momento sono animate-x con x che va da 1 a 15. Dopo aver scelto una stanza si possono visualizzare le realizzazioni compiute dagli altri utenti.

Per creare un video con un personaggio di una foto che compie gli stessi movimenti di una persona in un altro video, dobbiamo andare in basso e cliccare sul pulsante del Più. Visualizzeremo le opzioni Carica File e Usa App.

Si va su Usa App. Tra le tre opzioni visualizzate (/animate, /mix e /setting) si sceglie /mix. Ci verrà mostrato un prompt da completare. Nelle due aree per i file si dovranno trascinare l'immagine e il video o caricarli dal computer.

Si dovrà poi scegliere il Background tra White e Green e il Filetune tra On e Off. Si clicca a sinistra dell'area dei rispettivi prompt per visualizzare le due opzioni. Filetune On significa avere una maggiore sincronia tra video caricato e video risultante però l'intelligenza artificiale impiegherà più tempo nella elaborazione. Si va su Invio.

Cliccando su Vedi i Messaggi più Recenti andremo in fondo al rullo della chat per attendere che venga mostrato il nostro video. Per non farsi sfuggire il risultato, si clicca in alto a destra sulla icona dei Messaggi → Menzioni.

Visualizzeremo la notifica con i file caricati e con quello risultante. Andando su Vai vedremo la realizzazione nel rullo della Chat. Si potrà scaricare il video passandoci con il cursore per evidenziare la freccia verso il basso e cliccarci.

Verrà scaricato un file video in formato MP4 con risoluzione HD. Il video avrà un watermark posizionato in basso a destra. Lo potremo eliminare con il filtro Rimuovi Macchie di Shotcut mentre lo sfondo verde potrà essere eliminato con DaVinci Resolve ricordandoci che nella versione in italiano il filtro 3D Keyer diventa Intarsio 3D.