Il modello Wan 2.1, sviluppato da Alibaba, è un avanzato sistema di intelligenza artificiale per la generazione di video da testo e immagini, recentemente reso open source. Nell'articolo di ieri abbiamo visto come con questo modello si possa generare video anche in risoluzione HD da un prompt di testo che lo descriveva.
Si potevano creare video usando i modelli caricati e resi disponibili sul gratuito HuggingFace e su Replicate che invece è a pagamento. Per accedere a HuggingFace ci si registra con un un indirizzo email e con una password.
Invece per l'accesso a Replicate si usa l'account di GitHub e si deve anche aggiungere un sistema di pagamento come una carta di credito. Si tratta di due strumenti creati per gli sviluppatori che vi possono caricare i loro modelli ma che sono particolarmente interessanti anche per i comuni utenti che possono creare immagini e video con la AI.
In questo post vedremo come con il modello Wan 2.1 si possano generare video da immagini e da una descrizione testuale. Su HuggingFace si deve attendere che la GPU risulti essere disponibile mentre su Replicate lo è sempre.
Ho pubblicato sul Canale Youtube una guida sui tool Image To Video di Wan 2.1 su HuggingFace e Replicate.
Dopo esserci registrati e esserci loggati a HuggingFace, si apre la pagina di Wan 2.1 e si sceglie la scheda Image To Video. Nel campo in alto si trascina o si seleziona l'immagine con cui creare il video quindi si digita il prompt.
Consiglio di togliere la spunta a Watermark per avere un video senza loghi. Si va poi su Generate Video.
Consiglio anche di usare la lingua inglese nel prompt. Se visualizzate in alto a destra un messaggio significa che non c'è la disponibilità della GPU e non resta che riprovare in un altro momento. Se invece non visualizzate il messaggio, significa che la richiesta è stata presa in carica. Per visualizzare lo stato della elaborazione del video si deve cliccare su Refresh Generating Status per controllare la percentuale del video richiesto che è stata già completata.
Al termine del processo potremo scaricare il video in formato MP4 cliccandoci sopra con il destro del mouse.
Nel menù contestuale che si apre si va su Salva video come per aprire Esplora File in cui selezionare la cartella di output, dare un nome al video per poi cliccare su Salva. La creazione di video con HuggingFace è gratuita.
Su Replicate invece la creazione di video con Wan 2.1 non è gratis e il loro costo dipende dalla loro risoluzione:
- Modello Wan 2.1 da 480p al costo di 0,09 dollari al secondo;
- Modello Wan 2.1 da 720p al costo di 0,25 dollari al secondo.
La spesa per la generazione di un video con risoluzione 720p è quasi tripla rispetto a quella per video da 480p. La procedura per la creazione dei video è però la stessa. Si apre una delle due pagine linkate e si carica l'immagine.
Si clicca sulle icone a destra del secondo campo image per caricare l'immagine da animare e convertire in video.
Nel primo campo si digita il prompt con la descrizione dell'azione che devono compiere gli elementi presenti nell'immagine (meglio usare l'inglese). Più in basso ci sono un sacco di impostazioni da personalizzare.
Si possono lasciare anche quelle di default ma opzionalmente si può impostare il numero di frame da 81 a 100, il frame rate del video da 5fps a 24fps, la velocità di realizzazione, il numero di passaggi da 1 a 40, il grado di aderenza all'immagine da 0 a 10. Si clicca su Run per la creazione del video di cui visualizzeremo il procedere.
Il video potrà essere riprodotto cliccando sul pulsante del Play. Per scaricarlo si va sul pulsante Download.
Nessun commento :
Posta un commento
Non inserire link cliccabili altrimenti il commento verrà eliminato. Metti la spunta a Inviami notifiche per essere avvertito via email di nuovi commenti.
Info sulla Privacy