Stable Video Diffusion 1.1: video da un'immagine singola con controllo del movimento
In una frase Stability AI rilascia SVD 1.1 con fine-tuning per video multi-frame da immagine singola, MotionID per il controllo dell'intensità del movimento e pesi open source su HuggingFace.
Generare un video partendo da una singola immagine fissa era la frontiera successiva alla generazione di immagini. Stable Video Diffusion 1.1 permette di fare esattamente questo: si fornisce una foto, e il modello genera una breve clip video coerente con il contenuto visivo.
La novità rispetto alla versione precedente è il controllo sul movimento: si può indicare quanto "vivacemente" la scena deve animarsi, dal quasi-statico a movimenti più ampi. Questo evita i video tremolanti e incoerenti che affliggevano i primi tentativi.
I pesi del modello sono disponibili gratuitamente, il che ha permesso alla community open source di integrarlo rapidamente in strumenti come ComfyUI.
Aziende
Stability AI
Tool
Stable Video Diffusion 1.1, SVD-XT
Tag
Fonti