Nell’ambito dei software text to video Runway è sicuramente il leader, in questo momento. Tra i contendenti merita una menzione Kaiber, progettato dall’omonima società che ha tra i suoi consiglieri Mike Shinoda dei Linkin Park. Non a caso alcuni video della band sono stati creati proprio con questo tool, basato sul modello open source Stable Diffusion.
Kaiber si usa da web e da smartphone con un’app per iOS e Android. Ha un modello freemium, per cui si può testare gratuitamente fino al consumo dei crediti elargiti.
Le modalità di creazione dei video sono tre:
- Flipbook permette di caricare un file audio che funge da colonna sonora e poi generare uno storyboard di clip video da animare
- Motion consente di generare un video partendo da un prompt testuale (text to video) o dal caricamento di un’immagine (image to video)
- Transform è la modalità video to video ossia quella con la quale si può caricare un video e applicare degli effetti di trasformazione
Nel video in basso vi mostro come funziona. Buona visione!