OpenAI Jukebox: generare canzoni intere con la voce
In una frase OpenAI rilascia Jukebox, un modello generativo che produce canzoni grezze (audio + voce + testo) condizionate su artista e genere, basato su una pila di VQ-VAE e transformer autoregressivi.
Fino ad allora i modelli che generavano musica producevano per lo più sequenze MIDI o brevi clip strumentali. OpenAI prova qualcosa di più ambizioso: generare audio grezzo, completo di voce cantata e parole.
Si chiama Jukebox. Gli dai il nome di un artista, un genere e qualche riga di testo, e ti restituisce un brano che può restare coerente per alcuni minuti. Non è perfetto — si sentono artefatti e le parole non sono sempre comprensibili — ma è qualcosa che prima non esisteva.
Per chi fa musica è il primo assaggio di un futuro in cui i tool generativi entrano in studio. Per OpenAI è una dimostrazione che i transformer funzionano bene anche fuori dal testo.
Aziende
OpenAI
Tool
Jukebox
Tag
Fonti