Docs / Music Studio
Music Studio: canzoni con voce
Apri Audio → Componi per usare Music Studio. Crea canzoni complete sul tuo Mac, con voce e strumenti, usando il motore musicale YuE2. Puoi anche fare musica senza voce, creare una nuova versione di una canzone esistente o trasformare una registrazione in uno spartito.
Installare il motore musicale
Il motore musicale è un download separato di circa 11 GB.
- Cosa serve: un Mac con Apple Silicon e 16 GB di memoria o più, e 14 GB liberi sul disco in cui conservi i modelli. Su un Mac da 16 GB, chiudi le altre app e le schede del browser prima di comporre.
- Come: apri Audio → Componi. Il modulo resta in grigio finché l’installazione non è finita. Clicca Installa il motore musicale (YuE2, ~11 GB) sulla scheda, oppure clicca Componi, per avviare il download. La scheda mostra l’avanzamento.
- Licenza: YuE2 mostra una schermata di licenza prima del download o del primo uso; accetta una volta per Mac, a meno che la licenza non cambi. I pesi usano CC BY-NC 4.0 (solo uso non commerciale), con il permesso per i singoli creatori di vendere le canzoni che realizzano; le aziende hanno bisogno di una licenza per i pesi.
- Per mettere in pausa l’installazione, clicca Stop. Avvia di nuovo l’installazione per riprenderla. Puoi anche installare da Install the music engine nella barra laterale di Pinokio o da Impostazioni → Modelli.
- Puoi usare il modulo appena l’installazione finisce. Non devi riavviare nulla.
Due extra facoltativi si scaricano quando ti servono per la prima volta:
- Il pacchetto di LoRA musicali (circa 300 MB) migliora la musica senza voce. Aggiunge anche componenti per voce e stile all’elenco LoRA di voce e stile. Il modulo propone il pacchetto quando può servire.
- I modelli per le cover (2,8 GB) servono per Cover di una canzone e Ottieni la partitura.
Se il motore smette di funzionare dopo un aggiornamento, clicca Repair the music engine nella barra laterale di Pinokio. I file del modello scaricati vengono conservati.
Scegliere Semplice o Personalizzato
Usa l’interruttore in cima a Music Studio per scegliere quanto scrivere tu stesso.
- Semplice: descrivi in breve la canzone che vuoi. Per esempio: “a slow piano ballad for a friend moving away, a woman with a low warm voice, brushed drums”. Gemma, un modello di IA che gira sul tuo Mac, scrive una descrizione dello stile e il testo. Li vedi entrambi prima che la canzone venga creata. Spunta Strumentale per un brano senza voce.
- Personalizzato: scrivi tu il testo e la descrizione dello stile, con accesso a tutti i controlli qui sotto.
Scrivere una canzone
In Personalizzato, scegli Scrivi una canzone, poi:
-
Inserisci un Titolo se ne vuoi uno.
-
Sotto Di cosa parla?, descrivi la tua idea, storia o emozione in una frase o due. Clicca Scrivi il testo perché Gemma ne scriva una bozza. Se Stile qui sotto è compilato, anche il testo ne segue lo stile. Puoi modificare la bozza e le sue sezioni.
-
Sotto Testo, scegli Sezioni per modificare le schede. Aggiungi schede con Intro, Strofa, Pre-ritornello, Ritornello, Bridge, Strumentale oppure Outro. Oppure scegli Testo per scrivere tutto in un’unica casella. Metti il nome di ogni sezione tra parentesi quadre su una riga a sé, seguito dal suo testo. Lascia una riga vuota tra le sezioni:
[Verse] The station lights are fading Your footsteps find the street [Chorus] Carry the morning homeLascia vuoto il testo di una sezione per un passaggio senza voce.
-
In Stile, descrivi in parole semplici genere, strumenti, cantante, lingua e tempo. Per esempio: English, warm piano pop, expressive female voice, acoustic piano, light drums, 88 BPM. Non servono campi separati con etichetta.
-
Clicca Componi. La tua canzone entra nella stessa coda dei tuoi video.
Strumentale
Spunta Strumentale per un intero brano senza voce. Il tuo testo resta nella casella ma non viene usato. Il pacchetto di LoRA musicali fornisce un componente dedicato che migliora i risultati. Senza di esso, il motore si affida solo a una richiesta scritta di nessuna voce. Per inserire un passaggio senza voce dentro una canzone, lascia invece vuoto il testo di quella sezione.
Regolare le impostazioni della canzone
| Controllo | Cosa fa |
|---|---|
| Partitura: Melodia + accordi (predefinito), Solo melodia, Senza partitura | Scegli se YuE2 pianifica la canzone come uno spartito prima di crearla. Melodia + accordi dà le canzoni più strutturate |
| Qualità: Bozza (8 passi) o Finale (32 passi, predefinito) | Usa Bozza per provare le idee. È diverse volte più veloce di Finale |
| Lunghezza max: da 30 s a 6 min (predefinito 4:00) | Imposta la canzone più lunga consentita. Il tuo testo determina la sua durata. Questa impostazione taglia una canzone più lunga ma non allunga una più corta |
| Seed | Il numero usato per variare il risultato. Lascia -1 per una scelta casuale. Riusa un seed per ottenere di nuovo la stessa canzone |
| Versioni: da 1 a 8 | Mette in coda tante versioni a partire dalle impostazioni del modulo, ciascuna con il proprio seed |
| LoRA di voce e stile | Scegli i componenti che cambiano la scrittura e il suono, e imposta con quanta forza si applica ciascuno. Per aggiungere un tuo file .safetensors, mettilo nella sottocartella user/ della cartella dei LoRA. Comparirà poi in questo elenco. Questi componenti sono in pausa mentre è selezionato Strumentale |
| Avanzate → Guida del testo | Imposta quanto fedelmente la canzone segue il tuo stile e il tuo testo. Il valore predefinito è 1.0. Valori più alti li seguono più alla lettera ma possono suonare rigidi; valori più bassi consentono più variazione |
| Avanzate → Precisione: 8 bit (predefinito) oppure bf16 | Se scegli bf16, prevedi circa 8 GB di memoria in più |
Fare una cover di una canzone, o ottenerne la partitura
- Scegli Cover di una canzone, poi trascina un file audio in Canzone sorgente. Scegli cosa mantenere: Melodia + accordi prende la melodia e l’armonia dalla registrazione completa; La linea cantata prende solo la melodia vocale, con una nuova base musicale; Tutto mantiene anche la base musicale ed è la più lenta da leggere. Il risultato usa il tuo stile e il tuo testo.
- Scegli Ottieni la partitura per trasformare una registrazione in uno spartito senza creare una canzone.
Entrambe richiedono i modelli per le cover (2,8 GB, scaricati una sola volta). Fai la cover solo di musica che hai il diritto di usare.
Cosa puoi fare con una canzone finita
Trovi la tua canzone finita nella Galleria, salvata come file audio WAV stereo a 48 kHz. Usa il filtro Audio per mostrare solo l’audio. Sotto il lettore, la scheda della canzone mostra titolo, stile, testo e spartito. Usa questi pulsanti per creare un’altra versione:
| Pulsante | Mantiene | Cambia |
|---|---|---|
| Nuova ripresa | Lo spartito, il testo e lo stile | L’esecuzione, con un nuovo seed. La canzone non viene pianificata di nuovo |
| Rigenera il suono | Lo spartito, il testo, lo stile e l’esecuzione | Il suono della registrazione. Richiede circa un terzo del tempo necessario per creare una canzone intera |
| Nuovo stile su questa partitura | Lo spartito | Il testo e lo stile. Compila il modulo con le tue modifiche prima di cliccare |
| Fanne una cover | La melodia che senti | Tutto il resto |
Clicca Modifica la partitura per aprire lo spartito come testo. Dopo la modifica, clicca Anteprima per vedere lo spartito aggiornato. Clicca Renderizza lo spartito per mettere in coda una canzone che usa le tue modifiche.
Le canzoni create prima della versione 4.16 non hanno il piano salvato di cui questi pulsanti hanno bisogno. I loro pulsanti spiegano perché queste azioni non sono disponibili.
Clicca Usa… sulla scheda della canzone per scegliere cosa fare dopo: Sincronizzazione labiale fa cantare la canzone a un volto della tua immagine; Sincronizzazione labiale con Hailuo H3 lo fa con H3, se installato. Puoi anche scegliere Video musicale o Colonna sonora per un video.
Video musicale
Apri Audio → Video musicale per fare un film dalla tua canzone e dalle tue immagini. Scegli la canzone, aggiungi le immagini e segna ciascuna come Cantante (mostrato mentre canta), Strumento o Ambiente. In Aspetto, descrivi l’aspetto che vuoi per ogni inquadratura.
Clicca Pianifica il video. La pianificazione è istantanea e gratuita. Legge il ritmo, crea un elenco di inquadrature e lo apre in Storyboard. In Storyboard, crea le inquadrature, poi uniscile alla canzone per fare il tuo film.
Cosa aspettarsi
-
Tempo. La stima sotto Componi presuppone una canzone lunga quanto Lunghezza max, quindi la maggior parte delle canzoni finisce prima. Su un M4 Max, Finale crea una canzone di 3 minuti in circa 3 minuti; Bozza impiega meno della metà. La tua prima canzone dopo l’installazione richiede più tempo perché anche i modelli devono essere caricati.
Il tempo mediano è circa 1,5 minuti su un M4 Max, 3 minuti su un M5 Pro, 5,5 minuti su un M1 Max e 6 minuti su un M4 Pro. Metà delle canzoni finisce prima della mediana e metà impiega di più. Questi tempi vengono dai conteggi di utilizzo anonimi di Phosphene; vedi i benchmark di velocità.
-
Memoria. Con 8 bit selezionato, l’uso della memoria arriva al picco intorno a 11 GB mentre la canzone viene scritta. Su un Mac da 16 GB, chiudi le altre app e le schede del browser prima di comporre. Consigliamo comunque 24 GB o più per le canzoni lunghe mentre altre app sono aperte.
-
Versioni. Prova due o tre versioni in Bozza, poi crea in Finale quella che ti piace. Se la melodia di una canzone ti piace già, usa Nuova ripresa per un’altra esecuzione.
-
Durata. Il tuo testo determina la durata della canzone. Un testo breve dà una canzone breve anche con Lunghezza max impostata a 6 minuti.
Quando qualcosa va storto
| Cosa vedi | Cosa fare |
|---|---|
| Componi resta in grigio | L’installazione manca o non è finita. Clicca Installa il motore musicale sulla scheda per avviarla o riprenderla |
L’installazione si ferma con una riga FATAL error: | Indica la causa: memoria insufficiente (16 GB), disco insufficiente (14 GB liberi) o nessuna connessione a GitHub. Vedi Quando un’installazione si ferma |
| Il motore dice di non essere disponibile, ma i file del modello sono scaricati | Clicca Repair the music engine nella barra laterale di Pinokio. Non devi scaricare di nuovo i file del modello |
| Music Studio stopped your song because your Mac was running low on memory | Chiudi le altre app e le schede del browser, poi componi di nuovo. Per questa canzone non è stato salvato nulla |
| Una canzone resta in attesa con Waiting for memory (Mac con 24 GB o meno) | Il tuo Mac ha troppo poca memoria libera per avviare una canzone. Chiudi le altre app e parte da sola; dopo 90 secondi si ferma con un messaggio chiaro invece di fallire a metà canzone |
| Una canzone resta in attesa con Waiting for the GPU | Un’altra attività sta usando il processore grafico del tuo Mac. La tua canzone parte quando quell’attività finisce. Clicca Stop per annullare l’attesa |
| Una canzone è stata interrotta | Non viene salvata nessuna canzone parziale. Clicca Componi per rimetterla in coda |
Fonte: webapp/docs/music.md nel repository pubblico. Rivisto per questo sito prima della pubblicazione. Tradotto dall'originale inglese. Suggerisci una modifica.