Pro
PT
EntrarConta Baixar para Mac
Baixar para Mac

Docs / Estúdio de música

Estúdio de música: canções com vocais

Abra Áudio → Compor para usar o Estúdio de música. Ele cria músicas completas no seu Mac, com vocais e instrumentos, usando o motor de música YuE2. Você também pode fazer música sem vocais, criar uma nova versão de uma música existente ou transformar uma gravação em partitura.

Instalar o motor de música

O motor de música é um download separado de cerca de 11 GB.

  • O que ele exige: um Mac com Apple Silicon e 16 GB de memória ou mais, e 14 GB livres no disco em que você guarda os modelos. Em um Mac de 16 GB, feche os outros apps e as abas do navegador antes de compor.
  • Como: abra Áudio → Compor. O formulário fica acinzentado até a instalação terminar. Clique em Install music engine (YuE2, ~11 GB) no card, ou em Compor, para iniciar o download. O card mostra o seu progresso.
  • Licença: o YuE2 mostra uma tela de licença antes do download ou do primeiro uso; aceite uma vez por Mac, a não ser que a licença mude. Os pesos usam a CC BY-NC 4.0 (só para uso não comercial), com permissão para criadores individuais venderem as músicas que fazem; empresas precisam de uma licença para os pesos.
  • Para pausar a instalação, clique em Parar. Inicie a instalação de novo para retomá-la. Você também pode instalar por Install the music engine na barra lateral do Pinokio ou em Ajustes → Modelos.
  • Você pode usar o formulário assim que a instalação termina. Não precisa reiniciar nada.

Dois extras opcionais são baixados quando você precisa deles pela primeira vez:

  • O pacote de LoRAs de música (cerca de 300 MB) melhora a música sem vocais. Ele também acrescenta complementos de voz e estilo à lista LoRA de voz e estilo. O formulário oferece o pacote quando ele ajudaria.
  • Os modelos de cover (2,8 GB) são necessários para Cover de música e Obter a partitura.

Se o motor parar de funcionar depois de uma atualização, clique em Repair the music engine na barra lateral do Pinokio. Os seus arquivos de modelo baixados são mantidos.

Escolha Simples ou Personalizado

Use o seletor no topo do Estúdio de música para escolher quanto você mesmo escreve.

  • Simples: descreva em poucas palavras a música que você quer. Por exemplo: “a slow piano ballad for a friend moving away, a woman with a low warm voice, brushed drums”. O Gemma, um modelo de IA que roda no seu Mac, escreve uma descrição de estilo e a letra. Você vê os dois antes de a música ser criada. Marque Instrumental para uma faixa sem vocais.
  • Personalizado: escreva a sua própria letra e a descrição de estilo, com acesso a todos os controles abaixo.

Escrever uma música

Em Personalizado, escolha Escrever uma música e depois:

  1. Digite um Título se quiser um.

  2. Em Do que se trata?, descreva a sua ideia, história ou sentimento em uma ou duas frases. Clique em Escrever a letra para o Gemma redigir uma letra a partir disso. Se o Estilo abaixo estiver preenchido, a letra também segue esse estilo. Você pode editar o rascunho e as seções da música.

  3. Em Letra, escolha Seções para editar cards. Adicione cards com Intro, Verso, Pré-refrão, Refrão, Ponte, Instrumental ou Outro. Ou escolha Texto para digitar tudo em uma só caixa. Coloque o nome de cada seção entre colchetes, em uma linha própria, seguido da letra dela. Deixe uma linha em branco entre as seções:

    [Verse]
    The station lights are fading
    Your footsteps find the street
    
    [Chorus]
    Carry the morning home

    Deixe a letra de uma seção vazia para uma passagem sem vocais.

  4. Em Estilo, descreva o gênero, os instrumentos, o cantor, o idioma e o andamento em linguagem simples. Por exemplo: English, warm piano pop, expressive female voice, acoustic piano, light drums, 88 BPM. Você não precisa de campos separados com rótulos.

  5. Clique em Compor. A sua música entra na mesma fila dos seus vídeos.

Instrumental

Marque Instrumental para uma faixa inteira sem vocais. A sua letra continua na caixa, mas não é usada. O pacote de LoRAs de música traz um complemento dedicado que melhora os resultados. Sem ele, o motor depende só de um pedido escrito para não haver vocais. Para incluir uma passagem sem vocais dentro de uma música, deixe a letra dessa seção vazia.

Ajustar as configurações da música

ControleO que faz
Partitura: Melodia + acordes (padrão), Só melodia, Sem partituraEscolhe se o YuE2 planeja a música como partitura antes de criá-la. Melodia + acordes dá as músicas mais estruturadas
Qualidade: Rascunho (8 passos) ou Final (32 passos, padrão)Use Rascunho para testar ideias. É várias vezes mais rápido que o Final
Duração máx.: 30 s a 6 min (padrão 4:00)Define a música mais longa permitida. A sua letra determina a duração. Esta configuração corta uma música mais longa, mas não estica uma mais curta
SeedO número usado para variar o resultado. Deixe -1 para uma escolha aleatória. Reutilize uma seed para obter a mesma música de novo
Takes: 1 a 8Coloca na fila essa quantidade de versões com as configurações do formulário, cada uma com a própria seed
LoRA de voz e estiloEscolha complementos que mudam a escrita e o som, e defina a intensidade de cada um. Para adicionar o seu próprio arquivo .safetensors, coloque-o na subpasta user/ da pasta de LoRAs. Ele então aparece nesta lista. Esses complementos ficam em pausa enquanto Instrumental está selecionado
Avançado → Orientação do textoDefine o quanto a música segue o seu estilo e a sua letra. O padrão é 1.0. Valores mais altos os seguem ao pé da letra, mas podem soar rígidos; valores mais baixos permitem mais variação
Avançado → Precisão: 8 bits (padrão) ou bf16Se você escolher bf16, reserve cerca de 8 GB a mais de memória

Fazer um cover de uma música ou obter a partitura

  • Escolha Cover de música e arraste um arquivo de áudio para Música de origem. Escolha o que manter: Melodia + acordes pega a melodia e a harmonia da gravação completa; A linha cantada pega só a melodia dos vocais, com um acompanhamento novo; Tudo mantém também o acompanhamento e é o que mais demora para ler. O resultado usa o seu estilo e a sua letra.
  • Escolha Obter a partitura para transformar uma gravação em partitura sem criar uma música.

Os dois precisam dos modelos de cover (2,8 GB, baixados uma vez). Faça cover apenas de músicas que você tem direito de usar.

O que você pode fazer com uma música pronta

Encontre a sua música pronta na Galeria, salva como um arquivo de áudio WAV estéreo de 48 kHz. Use o filtro Áudio para mostrar só áudio. Abaixo do player, o card da música mostra o título, o estilo, a letra e a partitura. Use estes botões para criar outra versão:

BotãoMantémMuda
Novo takeA partitura, a letra e o estiloA interpretação, com uma seed nova. A música não é planejada de novo
Sortear o som de novoA partitura, a letra, o estilo e a interpretaçãoO som da gravação. Leva cerca de um terço do tempo necessário para criar uma música inteira
Novo estilo nesta partituraA partituraA letra e o estilo. Preencha o formulário com as suas mudanças antes de clicar
Fazer coverA melodia que você ouveTodo o resto

Clique em Editar a partitura para abrir a partitura como texto. Depois de editar, clique em Pré-visualizar para ver a partitura atualizada. Clique em Renderizar esta partitura para colocar na fila uma música com as suas edições.

As músicas feitas antes da versão 4.16 não têm o plano salvo de que esses botões precisam. Os botões delas explicam por que essas ações não estão disponíveis.

Clique em Usar… no card da música para escolher o que fazer em seguida: Sincronização labial faz um rosto da sua imagem cantar a música; Sincronização labial com Hailuo H3 faz isso com o H3, quando instalado. Você também pode escolher Videoclipe ou Trilha sonora para um vídeo.

Videoclipe

Abra Áudio → Videoclipe para fazer um filme a partir da sua música e das suas imagens. Escolha a música, adicione as suas imagens e marque cada uma como Cantor (mostrado cantando), Instrumento ou Cenário. Em Visual, descreva a aparência que você quer para todos os planos.

Clique em Planejar o vídeo. O planejamento é instantâneo e gratuito. Ele lê a batida, cria uma lista de planos e a abre no Storyboard. No Storyboard, crie os planos e depois combine-os com a música para fazer o seu filme.

O que esperar

  • Tempo. A estimativa sob Compor supõe uma música com a Duração máx., então a maioria das músicas termina antes. Em um M4 Max, o Final cria uma música de 3 minutos em cerca de 3 minutos; o Rascunho leva menos da metade disso. A sua primeira música depois da instalação demora mais, porque os modelos também precisam ser carregados.

    O tempo mediano é de cerca de 1,5 minuto em um M4 Max, 3 minutos em um M5 Pro, 5,5 minutos em um M1 Max e 6 minutos em um M4 Pro. Metade das músicas termina antes da mediana e metade leva mais. Esses tempos vêm das contagens de uso anônimas do Phosphene; veja os benchmarks de velocidade.

  • Memória. Com 8 bits selecionado, o uso de memória chega a cerca de 11 GB enquanto a sua música é escrita. Em um Mac de 16 GB, feche os outros apps e as abas do navegador antes de compor. Ainda recomendamos 24 GB ou mais para músicas longas com outros apps abertos.

  • Takes. Experimente duas ou três versões no Rascunho e depois crie a que você gostar no Final. Se você já gosta da melodia de uma música, use Novo take para outra interpretação.

  • Duração. A sua letra determina a duração da música. Uma letra curta faz uma música curta, mesmo com a Duração máx. em 6 minutos.

Quando algo dá errado

O que você vêO que fazer
Compor fica acinzentadoA instalação está faltando ou incompleta. Clique em Install music engine no card para iniciá-la ou retomá-la
A instalação para com uma linha FATAL error:Ela diz a causa: memória insuficiente (16 GB), disco insuficiente (14 GB livres) ou sem conexão com o GitHub. Veja Quando uma instalação para
O motor diz que está indisponível, mas os arquivos de modelo estão baixadosClique em Repair the music engine na barra lateral do Pinokio. Você não precisa baixar os arquivos de modelo de novo
Music Studio stopped your song because your Mac was running low on memoryFeche os outros apps e as abas do navegador e componha de novo. Nada foi salvo desta música
Uma música fica esperando com Waiting for memory (Macs com 24 GB ou menos)O seu Mac tem pouca memória livre para iniciar uma música. Saia dos outros apps e ela começa sozinha; depois de 90 segundos, ela para com uma mensagem clara em vez de falhar no meio
Uma música fica esperando com Waiting for the GPUOutra tarefa está usando o processador gráfico do seu Mac. A sua música começa quando essa tarefa terminar. Clique em Parar para cancelar a espera
Uma música foi interrompidaNenhuma música parcial é salva. Clique em Compor para colocá-la na fila de novo

Fonte: webapp/docs/music.md no repositório público. Revisado para este site antes da publicação. Traduzido do original em inglês. Sugerir uma edição.