MateriaisTranscrição musicalAndrew Carlins•9 min de leitura

A IA consegue transcrever vários instrumentos ao mesmo tempo?

São duas perguntas numa só. Ler muitas notas ao mesmo tempo num único instrumento é algo que a IA faz bem, principalmente no piano. Separar vários instrumentos diferentes de uma mesma mixagem é o ponto mais difícil da área hoje. Veja o que acontece de verdade e como tirar uma partitura legível agora.

A IA consegue transcrever vários instrumentos ao mesmo tempo?

Este artigo faz parte do nosso guia para transcrever uma banda inteira.

É uma das primeiras coisas que as pessoas perguntam sobre transcrição com IA: dá para pegar uma música inteira, com bateria, baixo, guitarra e voz tocando juntos, e escrever cada parte? Não dá para responder com um sim ou um não, porque na verdade são duas perguntas disfarçadas de uma só, e cada uma tem uma resposta bem diferente.

Parte da confusão vem de uma palavra usada meio solta. Ler muitas notas ao mesmo tempo num único instrumento é polifonia, e a IA faz isso bem, principalmente no piano. Separar vários instrumentos diferentes de uma gravação mixada é transcrição de vários instrumentos, e aí está a parte difícil. Muita gente fala em “vários instrumentos” quando está pensando em polifonia. Resumindo: a polifonia está bem resolvida, e os modelos do Songscription em geral conseguem isolar da mixagem o instrumento que você quer. Assim você transcreve um instrumento por vez, sem precisar separar antes o áudio de cada um.

Duas perguntas numa só

Quando alguém fala em “vários instrumentos ao mesmo tempo”, quase sempre quer dizer uma de duas coisas, e as respostas mudam muito de uma para a outra.

  • Muitas notas ao mesmo tempo num instrumento só, como um acorde cheio no piano. Isso é transcrição polifônica, e a IA ficou muito boa nisso.
  • Muitos instrumentos diferentes ao mesmo tempo numa gravação mixada, como uma banda inteira. Aqui é preciso desfazer a mixagem em fontes separadas antes de transcrever, e isso é difícil.

Misturar as duas coisas é o que deixa o assunto confuso. Uma ferramenta pode ser excelente na primeira e ainda ter dificuldade com a segunda, porque são habilidades diferentes. Nosso texto sobre transcrição monofônica e polifônica explica a primeira questão em detalhe.

Muitas notas de uma vez: polifonia

Ler uma pilha de notas que soam juntas é transcrição polifônica, e é aí que a IA de hoje brilha. Pense num piano tocando um acorde de cinco notas com uma linha interna se mexendo por baixo. Esse tipo de música densa e simultânea levava um tempão para um ouvido treinado destrinchar, e um bom modelo lê tudo com clareza. Então, se o seu “vários” quer dizer o toque rico e cheio de vozes de um único piano, a resposta é um sim bem seguro. Nosso artigo sobre transcrição polifônica de piano mostra como isso funciona e por que o piano é o caso em que a IA se sai melhor.

Muitos instrumentos de uma vez: o problema mais difícil

Numa gravação de banda, vários instrumentos se misturam num único fluxo de som, e as frequências deles se sobrepõem e se encobrem. Para escrever cada instrumento na sua própria pauta, o sistema primeiro precisa separar a mixagem de volta nas partes, depois transcrever cada uma e, por fim, decidir como organizar tudo na página. Cada etapa soma erros, e como um som encobre o outro, alguns detalhes se perdem na mixagem. Por isso nenhuma ferramenta transforma qualquer música inteira numa partitura orquestral perfeita, com tudo separado, num clique. É uma fronteira de pesquisa ainda em aberto, e uma ferramenta honesta vai dizer isso a você.

O caminho na prática

Hoje existem dois jeitos confiáveis de tirar uma partitura legível de uma gravação com vários instrumentos. Você escolhe pelo que quer de fato.

  • Quer partes separadas? Transcreva cada instrumento por conta própria, com o modelo feito para ele. Em geral os modelos conseguem isolar o instrumento que você quer da mixagem completa, então não é preciso separar antes o áudio de cada instrumento. Numa gravação muito densa, fazer essa separação como etapa opcional pode deixar a parte ainda mais limpa.
  • Quer uma partitura só para tocar? Transcreva a gravação numa única parte condensada, normalmente uma redução para piano que junta melodia, harmonia e baixo numa pauta dupla. É mais rápido e muitas vezes é tudo de que quem toca precisa.

Nosso guia para transcrever áudio multipista em partitura mostra o caminho parte por parte, e o texto sobre como transcrever a gravação de uma banda inteira trata da partitura condensada. Nos dois casos, você começa com qualquer gravação em áudio para partitura.

Quais instrumentos o Songscription lê

O Songscription transcreve com um modelo para cada instrumento. O de piano é o mais maduro e o que melhor lida com polifonia densa. Modelos mais novos cobrem violão e guitarra, baixo e bateria, além de linhas melódicas como trompete, saxofone e violino. A voz continua experimental. Transcrever uma parte por vez dá um resultado mais preciso do que pedir a um único modelo a banda inteira de uma vez. Numa gravação muito densa, separar antes o áudio de cada instrumento, como etapa opcional, pode deixar uma parte mais nítida. Se você quer transcrever uma parte só, nossos guias sobre linha de baixo e bateria mostram na prática como funciona o caminho por instrumento.

Perguntas frequentes

A IA consegue transcrever vários instrumentos ao mesmo tempo?

Depende do que você chama de “vários instrumentos”. A IA lida muito bem com muitas notas soando juntas num instrumento só, e é isso que a transcrição polifônica faz no piano. Separar vários instrumentos diferentes de uma gravação mixada, cada um na sua parte escrita, é bem mais difícil e ainda está na fronteira da pesquisa. Hoje, o caminho prático é transcrever um instrumento por vez. Os modelos do Songscription em geral conseguem isolar o instrumento que você quer da mixagem completa, então não é preciso separar antes o áudio de cada instrumento. Você também pode transcrever tudo numa única parte condensada, como uma redução para piano, que é mais rápido quando você só quer algo para tocar.

Qual é a diferença entre transcrição polifônica e separar instrumentos?

Transcrição polifônica é ler várias notas que soam ao mesmo tempo numa mesma fonte, como um acorde de piano, e escrever todas elas. Separação de fontes é dividir uma gravação mixada nos instrumentos que a compõem (a voz, o baixo, a guitarra) antes de qualquer transcrição. São problemas diferentes. Num, a questão é ouvir uma pilha de notas; no outro, é desfazer a mixagem de uma gravação. Transcrever vários instrumentos costuma exigir as duas coisas, e por isso é mais difícil do que transcrever um instrumento só, gravado limpo.

Como transcrevo uma música com vários instrumentos?

Há dois caminhos práticos. Se você quer partes separadas, transcreva cada instrumento por conta própria. Os modelos do Songscription em geral conseguem isolar a parte que você quer da mixagem completa, então não é preciso separar antes o áudio de cada instrumento. Numa gravação muito densa, essa separação, como etapa opcional, pode ajudar. Se você quer uma partitura só para tocar, transcreva a gravação num arranjo condensado, normalmente uma redução para piano que junta melodia, harmonia e baixo numa pauta dupla. Escolha pelo objetivo: partes distintas para montar uma partitura completa, ou uma parte única para tocar.

Quais instrumentos o Songscription consegue transcrever?

O piano tem o modelo mais maduro e é o que melhor lida com um jeito de tocar denso e polifônico. Modelos mais novos cobrem instrumentos como violão e guitarra, baixo e bateria, além de linhas melódicas como trompete, saxofone e violino. A voz ainda é experimental. Em geral, esses modelos conseguem isolar o instrumento que você quer da mixagem completa, então dá para transcrever uma parte por vez sem separar antes o áudio de cada instrumento. Numa gravação muito densa, fazer essa separação como etapa opcional pode deixar a parte ainda mais limpa.

Sobre quem escreveu

Andrew Carlins

Escrito por

Andrew Carlins

Cofundador e CEO, Songscription

Andrew fundou o Songscription em Stanford com alguns outros músicos que estavam cansados de não achar as notas das músicas que queriam tocar. Cresceu tocando piano e sax barítono e fazendo teatro musical. Faz anos que não sobe num palco, mas gosta de pensar que continua afiado. Aqui ele escreve sobre como tirar uma música da gravação e passar para o papel.

Mais sobre a equipe

Veja outros posts sobre os mesmos assuntos.