Depois que a Apple descontinuou seu aplicativo Music Memos, preferido pelos músicos para o desenvolvimento de ideias musicais, uma nova startup chamada Tape It entrou em cena para preencher a lacuna com um aplicativo que aproveitava a IA para detectar automaticamente o instrumento e anotar a gravação. Agora, essa startup está dando o próximo passo em sua jornada para melhorar o processo de gravação de áudio com a introdução de um algoritmo automático de redução de ruído com qualidade de estúdio, também alimentado por IA, que funciona em qualquer áudio – não apenas na fala.
O denoiser de IA foi lançado esta semana como um aplicativo da web gratuito, com um plano para licenciar a tecnologia para fornecedores no futuro. Mais tarde, ele também será integrado ao aplicativo Tape It, carro-chefe da empresa, afirma a empresa.
Fundada em 2020 pelos músicos e amigos Thomas Walther e Jan Nash , o foco inicial da Tape It era um aplicativo de gravação iOS para músicos. Antes de criar o Tape It, Walther passou três anos e meio no Spotify depois que adquiriu sua startup de detecção de áudio Sonalytic. Nash, por sua vez, é um cantor de ópera com formação clássica, que também é baixista e engenheiro. A dupla foi originalmente inspirada para construir o Tape It porque era algo que eles queriam para si mesmos como companheiros de banda, que seria tão simples de usar quanto o Music Memos da Apple, mas que se tornaria mais poderoso com o uso de IA.
A versão original do aplicativo era capaz de detectar automaticamente o instrumento e, em seguida, anotar a gravação com uma indicação visual para facilitar a localização dessas gravações procurando o ícone colorido. Os músicos também poderiam adicionar seus próprios marcadores aos arquivos, bem como notas e fotos para revisar mais tarde.
Desde então, o aplicativo ganhou força com cerca de 10.000 usuários ativos mensais, diz a empresa.
Mas, como Walther disse ao TechCrunch na época da estreia do Tape It em 2021 , a equipe pretendia ampliar o uso da IA ao longo do tempo.
Créditos da imagem: Tape It
Isso levou ao mais recente desenvolvimento da startup – um denoiser alimentado por IA que eles vêm construindo nos últimos dois anos. O desafio das gravações, explica a empresa, é o ruído de fundo. Para reduzir o ruído ambiental e a interferência elétrica, os músicos gravam em estúdios e utilizam softwares complexos. A Tape It deseja fornecer uma alternativa mais acessível usando IA. Seu software remove automaticamente ruídos como zumbidos e assobios, não apenas palavras faladas, com o objetivo de produzir resultados com qualidade de estúdio em músicas, faixas de um único instrumento e gravações de campo.
“O que desenvolvemos foi uma versão automática do software de eliminação de ruído que você tem encontrado em estúdios de gravação profissionais nos últimos 15 anos”, explica Walther.
Para verificar seus resultados, a Tape It está divulgando um estudo acadêmico com um teste científico de audição que mostra a qualidade do software na competição com os denoisers líderes do setor.
Em um vídeo, a empresa explica que, embora os sistemas de aprimoramento de fala tenham avançado significativamente, eles geralmente funcionam apenas para fala e distorcem ou corrompem os sinais musicais. Enquanto isso, os sistemas profissionais de remoção de ruído exigem controle manual de software complexo por usuários profissionais. A tecnologia Tape It envolve conectar um controlador de rede neural a um algoritmo de redução de ruído baseado em processamento de sinal. Isso permitiu a eliminação automática de ruído de sinais de áudio gerais, incluindo música. A empresa planeja apresentar seu trabalho na conferência AES na próxima semana.
“A razão pela qual as pessoas não automatizaram esses [sistemas profissionais] é porque tradicionalmente não é possível colocá-los em uma rede neural… não é possível treinar tal sistema”, observa Walther. “Na verdade, somos os primeiros a treinar tal sistema e é por isso que estamos bastante entusiasmados com esta área maior.”
Ele acrescenta que a comunidade acadêmica provavelmente estará menos interessada no produto de eliminação de ruído em si, mas mais em como eles conseguiram fazê-lo funcionar dessa maneira, devido às implicações que isso tem para outras aplicações de automação de software de estúdio.
Ainda assim, o software de eliminação de ruído já tem alguns clientes potenciais interessados, incluindo um grande fornecedor de software de estúdio e um grande fabricante de hardware. Nesses casos, serão disponibilizados preços empresariais, mas para startups menores serão oferecidos planos mais baratos.
“Todos estão entusiasmados com o fato de a IA ser criativa”, disse Walther, ao anunciar a notícia. “Estamos entusiasmados com a solução de problemas chatos pela IA. Cuidamos do ruído de fundo, para que você possa se concentrar inteiramente nas partes criativas e escrever mais músicas”, disse ele.
As tecnologias de IA não estão sendo usadas apenas para reduzir o ruído de fundo para músicos; é claro, outras empresas também estão recorrendo à IA para criar som com qualidade próxima de estúdio para podcasters. Por exemplo, a Podcastle lançou este mês seu Magic Dust AI , uma ferramenta generativa de IA que elimina o ruído de fundo e aprimora sua faixa dinâmica.
A equipe de cinco pessoas da Tape It está baseada em Berlim, Londres, Los Angeles e Estocolmo, e inclui o designer e músico Christian Crusius , ex-integrante da consultoria de design Fjord, que foi adquirida pela Accenture. A maior parte do trabalho no software de remoção de ruído foi feita por Christian Steinmetz , pesquisador PhD em IA e áudio.
A empresa continua a crescer, tendo anteriormente recusado ofertas de financiamento.
“Esta é uma pesquisa fundamental e simplesmente não sabíamos quanto tempo levaria”, explicou Walther sobre o motivo pelo qual seguiram esse caminho. “Achamos que seria um pouco arriscado se você contratasse um investidor que não fosse tão paciente — [eles pressionariam você] apenas a adotar um modelo de código aberto e seguir em frente. Mas queríamos ter uma vantagem tecnológica maior”, disse ele.
A empresa está agora a considerar angariar fundos e está a ter essas discussões, dado o ritmo do mercado de IA, mas ainda não tomou qualquer decisão formal.
Original em Inglês por TechCrunch
Traduzido Via Google Tradutor
