Nova IA é capaz de adicionar efeitos sonoros realistas a qualquer vídeo

Na semana passada, a OpenAI surpreendeu o mundo com o lançamento de seu novo modelo de inteligência artificial, chamado Sora. Esse avançado sistema tem a capacidade de produzir videoclipes de alta resolução a partir de prompts de texto simples. No entanto, até recentemente, esses vídeos eram predominantemente silenciosos, mas essa dinâmica mudou com a introdução da tecnologia de som de fundo criada pela ElevenLabs, uma startup de inteligência artificial fundada em 2022 por Piotr Dabkowski, ex-engenheiro de aprendizado de máquina do Google, e Mati Staniszewski, ex-estrategista de implantação da Palantir.

Desde seu lançamento, a ElevenLabs vem impressionando o mercado com suas inovações em tecnologia de inteligência artificial. Seu software de conversão de texto em fala com tecnologia de IA e sua ferramenta de dublagem de IA têm sido amplamente reconhecidos por sua qualidade e eficiência. Agora, a empresa está avançando ainda mais com a capacidade de adicionar sons de fundo a vídeos gerados por IA.

Essa nova tecnologia funciona através da descrição de uma cena fornecida pelo usuário. Com base nessa descrição, a IA da ElevenLabs é capaz de gerar sons realistas que complementam o vídeo. Por exemplo, se o usuário descrever uma cena de “ondas quebrando” ou “canto de pássaros”, a IA criará o áudio correspondente para acompanhar o vídeo.

A ElevenLabs recentemente demonstrou essa tecnologia ao adicionar sons de fundo a alguns videoclipes gerados pelo Sora da OpenAI. Em uma postagem no blog, a empresa explicou: “Usamos prompts de texto como ‘ondas quebrando’, ‘retinido de metal’, ‘canto de pássaros’ e ‘motor de carro de corrida’ para gerar áudio que sobrepusemos em alguns de nossos clipes favoritos do anúncio do OpenAI Sora”.

Embora os detalhes específicos dos efeitos sonoros da ElevenLabs ainda não tenham sido revelados, a demonstração apresenta sons realistas que vão desde passos em uma rua movimentada até o zumbido da cidade e os bipes de um robô bípede do futuro.

Como é o caso com qualquer avanço tecnológico, é provável que surjam desafios e preocupações, incluindo questões de segurança e autenticidade. No entanto, com o rápido ritmo de desenvolvimento da IA, é possível que nos próximos anos vejamos uma ascensão notável dessa tecnologia nos campos da produção de vídeos e efeitos sonoros.

Ainda não há uma data definida para o lançamento comercial dessa tecnologia de efeitos sonoros, mas os interessados em saber mais são encorajados a registrar seu interesse junto à ElevenLabs.