Oriol Nieto, da Adobe, carregou um pequeno vídeo com algumas cenas e narração, mas sem efeitos sonoros. O modelo de IA analisou o vídeo, classificou-o por cena e aplicou tags emocionais e descrições a cada cena. Depois vieram os efeitos sonoros. Por exemplo, o modelo de IA capturou uma cena com um despertador e gerou automaticamente um efeito sonoro. Identificamos uma cena em que o personagem principal (neste caso o polvo) dirigia um carro e adicionamos um efeito sonoro de porta fechando.
Não foi perfeito. Os sons do alarme não eram realistas e o modelo de IA adicionou um farfalhar anormal de roupas durante uma cena em que dois personagens estão se abraçando. Em vez de edição manual, a Adobe usou uma interface interativa (por exemplo, ChatGPT) para explicar as alterações. Durante a cena do carro, não consegui ouvir nenhum som ao redor do carro. Em vez de selecionar manualmente uma cena, a Adobe usou uma interface interativa para solicitar a um modelo de IA que adicionasse efeitos sonoros de carro à cena. Localizamos a cena com sucesso, criamos os efeitos sonoros e os posicionamos perfeitamente.
Esses recursos experimentais não estão disponíveis, mas geralmente funcionam em todos os pacotes da Adobe. por exemplo, estar em harmoniaum recurso do Photoshop que coloca automaticamente ativos com cores e iluminação precisas em uma cena, foi apresentado no Sneaks no ano passado. Agora você está no Photoshop. Espera-se que apareça por volta de 2026.
O anúncio da Adobe ocorre poucos meses depois que os dubladores de videogame encerraram uma greve de quase um ano para garantir proteções para IA. Se um desenvolvedor de jogos quiser recriar a voz ou imagem de um dublador por meio de IA, a empresa deverá obter consentimento e fornecer um acordo de divulgação. Os dubladores estão se preparando para o impacto que a IA terá em seus negócios, e o novo recurso da Adobe é outro indicador das mudanças que a IA está forçando nas indústrias criativas, mesmo que elas não gerem dublagens em primeiro lugar.
