IA transforma músicas de David Bowie em vídeos surreais
De David Bowie a Snoop Dogg, IA cria imagens surpreendentes a partir de letras de músicas – com alguns “pequenos acidentes felizes”
As novas ferramentas de inteligência artificial que criam imagens são tão boas que estão sendo usadas para tudo, de capas de álbuns a artes para revistas.
Mas esta é a primeira vez que vejo uma delas transformar músicas inteiras em imagens. Os resultados são tão perfeitos que estou convencido de que foram feitas sob medida para o repertório de David Bowie.
Não acredita? Dê uma olhada nessa versão de “Space Oddity”, criada por um usuário chamado aidontknow. O processo envolveu digitar a letra da música em uma ferramenta da IA, verso por verso, para gerar as imagens do vídeo.
Viu o que eu queria dizer?
É claro que, algum dia, as imagens produzidas pelo Midjourney, Dall-E e Stable Fusion deixarão de pertencer ao vale da estranheza e essas ferramentas passarão a ser uma fonte inesgotável de fotos incríveis e realistas. Por outro lado, essa tecnologia está praticamente eliminando o trabalho de designers e fotógrafos. E, por se tratar de um campo em rápida evolução, logo causará efeitos negativos para todo o setor.
Mas este vídeo demonstra que os resultados ainda são limitados: funcionam bem para poesia e literatura fantástica, mas não para textos literais. Essa parece ter sido a ideia que inspirou aidontknow a transformar algumas músicas de Ziggy Stardust, alter ego de Bowie, em clipes a partir das imagens.
Ele usou a mesma metodologia do Midjourney para criar esta versão de “Starman”. A descrição do vídeo revela que foram feitas algumas mudanças mínimas, algo que também achei necessário quando tentei fazer o mesmo usando o Midjourney no Discord.
Às vezes, um verso traz o pronome em inglês “it” para fazer referência, por exemplo, a um objeto ou pessoa mencionado anteriormente na música, então era preciso substituí-lo por um substantivo mais específico para que a IA pudesse entender o que significava.
Testei apenas alguns versos por música para ter uma ideia de como funcionava com diferentes faixas. Usar o Midjourney foi emocionante: tudo o que fiz foi colar as letras e as imagens se materializaram na minha frente, como um gênio saindo de uma lâmpada.
E, de fato, descobri que parece haver uma clara correlação entre beleza e surrealismo. As imagens produzidas a partir da letra de “Alice”, de Tom Waits (o resultado está acima) eram tão mágicas quanto a própria música:
It’s dreamy weather we’re on (Estamos em um clima de sonho) [primeira imagem]
You waved your crooked wand (Você ergue sua varinha mágica torta)
Along an icy pond (Em uma lagoa congelada)
With a frozen moon (Sob a lua gélida) [segunda imagem]
A murder of silhouette crows I saw (Eu vejo silhuetas de corvos) [terceira imagem]
And the tears on my face (E as lágrimas no meu rosto)
And the skates on the pond (E as marcas de patins na lagoa)
They spell Alice (Soletram “Alice”) [quarta imagem]
Obtive resultados igualmente fantásticos com “Across the Universe”, dos Beatles, e “Gimme Shelter”, dos Rolling Stones, que também têm letras visualmente expressivas. Mas meu teste comprova que também funciona para o pop e R&B, como é o caso de “Drop It Like It's Hot”, do Snoop Dogg.
Às vezes, a IA comete alguns erros de interpretação. Como em “Tom Traubert's Blues”, de Tom Waits. Na estrofe “See ya tomorrow, hey Frank can I borrow / A couple of bucks from you?” (Te vejo amanhã, ei, Frank, pode me emprestar / Alguns trocados?), a IA entendeu “bucks” (gíria em inglês para dinheiro, mas que também significa “cervo”) de forma literal. O que, veja bem, na verdade, contribui para o lirismo. Como diria Bob Ross: “Não existem erros, apenas pequenos acidentes felizes.”
