Órgão “GPU” faz música com ventoinhas de PC e modelos de IA

Os músicos e artistas audiovisuais Holly Herndon e Mat Dryhurst, têm uma nova exposição em Londres onde pode ver e ouvir o “Órgão GPU” em acção. Herndon explica que este órgão de tubos inovador “toca música acusticamente ao controlar as RPM de cada ventoinha”.

Na publicção na rede social X, pode ouvir uma amostra do órgão GPU a tocar. As imagens mostram um órgão de tubos com um design ornamentado e uma parede de ventoinhas que controlam o fluxo de ar e, portanto, a saída de áudio do instrumento. O hardware não é explicado em detalhe, mas não vemos nenhuma GPU. Em vez disso, pensamos que o órgão GPU é apenas um nome apelativo para um órgão de tubos alimentado por ventoinhas PWM.

Algumas GPU podem ter sido usadas neste projecto artístico, já que a música que ouve é baseada em modelos de Inteligência Artificial. O site Serpentine explica que “Para treinar a IA, Herndon e Dryhurst compuseram um cancioneiro de hinos, exercícios de canto e um protocolo de gravação, viajando com a equipa Serpentine Arts Technologies para gravar quinze coros comunitários em todo o Reino Unido”. A instalação de áudio espacial (ou seja, o órgão GPU) usa estes modelos treinados para criar a paisagem sonora que ouve.

Our GPU organ plays music acoustically by controlling the RPM of each fan

The Call is now open to the public until February @SerpentineUK in Hyde Park London pic.twitter.com/0wQHMnvNQ2

— Holly Herndon (@hollyherndon) October 5, 2024

Noutros tweets, Herndon discute o treino e diz que a música é gerada a partir de um modelo de difusão, criando músicas com base nos dados de treino e “pode gerar partituras infinitas”. Para que haja alguma interactividade do utilizador na exposição, Herndon diz que existe “um novo modelo polifónico de chamada e resposta, desenvolvido com a @Ircam, que lhe permite cantar para o modelo e receber uma resposta”. Também existe uma demonstração em vídeo disso no tópico do Tweet, se desejar testemunhar alguma acção áudio de chamada e resposta de coro de IA com som assustador.

Se visitar Londres, pode ir e experimentar a “The Call” nas Serpentine Galleries em Kensington. A exposição está aberta ao público até Fevereiro de 2025.