As pessoas ainda não podem estar em dois lugares ao mesmo tempo. Mas a musicista Julianna Barwick, de Los Angeles, está contornando esse pequeno problema para oferecer aos hóspedes de um novo hotel na cidade de Nova York uma performance ao vivo sem fim, sempre em mudança, que leva o som e o clima dos céus de Manhattan para o lobby.

Um programa de música generativa criado com inteligência artificial (IA) foi treinado para manter um olhar constante em direção ao céu por meio de uma câmera no telhado do hotel Sister City, que possui uma vista panorâmica do Empire State Building até a Estátua da Liberdade. Ele captará o que vê ao vivo – talvez uma repentina explosão de sol, um avião passando, uma Lua cheia ou um bando de pombos – e espontaneamente criará uma partitura musical, extraída das composições correspondentes de Barwick, que tocará dia e noite e nunca se repetirá.

“Será uma experiência mágica e prazerosa que despertará seu senso de admiração”, diz Barwick. “Mas a coisa mais animadora para mim é que voltarei para casa em LA e a IA ainda estará me ajudando a tocar em Nova York.”

Barwick, uma musicista experimental, trabalhou no projeto com o Sister City e a Microsoft no último ano, mas em um toque incomum para um músico, ela não ouviria a composição que criou até que o público a notasse, quando o hotel abriu oficialmente em 16 de maio.

Depois de começar, na inauguração, a performance da IA não será interrompida.

Barwick compôs cinco movimentos dentro de uma paisagem sonora geral que reflete a natureza em constante mudança do céu ao longo do dia, cada um com seu próprio fundo de baixo, sintetizador e linhas vocais que se entrelaçam. Para cada “evento”, identificado pela IA da Microsoft, ela criou seis sons sintetizados e seis vocais para o programa de áudio generativo escolher – por exemplo, 60 opções musicais diferentes por dia para cada vez que um avião passar acima do prédio. Os sons são uma expressão das emoções de Barwick em resposta a cada estímulo.

“Não queria que fosse muito literal”, diz ela. “Eu poderia ter feito soar como ‘chuva caindo’, mas é mais sobre a atitude do evento. Um avião é muito diferente da Lua, por isso tem mais um som metálico do que um som quente de sol ou um tipo calmo de sentimento ‘lunar’. Eu queria que as pessoas que o ouvissem ficassem curiosas e se perguntassem o que significava esse som, o que está acontecendo no céu agora.”

Barwick nunca teve medo de tecnologia, mesmo que não tivesse acesso a ela. Ela gravou seu primeiro álbum em 2007 usando um pedal de guitarra para formar loops vocais em uma fita cassete. “Eu nem tinha computador então”, lembra ela. “Levei minha bolsa de fitas em algum lugar para ser masterizada para produzir o CD.”

Agora ela conta com a tecnologia para compor, gravar e executar sua música ambiente de múltiplas camadas. Usa efeitos em tudo, incluindo a voz dela. Não existe uma Julianna Barwick desconectada. Ainda assim, ela diz: “Antes deste projeto, a única coisa que eu sabia sobre inteligência artificial vinha do cinema. Eu nunca tinha visto uma aplicação disso em minha vida.”

Então, quando começou a explorar os sons, Barwick lidou não apenas com o que a IA era e poderia fazer, mas também com o papel dela em comparação ao seu. Quem foi o verdadeiro compositor – ela ou o programa? A IA era uma parceira ou uma ferramenta?

“Vislumbrei como o projeto iria acontecer na minha ausência e percebi que posso fazer todos os sons, mas não vou estar lá para detectar todos os eventos – você tem que confiar na IA para fazer isso”, Barwick. diz. “E essa é uma parte muito importante da composição; é quase como se fosse um acordo meio a meio. E é isso que torna esse projeto interessante. Quase traz outro colaborador, e as possibilidades são infinitas. Ele abriu um novo mundo de pensamento e abordagem de futuras composições e partituras.”

A música sem palavras de Barwick apresenta seus próprios vocais etéreos e sons sintetizados. Ela compõe espontaneamente enquanto executa ou grava suas peças, nunca sabendo exatamente como soará o resultado final. E a adaptabilidade do programa de IA espelha a dela própria.

“Minha música é muito abstrata e interpretativa, e eu sou um filtro para estímulos”, diz ela. “Se estou em um país diferente ou está chovendo ou algo realmente triste acabou de acontecer, isso aparece na música. E isso é como se a IA fosse o filtro para os estímulos agora, porque eu não posso sentar lá, observar o céu e me apresentar 24 horas por dia, 7 dias por semana, como a IA pode.”

Barwick contou com uma equipe de tecnólogos da Microsoft para treinar a inteligência artificial em como responder a eventos no céu e para ajudar a organizar as faixas e criar um programa generativo. A câmera envia imagens ao vivo para uma ferramenta de visão computacional do Microsoft Azure, que atribui rótulos como “nuvens” ou “sol”. Elas são inseridas no sistema que os tecnólogos programaram após analisar as composições de Barwick e destilá-las em um algoritmo, que escolhe quais faixas tocar juntas, dependendo dos tipos de evento que estão acontecendo.

“A única coisa que eu sabia sobre inteligência artificial vinha dos filmes. Nunca tinha visto uma aplicação dessa em minha vida.”

Todos os sons para cada um dos cinco conjuntos são harmoniosos, embora a chave mude para cada um ao longo do dia. Barwick diz que escolheu progressões de acordes que faziam sentido para a hora do dia, como a calma, mas energética, da manhã e “começando a relaxar um pouco” à noite. Ela apelidou o projeto de “Síntese de Circunstâncias”.

“Criar algo que mude de bar para bar, de minuto a minuto, de hora a hora, de manhã à tarde e depois à noite, e estações diferentes também, tem sido desafiador e fascinante”, diz Luisa Pereira, uma tecnóloga que trabalha com a equipe da Microsoft. “Isso tem de funcionar dentro de todos esses diferentes tipos de restrições.”

A música está mergulhada no pano de fundo do Atelier Ace, a agência de criação e empresa de gestão por trás do Sister City e da Ace Hotels, que começou no final dos anos 1990 como uma companhia de promoção de shows. Ryan Bukstein, vice-presidente de marca do Atelier Ace, lembra-se de quando foi estagiário da empresa em 2000 e ouviu pela primeira vez a “Music for Airports” de Brian Eno, um álbum de música ambiente que faz lembrar o trabalho de Barwick. “Tivemos a ideia de fazer uma trilha sonora como essa por muitos anos, mas não tivemos o lugar certo para isso”, diz Bukstein. “Mas o Sister City é diferente de qualquer outro de nossos hotéis, e é um lugar onde queríamos ser experimentais e tentar coisas inéditas.”

O hotel boutique de 14 andares e 200 quartos na Bowery, uma ampla avenida no Lower East Side, tem um design estético minimalista de influências japonesas e escandinavas para oferecer um ambiente limpo e calmo.

“Imagino pessoas que querem aproveitar a serenidade e a estética do Sister City, porque é muito espaçado, limpo, bonito, madeiras claras, paredes brancas, muito arejado e leve”, diz Barwick. “Então eu quero dar-lhes uma sensação de paz e serenidade.”

Os hóspedes do Sister City podem ter muita ou pouca interação humana quanto quiserem; se ficarem impressionados com o movimento da humanidade em Manhattan e desejarem solidão, podem fazer o check-in em um quiosque de autoatendimento, tocar na chave do quarto para entrar e sair do prédio e usar o aplicativo do hotel para solicitar serviços, sem ter de falar com alguém.

“Estamos incluindo tecnologia de forma suave, intuitiva e aos poucos, para que ela crie mais espaço para aproveitar a vida”, diz Bukstein. “Então, queríamos levar a música e amarrá-la à IA de uma forma que pudesse criar algo especial e filtrar o que está acontecendo lá fora no Sister City. A música de Julianna é única e, apesar de ser criada com tecnologia, parece muito orgânica e humana.”

“(IA) quase cria outro colaborador, e as possibilidades são infinitas.”

Embora Barwick tenha vivido em Nova York por 16 anos antes de se mudar para Los Angeles, nasceu na Louisiana e cresceu no Missouri e em Oklahoma. Seu álbum “The Magic Place” foi batizado em homenagem a uma árvore da fazenda de sua família, com uma copa grande o suficiente para andar nela. Seu amor pela natureza ao longo da vida influenciou suas composições enquanto ela se concentrava em trazer os céus de Manhattan para o saguão do hotel.

“Isso é quase como uma pontuação viva, porque está interagindo com a natureza e o que está acontecendo no momento”, diz Barwick. “É como uma síntese ao vivo. E eu amo criar algo que vai viver em Nova York, já que eu não mais.

“Mal posso esperar para ouvir o som no espaço e ver o que as pessoas pensam sobre ele. Talvez a IA pareça mais tangível e não essa coisa de ficção científica que as pessoas só veem nos filmes, mas algo que elas possam usar em suas próprias composições e projetos.”

Todas as imagens são de Jay Carroll.