Estúdios de realidade mista da Microsoft criam hologramas para educar e divertir
Nos filmes de ficção científica e na TV, os hologramas há muito representam personagens, incluindo a princesa Leia, em Star Wars, e o Doutor, em Star Trek: Voyager.
Uma grande parte do apelo dessas representações em 3D é que elas ocupam o mesmo espaço que nós e que podemos interagir com elas de uma maneira impossível com vídeos e fotos em 2D.
Além do mundo fictício, os hologramas estão começando a ajudar os seres humanos na vida real. Eles são tradutores, professores e preservadores de memórias.
“Nossos filhos são a primeira geração a começar a esperar conteúdo espacial – ou 3D, volumétrico”, diz Jason Waskey, diretor de criação da Microsoft e do Mixed Reality Capture Studio em San Francisco, onde a empresa cria hologramas para vários usos.
“Quando pensamos sobre por que as pessoas desejam um holograma, é o mesmo motivo pelo qual você deseja ver seus vídeos com som e em cores. É porque reflete o mundo da maneira como nos movemos nele. Ter alguém em tamanho real na mesma sala que você, lembrando da maneira que era ou é – é realmente poderoso. À medida que continuamos a recriar o mundo ao nosso redor com o máximo de fidelidade possível, adicionar profundidade é o próximo estágio. Em qualquer lugar em que espere ver um vídeo, você também deve esperar uma experiência verdadeiramente volumétrica.”
Os estúdios da Microsoft estão liderando o caminho para esse futuro. Você pode ver a tecnologia em ação no The New York Times por meio da experiência Ashley Graham: Unfiltered, no mais recente British Open e na apresentação de Madonna no Billboard Music Awards de 2019 com versões holográficas de suas encarnações passadas.
“Nosso trabalho é garantir que os criadores possam fazer o que querem”, diz Waskey. “Quando analisamos o que a Microsoft está fazendo neste espaço e o futuro da interação humano-computador, essa experiência será espacial. Isso nos permite fazer contato visual e estar mais presentes com os outros.”
Os estúdios, que operam como cenários profissionais ou conjuntos de produção de vídeo, começaram em Redmond, Washington, em 2010, mas agora estão sediados em San Francisco com câmeras de alta resolução e a capacidade de gravar por mais tempo para gerar mais experiências.
Eles estão montando um palco volumétrico de última geração em Redmond para criar hologramas de lembrança para visitantes corporativos no novo Industry Experience Center (IEC) da Microsoft, que abriu recentemente para revelar uma instalação de 2.137 metros quadrados que exibe perto de 100 exemplos de clientes e parceiros que estão inovando seus negócios e revolucionando mercados com as tecnologias da companhia.
Também existem estúdios parceiros em Londres e Los Angeles e um local pop-up em Nova York.
O estúdio principal em San Francisco fornece cabelos, maquiagem e 106 câmeras infravermelhas e RGB para gravar uma pessoa em 360 graus. Os clientes se vestem e se movem da maneira que costumavam fazer, como crianças rindo e brincando.
Quando a executiva da Microsoft, Julia White, entrou para criar uma versão dela em holograma para usar no palco em uma conferência recente, falou como faria com uma plateia, girando para frente e para trás, usando as mãos para gesticular naturalmente. Em um momento memorável na conferência, seu holograma apareceu no palco ao lado dela e continuou seu discurso – em japonês.
“Nós movemos a câmera para você”, diz Waskey. “É um processo muito semelhante à criação de um vídeo, mas, no final, você está recebendo um holograma.”
O processo leva a várias iniciativas e pontos fortes entre empresas. Mais recentemente, o Azure foi adicionado ao mix para impulsionar o trabalho.
“Uma das peças de tecnologia que realmente se mostra importante é a maneira como compactamos e empacotamos os resultados”, diz Steve Sullivan, gerente-geral do Mixed Reality Capture Studio. “Alguns outros fornecedores lutam com arquivos pesados, difíceis de os consumidores acessarem. Mas podemos reduzir o tamanho para o de um streaming de vídeo da Netflix. Então, basicamente, em qualquer lugar que você possa transmitir Netflix, você pode transmitir nossos hologramas. E isso nos coloca em telefones, web, HoloLens e – você escolhe. Criamos players para todos os principais dispositivos e plataformas; portanto, se você é um criador ou artista que deseja alcançar um público, podemos levá-lo até lá.”
O Azure é um novo elemento, diz Sullivan, que oferece à empresa e seus parceiros a vantagem de uma melhor escala e alcance mais amplo. A nuvem permite processar muito mais dados, com mais flexibilidade, do que uma fazenda de renderização local. Também permite fornecer serviços a outros provedores de captura que já podem ter sua própria infraestrutura.
“Mesmo aqueles que capturam com tecnologia diferente podem processar seus dados em nosso pipeline do Azure para aproveitar nosso ecossistema de compactação e reprodução, oferecendo a todos os criadores mais opções”, diz Sullivan.
E agora, eles estão levando essa tecnologia para a estrada com dois palcos móveis, para sessões mais informais. Novidades a partir deste ano, essas configurações empacotadas são mais fáceis de implantar e capazes de tirar proveito da nuvem, em comparação à enorme computação local. Os estúdios de captura móvel podem ter menos câmeras (64 em vez de 106), são mais leves e construídos para portabilidade.
“Isso nos dá a oportunidade de ir aonde a ação está”, diz Waskey, apontando para eventos como o British Open, nos quais a Dimension demonstrou os movimentos dos golfistas.
“Quando encaramos o esporte como um cenário específico, geralmente o vemos em um ângulo muito plano. O golfe é verdadeiramente tridimensional, há um arco e um plano que são descritos, há uma gama completa de movimentos para acertar a bola. Todo jogador de golfe é sutilmente diferente na maneira como realiza essa tarefa. Um de nossos parceiros, a Dimension, usou um palco móvel e o poder do Azure para processar grandes quantidades de dados muito rapidamente para mostrar os ângulos dos jogadores que normalmente são ‘muito perigosos para filmar’.”
É como se você estivesse em pé na frente dele. Você pode se aproximar e ver exatamente onde suas mãos estão colocadas, exatamente onde o jogador bate na bola. E isso não é seguro para fazer com a fotografia 2D convencional.
Há também quem licencie toda a tecnologia da Microsoft, incluindo a Dimension em Londres e a Metastage em Los Angeles. Alguns têm seus próprios palcos. Os clientes os procuram para gravar o conteúdo a ser produzido, e a Microsoft fornece ferramentas e plug-ins que os capacitam a fazer mais. A Microsoft também fornece serviços para clientes nesses estúdios, cobrando uma taxa pelo serviço.
A expansão desses palcos móveis faz parte do caminho para um futuro em que memórias, oportunidades educacionais e entretenimento entram em nosso mundo completamente, em vez de vê-los passivamente.
Sullivan vê um mundo semelhante não muito distante, onde os hologramas anuais das escolas, por exemplo, substituem aquelas fotos de aula que você pendura na geladeira. À medida que as capturas se tornam mais difundidas, ele imagina gravações em holograma de férias em família e outros eventos importantes se tornando a norma.
Ele diz que “a tecnologia de ponta a ponta está aqui hoje”, mas o acesso, os preços e um ecossistema eficaz para o consumidor levarão tempo para se estabelecer culturalmente.
“Mesmo em pequenas doses, isso realmente muda sua experiência e percepções”, diz Sullivan. “Ter um holograma de alguém é uma representação mais autêntica e completa dela do que fotos ou vídeos.”
