Перейти к основному содержанию
Перейти к основному контенту
Новости

Mixed Reality

Голограммы для обучения и развлечения

Как в Microsoft Mixed Reality Capture Studios создают новое пространственное будущее

Фантастические фильмы и ТВ-программы давно познакомили нас с голограммами, которые обрели внешность многих персонажей, включая принцессу Лею и Доктора в сериале «Звездный путь. Вояджер».

В таких 3D-изображениях нас больше всего захватывает то, что они находятся с нами рядом, в одном пространстве и с ними можно взаимодействовать, что невозможно ни с видео, ни с фотографиями.

Голограммы начинают помогать людям и за пределами вымышленного мира. Они переводчики, учителя и хранители памяти в реальной жизни.

«Наши дети – первое поколение, которое начинает рассчитывать на пространственный объемный 3D-контент, – говорит Джейсон Васки, креативный директор студии Mixed Reality Capture Studio в Сан-Франциско, где компания создает голограммы для самых разных целей.

«Если разобраться, то людей привлекают голограммы по той же причине, по которой они хотят видеть свое видео в цвете и звуке. Потому что голограммы в точности отражают мир и наше ощущение пространства. Человек-голограмма реального размера оказывается в помещении рядом с вами, но при этом он может быть таким, какой он сейчас или каким был когда-то в прошлом. И это производит сильное впечатление. Мы продолжаем работать над воссозданием мира вокруг нас с максимальной точностью, но теперь нам надо добавить глубины. Везде, где вы рассчитываете встретить видео, вы также можете рассчитывать на по-настоящему объемное изображение».

Студии Microsoft прокладывают дорогу в объемное будущее. Как работают эти технологии можно увидеть в проекте Ashley Graham: Unfiltered издания The New York Times, на последнем чемпионате British Open и выступлении Мадонны на 2019 Billboard Music Awards, которое сопровождалось голографическими версиями ее прошлых воплощений.

«Наша задача – дать возможности авторам и разработчикам создавать то, что они хотят, – говорит Васки. – Когда мы смотрим на разработки Microsoft в этой области и на будущее взаимодействия человека и компьютера, становится очевидным, что будут использоваться пространственные решения. Они позволяют нам устанавливать зрительный контакт, становиться еще реальнее».

Джейсон Васки, креативный директор студии Mixed Reality Capture Studio в Сан-Франциско
Джейсон Васки, креативный директор студии Mixed Reality Capture Studio в Сан-Франциско

Первые профессиональные студии видеопроизводства со всеми необходимыми декорациями появились в 2010 году в Редмонде, штат Вашингтон. Сейчас штаб-квартира находится в Сан-Франциско. Теперь площадка оснащена камерами высокого разрешения с расширенными возможностями.

В настоящее время в Редмонде сооружается специальный суперсовременный павильон, где будут создавать сувенирные голограммы для корпоративных посетителей нового Industry Experience Center (IEC) Microsoft. Открытый недавно центр представляет собой демонстрационную площадку размером более 2000 кв. метров, на которой представлены почти 100 реальных примеров того, как, используя технологии Microsoft, заказчики и партнеры осуществляют инновации в своем бизнесе и коренным образом изменяют рынки. Кроме того, в Лондоне и Лос-Анджелесе работают партнерские студии, а в Нью-Йорке – оперативная площадка для съемок.

Главная студия в Сан-Франциско располагает 106 инфракрасными и RGB-камерами, которые могут снять человека на 360 градусов. Работают стилисты и визажисты. Во время съемок клиенты одеты, выглядят и двигаются так, как они это обычно делают в повседневной жизни.

Одна из руководителей Microsoft, Джулия Уайт, сделала свою собственную голограмму и показала ее на недавней конференции. Она общалась с аудиторией своим обычным голосом, двигалась вперед-назад, поворачивалась и как обычно жестикулировала руками. Но в один неожиданный момент на сцене рядом с Джулией появилась ее голограмма и продолжила доклад, но уже на японском языке!

«Мы двигаем камеру вокруг вас, а не наоборот, – говорит Васки. – Это процесс очень похожий на создание видео, но в итоге вы получаете голограмму».

Этот процесс объединяет разработки сразу несколько разных направлений компании и общих инициатив. Недавно к этому союзу были добавлены облачные технологии Azure для максимального ускорения хода работ.

«Одна из наиболее важных технологий – это способ сжатия данных и упаковки результатов, – говорит Стив Салливан, генеральный менеджер Mixed Reality Capture Studio. – Другие провайдеры часто сталкиваются с проблемой тяжелых файлов, которые сложно передавать потребителям. Мы же можем сжать их до размеров файлов, которые транслирует Netflix. Поэтому везде, где вы технически можете запустить Netflix, вы можете показывать наши голограммы. Это позволяет нам запустить голограммы в телефоне, Интернете, HoloLens и т.д. У нас есть игроки на всех основных аппаратных средствах и платформах, и это значит, что любому автору или исполнителю, которые желают создать контакт с аудиторией, мы можем дать такую возможность».

«Облако Azure – это новый элемент, – говорит Салливан, – предоставляющий компании и ее партнерам преимущества масштабирования и более широкого охвата. Оно позволяет обрабатывать больше данных, больше контента, при этом более гибко, чем системы средств визуализации на площадке. Кроме того, это даже дает им возможность предоставления дополнительных услуг другим поставщикам, записывающим данных, если последние предпочитают работать на своей собственной инфраструктуре.

«Даже когда запись данных осуществляется по другой технологии, производители и разработчики все равно могут обрабатывать свои данные в потоке Azure, используя наши экосистемы компрессии и проигрывания, что, бесспорно, дает им больше возможностей», – продолжает делиться Салливан.

Сейчас эта технология будет использована на двух мобильных павильонах для работы на менее официальных мероприятиях. Такие пакетированные конфигурации легче разворачиваются и используют преимущества облачных технологий, а не требуют затраты колоссальных вычислительных мощностей локальных дата-центров. Мобильные записывающие студии имеют меньше камер (64 вместо 106), легче по весу и специально сконструированы для перевозки.

«Это дает замечательную возможность быть там, где разворачивается действие», – комментирует Васки, ссылаясь на такие мероприятия, как турнир по гольфу British Open, на котором компания Dimension показала удары гольфистов.

«Когда мы смотрим спортивные состязания как конкретный план развития событий, обычно мы видим их с очень плоского ракурса. Гольф поистине пространственный вид спорта, в котором нужно и важно описать вид дуги, возвратно-поступательное движение, совершаемое игроком, и весь ряд движений, производимых во время удара по мячу. Каждый гольфист по-своему уникален в том, как он осуществляет все эти движения. Один на наших партнеров, компания Dimension, смогла, используя передвижную площадку и мощности Azure для обработки огромного количества данных, показать те углы гольфистов, которые обычно слишком опасно снимать».

Ощущение такое, что вы стоите прямо перед ним. Вы даете крупный план, на котором видны руки гольфиста и как именно клюшка ударяет по мячу. Все это небезопасно, если вы снимаете традиционной 2D-фотокамерой.

Некоторые компании, включая Dimension в Лондоне и Metastage в Лос-Анджелесе, приобретают лицензию на стек технологий Microsoft. Некоторые имеют собственные павильоны. Клиенты приходят к ним снимать контент для видеопроизводства, и Microsoft предлагает инструменты и модули, которые дают им больше возможностей. Кроме того, Microsoft предоставляет услуги для клиентов этих студий, что уже входит в оплату.

Распространение таких мобильных павильонов – это дорога в будущее, в котором воспоминания, образовательные возможности и развлечения полностью проникают в наш мир, а не оставляют нас пассивными наблюдателями.

Салливан уже предвкушает недалекое будущее, когда вместо фотографий первого дня в школе, которые вы бережно вешаете на холодильник, у вас будут ежегодные голограммы. И по мере все большего проникновения такого варианта съемки в нашу жизнь, по мнению Салливана, голографические записи семейного отпуска или других важных вех в жизни человека станут нормой.

Он говорит, что «готовые технологические решения уже пришли», но доступность, цена и эффективная потребительская экосистема пока не совсем готовы, в культурном смысле тоже.

«Даже в небольших количествах это реально меняет ваше восприятие и ощущение определенных моментов, – говорит он, – потому что голограмма – это более аутентичное и полное представление о них, чем могут дать любые фото и видео».