Перейти к основному содержанию
Узнайте больше о дистанционной работе и обучении во время вспышки COVID-19
Перейти к основному контенту
Новости
ord GT в смешанной реальности

Mixed reality & HoloLens

Смешать реальность

Как русско-американская компания создает приложения для HoloLens

Перед посетителем автомобильного музея Петерсона в Лос-Анджелесе стоят два гоночных автомобиля: Ford GT40 1966 года и новенький Ford GT третьего поколения. Внезапно на стене появляются цифры, отсчитывающие время до старта, затем кирпичная кладка рушится, и за ней открывается гоночный трек. Это не чрезвычайная ситуация, это музейный экспонат, дополненный компьютерной графикой, увидеть которую можно, надев очки смешанной реальности Microsoft HoloLens.

Они помогают узнать о том, как были созданы эти два неординарных автомобиля. Голос гида рассказывает, что Ford GT был призван конкурировать с Ferrari в гонках и преуспел в этом, неоднократно взяв главный приз старейших из ныне существующих соревнований на выносливость «24 часа Ле-Мана».

Смешанная реальность здесь нужна не только для создания красочных спецэффектов, но и для наглядной иллюстрации уникальных характеристик автомобиля. Глядя на реальную машину через HoloLens, посетитель музея видит, как ее необычная форма способствует аэродинамике, как внутри расположен двигатель, и как он выглядит. Это первая инсталляция подобного рода, которая открыта на постоянной основе: предполагается, что HoloLens будет доступен в музее ещё год.

Времена динозавров

За созданием этого проекта стоят четыре компании: Ford, Microsoft, музей Петерсона и Zengalt. Со стороны Ford одним из прожект-менеджеров выступил Генри Форд III — правнук основателя; музей выступил заказчиком, а в Microsoft предоставили необходимую поддержку. Непосредственно же разработкой занималась русско-американская фирма Zengalt.

Генри Форд III
Генри Форд III в музее

Работать с HoloLens в Zengalt начали сразу, как устройство стало доступно для приобретения — летом 2016 года. Первое приложение называлось Land of Dinosaurs, и хоть оно и делалось скорее для проверки сил, его ждал успех. Land of Dinosaurs и сейчас можно найти на главной странице магазина.

Иван Евдокимов, основатель и исполнительный директор Zengalt «Это нам очень сильно помогает в разговорах с потенциальными клиентами. Достаточно упомянуть Land of Dinosaurs, и нас сразу узнают. Мне кажется, это приложение установлено на половине HoloLens», — рассказывает основатель и исполнительный директор Zengalt Иван Евдокимов.

Zengalt — американская компания, однако основатель и большинство ее сотрудников — русские. Часть из них работает в редмондском офисе — в двух шагах от штаб-квартиры Microsoft, часть — удаленно из России.

Раньше в Zengalt работали над приложениями для Xbox 360. «Например, мы делали первые версии приложений для ivi, приложение для «Билайна», для «России ТВ» и так далее, — вспоминает Евдокимов. — Первый раз я увидел HoloLens в начале 2015 года на Microsoft Build. Стало понятно, что это будет большой следующей платформой после смартфонов и что именно этим и нужно заниматься».

Сейчас в распоряжении Zengalt уже семь шлемов, а количество проектов, связанных с HoloLens, исчисляется десятками. «Может быть, тридцать», — отвечает на наш вопрос Иван. И поясняет: «Создать презентацию на нашей платформе можно очень быстро. Однако проект Ford всё же оказался значительно сложнее средней презентации».

Разработка для HoloLens

До HoloLens в Zengalt работали над UWP-приложениями и процесс был аналогичен созданию обычных программ для Windows. «А вот в случае с HoloLens это фактически игровая разработка, во многом даже сложнее игровой разработки», – говорит Иван Евдокимов.

Одна из задач, которая была решена программистами Zengalt, связана с объединением нескольких устройств в shared experience — возможностью совместного просмотра. Microsoft со своей стороны предоставляет набор интерфейсов, предназначенный именно для этого случая, однако, по словам Евдокимова, остаются нетривиальные нюансы, связанные с пользовательским интерфейсом, которые специфичны именно для HoloLens.

«Сделать демку легко — достаточно быть знакомым с Unity. А вот серьезный проект — это куда более трудоемкое дело. То, что мы делали для Ford, основано на платформе, которую мы разрабатываем для HoloLens уже довольно давно». Она облегчила дело: для проекта не понадобилось задействовать программистов — основная часть работы пришлась на 3D-художников и сценаристов.

«Обычно в таких проектах много времени занимает подготовка сценария, потому что хоть выглядит результат и просто, но многие вещи нужно продумывать. Как сделать так, чтобы человек не потерялся в пространстве? Как сделать так, чтобы действие всегда происходило в том месте, куда он смотрит? С точки зрения UX таких вещей очень много», — делится опытом Иван Евдокимов.

Пока смешанная реальность — это совершенно новое явление, и у пионеров этой технологии нет возможности пользоваться наработками сообщества. «Главный источник информации — это Microsoft HoloLens Academy. Там учат, какие есть подходы и от чего лучше отказаться». К тому же Microsoft публикует сопутствующие материалы, и они, по словам Ивана, могут стать важным подспорьем.

Подходы к интерактиву

Просмотр сцены с пробивающим стену и уносящимся вдаль Ford GT не требует от человека никаких действий, то есть не использует одну из главных возможностей HoloLens — жестовое управление. По словам Ивана Евдокимова, это осознанный шаг: «У нас же большая пропускная способность, и если бы мы сделали интерактив, то порог входа был бы выше. Даже простые жесты вроде air tap пришлось бы объяснять каждому следующему посетителю. Учитывая, что сам опыт длится пять минут, это могло привести к появлению очередей».

ord GT в смешанной реальности

Потенциально выходом из ситуации может быть участие живого гида. Ранее в Zengalt делали такой проект по заказу правительства Сиэтла. «Целью было показать людям, как новые правила застройки повлияют на те районы, в которых они живут», — рассказывает Евдокимов. Ходом демонстрации управлял сотрудник и делал всю работу за остальных участников.

Настоящее и будущее HoloLens

С тех пор, как шлемы HoloLens поступили в свободную продажу, их начали пробовать применять в самых разных областях. Среди них уже можно выделить те, где спрос на подобные решения велик уже сегодня. В первую очередь это образование, медицина и производство.

шлемы HoloLens

Так, одно из полезных применений смешанной реальности — это разного рода инструкции. На производстве, особенно если речь идет о гибкой линии сборки, работникам приходится часто обращаться к справочному руководству. HoloLens делает такую книгу ненужной: подсказки возникают прямо перед глазами сборщика, не отвлекая его от процесса. Это может сэкономить компаниям десятки миллионов долларов в год.

Другое интересное применение HoloLens — это продажи, в первую очередь — B2B. Иван Евдокимов приводит в пример торговлю производственным оборудованием: «Один из моих любимых кейсов — это корпоративное обучение в Japan Airlines. У них есть огромный авиационный двигатель для обучения техников. Они должны либо возить этот двигатель, либо техники должны приезжать к двигателю. Потому что иначе сложно что-то понять. А голограмма его полностью заменяет — это огромная экономия».

Иван верит, что в будущем смешанная реальность может занять место не только на заводах и в клиниках: «Вполне возможно, что смешанная реальность изменит мир больше смартфонов или даже компьютеров», — говорит он.

Однако наступит это будущее не раньше, чем лет через десять. «Сейчас разрабатывать для смешанной реальности долго, дорого и сложно. Интерес со стороны рынка при этом огромный, и стремительному развитию пока что мешает то, что технически мы ещё ограничены не только с точки зрения железа, но и с точки зрения софта».

Аутентичность важна

Если смешанная и виртуальная реальность позволяют воссоздать музейный экспонат в натуральную величину, не значит ли это, что музеи как таковые могут утерять актуальность? Зачем куда-то ходить, если можно просто надеть шлем и посмотреть?

Основатель Zengalt верит, что музеям ничего не угрожает: «Можно посмотреть виртуальные модельки, но они не заменят аутентичный кусок истории», — говорит он. Настоящих Ford GT 1966 года на свете всего четыре штуки, и стоят они по 14 миллионов долларов. К тому же поход в музей — это не только изучение экспонатов, но зачастую часть семейного досуга.

Возможность создания аутентичных экспириенсов — это как раз одна из сильных сторон смешанной реальности. Она призвана дополнить наши ощущения чем-то новым, но при этом не скрывает окружающий мир за цифровым изображением, а сплетает одно с другим и дает человеку лучшее из двух миров.