Интерактивный проекционный мэппинг: 5 проектов, которые стоит открыть для себя
Введение - интерактивное искусство и иммерсивный опыт проекционного мэппинга
Интерактивное искусство - это динамичная форма искусства, реагирующая на окружающую среду. Таким образом, произведение создает связь между окружающей средой, например, людьми или природой, и другими элементами, составляющими ее. Этими элементами могут быть сцена, декорации, скульптура, свет, компьютерная система... В интерактивных инсталляциях участники взаимодействуют через датчики, чтобы получить уникальный результат, созданный вживую.
Пример: Даниил Розин - Механические зеркала
Проекционный мэппинг, благодаря видеопроекторам, позволяет украсить пространство светом. Это интересно для визуальной расшифровки событий, происходящих в окружающей среде. Такими событиями могут быть, например, движение человека, нажатие кнопки или звук, воспроизводимый инструментом. В этой статье мы предлагаем подборку проектов интерактивного проекционного мэппинга, чтобы продемонстрировать возможности создания иммерсивного опыта.
Что такое проекционное картирование?
Проекционный мэппинг, также известный как видеомэппинг или пространственная дополненная реальность, - это передовая технология, которая превращает обычные поверхности в динамические дисплеи, проецируя на них цифровой контент. Эта инновационная техника завоевала значительную популярность в различных областях, включая маркетинг, развлечения и образование, благодаря своей способности создавать захватывающие и увлекательные впечатления. С помощью видеопроекторов проекционный мэппинг позволяет передавать информацию о бренде, создавать уникальные сценические задники, декорировать стены и потолки, а также вызывать сильные эмоции. Универсальность этой технологии позволяет превратить любую поверхность в холст для потрясающего визуального повествования, что делает ее излюбленным инструментом как художников, так и маркетологов.
История и развитие проекционного картографирования
Концепция проекционного мэппинга имеет увлекательную историю, которая берет свое начало в 1969 году, когда компания Disney впервые представила эту технологию в Диснейленде. Впервые проекционный мэппинг был использован в аттракционе "Особняк с привидениями", где лица проецировались на головы манекенов, создавая жуткий и реалистичный эффект. С тех пор технология претерпела значительное развитие, предлагая впечатляющие визуальные эффекты, которые намного превосходят ее скромное начало. Сегодня современный проекционный мэппинг - это популярный инструмент для создания захватывающих впечатлений, который нашел применение в различных отраслях, включая рекламу, образование и развлечения. Прогресс в технологии проекционного мэппинга позволил создавать высокодетализированные и интерактивные дисплеи, завораживающие аудиторию и превращающие обычные пространства в необычную среду.
Два интерактивных проекционных мэппинг-проекта Джесси Джеймса Аллена
Джесси Джеймс Аллен начал свою карьеру звукорежиссера в индустрии развлечений в начале 90-х годов, на заре цифровой эры. Постепенно он стал медиадизайнером для тематических парков и научился владеть многими инструментами, которые он рассматривает как важные части головоломки для передачи эмоционального опыта через повествование. Он участвовал в разработке 53 видеоигр, и эта деятельность по-настоящему сформировала его творческую карьеру. Влияние видеоигр чувствуется в некоторых его проекционных проектах, где он иногда использует контроллеры видеоигр для управления проекцией.
Джесси видит огромный потенциал HeavyM в интерактивном опыте и выставках, чтобы рассказывать более убедительные и сенсационные истории. На самом деле, он работает с художниками и иллюстраторами, так как привнесение физического тактильного мира в уравнение делает эффект еще более ярким, более органичным. По словам Джесси, "сочетание традиционного искусства и цифровых технологий создает особую магию. Я занимаюсь исследованиями и разработками с HeavyM уже около года, и мне кажется, что я только нащупал поверхность, затронув целую вселенную возможностей".
Его сотрудничество с Чарли Джича привело к созданию картины, выполненной токопроводящими чернилами. Эти чернила подключены к сенсорной плате, которая преобразует информацию в MIDI для HeavyM. Поскольку секвенсор HeavyM управляется по MIDI, Джесси связал части картины с определенными последовательностями. Чтобы эффективно анимировать объекты в проекционном мэппинге, необходимо создавать маски, соответствующие форме анимируемых поверхностей.
Основываясь на этом опыте, Джесси Джеймс Аллен придумал и построил 8-футовую скульптуру "Ангел Сераф", которая была представлена на масштабном фестивале искусств Immerse in 2017, организованном в Орландо компанией Creative City Project.
Сераф" сочетает в себе проекционный мэппинг, захват движения и звуковой дизайн для создания иммерсивного интерактивного опыта. Это самый крупный проект Джесси с использованием HeavyM, предлагающий всем зрителям возможность взаимодействовать с инсталляцией посредством своих тел и голосов. В этом проекте Джесси использовал всю мощь HeavyM Live.
Большинство проецируемых изображений - это шейдеры, управляемые посетителем с помощью распознавания движений с помощью Leap motion и сенсорного взаимодействия с токопроводящими чернилами. Наконец, модуль анализа звука HeavyM был использован для реагирования на голос посетителя через микрофон.
Интерактивное проекционное отображение с отслеживанием движения
Digital Essence производит интерактивные инсталляции для корпоративных коммуникаций с 2014 года. Компания опирается на сотрудничество между сценографами, дизайнерами компьютерной графики и инженерами для разработки и реализации интерактивных систем с использованием видеопроекции. Для мероприятия Hacking de l'Hôtel de Ville de Paris 2020, посвященного цифровым инновациям, Digital Essence разработала и создала интерактивную проекционную картографическую инсталляцию.
Главная цель - выделить уникальное место, предложив при этом цифровую анимацию, которая дополнит событие. Так, благодаря проекционному мэппингу, ступени главной лестницы реагируют на проход публики, запуская видеоанимацию. Инсталляция дарит посетителям захватывающий и впечатляющий опыт, который они запомнят надолго. Для получения высококачественных проекций, которые повышают вовлеченность зрителей, использовалось несколько проекторов.
В Digital Essence использовалась стереоскопическая камера ZED, соединенная с программное обеспечение для отслеживания Augmenta для обнаружения присутствия и положения людей на лестнице. Для повышения качества изображения и обеспечения бесшовности проецируемых поверхностей использовалось смешивание краев.
Эти данные отправляются в шейдер, который отображается и деформируется с помощью HeavyM, чтобы включать/выключать лестницу, когда человек проходит мимо. Наконец, воспроизводится видеоролик "блестящего дождя", как только кто-то появляется в поле обнаружения.
Дополнительная информация об этом проекте: ссылка на статью в блоге.
Персонализация интерактивных дисплеев с помощью проекционного отображения
Еще один проект Digital Essence: иммерсивная коробка, предлагающая персонализированный опыт, основанный на выборе, сделанном на планшете. После серии вопросов посетитель погружается в коробку с проекцией вокруг него. Ощущения могут быть изменены в зависимости от выбора цветов, музыки и направлений. Анимация и музыка меняются в зависимости от ответов, чтобы обеспечить впечатляющий эффект. Кроме того, можно интегрировать интерактивные игры, такие как "Виртуальное регби" и "Виртуальный футбол", чтобы повысить вовлеченность за счет взаимодействия с проецируемым контентом в режиме реального времени.
В технической части инсталляции используются 2 комплекта Olga, 3 ультракороткофокусных проектора Full HD, компьютер и планшет. Перед входом на стенд посетители заполняют анкету на веб-странице, отображаемой на планшете. Ответы заносятся в базу данных и обрабатываются программой, запущенной на компьютере, транслирующем шоу. Наконец, эта программа управляет видео, демонстрируемым HeavyM, благодаря OSC-сообщениям. Технология также позволяет превращать стены в интерактивные дисплеи, создавая эффект погружения на настраиваемых поверхностях с помощью различных методов проецирования и интерактивных игр.
Интерактивный проекционный мэппинг на сцене
В завершение этой подборки проектов интерактивного проекционного мэппинга мы решили показать его применение в сценическом контексте. Для этого спектакля, соединяющего танец и видеопроекцию, Диомеди Маттиа реализовал систему генерации изображений в реальном времени, основанную на движениях танцоров. Проекционная поверхность играет решающую роль в достижении динамичных визуальных эффектов, превращая сцену в иммерсивный опыт.
Этот интерактивный балет был создан компанией Laserentertainment с использованием технологии Blacktrax и программы TouchDesigner. Blacktrax - это технология отслеживания движений, основанная на инфракрасных светодиодах. Танцоры оснащены небольшой электронной схемой, состоящей из батареи и светодиодов, свет которых невидим для человеческого глаза, но не для специальных камер. Позиции танцоров становятся известны благодаря программе обработки изображений и передаются в программное обеспечение TouchDesigner. Уникальные возможности этой технологии повышают общее качество и эффективность представления.
TouchDesigner позволяет программировать генераторы изображений с помощью системы узлов, которые должны быть связаны между собой.
Будущее проектов проекционного картографирования
Будущее проектов проекционного мэппинга невероятно многообещающе, а интерактивность может стать следующим важным направлением развития. В ближайшем будущем мы можем увидеть опыт виртуальной реальности (VR) с использованием специальных очков, позволяющих пользователям еще больше погрузиться в проецируемые визуальные образы. Технологии, позволяющие зрителям влиять на отображение в реальном времени с помощью звука, осязания и зрения, уже набирают обороты, усиливая интерактивный опыт. Носимые технологии также интегрируются, чтобы обеспечить еще более персонализированное и вовлекающее взаимодействие. Однако существуют проблемы, которые необходимо решить, например, стоимость и время, затрачиваемое на создание этих сложных дисплеев. Производственный процесс часто требует сотрудничества между различными отделами и значительных инвестиций. Преодоление этих препятствий потребует постоянных инноваций и инвестиций, но потенциальные выгоды от создания действительно захватывающих впечатлений огромны.
Заключение
Эта подборка проектов интерактивного проекционного мэппинга дает представление о сферах применения и возможностях, демонстрируя потенциал создания захватывающих впечатлений. Эти возможности действительно очень широки и в ближайшие годы будут развиваться все больше и больше. Технологии играют важную роль в интерактивном искусстве, поскольку они являются неотъемлемой частью сенсорных систем, обеспечивающих взаимодействие. Поэтому доступность компьютерных инструментов необходима для роста и умножения работ в этой дисциплине. HeavyM, благодаря простоте использования и универсальности, позволяет реализовать интерактивный проекционный мэппинг в несколько кликов.
RU 
EN 
FR 
ES 
DE 
IT 
PT 
CN 
KR 
JA