5 проектов для знакомства с интерактивным проекционным мэппингом
Введение - интерактивное искусство и проекционный мэппинг
Интерактивное искусство - это динамичная форма искусства, реагирующая на окружающую среду. Таким образом, произведение создает связь между окружающей средой, например, людьми или природой, и другими элементами, составляющими ее. Этими элементами могут быть сцена, декорации, скульптура, свет, компьютерная система... В интерактивных инсталляциях участники взаимодействуют через датчики, чтобы получить уникальный результат, созданный вживую.
Пример: Даниил Розин - Механические зеркала
Проекционный мэппинг, благодаря видеопроекторам, позволяет украсить пространство светом. Поэтому он интересен для визуальной расшифровки событий, происходящих в окружающей среде. Такими событиями могут быть, например, движение человека, нажатие кнопки или звук, воспроизводимый инструментом. В этой статье мы предлагаем подборку проектов интерактивного проекционного мэппинга, чтобы продемонстрировать предлагаемые возможности.
Два интерактивных проекционных мэппинг-проекта Джесси Джеймса Аллена
Джесси Джеймс Аллен начал свою карьеру звукорежиссера в индустрии развлечений в начале 90-х годов, на заре цифровой эры. Постепенно он стал медиадизайнером для тематических парков и научился владеть многими инструментами, которые он рассматривает как важные части головоломки для передачи эмоционального опыта через повествование. Он участвовал в разработке 53 видеоигр, и эта деятельность по-настоящему сформировала его творческую карьеру. Влияние видеоигр чувствуется в некоторых его проекционных проектах, где он иногда использует контроллеры видеоигр для управления проекцией.
Джесси видит огромный потенциал HeavyM в интерактивном опыте и выставках, чтобы рассказывать более убедительные и сенсационные истории. На самом деле он работает с художниками и иллюстраторами, так как привнесение физического тактильного мира в уравнение делает эффект еще более ярким, более органичным. По словам Джесси, "сочетание традиционного искусства и цифровых технологий создает особую магию. Я занимаюсь исследованиями и разработками с HeavyM около года, и мне кажется, что я только нащупал поверхность, затронув целую вселенную возможностей".
Его сотрудничество с Чарли Джича привело к созданию картины, выполненной токопроводящими чернилами. Эти чернила подключены к сенсорной плате, которая преобразует информацию в MIDI для HeavyM. Поскольку секвенсор HeavyM управляется с помощью MIDI, Джесси связал части картины с определенными последовательностями.
Основываясь на этом опыте, Джесси Джеймс Аллен придумал и построил 8-футовую скульптуру "Ангел Сераф", которая была представлена на масштабном фестивале искусств Immerse in 2017, организованном в Орландо компанией Creative City Project.
Сераф" сочетает в себе проекционный мэппинг, захват движения и звуковой дизайн для создания иммерсивного интерактивного опыта. Это самый крупный проект Джесси с использованием HeavyM, предлагающий всем зрителям возможность взаимодействовать с инсталляцией посредством своих тел и голосов. В этом проекте Джесси использовал всю мощь HeavyM Live.
Большинство проецируемых изображений - это шейдеры, управляемые посетителем с помощью распознавания движений с помощью Leap motion и сенсорного взаимодействия с токопроводящими чернилами. Наконец, модуль анализа звука HeavyM был использован для реагирования на голос посетителя через микрофон.
Интерактивное проекционное отображение с отслеживанием движения
Digital Essence производит интерактивные инсталляции для корпоративных коммуникаций с 2014 года. Компания опирается на сотрудничество между сценографами, дизайнерами компьютерной графики и инженерами для разработки и реализации интерактивных систем с использованием видеопроекции. Для мероприятия Hacking de l'Hôtel de Ville de Paris 2020, посвященного цифровым инновациям, Digital Essence разработала и создала интерактивную проекционную картографическую инсталляцию.
Главная цель - выделить уникальное место, предложив при этом цифровую анимацию, дополняющую событие. Так, благодаря проекционному мэппингу, ступени главной лестницы реагируют на проход публики, запуская видеоанимацию. Инсталляция дарит посетителям захватывающий и впечатляющий опыт, который они запомнят надолго.
Digital Essence использовала стереоскопическую камеру ZED в сочетании с алгоритмом обработки изображений, разработанным специально для этой инсталляции, чтобы обнаружить присутствие и положение людей на лестнице.
Эти данные отправляются в шейдер, который отображается и деформируется с помощью HeavyM, чтобы включить/выключить лестницу, когда человек проходит мимо. Наконец, воспроизводится видеоролик "блестящего дождя", как только кто-то появляется в поле обнаружения.
Дополнительная информация об этом проекте: https://www.heavym.net/interactive-art-installation-with-sensors/
Персонализируйте интерактивное проекционное отображение
Еще один проект Digital Essence: иммерсивная коробка, предлагающая персонализированный опыт, основанный на выборе, сделанном на планшете. После серии вопросов посетитель погружается в коробку с проекцией вокруг него. Ощущения могут быть изменены в зависимости от выбора цветов, музыки и направлений. Анимация и музыка меняются в зависимости от ответов, чтобы обеспечить впечатляющий опыт.
В технической части инсталляции используются 2 комплекта Olga, 3 ультракороткофокусных проектора Full HD, компьютер и планшет. Перед входом на стенд посетители заполняют анкету на веб-странице, отображаемой на планшете. Ответы заносятся в базу данных и обрабатываются программой, запущенной на компьютере, транслирующем шоу. Наконец, эта программа управляет видео, демонстрируемым HeavyM, благодаря OSC-сообщениям.
Интерактивный проекционный мэппинг на сцене
В завершение этой подборки проектов интерактивного проекционного мэппинга мы решили показать его применение в сценическом контексте. Для этого перформанса, соединяющего танец и видеопроекцию, Диомеди Маттиа реализовал систему генерации изображений в реальном времени, основанную на движениях танцоров.
Этот интерактивный балет был создан компанией Laserentertainment с использованием технологии Blacktrax и программы TouchDesigner. Blacktrax - это технология отслеживания движений, основанная на инфракрасных светодиодах. Танцоры оснащены небольшой электронной схемой, состоящей из батареи и светодиодов, свет которых невидим для человеческого глаза, но не для специальных камер. Позиции танцоров могут быть известны благодаря программному обеспечению для обработки изображений и переданы в программное обеспечение TouchDesigner.
TouchDesigner позволяет программировать генераторы изображений с помощью системы узлов, которые должны быть связаны между собой.
Заключение
Эта подборка проектов интерактивного проекционного картографирования дает представление о сферах применения и возможностях. Они действительно очень широки и в ближайшие годы будут развиваться все больше и больше. Технологии играют важную роль в интерактивном искусстве, поскольку они являются неотъемлемой частью сенсорных систем, обеспечивающих взаимодействие. Поэтому доступность компьютерных инструментов необходима для роста и умножения работ в этой дисциплине. HeavyM, благодаря простоте использования и универсальности, позволяет реализовать интерактивный проекционный мэппинг в несколько кликов.
RU 
EN 
FR 
ES 
DE 
IT 
PT 
CN 
KR 
JA