5 proyectos para descubrir el mapping de proyección interactivo
Introducción - arte interactivo y mapping de proyección
El arte interactivo es una forma de arte dinámico que reacciona a su entorno. La obra producida crea así un vínculo entre el entorno, como el ser humano o la naturaleza, y los demás elementos que lo componen. Estos elementos pueden ser un escenario, un decorado, una escultura, la luz, un sistema informático... En las instalaciones interactivas, los participantes interactúan a través de sensores para producir un resultado único generado en directo.
Ejemplo : Daniel Rozin - Espejos mecánicos
El mapping de proyección, gracias a los videoproyectores, permite adornar un espacio con luz. Por eso es interesante para transcribir visualmente los acontecimientos que se producen en el entorno. Estos acontecimientos pueden ser, por ejemplo, el movimiento de una persona, la acción de un botón o un sonido tocado por un instrumento. En este artículo ofrecemos una selección de proyectos de mapping de proyección interactivo para demostrar las posibilidades que ofrece.
Dos proyectos interactivos de proyección cartográfica de Jesse James Allen
Jesse James Allen comenzó su carrera como ingeniero de sonido en la industria del entretenimiento a principios de los 90, en los albores de la era digital. Poco a poco se convirtió en diseñador de medios para parques temáticos y aprendió a dominar muchas herramientas, todas ellas consideradas por él piezas esenciales de un puzzle para ofrecer experiencias emocionales a través de la narración. Ha participado en el diseño de 53 videojuegos y esta actividad ha moldeado verdaderamente su carrera como creativo. La influencia de los videojuegos se deja sentir en algunos de sus proyectos de mapping de proyección, en los que a veces utiliza mandos de videojuegos para controlar la proyección.
Jesse ve un enorme potencial para la HeavyM en experiencias interactivas y exposiciones para contar historias más convincentes y sensacionales. De hecho, trabaja con pintores e ilustradores, ya que introducir el mundo táctil físico en la ecuación hace que el efecto sea aún más vívido, más orgánico. Según Jesse, "la mezcla de arte tradicional y digital crea un tipo especial de magia. Llevo un año investigando y desarrollando con HeavyM y siento que sólo estoy arañando la superficie, tocando todo un universo de posibilidades".
Su colaboración con Charlie Jicha dio como resultado una pintura hecha con tinta conductora. Esta tinta está conectada a una Touch Board, que convierte la información en MIDI para HeavyM. Como el secuenciador de HeavyM es controlable por MIDI, Jesse vinculó partes de la pintura a secuencias específicas.
Basándose en esta experiencia, Jesse James Allen imaginó y construyó el Ángel Serafín, una escultura de 2,5 metros que se presentó en Immerse en 2017, un enorme festival de arte organizado en Orlando por Creative City Project.
The Seraph combina mapping de proyección, captura de movimiento y diseño de sonido para ofrecer una experiencia interactiva envolvente. Se trata del mayor proyecto de Jesse hasta la fecha con HeavyM, que ofrece a todos los espectadores la oportunidad de interactuar con la instalación a través de sus cuerpos y voces. Jesse aprovechó toda la potencia de HeavyM Live en este proyecto.
La mayoría de los elementos visuales proyectados son shaders, controlables por el visitante mediante el reconocimiento de movimiento a través de Leap motion y la interacción táctil con la tinta conductora. Por último, se utilizó el módulo de análisis de sonido de HeavyM para reaccionar al sonido de la voz del visitante a través de un micrófono.
Mapas de proyección interactivos con seguimiento del movimiento
Digital Essence produce instalaciones interactivas para comunicación corporativa desde 2014. La empresa se basa en la colaboración entre escenógrafos, infografistas e ingenieros para diseñar e implementar sistemas interactivos mediante videoproyección. Para el Hacking de l'Hôtel de Ville de París 2020, un evento dedicado a la innovación digital, Digital Essence diseñó y produjo una instalación interactiva de mapping de proyección.
El objetivo principal es poner de relieve un lugar único, proponiendo al mismo tiempo una animación digital que realce el acontecimiento. Así, gracias al mapping de proyección, los peldaños de la escalera principal reaccionan al paso del público desencadenando animaciones de vídeo. La instalación ofrece a los visitantes una experiencia inmersiva e impactante que recordarán.
Digital Essence utilizó una cámara estereoscópica ZED unida a un algoritmo de tratamiento de imágenes desarrollado específicamente para la instalación con el fin de detectar la presencia y la posición de las personas en las escaleras.
Estos datos se envían a un shader que se visualiza y deforma con HeavyM para activar/desactivar las escaleras cuando pasa la persona. Por último, se reproduce un vídeo de "lluvia de purpurina" en cuanto hay alguien en el campo de detección.
Más información sobre este proyecto: https://www.heavym.net/interactive-art-installation-with-sensors/
Personalizar un mapa de proyección interactivo
Otro proyecto de Digital Essence: una caja inmersiva que ofrece una experiencia personalizada basada en las elecciones realizadas en una tableta. Tras una serie de preguntas, el visitante se sumerge en una caja con una proyección a su alrededor. La experiencia puede personalizarse según la elección de colores, música y destinos. Las animaciones y la música varían en función de las respuestas dadas, para garantizar una experiencia impactante.
En cuanto a la parte técnica, la instalación utiliza 2 kits Olga, 3 proyectores Full HD de ultracorta distancia, un ordenador y una tableta. Antes de entrar en el stand, los visitantes rellenan un formulario en una página web que se muestra en la tableta. A continuación, las respuestas se introducen en una base de datos y son procesadas por un programa que se ejecuta en el ordenador que retransmite el espectáculo. Por último, este programa controla los vídeos mostrados por HeavyM gracias a mensajes OSC.
Proyección interactiva en el escenario
Para terminar esta selección de proyectos de projection mapping interactivo, hemos optado por mostrar su aplicación en un contexto escénico. Para este espectáculo que vincula danza y proyección de vídeo, Diomedi Mattia ha implementado un sistema de generación de imágenes en tiempo real, basado en los movimientos de los bailarines.
Este ballet interactivo fue producido por Laserentertainment con tecnología Blacktrax y TouchDesigner. Blacktrax es una tecnología de seguimiento del movimiento que se basa en LED infrarrojos. Los bailarines están equipados con un pequeño circuito electrónico compuesto por una batería y LED cuya luz es invisible para el ojo humano, pero no para cámaras específicas. Las posiciones de los bailarines se pueden conocer gracias a un software de tratamiento de imágenes y se envían al software TouchDesigner.
TouchDesigner permite programar generadores de imágenes mediante un sistema de nodos que se enlazan entre sí.
Conclusión
Esta selección de proyectos de cartografía de proyección interactiva da una idea de sus aplicaciones y posibilidades. Éstas son realmente muy amplias y se desarrollarán cada vez más en los próximos años. La tecnología desempeña un papel esencial en el arte interactivo porque es parte integrante de los sistemas de sensores que permiten la interacción. La accesibilidad de las herramientas informáticas es, por tanto, esencial para el crecimiento y la multiplicación de las obras de esta disciplina. HeavyM, con su facilidad de uso y versatilidad, permite la realización de mapping de proyección interactivo en unos pocos clics.
ES 
EN 
FR 
DE 
IT 
PT 
CN 
KR 
JA 
RU