5 projectos para descobrir a projeção mapeada interactiva
Introdução - arte interactiva e projeção mapeada
A arte interactiva é uma forma de arte dinâmica que reage ao seu ambiente. O trabalho produzido cria assim uma ligação entre o ambiente, como o ser humano ou a natureza, e os outros elementos que o compõem. Estes elementos podem ser um palco, um cenário, uma escultura, uma luz, um sistema informático... Nas instalações interactivas, os participantes interagem através de sensores para produzir um resultado único gerado ao vivo.
Exemplo: Daniel Rozin - Mechanical Mirrors
O mapeamento de projeção, graças aos projectores de vídeo, permite adornar um espaço com luz. É, portanto, interessante para transcrições visuais de eventos que ocorrem no ambiente. Estes eventos podem ser, por exemplo, o movimento de uma pessoa, a ação de um botão ou um som tocado por um instrumento. Neste artigo, apresentamos uma seleção de projectos de projeção cartográfica interactiva para demonstrar as possibilidades oferecidas.
Dois projectos de projeção cartográfica interactiva de Jesse James Allen
Jesse James Allen começou a sua carreira como engenheiro de som na indústria do entretenimento no início dos anos 90, no dealbar da era digital. Gradualmente, tornou-se designer de media para parques temáticos e aprendeu a dominar muitas ferramentas, todas elas consideradas peças essenciais de um puzzle para proporcionar experiências emocionais através da narração de histórias. Participou na conceção de 53 jogos de vídeo e esta atividade moldou verdadeiramente a sua carreira como criativo. A influência dos jogos de vídeo pode ser sentida em alguns dos seus projectos de projeção mapeada, em que por vezes utiliza controladores de jogos de vídeo para controlar a projeção.
Jesse vê um enorme potencial para o HeavyM em experiências interactivas e exposições para contar histórias mais convincentes e sensacionais. De facto, ele trabalha com pintores e ilustradores, uma vez que trazer o mundo físico tátil para a equação torna o efeito ainda mais vívido, mais orgânico. Segundo Jesse, "a mistura de arte tradicional e digital cria um tipo especial de magia. Há cerca de um ano que ando a fazer investigação e desenvolvimento com o HeavyM e sinto que estou apenas a arranhar a superfície, a tocar em todo um universo de possibilidades."
A sua colaboração com Charlie Jicha resultou numa pintura feita com tinta condutora. Esta tinta está ligada a uma placa tátil, que converte a informação em MIDI para o HeavyM. Uma vez que o sequenciador do HeavyM é controlável por MIDI, Jesse ligou partes da pintura a sequências específicas.
Com base nesta experiência, Jesse James Allen concebeu e construiu o Seraph Angel, uma escultura de 8 pés que foi apresentada no Immerse em 2017, um enorme festival de artes organizado em Orlando pelo Creative City Project.
The Seraph combina mapeamento de projeção, captura de movimento e design de som para uma experiência interactiva imersiva. Este é o maior projeto de Jesse até à data com HeavyM, oferecendo a todos os espectadores a oportunidade de interagir com a instalação através dos seus corpos e vozes. Jesse aproveitou todo o poder do HeavyM Live neste projeto.
A maioria dos elementos visuais projectados são shaders, controláveis pelo visitante através do reconhecimento de movimentos via Leap motion e da interação tátil com a tinta condutora. Por último, o módulo de análise de som do HeavyM foi utilizado para reagir ao som da voz do visitante através de um microfone.
Mapeamento interativo de projecções com seguimento de movimentos
A Digital Essence produz instalações interactivas para comunicação empresarial desde 2014. A empresa baseia-se na colaboração entre cenógrafos, designers de computação gráfica e engenheiros para conceber e implementar sistemas interactivos utilizando a projeção de vídeo. Para o Hacking de l'Hôtel de Ville de Paris 2020, um evento dedicado à inovação digital, a Digital Essence concebeu e produziu uma instalação interactiva de projeção mapeada.
O principal objetivo é destacar um lugar único, propondo ao mesmo tempo uma animação digital que valoriza o evento. Assim, graças à projeção mapeada, os degraus da escadaria principal reagem à passagem do público, desencadeando animações vídeo. A instalação proporciona aos visitantes uma experiência imersiva e impactante que eles irão recordar.
A Digital Essence utilizou uma câmara estereoscópica ZED, associada a um algoritmo de processamento de imagem desenvolvido especificamente para a instalação, para detetar a presença e a posição das pessoas nas escadas.
Estes dados são enviados para um shader que é visualizado e deformado com o HeavyM de modo a ligar/desligar as escadas quando a pessoa passa. Por fim, um vídeo de "chuva de purpurinas" é reproduzido assim que alguém está presente no campo de deteção.
Mais informações sobre este projeto: https://www.heavym.net/interactive-art-installation-with-sensors/
Personalizar uma projeção cartográfica interactiva
Outro projeto da Digital Essence: uma caixa imersiva que oferece uma experiência personalizada com base em escolhas feitas num tablet. Após uma série de perguntas, o visitante é imerso numa caixa com uma projeção à sua volta. A experiência pode ser personalizada de acordo com a escolha de cores, música e destinos. As animações e a música variam consoante as respostas dadas, para garantir uma experiência impactante.
No que respeita à parte técnica, a instalação utiliza 2 kits Olga, 3 projectores Full HD de alcance ultra-curto, um computador e um tablet. Antes de entrar no stand, os visitantes preenchem um formulário numa página Web apresentada no tablet. As respostas são depois introduzidas numa base de dados e processadas por um programa que corre no computador que transmite o espetáculo. Por fim, este programa controla os vídeos exibidos pelo HeavyM graças a mensagens OSC.
Mapeamento interativo de projeção no palco
Para terminar esta seleção de projectos de projeção cartográfica interactiva, optámos por mostrar a sua aplicação num contexto cénico. Para este espetáculo que associa dança e projeção de vídeo, Diomedi Mattia implementou um sistema de geração de imagens em tempo real, baseado nos movimentos dos bailarinos.
Este ballet interativo foi produzido pela Laserentertainment utilizando a tecnologia Blacktrax e o TouchDesigner. A Blacktrax é uma tecnologia de seguimento de movimentos que se baseia em LEDs infravermelhos. Os bailarinos estão equipados com um pequeno circuito eletrónico composto por uma bateria e LEDs cuja luz é invisível ao olho humano, mas não a câmaras específicas. As posições dos dançarinos podem então ser conhecidas graças a um software de processamento de imagem e são enviadas para o software TouchDesigner.
O TouchDesigner permite-lhe programar geradores de imagens através de um sistema de nós a ligar entre si.
Conclusão
Esta seleção de projectos de projeção cartográfica interactiva dá uma ideia das aplicações e possibilidades. Estas são, de facto, muito vastas e desenvolver-se-ão cada vez mais nos próximos anos. A tecnologia desempenha um papel essencial na arte interactiva porque é parte integrante dos sistemas de sensores que permitem a interação. A acessibilidade das ferramentas informáticas é, por conseguinte, essencial para o crescimento e a multiplicação das obras desta disciplina. O HeavyM, com a sua facilidade de utilização e versatilidade, permite a realização de projecções cartográficas interactivas em poucos cliques.
PT 
EN 
FR 
ES 
DE 
IT 
CN 
KR 
JA 
RU