OSCでインタラクティブなプロジェクションマッピングを作成する
印象的なハカナイのパフォーマンス アドリアン・M＆クレア・B
プロジェクションマッピングとは？
ビデオマッピングや空間拡張現実とも呼ばれるプロジェクションマッピングは、デジタルコンテンツを投影することで、通常の表面をダイナミックなディスプレイに変える画期的な技術である。この技術は、観客を魅了するビジュアル体験を生み出すことで、マーケティング、エンターテインメント、教育など様々な分野に革命をもたらしました。ブランドメッセージの伝達、ユニークな舞台背景の制作、壁や天井の装飾、感情の喚起など、プロジェクションマッピングは無限の可能性を秘めています。あらゆる表面をキャンバスに変えることで、アーティストやクリエイターはビジュアルストーリーテリングの限界を押し広げ、印象に残る没入型体験を生み出すことができます。
プロジェクションマッピングの仕組み
プロジェクションマッピングは、専用のソフトウェアを使用してデジタルコンテンツを実物の表面に投影し、それを鮮やかな映像へと変える技術です。このプロセスは、コンセプトの企画と、投影対象となるオブジェクトの選定または作成から始まります。仮想プログラムソフトウェアを用いて、映像コンテンツがオブジェクトの表面に綿密にマッピングされます。 2Dマッピングのワークフローでは、画像や動画が、対象物の表面に対応するマスクに割り当てられます。3Dマッピングの場合、シーンは3D専用ソフトウェアで再現され、対象物の仮想モデルが実物の対象物に投影されます。これには、対象物の配置に関する、 ビデオプロジェクター, 、プロジェクターのXYZ方向、位置、およびレンズの仕様を考慮して行われます。その結果、デジタルコンテンツと現実世界がシームレスに融合し、息をのむような視覚体験を生み出します。.
インタラクティブアートとは？
インタラクティブアートは、観客や環境に反応するダイナミックなアートである。作品は一般的に、観客が参加できるインスタレーションの形で発表される。また、1人または複数のアーティストがアクションを行うパフォーマンスを通して体験することもできる。インタラクティブ・ディスプレイは、広告、教育、イベントなど様々な用途で使用される多目的なツールであり、ユーザーのエンゲージメントやブランド認知度を高める。
インタラクティブアートは、美術館やギャラリーよりも排他的でない場所で展示したいというアーティストの要望を受けて、1950年代後半に登場した。より参加的で包括的な体験を提案するために、路上や店舗が表現の場となった。参加者はもはや観客ではなく、俳優のような役割を担うことになる。
インタラクティブアートの初期の例は、触ったり遊んだりできる彫刻だった。例えば、ニキ・ド・サンファルは、子供が遊べる滑り台を備えた記念碑的彫刻『ゴーレム』を制作した。また、1971年には、ゴードン・マッタ＝クラークがブルックリン橋の下で豚を調理し、パフォーマンスの一環として500個のサンドイッチを提供した。インタラクティブ・ゲームはインタラクティブ・アートの重要な要素であり、モーション・トラッキングやカスタマイズ可能なプロジェクション・オプションを通じて、あらゆる年齢層のユーザーを魅了する。
企業イベントの中には、例えば製品発表会などでこうしたプロセスを導入し、聴衆を惹きつけ、思い出に残る記念品を残したり、パーソナライズされた体験を提供したりするものもある。
技術的な観点から見ると、インタラクティブなパフォーマンスやインスタレーションでは、コンピュータやインタラクティブプロジェクションがますます活用されるようになっています。センサーをコンピュータと組み合わせて使用することで、現実世界での出来事をプログラムが解釈し、それを例えば音や画像として表現することが可能になります。. 対話型システム テクノロジーとアートを融合させ、観客の動きに反応する没入型のインスタレーションを創出し、ダイナミックな視覚的要素でイベントを盛り上げます。.
インタラクティブ・ディスプレイ用オープン・サウンド・コントロール（OSC）
インタラクティブ・アートは、複数のエンティティ間の対話に基づいている。通常、これらのエンティティは、互いに対話するように設計されていない。例えば、同じコンピューターにインストールされた音楽ソフトとビデオソフト、同じネットワーク上のMacとPC、同じ部屋にいる人間と機械などだ。
標準規格は、異なるソフトウェアやハードウェア間のやり取りを容易にするために存在する。UDPやTCPのようなネットワーク・プロトコルは、同じネットワーク上の異なるエンティティ間の相互作用を支配するルールを指定するために使われる。使用される標準の中には オープン・サウンド・コントロールこれはUDPまたはTCPに基づく伝送フォーマットである。
プロトコルはディスカッションのルールに例えることができる。書式は言語の文法に例えることができる。例えば、主語から文章を始めるなどだ。全員が同じ基準に従えば、誰もがお互いを理解することができる！
オープン・サウンド・コントロールは ミディ (楽器用デジタルインターフェース) 1980年代から楽器間の通信に用いられてきた。これは、メッセージのやり取りを通じて楽器とソフトウェアを接続するという考え方を踏襲しているが、大幅な改良が加えられている。OSCはインターネットやローカルネットワークなどのネットワーク接続を利用でき、より多くの情報を伝送できるほか、ファイルパスに似たアドレスベースのシステムを備えている。.
元々は音楽アプリケーション用に設計されたOSCは、現在では何百ものソフトウェア・アプリケーションで使用される標準となっている。もはやオーディオデータに限定されず、インタラクティブプロジェクションを例に挙げると、画像やモーショントラッキング用の情報を伝送することができます。OSCはまた、サウンドエフェクトとビジュアルエレメントを同期させ、インタラクティブプロジェクションの全体的な感覚を高めるために使用することもできます。
インタラクティブ・アートのためのプロジェクション・マッピング・ソフトウェアとツール
数多くの プロジェクションマッピングソフトウェアおよびツール さまざまなプロジェクトのニーズに応えるため、それぞれ独自の機能や性能を備えたソフトウェアが利用可能です。人気のあるソフトウェアには、Resolume、HeavyM、TouchDesignerなどがあり、ドラッグ＆ドロップ機能、ワーピングツール、エッジブレンディングなど、複雑で没入感のあるプロジェクションを作成するための多彩なツールを提供しています。 また、これらのプラットフォームは、モーショントラッキング、3Dモデリング、リアルタイムレンダリングといった高度な機能も備えており、インタラクティブ性が高くダイナミックなディスプレイの制作を可能にします。 ソフトウェアを選択する際には、投影面の種類、投影サイズ、求められるインタラクティブ性のレベルなど、プロジェクトの具体的な要件を考慮することが極めて重要です。適切なツールを選択することで、クリエイターは自身のビジョンを具現化し、息をのむような視覚体験を提供することができます。.
用途にもよるが、これらのソフトウェア・アプリケーションを使えば、例えば外部データを使ってHeavyMで生成したインタラクティブ・プロジェクションをコントロールすることができる。私たちが注目した2つのプログラムは、Mac用のVézerとPC用のChataigneです。これらのツールを使えば、あらかじめ描いたオシレーターや変動曲線を使ってHeavyMをコントロールすることができます。
人間とコンピュータの相互作用について、私たちはHMI（Human-Machine Interface）と呼んでいる。HMIはソフトウェアの目に見える表面であり、ユーザーが機能を操作することを可能にする。実際、あなたは現在、インターネット・ブラウザのHMIを使用しており、この行を読むことができる。ブラウザの隠された部分によって、インターネット上の他のコンピューターやサーバーと情報を交換することができる。
ヘクスラーがTouchOSCを開発OSCメッセージを送信するHMIを構築するためのツールです。TouchOSCを使えば、タブレットやスマートフォンでOSC対応ソフトウェアを制御するアプリケーションを作成できます。発見 これ TouchOSCをHeavyMに接続するための技術情報。
HeavyMでTouchOSCを簡単に使用できるように、あらかじめ設計されたインターフェイスがダウンロードできます。 これ.これらのインターフェースにはソフトウェアの主な機能が組み込まれており、タブレットにインストールするだけでHeavyMを遠隔操作することができます。
最後に、ソフトウェアに加えて、OSCでソフトウェアを駆動できるデバイスを使用することも可能である。例えば Elgatoが作成したストリームデッキ.この装置を使えば、キーを割り当てるだけで、インタラクティブ・プロジェクション・ソフトウェアの機能を簡単にコントロールできる。このシステムの主な利点は、キーが小型スクリーンであるため、アイコンを表示できることです。使い方はとても簡単だ！
例：Data Flawはオープン・サウンド・コントロールを使って、どのように没入体験を作り出したか？
ロマン・アストゥリック、別名データ・フラウ、 は、私たちが生きているデジタル革命**に情熱を注いでいる。音楽、ビジュアル・アート、そして特にインタラクティブ・アートにおいて、テクノロジーを使った作品がますます増えている。テクノロジーは民主化され、クリックひとつで利用できるようになりました。アーティストたちは今、インタラクティブ・プロジェクションのための、手頃で使いやすいツールを手に入れることができる。表面への映像のシームレスな統合を達成するためには、アニメートされるオブジェクトの形状に合ったマスクを作成することが極めて重要である。
データ・フラウは、クリエイティブ・テクノロジストとして、コーディングやクリエイティブな目的でのテクノロジーの使用を教えている。 エスメ・スドリアパリのエンジニア学校卒業。のようなアーティストの作品からインスピレーションを得ている。 1024アーキテクチャジョアニー・ルメルシエと、その スケール集団生前の生前、ったな、ったな。 HeavyM.
パリのメーカーラボでのプロジェクト 学際研究センターデータ・フラウ』は、観客を作品に取り込むために、双方向性という概念を取り入れた。そのアプローチは、美的かつ遊び心に溢れている。観客はインスタレーションの役者となり、自分の行動がインタラクティブなプロジェクションとして表示される結果にどのような影響を与えるかを意識するようになる。インタラクティブ・ウォールは、様々な表面を完全にインタラクティブなディスプレイに変えることができ、ユーザーの関与を高め、没入感のある体験を生み出す。
このインスタレーションは、デジタルプリントとカッティングツールで作られた投影面に、HeavyMソフトウェアで生成されたビジュアルアニメーションが投影される。アーティストが使用したのは、人気のアクセサリーであるプレイステーション5のコントローラーで、Processingで作成されたプログラムを通して、OSC経由でHeavyMに接続されている。プロジェクションマッピング・プロジェクトは、動きとサウンドを統合することで空間を変容させ、参加者がアーティスティックなインスタレーションとインタラクションできるようにする。
ジョイスティックは、さまざまなエフェクトやシーケンスをトリガーすることができる。例えば、ジョイスティックを使って形と色をコントロールすることができます。誰でも簡単に美しいライブカラーの組み合わせを作成できます。カラーパレットと多数のグラデーションは、あるビデオゲームにインスパイアされています：ハイパー・ライト・ドリフタービデオプロジェクターは、観客のインタラクションに反応し、ユニークな映像体験を促進する没入型環境を作り出すのに欠かせない。
形あるものと違って、コンピューター・コードに完成はない。改善すべき機能や修正すべきバグが常に存在する。データ・フラウが特に好きなのはこの点だ。彼のプロジェクトでは、常に微調整が必要で、何度も行ったり来たり、テストや試行錯誤を繰り返す。HeavyMは、プロトタイプの段階でも、最終的な調整でも、彼のクリエイティブなプロセスには欠かせないものです。
HeavyMを使えば、インタラクティブプロジェクションを編集したり、形状を変更したり追加したりすることができます。不必要な複雑さを排除した、柔軟かつパワフルなツールです。
インタラクティブ・プロジェクション・マッピングの未来
インタラクティブ・プロジェクションマッピングの未来は、テクノロジーとソフトウェアの進歩により、より複雑で没入感のある体験への道が開かれ、非常に有望視されている。インタラクティブ性はプロジェクションマッピングの次のフロンティアになると考えられており、視聴者が音、タッチ、視覚を通じてリアルタイムでマッピングに影響を与えることができる技術はすでに話題になっている。ウェアラブル技術はインタラクティブ体験を強化し、人工知能と機械学習の統合は技術をさらに高めると期待されている。コストや制作時間といった課題はあるものの、ユニークで記憶に残る体験を生み出す可能性は計り知れない。テクノロジーが進化し続ける中、インタラクティブ・プロジェクション・マッピングは、ビジュアル・ストーリーテリングと没入型体験の未来を形作る上で、極めて重要な役割を果たすことは間違いないだろう。
続きはこちら
プロジェクターについて詳しくはこちら
あなたのニーズに合ったプロジェクターを選ぶための詳細なガイドを作成しました。このガイドでは、プロジェクター選びのヒントや失敗しないためのポイントをご紹介します。
HeavyMのソフトを調べる
HeavyMは、視覚効果を生成し、ボリューム、装飾、または建築要素に投影することができるプロジェクションマッピングソフトウェアです。HeavyMはMacとWindowsに対応しています。