ライブパフォーマンス用音楽ビジュアルの作り方

TL;DR: 2026年、ライブパフォーマンスに音楽ビジュアルを加えることは、観客を魅了するために不可欠です。DJであれバンドであれ、オーディオ・リアクティブ・ビデオ・マッピングは、普通のステージを没入型体験に変えます。HeavyMのようなプラグアンドプレイ・ソフトウェアを使えば、パフォーマーはコーディングなしで、1,000以上のジェネレーティブな音楽ビジュアル・エフェクトをライブ・ミュージックに即座に同期させることができます。

音楽ビジュアル - 表紙記事

ライブパフォーマンスの参考文献

エレクトロニック・ミュージックのファンなら、ますます多くのアーティストやフェスティヴァルが、次のような点に注目していることにすでにお気づきだろう。 舞台装飾.通常、固定されたセット要素で構成され、ビデオプロジェクションやLEDスクリーンと混在することもある。ライブパフォーマンスの視覚的アピールやブランディングを強化するために、カスタムやストックの背景が組み込まれることも多い。イベント トゥモローランド または ドゥール・フェスティバル などが良い例だろう。アーティストとしては、有名どころでは次のような名前が挙げられる。 エイモン・トビン, エイフェックス・ツイン または エリック・プライズ.彼らは、大規模なステージで音楽と映像の反応を利用した先駆者だった。

ミュージック・ヴィジュアル - Erix Prydz
ミュージック・ヴィジュアル・パフォーマンス - エイフェックス・ツイン

しかし、このようなインスタレーションの実施には、長い設計期間と専任のクリエイティブ・チームの協力が必要である。実際、操作する映像の高解像度と音楽への反応能力は、解決すべき複雑な問題である。ライブパフォーマンス中に音と映像の完璧な同期を保証するためには、遅延時間を可能な限り短くしなければならない。さらに、ネットワーク化された複数のコンピューターを使い、互いに同期させる必要があることも多い。クリエイティブなスキルに加えて、技術的な専門知識も必要だ。これらの要素はすべて、番組全体の制作価値とプロとしての洗練度に貢献する。習得すべきすべての工程は、以下の用語でグループ化することができる。 VJテクノロジー これは、コンピューター・グラフィックス、コンピューター・プログラミング、オーディオ・ビデオ信号処理、ライブ・レコーディング...といった技術に分けられる。

ミュージック・ビジュアル - VJ技術
この記事の目的は、小規模から中規模の舞台公演のために応答性の高いビジュアルを作成することは、実は思っているほど手の届かないことではないことを実証することである。アクセスしやすいソフトウェアと手頃な価格のハードウェアがあれば、何週間もかけて作業しなくても、ライブ・オーディオビジュアル・パフォーマンスを構築することは十分可能です。ビジュアルはオーディオに命を吹き込み、パフォーマンスをよりダイナミックで魅力的なものにする。この点を説明するために、アーティストのControl Random、Neurotypique、Marin Scart、Jean-Michel Lightが、石灰岩の採石場での最新パフォーマンスの構想段階を共有した。
音楽ビジュアル - 表紙記事
プロジェクションマッピング マインパフォーマンス

ライブビジュアルエフェクトのフォーカスポイント:FPSとレイテンシー。

ライブパフォーマンス用の音楽ビジュアルを制作する場合、ビジュアルアニメーションの流動性と、音楽と映像の間のレイテンシーという2つのポイントが焦点となる。

画像は最低でも1秒間に24フレームのレートで生成されることが絶対条件だ。このデータはフレームレートと呼ばれ、FPS(frames per second)で表されます。この値を下回ると、たとえば毎秒12フレームでは、すべてのアニメーションがぎこちなく見えてしまいます。速いアニメーションの場合、多くの場合、24 FPS以上の値、つまり30 FPSや60 FPSを目指す必要があります。 

例えば、非常に速いアニメーションを使ったビデオゲームなどだ、 ゲーマーは、アクションを見逃さないために、解像度よりもフレームレートを優先するフルHDの60 FPSの方が、4Kの30 FPSよりも良い体験ができる。このように、解像度の向上とFPSの向上はトレードオフの関係にある。 

視覚効果や複数のHDビデオの同時再生など、リソースを多く消費する処理にコンピュータを使用するほど、FPSの数値は低下する傾向にあります。一般的に、グラフィックカードの設定または使用するソフトウェアの設定によってFPS数値を表示することが可能です。そして、ビジュアルの複雑さと、ライブパフォーマンス中に低下してはならないFPSの上限との間で、最適なバランスを見つけるのはあなた次第です。
FPS - コンピューター
レイテンシーについては、音楽で発生したことが映像で反響するまでの遅延のことです。例えば、音楽の "キック "ごとに、オーディオに反応する歪みの視覚効果を関連付けたい。一般的なルールとして、2つの出来事の遅延が100ミリ秒以下であれば、人間には瞬時にリンクして見えると言えます。守るべき値に関する絶対的なルールはありませんが、100msを超える遅延は知覚可能であるとみなされます。FPSが低いほど、音楽に反応するビジュアルエフェクトの遅延は大きくなります。
コンサートやDJセットの場合、音楽が録音されたものでなく生演奏であれば、映像との関係で常に音楽が支配的となる。視覚的なアニメーションに合わせてスロー再生することはできない。したがって、同期していないように見えるように適応しなければならないのは映像の方である。コンピュータの処理速度を落とさないようにアクティブ化されたエフェクトを減らすか、よりパワフルなモデルの使用を計画する。
多くのビデオジョッキー(VJ)が使用する一般的なテクニックは、システムを2つのパートに分けることです:プリレンダリングされたビデオクリップが再生され、一緒にミックスされ、そしてライブで適用される音楽に反応するかしないかのビジュアルエフェクトと組み合わされます。そして、VJが再生される音楽に合わせてスピードを調整できるように、使用されるビデオクリップはすべて同じFPSである必要があります。

ミュージック・リアクティブ・ビジュアルを使ったライブ・パフォーマンスの一例

ストーン・マイン・マッピング・パフォーマンスは、音と映像の相互作用を探求し、観客の立場を問うようにデザインされている。音楽と映像がライブで制作される、リアルタイムのオーディオビジュアル・パフォーマンスである。

Control Random、Maison Sagan、Marin Scartは、2度と同じことはできない実現というアイデアに心を動かされた。彼らの願いは、それぞれのアーティストの経験や専門性を超えた、学際的なプロジェクトを立ち上げることだった。各アーティストはプロジェクトに自分の作品を提供し、パフォーマンスの共同性を強調した。堆積岩に囲まれていることを意識していた彼らは、この物質の過去、現在、未来について問いかけ、この物質が経てきたさまざまな状態について考え、その未来に自分自身を投影したいと考えた。この5部構成の旅では、音楽と反応するビジュアルが、音声とCV情報を使って音とリンクし、画像作成ソフトウェアのジェネレイティブ・パッチを駆動する。

このライブの出演アーティスト

音楽はコントロール・ランダムがユーロラック・モジュラー・シンセサイザー・システムを使ってライブで制作している。彼の作曲は、主にライブで演奏され、以下のサイトで見ることができる。 インスタグラムバンドキャンプ のプロフィールにある。

マリン・スカートニューロティピック より メゾン・サガン は、モジュラー・シンセサイザーをベースとしたアナログ部分と、コンピューター部分とで構成される画像生成システムを開発した。 タッチデザイナー とHeavyMソフトウェア。

最後に ジャン=ミシェル・ライトDMX制御の照明を追加し、採石場の空間をよりよく鑑賞できるようにした。 リヨン、光の祭典.

実際:ライブ・パフォーマンスの視覚効果に使用されるソリューション

音楽とリズムを合わせたビジュアルを作成するために、ニューロティピックとマリン・スカートはシステムのさまざまな要素を相互接続した。コントロール・ランダム社のモジュラー・シンセサイザーは、オシレーターから音波を生成するエレクトロ・アナログ楽器である。生成された様々な信号はニューロティピックのモジュールに送られ、フィルタリングやターンオン/ターンオフの操作が行われる。その後、アナログ信号はデジタル信号に変換され、Marinのコンピューターで解釈され、オーディオファイルの管理、処理、視覚化の準備が行われます。TouchDesignerは、音楽ビジュアルに反応するビジュアル・エフェクトを生成することができ、HeavyMによって適用されたシェーダーで修正され、最終的にはMIDIインストゥルメントでライブ・コントロールされるため、ユーザーはオーディオとビジュアルの両方の要素をリアルタイムで編集することができる。このシステムにより、アーティストは音楽を創造的な方法で視覚化し、サウンドデータを魅力的なビジュアル体験に変換することができる。最後に、プロジェクションマッピングを行う2台目のコンピューターに映像信号が送られ、部屋の壁面に視覚効果を配置する。

ライブ・パフォーマンス・システムの概要

ライブ・パフォーマンス・スキーム

音源:モジュラー・シンセサイザー

モジュラー・シンセサイザー

オシレーター、フィルター、エフェクト......組み合わせの可能性は無限大で、アーティストは自分だけの音楽を生み出すことができる。Control RandomとNeurotypiqueは、モジュラー・シンセサイザーの標準フォーマットであるEurorackシステムを採用している。使用可能なモジュールは モジュラー・グリッド ウェブサイトをご覧ください。その数は11,000以上!

もちろん、音楽と同期したビジュアル・エフェクトを作るためにモジュラー・シンセサイザーを使う必要はありません。DJミキサー、コンピュータジャック、マイクなど、どのようなソースでも使用できます。また、特定の曲やトラックをビジュアルエフェクトのベースとして使用することもできます。

コンピュータ

ライブパフォーマンス中の遅延問題を避けるため、フレームレートを60FPSに近づけるために、アーティストは2台のコンピュータを使うことにした。この構成により、処理をよりうまく分散させ、マシン間で作業負荷を分けることができます。このソリューションの他の利点は、互いに干渉することなく2人1組で作業できることと、パフォーマンスのセットアップ中に問題をより簡単に特定できることです。
また、同様のビジュアル・パフォーマンス・セットアップは、Windows、Mac OS、Linuxを搭載したタブレットやコンピューターなど、さまざまなデバイスで実行することができ、iOSデバイスではブラウザー経由でアクセスすることもできるため、さまざまなプラットフォームで柔軟性と互換性を提供することができる。

視覚効果コンピューター

オーディオ情報を送信するコンピューターは、Windows 10、インテルi7プロセッサー、Nvidia GeForce GTX 1650グラフィックカード、16GBのRAMを搭載したタワー型PCである。 TouchdesignerとHeavyMはこのコンピュータで動作しています。あるいは、音楽ビジュアルを作成するためにウェブベースのアプリを使用することを好むアーティストもいるかもしれません。アプリは柔軟性があり、インストールを必要とせず、インターネット接続があればどのデバイスからでも簡単にアクセスできるからです。

画像歪みコンピューター

映像を空間にフィットさせるために使用されるビデオマッピングコンピューターは、ウィンドウズ10、インテルi5プロセッサー、Nvidia GeForce GTX 1050グラフィックカード、8GBのRAMを搭載したノートパソコンだ。

このコンピュータではHeavyMだけが動作している。

についてのヒントはこちら プロジェクションマッピング用コンピュータを選ぶポイントをチェックしてください。 コンピューター専用記事.

プロジェクター

使用したプロジェクターはオプトマWU630 6000ルーメンのフルHDで、焦点距離比0.9の短焦点光学系。

ビデオプロジェクターを選ぶ際のアドバイスについては、以下を参照してください。 専用記事 オン ビデオプロジェクター.

LEDライト

ミュージック・ビジュアル - LEDライト

側面のトンネルを照らすライトは以下の通り。 アステラ・チタン・チューブ バッテリーに

レスポンシブ・オーディオ・ビジュアル・エフェクト・ソフトウェア

タッチデザイナー

NeurotypiqueとMarin Scartは、Touchdesignerソフトウェアで自作曲をプログラミングした。 開発元 デリバティブTouchdesignerは、ノード・プログラミング・システムを使用して、リアルタイムの視覚効果を作成することができます。Touchdesignerの強みは、ライブ・パフォーマンスに完璧に適応したグラフィック・パイプに関連する、無限の可能な組み合わせです。ただし、思い通りのものを作るには、使いこなすのに時間がかかります。

HeavyM

HeavyM は、Digital Essence社によって開発され、数クリックで音楽レスポンシブ・エフェクトを作成することができます。Stone Mine Mappingプロジェクトでは、HeavyMは2つのレベルで使用されました。1つ目は、Touchdesignerのビデオ出力での、処理エフェクトシェーダーの使用です。もう1つは、投影スペースに合わせて画像全体を歪めることです。

HeavyMはオーディオ分析機能を直接統合し、再生中の音楽に反応するビジュアル・エフェクトの機能を提供します。コンピュータとオーディオソースをジャックケーブルなどで接続するだけです。外部サウンドカードを使用することもできます。

パフォーマンス・コンポーネント間のコミュニケーション

音楽に反応するビジュアルを生成するためには、さまざまなハードウェアとソフトウェアの要素が必然的に情報を交換しなければならない。

モジュラー・シンセサイザーは、オーディオ情報を特定のモジュールを通して送信する: ES-9 エキスパート・スリーパーズ.これは電気信号をTouchdesignerが理解できるデジタルデータに変換するアナログ・デジタル変換器です。HeavyMにはオーディオ分析機能が直接統合されており、再生される音楽に視覚効果を反応させることができるため、この種のハードウェアを用意する必要はありません。コンピュータをオーディオソースにジャックケーブルなどで接続するだけです。外部サウンドカードを使用することもできます。

音楽情報を受信すると、Touchdesignerはビジュアル・アニメーションを生成し、HeavyMに送信します。 Syphon リンク。これは、あるソフトウェアのビデオ出力を別のソフトウェアに送信する技術です。HeavyMはビデオを受信し、MIDIコントローラを使用して、Marin Scartは追加の視覚効果を適用します。HeavyMの出力は、MIDIコントローラを使用して、2台目のコンピュータ上のHeavyMの別のインスタンスに送信されます。 NDI技術.これにより、ビデオストリームを最小のレイテンシーでネットワーク上に配信することができる。最後に、HeavyMはビデオのジオメトリを修正してビデオプロジェクターに送り、プロジェクターはライブパフォーマンス空間にビデオを表示する。

最終出力がプロジェクターに送られた後、システムは完成したビデオをレンダリングすることができます。その後、ユーザーは完成したビジュアルをエクスポートまたはダウンロードして、さらに使用することができます。また、プラットフォームによっては、ビデオレンダリングプロセスの後、YouTubeのようなプラットフォームに直接ビデオを共有することができます。

ビデオ投影を完成させるために、サイドにLEDライトが追加された。これはプロジェクションの色に合わせたものです。照明の制御信号は、TouchdesignerからWiFiネットワーク経由で送信されるDMXメッセージです。

ビジュアルを洗練させる

ビジュアルを洗練させることは、あなたのプロジェクトをシンプルな音楽ビジュアライザーから、YouTubeチャンネルを含むあらゆるプラットフォームで際立つ、洗練されたプロフェッショナルなミュージックビデオに変えるための重要なステップです。基本的な音楽ビジュアルを設定したら、次はあなたのビデオを本当にユニークで魅力的なものにするための細部に集中しましょう。

まずは、あなたの音楽を最大限に表現する高品質のオーディオトラックを選ぶことから始めましょう。オーディオの明瞭度とダイナミクスは、音楽ビジュアライザーの反応や、最終的なビデオの没入感に直接影響します。次に、お使いのソフトウェアで利用できる幅広い音楽ビジュアルテンプレートを探します。これらのテンプレートは、見栄えの良いビデオをすばやく作成できるように設計されていますが、あなたのブランドやスタイル、トラックのムードに合わせてビジュアルをカスタマイズできるオプションも豊富に用意されています。

さまざまな色、形、エフェクトをためらわずに試してみてください。ロゴやアルバムアートを反映させるためにパレットを調整したり、ビジュアルをスクリーン上でポップにするために大胆な色を使ったりしましょう。多くの音楽ビジュアライザーでは、エフェクトの動きや強さ、スタイルを微調整できるので、オーディオトラックのエネルギーやリズムにぴったり合ったビジュアライゼーションを作成できます。エフェクトを重ねたりテンプレートを組み合わせたりして、あなただけのルックを作り上げてみてください。

ビジュアルを洗練させる際には、視聴者を念頭に置いてください。コンピュータの画面から携帯電話まで、さまざまなデバイスでビデオがどのように表示されるかを考え、どのサイズでもビジュアルが鮮明でインパクトがあることを確認してください。満足がいったら、完成したビデオをYouTubeチャンネルやその他のプラットフォームに直接アップロードして、あなたの音楽とビジュアルを世界中と共有する準備が整います。

時間をかけて音楽ビジュアルをカスタマイズし、テンプレート、色、エフェクトを試すことで、音楽を紹介するだけでなく、ブランドを高め、視聴者と深いレベルでつながるビデオを作成することができます。

君の番だ!

創造する ライブパフォーマンスのための音楽レスポンシブビジュアル には、インターネットで簡単に検索できる技術的な知識が必要である。一方、必要なハードウェアは、コストや理解の面で、ますます身近なものになっている。これらの進歩により、ユーザーは自分の音楽、新譜、DJミックスを宣伝するためのコンテンツを素早く作成できるようになり、これらのツールはミュージシャン、レコード会社、その他の音楽関係者にとって理想的なものとなっている。多くのプラットフォームでは、独自のロゴを追加したり、ブランディングに合わせて配色をカスタマイズしたりすることができ、コンテンツが目立つようにすることができる。無料のテンプレートや機能を提供しているツールもあり、ビジュアル作成にかかる時間はほんの数分です。レンダリング後、ユーザーは完成したビデオをダウンロードするための専用ページに誘導されることが多い。これらのツールは商用利用も可能で、作成したビジュアルを収益化プロジェクトやクライアントワークで商用利用することができます。

石鉱山マッピング・プロジェクトは一見複雑に見えるかもしれないが、利用可能なツールやテクニックの概要を知ることができるという利点がある。1台のコンピューターとスピーカーに絞った、もっとシンプルなシステムを考えることも可能だ。多くのオーディオビジュアル・パフォーマーは、必ずしもオーディオとビデオのリンクを作らなくても、聴いた音楽に従って "耳で "操作をすることで満足している。その結果、コンピュータに勝手に判断させるよりも、より適切な結果が得られることもある。
ミュージック・ビジュアル - 大きな視野でのパフォーマンス

続きはこちら

プロジェクターについて詳しくはこちら

あなたのニーズに合ったプロジェクターを選ぶための詳細なガイドを作成しました。このガイドでは、プロジェクター選びのヒントや失敗しないためのポイントをご紹介します。

HeavyMのソフトを調べる

HeavyMは、視覚効果を生成し、ボリューム、装飾、建築要素に投影することができるプロジェクションマッピングソフトウェアです。HeavyMはMacとWindowsに対応しています。