라이브 공연을 위한 음악 비주얼 제작 방법

TL;DR: 2026년에는 라이브 공연에 음악 비주얼을 추가하는 것이 관객의 참여를 유도하는 데 필수적입니다. DJ든 밴드든 오디오 반응형 비디오 프로젝션 맵핑은 평범한 무대를 몰입형 경험으로 바꿔줍니다. HeavyM와 같은 플러그 앤 플레이 소프트웨어를 사용하면 공연자는 코딩 없이도 1,000개 이상의 생성 시각 효과를 라이브 음악에 즉시 동기화할 수 있습니다.

뮤직 비주얼 - 표지 기사

일부 라이브 공연 참조

일렉트로닉 음악의 팬이라면 점점 더 많은 아티스트와 페스티벌이 다음 사항에 집중하고 있다는 사실을 이미 알고 계실 것입니다. 무대 장식. 일반적으로 고정된 세트 요소로 구성되며, 때로는 비디오 프로젝션 및 LED 스크린과 혼합되기도 합니다. 라이브 공연의 시각적 매력과 브랜딩을 강화하기 위해 사용자 지정 또는 스톡 배경이 통합되는 경우가 많습니다. 다음과 같은 이벤트 Tomorrowland 또는 Dour Festival 과 같은 이벤트는 이에 대한 아주 좋은 예입니다. 아티스트 중에서도 가장 유명한 Amon Tobin, Aphex Twin 또는 Eric Prydz등이 음악 반응형 비주얼을 사용한 선구자들입니다.

뮤직 비주얼 - Erix Prydz
뮤직 비주얼 퍼포먼스 - Aphex Twin

그러나 이러한 설치물을 구현하려면 긴 디자인 시간과 전담 크리에이티브 팀의 협업이 필요합니다. 실제로 조작할 이미지의 고해상도와 음악에 반응하는 능력은 해결해야 할 복잡한 문제입니다. 라이브 공연 중 사운드와 이미지의 완벽한 동기화를 보장하려면 지연 시간이 최대한 짧아야 합니다. 또한 네트워크로 연결된 여러 대의 컴퓨터를 사용하여 서로 동기화해야 하는 경우가 많습니다. 창의적인 기술 외에도 실제 기술적인 전문 지식이 필요합니다. 이러한 모든 요소는 쇼의 전반적인 제작 가치와 전문적인 광택에 기여합니다. 마스터해야 할 모든 프로세스는 다음과 같은 용어로 그룹화할 수 있습니다. VJ 기술 컴퓨터 그래픽, 컴퓨터 프로그래밍, 오디오 및 비디오 신호 처리, 라이브 레코딩 등의 기술로 세분화할 수 있습니다.

뮤직 비주얼 - VJ 기술
이 글의 목표는 중소규모 무대 공연을 위한 반응형 비주얼을 제작하는 것이 생각만큼 어렵지 않다는 것을 보여드리는 것입니다. 접근 가능한 소프트웨어와 저렴한 하드웨어만 있으면 몇 주에 걸친 작업 없이도 라이브 시청각 공연을 제작할 수 있습니다. 영상은 오디오에 생동감을 불어넣어 공연을 더욱 역동적이고 매력적으로 만들 수 있습니다. 이 점을 설명하기 위해 아티스트 컨트롤 랜덤, 뉴로티피크, 마린 스카트, 장 미셸 라이트가 석회암 채석장에서 진행한 최신 공연의 구상 단계를 공유했습니다.
뮤직 비주얼 - 표지 기사
프로젝션 매핑 광산 성능

라이브 비주얼 효과를 위한 주요 포커스: FPS와 지연시간

라이브 공연을 위한 음악 반응형 비주얼을 제작할 때는 비주얼 애니메이션의 유동성과 음악과 비디오 사이의 지연 시간 두 가지를 중점적으로 고려해야 합니다.

이미지가 초당 최소 24프레임의 속도로 생성되는 것이 절대적으로 필요합니다. 이 데이터를 프레임 속도라고 하며 FPS(초당 프레임 수)로 표시됩니다. 이 값보다 낮으면(예: 초당 12프레임) 모든 애니메이션이 끊어져 보입니다. 빠른 애니메이션의 경우 24FPS보다 높은 값인 30 또는 60FPS를 목표로 해야 하는 경우가 많습니다. 

예를 들어, 매우 빠른 애니메이션이 있는 비디오 게임에서는 게이머들이 행동을 놓치지 않기 위해 해상도보다 프레임레이트를 선호합니다: 60 FPS에서의 Full HD 경험이 30 FPS에서의 4K보다 낫습니다. 따라서 더 나은 해상도와 더 나은 FPS 사이에는 상충관계가 있습니다. 

컴퓨터가 시각 효과나 여러 HD 비디오의 동시 재생과 같은 자원 집약적인 처리에 사용될수록 FPS 수치는 떨어질 경향이 있습니다. 일반적으로 그래픽 카드의 설정이나 사용하는 소프트웨어의 설정을 통해 FPS 수치를 표시할 수 있습니다. 그런 다음에는 라이브 공연 중에 떨어뜨리지 않아야 할 FPS 한계와 비주얼의 복잡성 사이에서 최적의 균형을 찾아야 합니다.
FPS - 컴퓨터
지연 시간은 음악에서 발생하고 이미지에 미치는 영향 사이의 지연 시간입니다. 예를 들어 음악의 각 '킥'에 대해 오디오 반응 왜곡의 시각적 효과를 연관시키고자 할 수 있습니다. 일반적으로 두 이벤트 사이의 지연이 100ms 미만인 경우 두 이벤트가 사람에게 즉각적으로 연결된다고 말할 수 있습니다. 준수해야 할 값에 대한 절대적인 규칙은 없지만 100ms보다 큰 지연은 지각 가능한 것으로 간주됩니다. FPS가 낮을수록 음악 반응형 시각 효과의 지연 시간이 길어집니다.
콘서트나 DJ 세트의 경우 음악이 라이브로 재생되고 미리 녹음되지 않았을 때, 항상 이미지에 비해 우세할 것입니다. 그것을 늦추어 시각 애니메이션과 일치시키는 것은 불가능합니다. 따라서 이미지가 동기화되지 않게 보이지 않도록 조정해야 합니다. 활성화된 효과를 줄여 컴퓨터를 느리게 하지 않거나, 더 강력한 모델을 사용할 계획을 세워야 합니다.
많은 비디오 조키(VJ)들이 사용하는 일반적인 기술은 시스템을 두 부분으로 나누는 것입니다: 미리 렌더링된 비디오 클립이 재생되고, 섞여진 다음에는 라이브로 적용되는 음악 반응형 또는 비반응형의 시각 효과와 결합됩니다. 그런 다음 모든 사용된 비디오 클립이 동일한 FPS에서 있어야 VJ가 재생되는 음악에 따라 속도를 조절할 수 있습니다.

음악 반응형 비주얼을 사용한 라이브 공연 예시

스톤 마인 매핑 공연은 소리와 이미지의 상호작용을 탐구하고 관객의 위치에 대한 질문을 던지기 위해 기획되었습니다. 음악과 이미지가 실시간으로 생성되는 실시간 시청각 공연입니다.

컨트롤 랜덤, 메종 사간, 마린 스카트는 정확히 두 번 반복할 수 없는 실현이라는 아이디어에 감동을 받았습니다. 이들의 공통된 바람은 각 아티스트의 경험과 전문성을 뛰어넘는 다분야 프로젝트를 만드는 것이었습니다. 각 아티스트는 공연의 협업적 성격을 강조하면서 각자의 작품을 프로젝트에 기여했습니다. 이들은 퇴적암에 둘러싸여 있다는 사실을 인식하면서 이 재료의 과거, 현재, 미래, 그리고 그것이 겪어온 다양한 상태에 대해 질문하고 그 미래에 자신을 투영하고자 했습니다. 5부로 구성된 이 여정에서 음악 비주얼은 오디오와 CV 정보를 사용하여 사운드에 연결되고 이미지 제작 소프트웨어에서 제너레이티브 패치를 구동합니다.

이 라이브 공연의 예술가들

음악은 컨트롤 랜덤이 유로락 모듈형 신디사이저 시스템을 사용하여 라이브로 제작합니다. 대부분 라이브로 연주되는 그의 작곡은 그의 인스타그램 와 메종 사간과 밴드캠프 프로필.

마린 스카르트 와 메종 사간과 뇌로티픽 은 모듈러 신디사이저를 모듈형 신디사이저를 기반으로 한 아날로그 부분과 컴퓨터 부분으로 구성된 이미지 생성 시스템을 만들었습니다. 터치디자이너 및 HeavyM 소프트웨어.

마지막으로, 장-미셸 라이트(Jean-Michel Light)에서 경험하는 것과 유사하게 채석장의 공간을 더 잘 감상할 수 있도록 DMX 제어 조명을 추가했습니다. 빛의 축제, 리옹.

실제로: 라이브 공연의 시각 효과에 사용된 솔루션들

음악에 맞춰 리듬을 타는 비주얼을 만들기 위해 뉴로타이피크와 마린 스카트는 시스템의 여러 요소를 상호 연결했습니다. 컨트롤 랜덤의 모듈형 신디사이저는 오실레이터에서 음파를 생성하는 전자 아날로그 악기입니다. 생성된 다양한 신호는 뉴로타입의 모듈로 전송되어 필터링과 켜기/끄기 작업을 수행합니다. 그런 다음 아날로그 신호를 디지털 신호로 변환하여 마린의 컴퓨터에서 해석하고, 오디오 파일을 관리, 처리하여 시각화할 수 있도록 준비합니다. 터치디자이너는 음악에 반응하는 시각 효과를 생성한 다음 HeavyM가 적용한 셰이더로 수정하고 최종적으로 미디 악기로 라이브로 제어하여 사용자가 오디오와 시각 요소를 모두 실시간으로 편집할 수 있도록 합니다. 이 시스템을 통해 아티스트는 창의적인 방식으로 음악을 시각화하여 사운드 데이터를 매력적인 시각적 경험으로 변환할 수 있습니다. 마지막으로 비디오 신호가 두 번째 컴퓨터로 전송되어 프로젝션 맵핑, 즉 방의 벽에 시각 효과를 배치하는 작업을 수행합니다.

라이브 공연 시스템 개요

라이브 공연 계획

라이브 공연 구성도

모듈형 신디사이저

이것은 진동자, 필터, 효과 등 각각 기본적인 기능을 수행하는 독립적인 모듈의 조립체입니다. 조합의 가능성은 무한하며, 예술가들이 자신만의 고유한 음악을 제작할 수 있게 합니다. 컨트롤 랜덤과 뇌로티픽은 모듈러 신디사이저의 표준 포맷인 유로랙 시스템을 사용하였습니다. 사용 가능한 모든 모듈은 Modular Grid 웹사이트에 나열되어 있으며, 그 수는 11,000개 이상입니다!

물론 음악과 동기화된 시각 효과를 만들기 위해 모듈식 신디사이저를 사용할 필요는 없습니다. DJ 믹서, 컴퓨터 잭, 마이크 등 모든 소스를 사용할 수 있습니다. 특정 노래나 트랙을 시각 효과의 기초로 사용할 수도 있습니다.

컴퓨터

라이브 공연 중 지연 문제를 피하기 위해 프레임레이트를 60 FPS에 가깝게 유지하기 위해, 예술가들은 두 대의 컴퓨터를 사용하기로 선택하였습니다. 이 구성은 처리를 더 잘 분배하고 머신 간의 작업 부하를 나눌 수 있게 해줍니다. 이 솔루션의 다른 장점은, 서로 방해하지 않고 쌍으로 작업할 수 있으며, 공연 설정 중 문제를 더 쉽게 식별할 수 있다는 것입니다.
유사한 시각적 성능 설정을 Windows, Mac OS 또는 Linux를 실행하는 태블릿과 컴퓨터 등 다양한 디바이스에서 실행할 수 있으며, iOS 디바이스의 브라우저를 통해서도 액세스할 수 있어 다양한 플랫폼에서 유연성과 호환성을 제공합니다.

시각 효과 컴퓨터

오디오 정보가 전송되는 컴퓨터는 Windows 10, 인텔 i7 프로세서, 엔비디아 지포스 GTX 1650 그래픽 카드, 16GB 램이 장착된 타워형 PC입니다. 이 컴퓨터에서 Touchdesigner와 HeavyM가 실행 중입니다. 또는 일부 아티스트는 음악 비주얼 제작에 웹 기반 앱을 사용하는 것을 선호할 수 있는데, 앱은 설치 없이 인터넷에 연결된 모든 디바이스에서 유연하고 쉽게 액세스할 수 있기 때문입니다.

이미지 왜곡 컴퓨터

이미지를 공간에 맞추는 데 사용되는 비디오 매핑 컴퓨터는 Windows 10, 인텔 i5 프로세서, 엔비디아 지포스 GTX 1050 그래픽 카드, 8GB 램이 탑재된 노트북입니다.

이 컴퓨터에서는 HeavyM만이 실행되고 있습니다.

다음에 대한 자세한 팁 프로젝션 맵핑 컴퓨터에서 살펴봐야 할 사항에서 전용 컴퓨터 기사를 참고하십시오..

프로젝터

사용된 프로젝터는 Optoma WU630 6000 루멘 풀 HD, 초점 거리의 비율이 0.9인 광학 렌즈를 갖추고 있습니다.

비디오 프로젝터를 선택하기 위한 더 많은 조언을 얻고 싶다면, 비디오 프로젝터에 관한 전용 기사를 on 비디오 프로젝터.

LED 라이트

뮤직 비주얼 - LED 조명

터널 옆면을 밝히기 위해 사용된 라이트는 배터리로 작동하는 Astera Titan Tube 입니다.

반응형 오디오 비주얼 효과 소프트웨어

TouchDesigner

Neurotypique과 Marin Scart는 TouchDesigner 소프트웨어에 자신들만의 작품을 프로그래밍하였습니다. D erivative에서 개발한 TouchDesigner는 노드 기반 프로그래밍 시스템을 사용하여 실시간 시각 효과를 생성할 수 있습니다. TouchDesigner의 강점은 무한한 조합 가능성과 라이브 공연에 완벽하게 적합한 그래픽 파이프라인입니다. 그러나 정확히 원하는 결과를 얻기 위해서는 약간의 시간이 필요합니다.

HeavyM

HeavyM 은 Digital Essence에서 개발하였으며, 몇 번의 클릭으로 음악에 반응하는 효과를 만들 수 있습니다. Stone Mine Mapping 프로젝트에서는 HeavyM이 두 가지 수준에서 사용되었습니다. 첫째로, TouchDesigner 비디오 출력에 처리 효과 셰이더를 사용하는 것이고, 둘째로는 프로젝션 공간에 맞게 전체 이미지를 왜곡하는 것입니다.

HeavyM은 오디오 분석 기능을 직접 통합하여 음악에 반응하는 시각 효과를 만들 수 있게 합니다. 예를 들어, 잭 케이블로 컴퓨터를 오디오 소스에 연결하기만 하면 됩니다. 외부 사운드 카드를 사용할 수도 있습니다.

공연의 구성요소 간 통신

음악에 반응하는 비주얼을 생성하기 위해 다양한 하드웨어와 소프트웨어 요소는 반드시 정보를 교환해야 합니다.

모듈러 신디사이저는 ES-9 Expert Sleepers라는 특별한 모듈을 통해 오디오 정보를 보냅니다. 이것은 아날로그에서 디지털로의 변환기로, TouchDesigner에서 이해할 수 있는 디지털 데이터로 전기 신호를 변환합니다. 이러한 하드웨어를 가져야 할 필요는 없습니다. 왜냐하면 HeavyM이 오디오 분석 기능을 직접 통합하기 때문에, 잭 케이블로 컴퓨터를 오디오 소스에 연결하기만 하면 됩니다. 외부 사운드 카드도 사용 가능합니다.

음악 정보가 수신되면, TouchDesigner는 시각 애니메이션을 생성하고 Spout 링크를 통해 이를 HeavyM에 전송합니다. 이것은 하나의 소프트웨어의 비디오 출력을 다른 소프트웨어로 전송할 수 있는 기술입니다. HeavyM은 비디오를 받아 MIDI 컨트롤러를 사용하여 Marin Scart가 추가 시각 효과를 적용합니다. HeavyM의 출력은 NDI 기술을사용하여 두 번째 컴퓨터의 다른 HeavyM 인스턴스로 전송됩니다. 이를 통해 네트워크를 통해 최소한의 지연으로 비디오 스트림을 전달할 수 있습니다. 마지막으로, HeavyM은 비디오의 기하학을 수정하여 라이브 공연 공간에서 표시될 비디오 프로젝터로 보냅니다.

최종 출력이 프로젝터로 전송되면 시스템에서 완성된 동영상을 렌더링할 수 있습니다. 그런 다음 사용자는 완성된 영상을 내보내거나 다운로드하여 나중에 사용할 수 있습니다. 일부 플랫폼에서는 비디오 렌더링 프로세스 후 사용자가 YouTube와 같은 플랫폼에 직접 비디오를 공유할 수도 있습니다.

비디오 프로젝션을 완성하기 위해 측면에 LED 조명이 추가되었습니다. 프로젝션의 색상과 일치합니다. 조명의 제어 신호는 Touchdesigner에서 WiFi 네트워크를 통해 전송되는 DMX 메시지입니다.

비주얼 개선

비주얼을 다듬는 것은 단순한 음악 비주얼라이저에서 YouTube 채널을 포함한 모든 플랫폼에서 돋보이는 세련되고 전문적인 뮤직 비디오로 프로젝트를 전환하는 데 있어 중요한 단계입니다. 기본적인 음악 비주얼라이제이션을 설정했다면, 이제 동영상을 진정으로 독특하고 시청자의 관심을 끌 수 있는 세부 사항에 집중할 차례입니다.

음악을 가장 잘 표현할 수 있는 고품질 오디오 트랙을 선택하는 것부터 시작하세요. 오디오의 선명도와 다이내믹은 음악 비주얼라이저의 반응 방식과 최종 동영상의 몰입도에 직접적인 영향을 미칩니다. 다음으로 소프트웨어에서 사용할 수 있는 다양한 음악 시각화 템플릿을 살펴보세요. 이러한 템플릿은 멋진 동영상을 빠르게 만들 수 있도록 설계되었지만, 브랜드, 스타일 또는 트랙의 분위기에 맞게 비주얼을 사용자 지정할 수 있는 다양한 옵션도 제공합니다.

주저하지 말고 다양한 색상, 모양, 효과를 실험해 보세요. 로고나 앨범 아트를 반영하도록 팔레트를 조정하거나 대담한 색상을 사용해 화면에서 시각적 효과를 돋보이게 만들 수 있습니다. 많은 음악 비주얼라이저를 사용하면 효과의 움직임, 강도, 스타일을 조정할 수 있으므로 오디오 트랙의 에너지와 리듬에 완벽하게 어울리는 시각화를 만들 수 있습니다. 효과를 레이어링하거나 템플릿을 조합하여 나만의 디자인을 만들어 보세요.

비주얼을 다듬을 때 시청자를 염두에 두세요. 컴퓨터 화면부터 휴대폰까지 다양한 디바이스에서 동영상이 어떻게 보일지 생각하고, 어떤 크기에서든 선명하고 인상적인 비주얼을 만들 수 있는지 확인하세요. 만족스러우면 완성된 동영상을 YouTube 채널이나 다른 플랫폼에 바로 업로드하여 음악과 비주얼을 전 세계와 공유할 수 있습니다.

시간을 들여 음악 비주얼을 맞춤 설정하고 템플릿, 색상, 효과를 실험해 보면 음악을 소개할 뿐만 아니라 브랜드를 높이고 시청자와 더 깊이 소통할 수 있는 동영상을 만들 수 있습니다.

당신의 차례입니다!

만들기 라이브 공연을 위한 음악 반응형 비주얼 는 인터넷에서 쉽게 찾을 수 있는 기술 지식이 필요합니다. 반면에 필요한 하드웨어는 비용과 이해도 측면에서 점점 더 쉽게 접근할 수 있게 되었습니다. 이러한 발전으로 사용자는 자신의 음악, 새 앨범 또는 DJ 믹스를 홍보하는 콘텐츠를 빠르게 만들 수 있어 뮤지션, 음반사 및 기타 음악 전문가에게 이상적인 도구가 되었습니다. 많은 플랫폼에서 나만의 로고를 추가하고 브랜딩에 맞게 색 구성표를 사용자 지정할 수 있어 콘텐츠가 돋보일 수 있습니다. 일부 도구는 무료 템플릿이나 기능을 제공하며, 비주얼을 만드는 데 몇 분밖에 걸리지 않습니다. 렌더링 후 사용자는 완성된 동영상을 다운로드할 수 있는 전용 페이지로 이동하는 경우가 많습니다. 이러한 도구는 상업적 목적으로도 사용할 수 있으므로 수익 창출 프로젝트나 클라이언트 작업에서 제작한 비주얼을 상업적으로 사용할 수 있습니다.

스톤 마인 매핑 프로젝트는 처음에는 복잡해 보일 수 있지만, 사용 가능한 도구와 기법에 대한 개요를 제공한다는 장점이 있습니다. 단일 컴퓨터와 스피커로 축소된 훨씬 더 간단한 시스템을 고려할 수도 있습니다. 많은 시청각 공연자들은 오디오-비디오 링크를 만들지 않고도 듣는 음악에 따라 '귀로' 조작하는 것에 만족합니다. 그 결과는 때때로 컴퓨터가 스스로 결정하는 것보다 더 적절할 수 있습니다.
뮤직 비주얼 - 대형 화면 성능

계속...

프로젝터에 대해 더 알아보기

필요에 맞는 프로젝터를 선택하기 위한 자세한 가이드를 준비했습니다. 다양한 기능을 단계별로 설명하는 이 가이드에서 피해야 할 팁과 실수를 알아보세요.

HeavyM 소프트웨어 탐구하기

HeavyM는 시각 효과를 생성하여 볼륨, 장식 또는 건축 요소에 투사할 수 있는 프로젝션 맵핑 프로그램입니다. HeavyM는 Mac 및 Windows와 호환됩니다.