Kostenlose Demo starten
Links-Pfeil (1)

Zurück zu Blog home

Wie man musikalische visuals für Live-Performances erstellt

TL;DR: Im Jahr 2026 ist das Hinzufügen von musikalischen visuals zu Live-Performances unerlässlich, um das Publikum zu begeistern. Ob DJ oder Band, audio-reaktives video mapping verwandelt gewöhnliche Bühnen in immersive Erfahrungen. Mit Plug-and-Play-Software wie HeavyM können Künstler über 1.000 generative visuelle Effekte ohne Programmierung sofort mit ihrer Live-Performance synchronisieren.

Musik visuell - Titelartikel

Einige Referenzen für Live-Auftritte

Wenn Sie ein Fan von elektronischer Musik sind, haben Sie wahrscheinlich schon bemerkt, dass sich immer mehr Künstler und Festivals auf Bühnendekoration. Sie besteht in der Regel aus festen Bühnenelementen, manchmal gemischt mit Videoprojektionen und LED-Bildschirmen. Um die visuelle Attraktivität und das Branding von Live-Performances zu verbessern, werden häufig benutzerdefinierte oder Standard-Hintergründe integriert. Veranstaltungen wie Tomorrowland oder Dour Festival sind gute Beispiele dafür. Zu den bekanntesten Künstlern gehören Amon Tobin, Aphex Twin oder Eric Prydz. Sie waren Pioniere in der Verwendung von visuellen Elementen, die auf die Musik auf einer großen Bühne reagieren.

Musik-Visualisierungen - Erix Prydz
Musik-Visualisierung - Aphex Twin

Die Umsetzung solcher Installationen erfordert jedoch eine lange Planungszeit und die Zusammenarbeit mit einem engagierten Kreativteam. Die hohe Auflösung der zu manipulierenden Bilder und ihre Fähigkeit, auf die Musik zu reagieren, sind in der Tat komplexe Probleme, die es zu lösen gilt. Um bei einer Live-Performance eine perfekte Synchronisation zwischen Ton und Bild zu gewährleisten, müssen die Latenzzeiten so kurz wie möglich sein. Darüber hinaus ist es oft notwendig, mehrere vernetzte Computer zu verwenden und diese miteinander zu synchronisieren. Zu den kreativen Fähigkeiten kommt noch ein echtes technisches Know-how. All diese Elemente tragen zum Gesamtwert der Produktion und zum professionellen Schliff der Show bei. Alle zu bewältigenden Prozesse lassen sich unter dem Begriff der VJ-Technologien und kann in Techniken wie Computergrafik, Computerprogrammierung, Audio- und Videosignalverarbeitung, Live-Aufnahmen usw. unterteilt werden.

Musik visuell - VJ-Technik
In diesem Artikel soll gezeigt werden, dass die Erstellung von responsiven visuellen Darstellungen für kleine bis mittelgroße Bühnenaufführungen gar nicht so unerreichbar ist, wie man meinen könnte. Mit zugänglicher Software und erschwinglicher Hardware ist es durchaus möglich, eine audiovisuelle Live-Performance zu erstellen, ohne dafür wochenlang arbeiten zu müssen. Visuelles kann Audio zum Leben erwecken und die Aufführungen dynamischer und fesselnder machen. Um dies zu veranschaulichen, haben die Künstler Control Random, Neurotypique, Marin Scart und Jean-Michel Light die Konzeptionsphase ihrer jüngsten Performance in einem Kalksteinbruch vorgestellt.
Musik visuell - Titelartikel
Projektionskartierung der Minenleistung

Schwerpunktthemen für visuelle Live-Effekte: FPS und Latenz.

Bei der Erstellung von musikabhängigen Visuals für eine Live-Performance liegt der Schwerpunkt auf der Flüssigkeit der visuellen Animationen und der Latenzzeit zwischen Musik und Video.

Es ist unbedingt erforderlich, dass die Bilder mit einer Rate von mindestens 24 Bildern pro Sekunde erzeugt werden. Diese Daten werden als Framerate bezeichnet und in FPS (frames per second) ausgedrückt. Wenn Sie unter diesem Wert liegen, zum Beispiel bei 12 Bildern pro Sekunde, wirken alle Animationen ruckelig. Bei schnellen Animationen ist es oft notwendig, einen Wert über 24 FPS anzustreben: 30 oder sogar 60 FPS. 

Bei Videospielen mit sehr schnellen Animationen beispielsweise bevorzugen die Spieler die Bildrate gegenüber der Auflösung, um nichts von der Action zu verpassen: 60 FPS in Full HD sind besser als 30 FPS in 4K. Es gibt also einen Kompromiss zwischen besserer Auflösung und besseren FPS. 

Je mehr der Computer für ressourcenintensive Verarbeitungen genutzt wird, z. B. für visuelle Effekte oder die gleichzeitige Wiedergabe mehrerer HD-Videos, desto mehr sinkt die FPS-Zahl. Es Es ist in der Regel möglich, die FPS-Zahl über die Einstellungen Ihrer Grafikkarte oder der verwendeten Software anzuzeigen. Es liegt dann an Ihnen, die beste Balance zwischen der Komplexität des Bildmaterials und der FPS-Grenze zu finden, die Sie während Ihres Live-Auftritts nicht unterschreiten sollten.
FPS - Computer
Die Latenzzeit ist die Verzögerung zwischen einem Ereignis in der Musik und seiner Auswirkung in den Bildern. Zum Beispiel soll für jeden "Kick" in der Musik ein visueller Effekt der audio-reaktiven Verzerrung assoziiert werden. Als allgemeine Regel kann man sagen, dass zwei Ereignisse für den Menschen unmittelbar miteinander verbunden erscheinen, wenn die Verzögerung zwischen ihnen weniger als 100 ms beträgt. Es gibt keine absolute Regel für einen zu beachtenden Wert, aber eine Verzögerung von mehr als 100 ms wird als wahrnehmbar angesehen. Je niedriger die FPS, desto größer ist die Latenz bei den visuellen Effekten, die auf Musik reagieren.
Bei einem Konzert oder einem DJ-Set, bei dem die Musik live gespielt und nicht vorproduziert wird, wird die Musik im Vergleich zu den Bildern immer dominieren. Es ist nicht möglich, sie zu verlangsamen, um sie an die visuellen Animationen anzupassen. Daher müssen sich die Bilder anpassen, um nicht aus dem Takt zu geraten. Entweder reduzieren Sie die aktivierten Effekte, um den Computer nicht zu verlangsamen, oder Sie planen die Verwendung eines leistungsfähigeren Modells.
Eine gängige Technik, die von vielen Videojockeys (VJs) verwendet wird, besteht darin, das System in zwei Teile zu unterteilen: vorgerenderte Videoclips werden abgespielt, gemischt und dann mit visuellen Effekten kombiniert, die auf die Musik reagieren oder nicht und live angewendet werden. Alle verwendeten Videoclips müssen die gleiche FPS haben, damit der VJ ihre Geschwindigkeit an die gespielte Musik anpassen kann.

Ein Beispiel für einen Live-Auftritt mit musikreaktiven Visuals

Die Performance Stone Mine Mapping soll die Wechselwirkungen zwischen Ton und Bild erforschen und den Platz des Zuschauers hinterfragen. Es handelt sich um eine audiovisuelle Echtzeit-Performance, bei der Musik und Bild live erzeugt werden.

Control Random, Maison Sagan und Marin Scart waren von der Idee einer Realisierung bewegt, die sich nicht genau zweimal wiederholen lässt. Ihr gemeinsamer Wunsch war es, ein multidisziplinäres Projekt zu schaffen, das über die Erfahrung und das Fachwissen der einzelnen Künstler hinausgeht. Jeder Künstler trug seinen eigenen Beitrag zu dem Projekt bei, was den kollaborativen Charakter der Performance unterstreicht. Da sie sich bewusst waren, von Sedimentgestein umgeben zu sein, wollten sie die Vergangenheit, die Gegenwart und die Zukunft dieses Materials hinterfragen, die verschiedenen Zustände, die es durchlaufen hat, und sich selbst auf seine Zukunft projizieren. In dieser 5-teiligen Reise werden musikalisch-reaktive Visuals mit Hilfe von Audio- und CV-Informationen mit dem Sound verknüpft und generative Patches in einer Bildbearbeitungssoftware gesteuert.

Die Künstler dieses Live-Auftritts

Die Musik wird von Control Random live mit einem modularen Eurorack-Synthesizer-System produziert. Seine Kompositionen, die meist live aufgeführt werden, sind auf seinen Profilen auf Instagram und Bandcamp zu finden.

Marin Scart und Neurotypique von Maison Sagan haben ein System zur Bildgenerierung entwickelt, das aus einem analogen Teil mit modularen Synthesizern und einem Computerteil mit der Software TouchDesigner und HeavyM-Software.

Endlich, Jean-Michel LichtDMX-gesteuerte Lichter hinzugefügt, um den Raum des Steinbruchs besser zur Geltung zu bringen, ähnlich wie bei der Festival der Lichter, Lyon.

In der Praxis: die Lösungen für die visuellen Effekte des Live-Auftritts

Um Visuals im Rhythmus zur Musik zu schaffen, haben Neurotypique und Marin Scart verschiedene Elemente des Systems miteinander verbunden. Die modularen Synthesizer von Control Random sind elektroanaloge Instrumente, die Schallwellen aus Oszillatoren erzeugen. Die verschiedenen erzeugten Signale werden an die Module von Neurotypique gesendet, die dann Filter- und Ein-/Ausschaltvorgänge durchführen. Anschließend werden die analogen Signale in digitale Signale umgewandelt, die vom Marin-Computer interpretiert werden, der die Audiodateien verwaltet, verarbeitet und für die Visualisierung vorbereitet. TouchDesigner kann visuelle Effekte generieren, die auf die Musik reagieren, die dann mit Shadern, die von HeavyM angewendet werden, modifiziert und schließlich live mit einem MIDI-Instrument gesteuert werden, so dass die Benutzer sowohl Audio- als auch visuelle Elemente in Echtzeit bearbeiten können. Das System ermöglicht es den Künstlern, die Musik auf kreative Weise zu visualisieren und die Klangdaten in ansprechende visuelle Erlebnisse zu übersetzen. Schließlich wird das Videosignal an einen zweiten Computer weitergeleitet, der das Mapping, d. h. die Positionierung der visuellen Effekte an den Wänden des Raums, vornimmt.

Das Live-Auftritt-System im Überblick

Regelung für Live-Auftritte

Die Klangquelle: Modulare Synthesizer

Modulare Synthesizer

Der modulare Synthesizer besteht aus unabhängigen Modulen, von denen jedes eine Grundfunktion erfüllt: Oszillator, Filter, Effekt,... Die Kombinationsmöglichkeiten sind endlos und ermöglichen es dem Künstler, Musik zu produzieren, die einzigartig ist. Control Random und Neurotypique verwenden das Eurorack-System, ein Standardformat für modulare Synthesizer. Alle verfügbaren Module sind auf der Website von Modulares Grid aufgelistet. Es sind mehr als 11.000!

Natürlich ist es nicht notwendig, modulare Synthesizer zu verwenden, um visuelle Effekte im Einklang mit der Musik zu erzeugen. Sie können jede beliebige Quelle verwenden: einen DJ-Mixer, einen Computeranschluss oder sogar ein Mikrofon. Sie können auch einen bestimmten Song oder Track als Grundlage für Ihre visuellen Effekte verwenden.

Computer

Um die Framerate nahe bei 60 FPS zu halten und Latenzprobleme während des Live-Auftritts zu vermeiden, haben sich die Künstler für den Einsatz von zwei Computern entschieden. Diese Konfiguration ermöglicht es, die Verarbeitung besser zu verteilen und die Arbeitslast zwischen den beiden Computern aufzuteilen. Weitere Vorteile dieser Lösung sind, dass die Künstler zu zweit arbeiten können, ohne sich gegenseitig zu stören, und dass Probleme während des Aufbaus des Auftritt leichter erkannt werden können.
Ähnliche visuelle Performance-Setups können auch auf einer Vielzahl von Geräten ausgeführt werden, darunter Tablets und Computer mit Windows, Mac OS oder Linux, und können sogar über einen Browser auf iOS-Geräten aufgerufen werden, was Flexibilität und Kompatibilität über verschiedene Plattformen hinweg bietet.

Der Computer für die visuellen Effekte

Der Computer, an den die Audioinformationen gesendet werden, ist ein Tower-PC mit Windows 10, einem Intel i7-Prozessor, einer Nvidia GeForce GTX 1650-Grafikkarte und 16 GB RAM. Touchdesigner und HeavyM werden auf diesem Computer ausgeführt. Manche Künstler ziehen es vor, eine webbasierte App für die Erstellung musikalischer visuals zu verwenden, da eine App Flexibilität und einfachen Zugriff von jedem Gerät mit Internetverbindung bietet, ohne dass eine Installation erforderlich ist.

Der Video-Mapping-Computer

Der Video-Mapping-Computer, mit dem die Bilder in den Raum eingepasst werden, ist ein Laptop mit Windows 10, einem Intel i5-Prozessor, einer Nvidia GeForce GTX 1050-Grafikkarte und 8 GB RAM.

Auf diesem Computer läuft nur HeavyM.

Für weitere Tipps zu worauf Sie bei einem video mapping computer achten solltensehen Sie sich die entsprechenden Artikel über Computer..

Der Projektor

Der verwendete Projektor ist ein Optoma WU630 mit 6000 Lumen Full HD und einer Kurzdistanzoptik mit einem Verhältnis von 0,9.

Weitere Tipps zur Auswahl eines Videoprojektors finden Sie in unserem Artikel auf Videoprojektoren.

LED-Leuchten

Musik visuell - LED-Lichter

Die Lichter, die für die Beleuchtung des Tunnels an den Seiten verwendet werden, sind Astera Titan Tube mit Batterie.

Software für audiovisuelle Effekte

Touchdesigner

Neurotypique und Marin Scart haben ihre eigene Komposition mit der Software Touchdesigner programmiert. Der von Derivative,entwickelte Touchdesigner ermöglicht die Erstellung von visuellen Effekten in Echtzeit mit Hilfe eines Knotenprogrammiersystems. Die Stärke des Touchdesigners liegt in der unendlichen Anzahl von Kombinationsmöglichkeiten in Verbindung mit einer Grafikpipeline, die perfekt für Live-Auftritte geeignet ist. Es dauert allerdings eine Weile, bis man es beherrscht, um genau das zu bekommen, was man will.

HeavyM

HeavyM wurde von Digital Essence entwickelt und ermöglicht es, mit wenigen Klicks Effekte zu erzeugen, die auf die Musik reagieren. Beim Stone Mine Mapping Projekt wurde HeavyM auf zwei Ebenen eingesetzt. Die erste ist die Verwendung von Shadern, um Effekte auf die Videoausgabe des Touchdesigners anzuwenden. Die zweite ist die Verzerrung des Gesamtbildes, um es an den Projektionsraum anzupassen.

HeavyM integriert direkt Audioanalysefunktionen, um visuelle Effekte auf die abgespielte Musik reagieren zu lassen. Alles, was Sie tun müssen, ist den Computer z.B. über ein Klinkenkabel mit einer Audioquelle zu verbinden. Sie können auch eine externe Soundkarte verwenden.

HeavyM herunterladen

Kommunikation zwischen den Komponenten

Um musikabhängige Bilder zu erzeugen, müssen die verschiedenen Hard- und Softwareelemente Informationen austauschen.

Modulare Synthesizer senden Audioinformationen über ein spezielles Modul: die ES-9 Expert Sleepers. Dabei handelt es sich um einen Analog-Digital-Wandler, der elektrische Signale in digitale Daten umwandelt, die von Touchdesignern verstanden werden können. Es ist nicht notwendig, diese Art von Hardware zu besitzen, da HeavyM Audioanalysefunktionen direkt integriert, um visuelle Effekte auf die gespielte Musik reagieren zu lassen. Alles, was Sie tun müssen, ist den Computer mit einer Audioquelle zu verbinden, z.B. mit einem Klinkenkabel. Sie können auch eine externe Soundkarte verwenden.

Sobald die Musikinformationen empfangen wurden, erzeugt Touchdesigner die visuellen Animationen und sendet sie über einen Spout Link an HeavyM. Dies ist eine Technologie, die es ermöglicht, die Videoausgabe einer Software an eine andere zu senden. HeavyM empfängt das Video und Marin Scart verwendet einen MIDI-Controller, um zusätzliche visuelle Effekte hinzuzufügen. Die Ausgabe von HeavyM wird dann über die NDI-Technologie, an eine weitere Instanz von HeavyM auf dem zweiten Computer gesendet. Auf diese Weise kann ein Videostream mit minimaler Latenz über ein Netzwerk übertragen werden. Schließlich modifiziert HeavyM die Geometrie des Videos, um es an den Videoprojektor zu senden, der es im Live-Aufführungsraum projiziert.

Nachdem die endgültige Ausgabe an den Projektor gesendet wurde, kann das System das fertige Video rendern. Die Nutzer können dann das fertige Bildmaterial zur weiteren Verwendung exportieren oder herunterladen. Einige Plattformen ermöglichen es den Nutzern auch, Videos nach dem Rendering-Prozess direkt auf Plattformen wie YouTube zu teilen.

Um die Videoprojektion zu vervollständigen, wurden an den Seiten LED-Leuchten angebracht. Sie passen zu den Farben der Projektion. Die Steuersignale für die Lichter sind DMX-Nachrichten, die über ein WiFi-Netzwerk von Touchdesigner gesendet werden.

Verfeinern Sie Ihr Bildmaterial

Die Verfeinerung Ihrer visuals ist ein entscheidender Schritt, um Ihr Projekt von einer einfachen Musikvisualisierung in ein ausgefeiltes, professionell aussehendes Musikvideo zu verwandeln, das auf jeder Plattform, einschließlich Ihres YouTube-Kanals, hervorsticht. Sobald Sie Ihre grundlegende musikalische visuals eingerichtet haben, ist es an der Zeit, sich auf die Details zu konzentrieren, die Ihr Video wirklich einzigartig und fesselnd für Ihr Publikum machen werden.

Beginnen Sie mit der Auswahl einer hochwertigen Tonspur, die Ihre Musik optimal wiedergibt. Die Klarheit und Dynamik Ihres Audios hat direkten Einfluss darauf, wie Ihr Musikvisualisierer reagiert und wie eindringlich das endgültige Video wirkt. Als Nächstes sollten Sie sich die zahlreichen Vorlagen für musikalische visuals ansehen, die in Ihrer Software verfügbar sind. Diese Vorlagen wurden entwickelt, um Ihnen bei der schnellen Erstellung von Videos zu helfen, die großartig aussehen, aber sie bieten auch viele Optionen, um das Bildmaterial an Ihre Marke, Ihren Stil oder die Stimmung Ihres Titels anzupassen.

Zögern Sie nicht, mit verschiedenen Farben, Formen und Effekten zu experimentieren. Passen Sie die Palette so an, dass sie Ihr Logo oder Albumcover widerspiegelt, oder verwenden Sie kräftige Farben, um Ihre Visualisierungen auf dem Bildschirm hervorzuheben. Bei vielen Musikvisualisierern können Sie die Bewegung, die Intensität und den Stil der Effekte anpassen, sodass Sie eine Visualisierung erstellen können, die perfekt zur Energie und zum Rhythmus Ihres Audiotracks passt. Versuchen Sie, Effekte übereinander zu legen oder Vorlagen zu kombinieren, um einen ganz eigenen Look zu entwickeln.

Denken Sie bei der Verfeinerung Ihres Bildmaterials an Ihr Publikum. Überlegen Sie, wie Ihr Video auf verschiedenen Geräten - von Computerbildschirmen bis hin zu Mobiltelefonen - aussehen wird, und stellen Sie sicher, dass Ihr Bildmaterial in jeder Größe klar und eindrucksvoll ist. Wenn Sie zufrieden sind, können Sie Ihr fertiges Video direkt auf Ihren YouTube-Kanal oder andere Plattformen hochladen, um Ihre Musik und Ihr Bildmaterial mit der Welt zu teilen.

Wenn Sie sich die Zeit nehmen, Ihre Musikvisualisierung anzupassen und mit Vorlagen, Farben und Effekten zu experimentieren, werden Sie Videos erstellen, die nicht nur Ihre Musik präsentieren, sondern auch Ihre Marke hervorheben und eine tiefere Verbindung zu Ihrem Publikum herstellen.

Jetzt sind Sie dran!

Erstellen von musikalische visuals für eine Live-Performance erfordert einige technische Kenntnisse, die leicht im Internet zu finden sind. Andererseits wird die erforderliche Hardware immer erschwinglicher, sowohl was die Kosten als auch das Verständnis betrifft. Mit diesen Fortschritten können Nutzer schnell Inhalte erstellen, um ihre Musik, neue Veröffentlichungen oder DJ-Mixe zu promoten - damit sind diese Tools ideal für Musiker, Plattenfirmen und andere Musikprofis. Auf vielen Plattformen können Sie Ihre eigenen Logos hinzufügen und das Farbschema an Ihr Branding anpassen, um sicherzustellen, dass Ihre Inhalte hervorstechen. Einige Tools bieten kostenlose Vorlagen oder Funktionen, und die Erstellung von Bildmaterial kann nur wenige Minuten dauern. Nach dem Rendern werden die Nutzer oft auf eine spezielle Seite weitergeleitet, von der sie ihr fertiges Video herunterladen können. Diese Tools können für kommerzielle Zwecke verwendet werden und ermöglichen die kommerzielle Nutzung des erstellten Bildmaterials in kostenpflichtigen Projekten oder für Kunden.

Das Projekt Stone Mine Mapping mag auf den ersten Blick komplex erscheinen, hat aber den Vorteil, dass es einen Überblick über die verfügbaren Instrumente und Techniken bietet. Man kann sich ein viel einfacheres System vorstellen, das auf einen einzigen Computer und Lautsprecher reduziert ist. Viele audiovisuelle Künstler begnügen sich damit, Manipulationen "nach Gehör" entsprechend der Musik, die sie hören, vorzunehmen, ohne unbedingt eine Audio-Video-Verbindung herzustellen. Das Ergebnis kann manchmal aussagekräftiger sein, als den Computer selbst entscheiden zu lassen.
Musikvisualisierung - Großansicht der Performance

Fortsetzung folgt

Erfahren Sie mehr über Projektoren

Wir haben einen detaillierten Leitfaden zur Auswahl des richtigen Projektors für Ihre Bedürfnisse erstellt. Entdecken Sie unsere Tipps und Fehler, die Sie vermeiden sollten, in diesem Leitfaden, der die verschiedenen Funktionen Schritt für Schritt erklärt.

Siehe den Leitfaden

Entdecken Sie die HeavyM-Software

HeavyM ist eine video mapping software, die in der Lage ist, visuelle Effekte zu erzeugen und sie auf Volumen, Dekorationen oder architektonische Elemente zu projizieren. HeavyM ist mit Mac und Windows kompatibel.

Lernen Sie HeavyM und