Prüfungsteil 1 (Bachelorarbeit), Kritik, Zusammenhänge, Ergebnis, Ausblick auf Zukunft (33p)

Question 1

Können Sie Beispiele dafür geben, wie Houdinis Software verwendet werden kann, um musikalische Kompositionen in visuelle Spektakel umzusetzen?

Question 2

Welche Auswirkungen und zukünftigen Entwicklungen werden für die Musikvisualisierung im Text dargelegt, insbesondere vor dem Hintergrund der jüngsten Fortschritte in der KI?

Answer 2

Sora Musikvideo
Neues Medium, erlaubt smoothe transitions
Kombination aus KI und Houdini eher interessant

Question 3

Was war deine Forschungsfrage?

Answer 3

Erstellung komplexer und einzigartiger Musikvisualisierungen mit der node-basierten Software Houdini

Question 4

Was sind einige der im Text erwähnten aktuellen Praktiken der Musikvisualisierung und wie können sie mithilfe von Houdinis Software verbessert oder erweitert werden?

Answer 4

• Common Music Visualizers (Movie Player, Apple Player…)
• Installations (Cymatics, Robotics, Concerts)
• Games (Learning Games, Rythm Games)

Können durch Houdinis Praktiken der “ich kann jeden einzelnen Parameter abändern” systematik erweitert werden. So lassen sich z.B. bezüglich Cymatics die Streuung der Sandkörner auf einer Vibrierenden Oberfläche so induvidualisieren wie man das will und nicht wie es die Physik vorgibt.

Question 5

Was ist Musikvisualisierung?

Answer 5

Visuelle Darstellung der Dynamik von Musik. In meinem Fall über die Laufzeit eines Musikstücks.

Question 6

Wie kann Musikvisualisierung helfen das Erlebnis der Menschen zu verbessern?

Answer 6

• beeinträchtigte Menschen
• Vertiefung des Musikstücks
• Andere Sinneswahrnehmungen

Question 7

Welche Arten von Musikvisualisierungen gibt es?

Answer 7

• Common Music Visualizers (Moviemaker)
• Installations (Cymatics, Robotics, Drone Shows, Concerts)
• Games (Rythm Games, Learning Games)

Question 8

Wie läuft der Prozess der Musikvisualisierung ab?

Answer 8

• Audiosignal analysieren
• Relevante Merkmale extrahieren (Amplitude, Frequenz, Tempo)
• Visuelle Darstellungsmethoden auswählen (Wellenformen, Spektrogramme, Animationen)

Question 9

Was ist der Fourier Transform und wie kann er für Musikvisualisierung wichtig sein?

Answer 9

Die Fourier-Transformation wandelt zeitbasierte Signale in ihre Frequenzkomponenten um, was bei der Musikvisualisierung entscheidend ist, da sie es ermöglicht, die verschiedenen Tonhöhen und Rhythmen grafisch darzustellen und zu separieren.

Question 10

Was ist Amplitude und Frequency und in wie fern sind sie wichtig für Musikvisualisierung?

Answer 10

Amplitude beschreibt die Lautstärke eines Tons, während die Frequenz die Tonhöhe angibt;

Frequency für FFT separierung,darstellung
Amplitude für Ausschlag und Werthöhe wichtig

Question 11

Erkläre den Prozess des Fourier Transforms?

Answer 11

Der Prozess den ich in meiner Arbeit dargestellt habe, war eine vereinfachte version des FFT Processes. Grundsätzlich ist dafür wichtig dass man versteht dass Musik auch nur eine agglomeration von Sinuswellen ist mit unterschiedlichen Frequenzen. Wenn man nun diese Wellen nimmt, und diese um einen kreis wickelt, und diesen dann mit einer zweiten Phase rotiert, kommt es irgendwann dazu, dass sich bei einer bestimmten Frequenz der zweiten Phase der Mittelpunkt dieser um den Kreis gewrapten Wellen zu einem Maximalwert kommt. Also ist der Maximalwert bei einer bestimmten stelle am Höchsten. Da wo die Frequenz der zwei Phasen gleich ist.

Grundsätzlich ist es einfach eine Frequenzseparierung. Man hat zwei Töne zusammengemixed und will sie wieder entseparieren.

Question 12

Aus was besteht Musik?

Answer 12

Komposition vieler sinuswellen

Question 13

Wie kann der Fourier Transform auf einen ganzen Song verwendet werden?

Answer 13

Durch segmentierung des songs in kleinere Teile, more computations of fft

Question 14

Was ist Proceduralismus und warum ist es gut für musikvisualisirung?

Question 15

Was ist CHOPs?

Question 16

Welche Nodes können verwendet werden um Signals zu Processen in Houdini?

Answer 16

Pass Filter, High Pass, Lowpass

Question 17

Welche Kameraeigenheiten könne für Musikvisualisierung eingesetzt werden?

Answer 17

Depth of Field, Bokeh/Blades, Focal Length, Shutter Speed,

Question 18

Wie können Volumes für Music Visualisation eingesetzt werden?

Answer 18

Pyro, Procedural Deformation / Substraction addition of shapes, voxelization on beats,

Question 19

Was sind Light Filter und wieso für Musikvisualisation relevant?

Question 20

Warum hast du Light Linking da mit drin?

Answer 20

• Stilisierungsmöglichkeiten (Schatten, Rimlight)
• • Kritik, hätte ich wegkürzen können

Question 21

Was ist an Displacement und ShaderFX interessant an Music Vis?

Answer 21

• Shader Blending
• Animated Displacement Maps

Question 22

Was ist Procedural Character Animation?

Answer 22

Animation von Bones/Blendshapes/Motion Clips usw. durch CHOPs

Question 23

Was sind Particle Based effects und wie wichtig für Musikvisualisierung?

Answer 23

Vortex, Repulsive&Attractive, directional, turbulent, algorithm

Question 24

Was sind Vellum Grains?

Question 25

Was ist Vellum?

Question 26

Was sind Cymatics?

Answer 26

Cymatics erforscht die physikalischen Effekte, die entstehen, wenn Schwingungen von Audioobjekten beeinflusst werden.

Question 27

Was könnte in Zukunft noch alles möglich sein?

Answer 27

Aktuelles Musikvideo von Sora

Question 28

Was zukünftig mit Houdini möglich?

Answer 28

AI based techniques and tools within houdini

Question 29

Was waren die Ergebnisse deiner Bachelorarbeit?

Question 30

Was hättest du anders gemacht wenn du sie nochmal geschrieben hättest?

Answer 30

• Bessere und eindeutigere Forschungsfrage
• Zentrierung

Ausgerichtet auf spezielle Zielgruppe (Houdini User) Hätte ausgeweitet werden können mit kompakteren scope)
- Keywords erläutern
- Houdini erstmal genauer definieren

Question 31

Können Sie den Kontext Ihrer Forschung kurz umreißen und erklären, warum es wichtig ist?

Answer 31

In meiner Bachelorarbeit ging es darum, wie Houdini, als ein Programm welches diesbezüglich relativ verwandt mit Touchdesigner ist, von der Funktionsweise, verwendet werden kann um bereits existierende Konzepte der Audiovisualisierung zu replizieren und zu erweitern.

Question 32

Welches Ziel hatten Sie mit Ihrer Bachelorarbeit und haben Sie es erreicht?

Answer 32

Ich wollte mit meiner Bachelorarbeit erreichen, dass ich neue Wege und Arten finde, für mich und diejenigen die meine Arbeit lesen, wie in Houdini komplexe und einzigartige Effekte erzielt werden können die auf Basis von bereits existierenden Methoden basieren. Mir hat der Prozess der Recherche von Veredelungsmethoden und generell wie die Daten verarbeitet werden sehr geholfen das Thema besser zu verstehen, was vllt aber nicht für diejenigen gilt die es ohne wissen rund um Houdini lesen würden.

Question 33

Was sind die Hauptergebnisse Ihrer Forschung und wie interpretieren Sie diese?

Answer 33

• Houdini ist sehr umfangreich (jeder context bietet eigene möglichkeiten)
• AI is on the verge (neue medienform)

Question 34

Erklären Sie, wie Houdini Daten aus Audiodateien verarbeitet und interpretiert, um visuelle Effekte zu erzeugen.

Answer 34

• Freq. Spektren
• Triggerbased
• Valuebased

Question 35

Diskutieren Sie verschiedene kreative Ansätze zur Musikvisualisierung in Houdini. Wie können verschiedene Stile und visuelle Ästhetiken durch Houdinis Werkzeuge umgesetzt werden?

Answer 35

• Light Shows (Volumes, lights)
• Cymatics (Vellum Grains, Procedural System)
• Games (Camera Effects

Question 36

Erläutern Sie, wie die visuellen Elemente auf die musikalischen Aspekte abgestimmt werden können, um eine kohärente visuelle Darstellung zu erzeugen.

Answer 36

• Trigger
• Frequencybands
• Mood
• Direkte abhängigkeit zu wert

Question 37

Welche praktischen Anwendungen hat die Musikvisualisierung in Houdini in verschiedenen Bereichen wie Unterhaltung, Werbung oder Kunst?

Answer 37

Ist ein Thema geprägt von Medienkonvergenz, ich hab mich mit Grundformen wie Installationen befasst, und mit games, natürlich gibt es auch durch Corona geprägt Music Festivals mit Lightshows und komplette musikvideos in Games wie fortnite.

Question 38

Diskutieren Sie technische oder ästhetische Herausforderungen bei der Umsetzung von Musikvisualisierungsprojekten in Houdini und mögliche Lösungsansätze.

Answer 38

• frequency separation
• coherent look not wiggly

Question 39

Wie könnten sich die Techniken und Werkzeuge zur Musikvisualisierung in Houdini in Zukunft entwickeln?

Answer 39

• jedes Update ein banger
• copernikus (styletranfer/ml/texturegen)
  mlops and other community devs

Question 40

Welche neuen Möglichkeiten oder Technologien könnten Einfluss auf die Musikvisualisierung in Houdini haben?

Question 41

Was ist dein Forschungsergebnis?

Question 42

Was lief bei der Bachelorarbeit nicht wie geplant?

Question 43

Was könnte in Zukunft möglich sein?

Question 44

Gab es einen Werkbezug, warum nicht?