De taken zitten erop! ‘t Is te zeggen; alle documenten zijn klaar voor de vakken die morgen (Projektübung) en donderdag (Advanced Facade Technologies en Computer Simulation) gepresenteerd dienen te worden. En wat doe ik dan om de zinnen te verzetten? Stukjes programmeren.

Gisteren kwam ik via de link-collectie van Andrea Graziano terecht op een artikel van een Grasshopper-programmeur die muziekfrequentie inleest en in een driedimensionale weergave voorstelt in Rhino. Heel erg mooi, heel erg interessant, maar ik vond dat ik het beter kon; vooral dan in de zin van performantie en optimalisering van de code. Daarom ben ik aan de slag gegaan, en een leuk concept ontwikkeld.

Waar hij de muziek analyseert door middel van vvvv, doe ik het met de op Java gebaseerde programmeeromgeving Processing. Ik testte er voorheen al enkele dingetjes in uit en was er van overtuigd dat analyse van muziek niet al te moeilijk zou zijn, mits de mogelijkheden van bestaande bibliotheken te gebruiken. De code in Processing is dan ook verrassend eenvoudig en helder.

// Spectrum to File
// Niels Wouters - 2010
void draw() {
  background(0,0,255);

  // fetch spectrum
  _analyse.getSpectrum(_audioChannel);
  _output = createWriter("output-file.txt");
  // output to file + draw spectrum bars
  for (int i=0; i<256; i++) {
    float temp=max(0, 185 - _analyse.spectrum[i] * 512);
    _output.println(temp);
    rect(i*16,temp+.5,6,height-temp+.5);
  }
  _output.flush();
  _output.close();
}

Deze code zorgt ervoor dat een constante stroom van 256 spectrum-gegevens in een bestand worden weggeschreven, terwijl een muziekstukje speelt. Deze gegevens zijn niks meer of minder dan decimale getallen die in code aangepast dienen te worden om bewerkbare waarden te verkrijgen. In een tweede stap zal dit bestand met getallen ingelezen worden in Grasshopper, om vervolgens een puntenwolk te creëren waarbij de punten op een Z-hoogte geplaatst worden die overeenstemt met het spectrum.

Onderstaand filmpje toont tenslotte het totaalconcept. Ter illustratie van het geheel speelt Utopia van Within Temptation, een nummer met een grote verscheidenheid aan toonhoogtes. Zoals je zal zien is het geheel niet volledig betrouwbaar; het inlezen van het bestand in Grasshopper conflicteert van tijd tot tijd met de schrijfbewerking naar het bestand. Bovendien is Grasshopper niet erg snel in de visualisatie van het geheel. Desalniettemin moet het concept duidelijk zijn.

In een volgende stap zal ik werken met beelden; in eerste instantie de pixelwaarden van foto's en andere afbeeldingen, en in een tweede stap pixelwaarden van bewegende beelden. Op basis hiervan zal dan ook een driedimensionale compositie gerealiseerd worden.