Sensorik

Die Sensorik befindet sich an der Decke über der Installation und wurde von Jacob Sello entwickelt. Sie besteht aus einer modifizierten Webcam und einem Fluter, der infrarotes Licht abgibt. Die Kamera und der Fluter erfassen und beleuchten den gesamten Boden der Installation.

Grundsätzlich kann eine einfache Webcam mittels Frame Subtraction als Bewegungssensor in einem Tracking-System verwendet werden. Hierfür wird ein Frame des statischen Kamerabildes gespeichert und mit jedem neu aufgenommenen Frame subtrahiert. Daraus resultiert ein schwarzes Bild, denn jeder Wert in der Videomatrix wird Null. Tritt nun an einer Position im Aufnahmebereich der Kamera eine Änderung ein – im konkreten Fall, indem eine Person die Installation betritt – ergeben sich Werte, die ungleich Null sind. Alle diese Werte werden im nächsten Schritt als Eins interpretiert und somit als weiße Silhouette vor einem schwarzen Hintergrund dargestellt. Alle weißen Bereiche werden nach ihren XY-Koordinaten in Echtzeit ausgelesen und ergeben die Anzahl und die Position der Personen im Aufnahmebereich der Kamera.

Aufgrund der wechselnden Lichtverhältnisse durch die Animationen auf dem Boden würde die Sensorik auch ohne die Anwesenheit des Publikums ständige Veränderungen registrieren. Deshalb wurde infrarotes Licht eingesetzt, dessen Wellenlängen im Spektrum über dem Bereich des sichtbaren Lichtes liegen. Damit wird sichergestellt, dass das LED-Licht für die Kamera unsichtbar bleibt und die Animationen nicht als Veränderungen im Aufnahmebereich der Kamera interpretiert werden. Hierfür wurde die Webcam mit einem Infrarotlicht-Filter ausgestattet, während der neben der Kamera angebrachte Fluter den Raum mit ausreichend Infrarotlicht ausleuchtet.

Die verwendete Software Community Core Vision verarbeitet das Bild der Kamera in Echtzeit und lässt diverse Feineinstellungen wie die Größe des zu registrierenden Objektes zu. Die gewonnen Daten über die Anzahl der auf der Installation befindlichen Besucher werden nun an Max/MSP gesendet und steuern dort die Presets der Instrumente.