ShadowPlay
software, music, performance
2021

ShadowPlay street pattern

ShadowPlay is an exploration of the architecture and light in outdoor spaces through sound. Using a bicycle-mounted smartphone as a brightness sensor and a bluetooth speaker, the mottled patterns of light and shadow become the musical score as one rides along city streets.

-

ShadowPlay ist eine Erkundung der Architektur und des Lichts in Außenbereichen durch Klang. Mit einem am Fahrrad befestigten Smartphone als Helligkeitssensor und einem Bluetooth-Lautsprecher werden die wechselnden Licht- und Schattenmuster zur Musik, während man die Straßen der Stadt entlangfährt.

ShadowPlay camera setup

iOS App

ShadowPlay app icon

The project is realized as an open source iOS application which uses one of the device's cameras as a brightness sensor. Custom audio scenes generate live sound in response to the changes between light and shadow detected by the smartphone. You can even create your own sound scenes using the Pure Data computer music environment.

-

Das Projekt wird als quelloffene iOS-Anwendung realisiert, die eine der Kameras des Geräts als Helligkeitssensor nutzt. Benutzerdefinierte Audioszenen erzeugen Live-Sound als Reaktion auf die vom Smartphone erkannten Veränderungen zwischen Licht und Schatten. Mit der Computermusikumgebung Pure Data können Sie sogar Ihre eigenen Klangszenen erstellen.

Exhibitions / Austellungen

Seasons of Media Arts: Connected Future
17 Sep - 17 Oct 2021 in Karlsruhe, Germany

Selected routes:

For additional suggestions to try the ShadowPlay application in Karlsruhe:

Trips to take place roughly between 11:30 - 13:30 for angled overhead sun in the early fall.

Concept

Much like a simple music box plucked by patterns of pins on a rotating wheel, the transitions between light and dark as you ride control playback of prepared sequences, generated patterns, or prepared audio playback speed.

-

Ähnlich wie bei einer einfachen Spieluhr, die durch Muster von Nadeln auf einem rotierenden Rad gezupft wird, steuern die Übergänge zwischen Hell und Dunkel während der Fahrt die Wiedergabe von vorbereiteten Sequenzen, generierten Mustern oder vorbereiteter Audiowiedergabegeschwindigkeit.

ShadowPlay sensor triggering

Acknowledgments

Sound scene contributions by:

Supported through the UNESCO City of Media Arts Karlsruhe as well as through the City of Karlsruhe. / Unterstützt durch die UNESCO City of Media Arts Karlsruhe sowie durch die Stadt Karlsruhe.

UNESCO City of Media Arts Karlsruhe logo