Aperio - Making the hidden visible

Projektidee / Hintergrund

Viele Museen versuchen durch statische Objekte und Texte den Besucher ein Thema näher zu bringen. Dies bezieht den Besucher aber nicht oder nur indirekt in den Entdeckungsprozess mit ein. Besucher sollen selbständig tiefer in ein Thema „eintauchen“ können und durch Handbewegungen Hintergrundinformationen aufdecken können. Aperio versucht dieses Problem zu lösen.

Author

Gero Brinkmann

Brainstorming

In der ersten Phase des Projekts war die beschriebene Projektidee noch nicht klar definiert. Im ersten Schritt habe ich versucht ein Medienobjekt zu gestalten, was jeweils ein Sinn des Körpers ansprechen sollte.

  • Riechen: Eingebaute Lufterfrischer (verschiedene Düfte) die durch einen Mikrocontroller ausgelöst werden, um z. B. eine Wettervorhersage zu geben (je nach Geruch ein anderes Wetter).
  • Sehen: Ein digitales Buch was durch ein Beamer auf einen Tisch projiziert wird und durch Handbewegungen umgeblättert werden kann.
  • Fühlen: Durch großen Subwoofer Infraschallstöße ausgeben, die eine Person spüren kann, um eventuell Informationen mitzuteilen.
  • Hören: Durch Lautsprecher und Mikrofon ein Live-Übersetzer bauen, der wie alle beschrieben Ideen als Medienobjekt in eine E27 Fassung geschraubt werden kann.

Fig. 1: Initiale Ideensammlung des Medienobjekts basierend auf den Sinnen des Menschen.

Konzeptentwicklung

Nach der Brainstorming-Phase hat sich schnell folgende Idee durchgesetzt. Basierend auf der zweiten Idee (Sehen) wurde folgendes Konzept entwickelt.

Mithilfe der eingebauten Kamera und einem Objekterkennungsmodell auf dem integrierten PC können Hände im Beamerbild erkannt werden. Damit Besucher animiert werden mit dem Beamberbild zu interagieren wird nach ca. 15 Sekunden ohne erkannte Hand eine Call-to-Action Animation abgespielt. Dabei bewegt sich zufällig ein Hand-Pikrogramm zum Bildschirmrand.

Fig. 2: Call-to-Action Animation, die dem Besucher auffordern soll selber mit der Hand über das projizierte Bild zu wischen.

Wenn nun ein Besucher seine Hand über das Beamerbild bewegt, zerlegt sich das Bild in kleine Mosaik-Kacheln. Diese werden dann durch die Handbewegung außerhalb der Projektionsfläche verschoben, um ein abgewandeltes Bild darunter freizulegen. Wenn das Bild fast freigelegt ist, werden automatisch die restlichen Mosaki-Kacheln beiseitegeschoben und eine Audiotonspur wir aus dem integrieren Lautsprecher abgespielt. Die Audiospur erklärt Hintergründe zu dem aufgedeckten Thema. So wird z. B. wie in Vid. 1 ein Wald gezeigt, der durch das aufdecken einen brennenden Wald preisgibt. Nach dem Aufdecken erhält man auditiv mehr Informationen warum es zu Waldbränden kommt usw. Nach abspielen der Audiospur fliegen die Mosaik-Kacheln an ihren ursprünglichem Platz und können ein neues Thema (Bild) darstellen.

Vid. 1: Demonstrationvideo der Funktionsweise von Aperio.

Prototyp

Der Prototyp sollte Design-Elemente der projizierten Bilder widerspiegeln. Da es ums aufdecken geht und die Bilder bei Handbewegung in kleine Rechtecke zerfallen, sind die Lüftungslöcher im Gehäuse auch Rechteckig und werden verteilt über die Gehäuselänge immer weniger. Des weiteren wollte ich den Namen Des Medienobjekts in das Gehäusedesign integrieren.

Fig. 3: Gehäuse montiert an der Decke via E27 Fassung. Beamergehäuse mit vielen kleinen Luftlöchern und "APERIO" Schriftzug als Pixel-Grafik.

Einsatzgebiet

Aperio wurde als interaktives Medienobjekt für den direkten Besuchereinsatz in Museen, Ausstellungen und informellen Lernräumen konzipiert. Überall dort, wo Informationen spielerisch und ohne Berührungselemente vermittelt werden sollen, kann Aperio eingesetzt werden – typische Anwendungsfelder sind:

  • Museen & Galerien: Ersetzt oder ergänzt klassische Informationstafeln, indem Besucher selbstständig durch Gesten eine Geschichte entdecken können. Science Center & Technikmuseen: Vermittlung komplexer Zusammenhänge durch haptische Interaktion an einem oft berührungsempfindlichen Exponat statt durch Textwände.
  • Schulen & Bildungseinrichtungen: Einsatz im Unterricht oder in Lernräumen, um Schüler:innen durch Bewegung und visuelle Rückmeldung für Themen wie Umwelt, Geschichte oder Physik zu motivieren. Events & Messen: Als Eye-Catcher auf Messeständen oder bei öffentlichen Veranstaltungen, bei dem Berührung durch mehrere Personen gleichzeitig möglich ist.
  • Wartebereiche (z. B. Arztpraxen, Flughäfen): Kurzweilige, thematische Interaktion, die Wartezeit in eine Mini-Entdeckungsreise verwandelt. Der modulare Aufbau (separate Bild-, Audio- und Steuerungsebene) erlaubt einen einfachen Themenwechsel, sodass Aperio langfristig in wechselnden Ausstellungskontexten genutzt werden kann, ohne die Hardware modifizieren zu müssen.

Fig. 4: Konzeptbild der Implementation von Aperio zeigt in einem Museum. (KI generiert)

Quellcode

Der Quellcode zum Projekt ist unter folgenden Link zu finden:

https://forgejo.hostlab.tech/suitdeer/aperio