Zwei Personen posieren vor einer großen interaktiven Displaywand mit farbigen Silhouetten

Technologie trifft Partizipation: Mit IDS-Kameras, vvvv und SCHNELLE BUNTE BILDER wird Geschichte interaktiv

Interaktive Installationen

Am 9. Dezember 2025 öffnete im Haus der Geschichte der Bundesrepublik Deutschland in Bonn die neue Dauerausstellung „Du bist Teil der Geschichte“. Im Zentrum steht das Mitmachen: Besucherinnen und Besucher sollen sich nicht nur informieren, sondern aktiv in historische Erzählungen eintauchen, Inhalte verändern und Spuren hinterlassen. Technisch ermöglicht wird diese neue Form der Partizipation durch die enge Zusammenarbeit zwischen SCHNELLE BUNTE BILDER, der Stiftung Haus der Geschichte, der Echtzeitplattform vvvv und Industriekameras von IDS Imaging Development Systems.

Der Medienkünstler Sebastian Huber und sein Team von SCHNELLE BUNTE BILDER entwickeln seit Jahren interaktive Installationen, die Kunst, Technologie und Kommunikation miteinander verschmelzen. Dabei nutzen sie intensiv vvvv, eine visuelle Programmierumgebung für Echtzeitanwendungen. Sie eignet sich besonders für generative Visualisierungen, ideal für 3D-Umgebungen und Installationen im musealen Kontext.

„Das Zusammenspiel aus Industrieprodukt und kreativer Software ist spannend“, betont Sebastian Huber. „IDS liefert uns robuste, präzise Hardware und vvvv die Flexibilität, sie in Echtzeit kreativ zu nutzen.“

Im Haus der Geschichte kommen IDS-Kameras an mehreren zentralen Stationen zum Einsatz. Bereits im experimentellen „#Proberaum“ wurden 2022 erste interaktive Medienformate erprobt, die nun in die neue Dauerausstellung einfließen.

Erste Station: Der Prolog – „Du bist Teil der Geschichte“

Im Prolog der Ausstellung projiziert eine große LED‑Wand historische Szenen, in die Besucherinnen und Besucher live eingebunden werden und sie so in das Thema „Du bist Teil der Geschichte“ führt. Eine Industriekamera vom Typ GV-5280CP Rev.2.2 erfasst dabei bis zu 40 Personen gleichzeitig.

Die Kamera nutzt den kompakten CMOS‑Sensor IMX264 von Sony, der dank hoher Lichtempfindlichkeit und großem Dynamikumfang selbst bei wechselnden Lichtverhältnissen und starker Projektion Bewegungen präzise erfasst. Über das IDS peak SDK werden die erfassten Bilddaten direkt in vvvv eingespeist, das in Echtzeit reagiert und die entsprechenden Visualisierungen an der Wand auslöst.

Zweiteiliges Bild mit farbigen Silhouetten von Personen, die in ein historisches Foto eingebaut sind
Unten: Erkannte Silhouetten der BesucherInnen; oben: Einbetten der Silhouetten in Szene.

Huber beschreibt die Herausforderung so: „Die Kamera muss die Besucher auch unter schwierigen Bedingungen zuverlässig erfassen, bei wechselndem Licht, verdeckenden Geländern und einem sehr weitwinkligen Aufnahmebereich.“ Die Kombination aus Hardware-Stabilität und softwareseitiger Offenheit ist dabei entscheidend. "IDS-Kameras bieten eine hohe Sensorauswahl, flexible Schnittstellen über USB 3.0 oder GigE Vision und vor allem eine einfache Integration über das IDS peak-SDK, das vvvv-Entwicklern direkten Zugriff auf alle Parameter gewährt."

Zweite Station: „Wann bist du geboren?“ – Geschichte mit der eigenen Hand berühren

An einer weiteren Station legen Besucherinnen und Besucher ihre Hand auf eine Projektionsfläche. Ihr Handabdruck öffnet Bilder aus ihrem Geburtsjahr und ihrer Jugend. Zwei Kameras der uEye XCP‑Serie, Modell U3‑3680XCP‑NIR, erfassen dabei die Bewegungen. Huber erklärt die Schwierigkeit: „Die Kamera muss die Personen erkennen, ohne von der Projektion verwirrt zu sein. Nur so kann die Projektion um die Menschen herum reagieren, ohne Feedbackschleifen zu erzeugen.“

Die ausgewählten IDS-Kameras sind dafür prädestiniert. Sie übertragen Daten über SuperSpeed USB 5 Gbps und sind mit einem Bandpassfilter für NIR-Licht ausgestattet. Dieser blendet störende Projektionsanteile aus und ermöglicht eine verlässliche Erfassung auch in lichtintensiven Umgebungen. Der verbaute 5 Megapixel‑Sensor AR0522 mit BSI‑Pixeltechnologie liefert hohe Lichtempfindlichkeit, geringes Rauschen und starke Performance im Nahinfrarotbereich – bei niedrigem Energieverbrauch. Die Bewegungsdaten fließen in Echtzeit in ein kollektives Porträt, das die Vielfalt der Besucherinnen und Besucher sichtbar macht.

„Die Kameras liefern uns Bewegungsdaten, ohne Teil der visuellen Szene zu werden. Für immersives Storytelling ist das entscheidend: Die Technik muss wahrnehmen, ohne sichtbar zu sein.“

— Sebastian Huber, SCHNELLE BUNTE BILDER —
IDS Industriekamera mit großem Objektiv und NIR-Filter auf einem Aluminiumprofil
Eine uEye XCP erfasst, verborgen hinter der Projektionsfläche, die Interaktionen der Besucher

Das Tracking wurde softwareseitig mit YOLO umgesetzt – einem Machine‑Learning‑Algorithmus, der Objekte in Bilddaten erkennt. Er arbeitet äußerst schnell und läuft auf einer Grafikkarte sogar in Echtzeit. „Für die Handerkennung nutzen wir die einfachste Form der Objekterkennung: Object Detection“, erklärt Sebastian Huber. Sie liefert Position und Größe der erkannten Objekte. Der Screenshot zeigt die von YOLO erkannten und mit blauen Bounding Boxes markierten Hände. Dafür haben Huber und sein Team ein eigenes YOLO‑Modell per Finetuning trainiert. „Es erkennt nun zuverlässig ‚Infrarot-Hände‘, reagiert aber zum Beispiel nicht auf Fäuste.“

Screenshot mit 16 Feldern zur Unterscheidung von flacher Hand und Faust im Modelltraining.
Screenshot vom Training des Hand-Erkennungs-Modells

Technologie für Echtzeit‑Interaktion

Sebastian Huber hebt die Performance und Vielseitigkeit der IDS-Kameras hervor: „Die uEye-Kameras sind sehr performant, können selbst Bildkorrekturen wie Gain-Anpassung vornehmen und bieten in Echtzeit alle Features, die für interaktive Installationen entscheidend sind. Besonders praktisch ist, dass die Kameras auf Wunsch customized gefertigt werden können – von der Wahl der Linse über den Sensor bis hin zu USB- oder GigE-Varianten. Als Sonderanfertigungen lassen sie sich exakt an die Anforderungen jeder Installation anpassen. Gleichzeitig sind sie robust, langlebig und zuverlässig.“ Joreg, Mitentwickler von vvvv, ergänzt: „Für Projekte wie die interaktiven Installationen im Haus der Geschichte ist vvvv ideal, weil man damit – je nach Anwendung – einfach schneller vorankommt.“

Die Verbindung von IDS‑Kameratechnologie und vvvv ermöglicht präzise, latenzarme Echtzeitinteraktion. Die Kameras erfassen Bewegungen verzögerungsfrei und setzen sie sofort in mediale Reaktionen um. Ihre kompakte, robuste Bauweise und die flexible Linsenauswahl erleichtern die Integration in die Museumsarchitektur. Die hohe Infrarotempfindlichkeit sorgt für zuverlässige Erfassung selbst bei komplexer Lichtprojektion, während das IDS peak‑SDK eine stabile Anbindung an kreative Echtzeitsysteme gewährleistet.

Museum der Zukunft

Wo klassische Sensorik aufhört, beginnt die Interaktion: Besucherinnen und Besucher werden selbst Teil des Mediums. Das Haus der Geschichte Bonn zeigt mit seinen neuen Installationen, dass moderne Bildverarbeitung weit mehr sein kann als eine technische Funktion – sie wird zu einem erzählerischen Werkzeug, das Geschichte im wahrsten Sinne des Wortes sichtbar macht. Besucherinnen und Besucher werden zu Mitgestaltenden, und die Grenzen zwischen Betrachter und Exponat verschwimmen. IDS-Kameras bilden dabei das präzise bildgebende Fundament, vvvv das dynamische Steuerzentrum – und SCHNELLE BUNTE BILDER verbindet beides zu einem narrativen Raum, in dem Vergangenheit und Gegenwart in Bewegung geraten.

Im Zusammenspiel von IDS-Kameras, vvvv-Programmierung und der künstlerischen Handschrift von SCHNELLE BUNTE BILDER entsteht so ein exemplarisches Beispiel für das Museum der Zukunft – ein Raum, in dem Technologie, Kunst und Erinnerung miteinander verschmelzen.

Das Projekt wurde vom Art Directors Club für Deutschland (ADC) 2026 mit Gold, zweimal Silber und zwei weiteren Auszeichnungen in den Kategorien Spatial Experience und Digital Media gewürdigt.

IDS peak und vvvv: direkte Verbindung für kreative Echtzeitprojekte

Damit die Kameras ihre Stärken auch in der kreativen Praxis ausspielen können, setzt vvvv auf eine enge technische Anbindung an IDS peak. Das erleichtert die Arbeit der Entwicklerinnen und Entwickler erheblich: Alle Kamerafunktionen stehen in vvvv unmittelbar zur Verfügung, ohne komplexe SDK‑Einbindung. Die API lässt sich präzise steuern, und die breite Hardware‑Auswahl von IDS – von Objektiven über Sensoren bis zu kompakten Bauformen – bleibt vollständig nutzbar.

Joreg, Mitentwickler von vvvv, beschreibt den Ansatz so: „Wir wollen eine möglichst große Bandbreite an Hardware direkt unterstützen. Aufgrund mehrfacher Kundenanfragen haben wir IDS peak integriert. So können Anwender jetzt mit wenigen Klicks auf alle Funktionen ihrer IDS‑Kameras zugreifen – ohne sich selbst um die SDK‑Einbindung kümmern zu müssen. Viele entscheiden sich gezielt für IDS, weil sie bei Objektiven, kompakter Bauform und API‑Steuerung deutlich flexibler sind als Consumer‑Produkte.“

Da vvvv auf dem .NET‑Framework basiert, lassen sich Erweiterungen bequem über NuGet einbinden. Das Paket VL.Devices.IDS stellt die IDS peak‑Funktionen direkt bereit und macht die Integration der Kameras in vvvv besonders einfach: https://www.nuget.org/packages/VL.Devices.IDS

vvvv - Dießl & Gregor GbR

Logo vvvv

vvvv ist eine visuelle Echtzeit-Programmierumgebung für .NET. Sie wird international in Medienkunst, generativer Grafik und interaktiven Interfaces eingesetzt. Das Unternehmen stellt Softwarelösungen bereit, die es Kreativen ermöglichen, komplexe Echtzeitanwendungen schnell umzusetzen, Bewegungen und Daten direkt in visuelle Erlebnisse zu übersetzen und interaktive Räume zu gestalten.

SCHNELLE BUNTE BILDER – Huber-Pohle-Timpernagel GbR

Logo SCHNELLE BUNTE BILDER

SCHNELLE BUNTE BILDER ist ein Studio für Medienkunst und digitale Interaktion. Es entwickelt immersive, interaktive Räume, in denen Besucher spielerisch Inhalte entdecken, miteinander interagieren und künstlerische Erlebnisse selbst mitgestalten. Dabei kombiniert das Team modernste Technologien, kreative Konzepte und partizipative Formate, um Ausstellungen, Performances und Events neu zu denken.

uEye CP

Verwendetes Modell: GV-5280CP Rev.2.2

uEye XCP

Verwendetes Modell: U3-3680XCP-NIR Rev.1.2