Quand la technologie rencontre la participation : Avec les caméras IDS, vvvv et SCHNELLE BUNTE BILDER (IMAGES RAPIDES ET COLORÉES), l’histoire devient interactive.
Installations interactives
Le 9 décembre 2025, la nouvelle exposition permanente intitulée « Vous faites partie de l'histoire » a ouvert ses portes à la Maison de l'histoire de la République fédérale d'Allemagne, à Bonn. L'accent est mis sur la participation : Les visiteurs ne doivent pas seulement s'informer, mais aussi s'immerger activement dans les récits historiques, modifier les contenus et laisser leur empreinte. Cette nouvelle forme de participation est rendue possible sur le plan technique grâce à l'étroite collaboration entre SCHNELLE BUNTE BILDER, la fondation Haus der Geschichte, la plateforme en temps réel vvvv et les caméras industrielles d'IDS Imaging Development Systems.
L'artiste multimédia Sebastian Huber et son équipe de SCHNELLE BUNTE BILDER développent depuis des années des installations interactives qui allient art, technologie et communication. Pour ce faire, ils utilisent intensivement vvvv, un environnement de programmation visuel destiné aux applications en temps réel. Il est particulièrement adapté aux visualisations génératives et idéal pour les environnements 3D et les installations dans un contexte muséal.
« L'interaction entre un produit industriel et un logiciel créatif est passionnante », souligne Sebastian Huber. « IDS nous fournit du matériel robuste et précis, et vvvv nous offre la flexibilité nécessaire pour l'utiliser de manière créative en temps réel. »
À la Maison de l'Histoire, des caméras IDS sont utilisées à plusieurs endroits stratégiques. Dès 2022, les premiers formats médiatiques interactifs ont été testés dans l’espace expérimental « #Proberaum », et ils s’intègrent désormais dans la nouvelle exposition permanente.
Première étape : Le prologue – « Vous faites partie de l'histoire »
Dans le prologue de l'exposition, un grand écran LED projette des scènes historiques dans lesquelles les visiteurs sont intégrés en direct, les introduisant ainsi au thème « Vous faites partie de l'histoire ». Une caméra industrielle de type GV-5280CP Rev.2.2 permet de capturer jusqu'à 40 personnes simultanément.
La caméra utilise le capteur CMOS compact IMX264 de Sony qui, grâce à sa grande sensibilité à la lumière et à sa grande plage dynamique, capture les mouvements avec précision, même dans des conditions d'éclairage changeantes et en cas de forte projection. Grâce au SDK IDS peak, les données d'image capturées sont directement transmises à vvvv, qui réagit en temps réel et déclenche les visualisations correspondantes sur le mur.
Huber décrit le défi en ces termes : « La caméra doit pouvoir filmer les visiteurs de manière fiable, même dans des conditions difficiles : luminosité changeante, garde-corps gênant la vue et angle de prise de vue très large. » La combinaison entre la robustesse du matériel et l'ouverture du côté du logiciel est ici déterminante. « Les caméras IDS offrent un large choix de capteurs, des interfaces flexibles via USB 3.0 ou GigE Vision et, surtout, une intégration facile grâce au SDK IDS peak, qui permet aux développeurs vvvv d'accéder directement à tous les paramètres. »
Deuxième étape : « Quand es-tu né ? » – Découvrir l'histoire du bout des doigts
À une autre station, les visiteurs posent leur main sur un écran de projection. Son empreinte de main fait apparaître des photos de l'année de sa naissance et de sa jeunesse. Deux caméras de la série uEye XCP, modèle U3-3680XCP-NIR, enregistrent les mouvements. Huber explique la difficulté : « La caméra doit reconnaître les personnes sans être perturbée par la projection. » « Ce n’est qu’ainsi que la projection peut réagir autour des personnes sans générer de boucles de rétroaction. »
Les caméras IDS sélectionnées sont parfaitement adaptées à cet usage. Elles transfèrent des données via SuperSpeed USB 5 Gbit/s et sont équipées d’un filtre passe-bande pour la lumière proche infrarouge (NIR). Celui-ci élimine les éléments de projection gênants et permet une détection fiable, même dans des environnements très lumineux. Le capteur AR0522 de 5 mégapixels intégré, doté de la technologie BSI, offre une grande sensibilité à la lumière, un faible bruit et d'excellentes performances dans le domaine du proche infrarouge, le tout avec une faible consommation d'énergie. Les données de déplacement sont intégrées en temps réel dans un portrait collectif qui met en évidence la diversité des visiteurs.
« Les caméras nous fournissent des données de mouvement sans faire partie de la scène visuelle. » C'est essentiel pour une narration immersive : « La technologie doit être présente sans être visible. »
Le suivi a été mis en œuvre au niveau logiciel à l'aide de YOLO, un algorithme d'apprentissage automatique capable de reconnaître des objets dans des données d'images. Il fonctionne extrêmement rapidement et s'exécute même en temps réel sur une carte graphique. « Pour la reconnaissance des mains, nous utilisons la forme la plus simple de la détection d'objets : l'Object Detection », explique Sebastian Huber. Elle fournit la position et la taille des objets détectés. La capture d'écran montre les mains détectées par YOLO et marquées par des cadres de sélection bleus. Pour ce faire, Huber et son équipe ont entraîné leur propre modèle YOLO par affinement. « Il détecte désormais de manière fiable les « mains infrarouges », mais ne réagit pas, par exemple, aux poings. »
Technologie permettant une interaction en temps réel
Sebastian Huber souligne les performances et la polyvalence des caméras IDS : « Les caméras uEye sont très performantes, peuvent effectuer elles-mêmes des corrections d'image telles que le réglage du gain et offrent en temps réel toutes les fonctionnalités indispensables aux installations interactives. » Il est particulièrement pratique de pouvoir personnaliser ces caméras selon ses besoins, qu'il s'agisse du choix de l'objectif, du capteur ou encore des versions USB ou GigE. Fabriquées sur mesure, elles peuvent être adaptées avec précision aux exigences de chaque installation. « En même temps, elles sont robustes, durables et fiables. » Joreg, co-développeur de vvvv, ajoute : « Pour des projets tels que les installations interactives de la Maison de l'Histoire, vvvv est idéal, car il permet – selon l'application – d'avancer tout simplement plus vite. »
L'association de la technologie de caméra IDS et de vvvv permet une interaction en temps réel précise et à faible latence. Les caméras détectent les mouvements sans délai et les traduisent immédiatement en réactions médiatiques. Leur conception compacte et robuste ainsi que le choix varié d’objectifs facilitent leur intégration dans l'architecture du musée. La haute sensibilité infrarouge garantit une détection fiable même en cas de projection lumineuse complexe, tandis que le SDK IDS peak assure une connexion stable aux systèmes créatifs en temps réel.
Musée du futur
Là où la technologie classique des capteurs s'arrête, l'interaction commence : Les visiteuses et visiteurs deviennent eux‑mêmes partie intégrante du média. Avec ses nouvelles installations, la Maison de l'Histoire de Bonn démontre que le traitement moderne de l'image peut être bien plus qu'une simple fonction technique : il devient un outil narratif qui rend l'histoire visible au sens propre du terme. Les visiteurs deviennent des co-créateurs, et la frontière entre spectateur et œuvre s'estompe. Les caméras IDS constituent la base d'une imagerie précise, vvvv le centre de contrôle dynamique – et SCHNELLE BUNTE BILDER relie les deux pour créer un espace narratif où le passé et le présent se mettent en mouvement.
De l’interaction entre les caméras IDS, la programmation vvvv et la signature artistique de SCHNELLE BUNTE BILDER naît ainsi un exemple emblématique du musée du futur – un espace où technologie, art et mémoire se fondent l’un dans l’autre.
IDS peak et vvvv : une connexion directe pour des projets créatifs en temps réel
Afin que les caméras puissent pleinement exploiter leurs atouts dans la pratique créative, vvvv mise sur une intégration technique étroite avec IDS peak. Cela facilite considérablement le travail des développeurs : Toutes les fonctionnalités de la caméra sont immédiatement disponibles dans vvvv, sans intégration complexe de SDK. L'API permet un contrôle précis, et la vaste gamme de matériel proposée par IDS – des objectifs aux capteurs en passant par les modèles compacts – reste entièrement exploitable.
Joreg, co-développeur de vvvv, décrit cette approche comme suit : « Nous souhaitons prendre en charge directement le plus large éventail possible de matériel. » Suite à de nombreuses demandes de nos clients, nous avons intégré IDS peak. Les utilisateurs peuvent désormais accéder à toutes les fonctionnalités de leurs caméras IDS en quelques clics, sans avoir à se soucier eux-mêmes de l'intégration du SDK. « Beaucoup choisissent délibérément les solutions IDS, car elles offrent une flexibilité nettement supérieure à celle des produits grand public en matière d'objectifs, de conception compacte et de contrôle via API. »
Comme vvvv repose sur le framework .NET, les extensions peuvent être facilement intégrées via NuGet. Le package VL.Devices.IDS met directement à disposition les fonctions IDS peak et facilite grandement l'intégration des caméras dans vvvv : https://www.nuget.org/packages/VL.Devices.IDS
vvvv - Dießl & Gregor GbR
vvvv est un environnement de programmation visuel en temps réel pour .NET. Il est utilisé à l'échelle internationale dans les domaines de l'art médiatique, du graphisme génératif et des interfaces interactives. L’entreprise fournit des solutions logicielles qui permettent aux créatifs de réaliser rapidement des applications complexes en temps réel, de traduire directement mouvements et données en expériences visuelles et de concevoir des espaces interactifs.
SCHNELLE BUNTE BILDER – Huber-Pohle-Timpernagel GbR
SCHNELLE BUNTE BILDER est un studio spécialisé dans les arts médiatiques et l'interaction numérique. Il conçoit des espaces immersifs et interactifs dans lesquels les visiteurs découvrent des contenus de manière ludique, interagissent entre eux et participent activement à la création d'expériences artistiques. Pour ce faire, l'équipe associe des technologies de pointe, des concepts créatifs et des formats participatifs afin de repenser les expositions, les performances et les événements.
uEye CP
Modèle utilisé : GV-5280CP Rev.2.2
uEye XCP
Modèle utilisé : U3-3680XCP-NIR Rev.1.2