Re-imagining XR with (and for) People with Sensorimotor Disabilities
Crip Sensorama ist ein multisensorisches, interaktives XR-Erlebnis, bei dem die Teilnehmer*innen in VR/AR-Umgebungen eintauchen und durch Mundgestik navigieren und interagieren. Diese Gesten entfalten eine narrative Auseinandersetzung mit Behinderung, Kunst und Kultur. Die ausgewählten Mundgesten wurden entwickelt, um es Menschen mit körperlichen Behinderungen zu ermöglichen, sich durch Kinn-, Kiefer- und Lippenbewegungen in XR zu bewegen und zu interagieren. Diese Interaktionen geben Einblicke in die künstlerischen Arbeitsweise der Mitgestalter und Künstler mit Behinderung Eric Desrosiers und Christian Bayerlein in XR.
Crip Sensorama ist ein XR-Kunstwerk, das sich mit der Frage auseinandersetzt, wie wir XR als „assistive Technologie“ umgestalten können, sodass sie als Plattform für Geschichten für (und mit) Menschen mit Behinderungen genutzt werden kann? Wie kann die Entwicklung barrierefreier XR-Technologien dazu beitragen, unsere Wahrnehmung von Behinderung zu überdenken?
Crip Sensorama ist ein interaktives VR/AR-Erlebnis, durch das sich das Publikum bewegt und so in die Arbeitsweise von Eric Desrosiers, Künstler mit Behinderung, eintaucht. Vermittelt wird dies durch eine Reihe von Mundgesten, die durch Mapping und Parametrisieren von Erics Gesichtsmuskeln erfasst wurden.
Gesichtserkennungsalgorithmen und modifizierte Lippen- und Gesichtstracker ermöglichen Eric die Interaktion in XR durch Mund- und Zungenbewegungen. Zugleich wird gezeigt, wie gehackte, neu entwickelte unterstützende XR-Technologien als Plattformen für das Geschichtenerzählen über Kunst und Behinderung durch und mit Menschen mit Behinderungen dienen können.
Photo: Tom Mesic
Photo: Tom Mesic
Bios
-
Photo: Martin HieslmairPuneet Jain
IN
Puneet Jain ist Ingenieur und Künstler, der an der Schnittstelle von Mensch-Computer-Interaktion, eXtended Reality, kritischem Design und Disability Studies arbeitet. Puneets künstlerische Forschung umfasst die Entwicklung von assistiven XR-Schnittstellen mit (und für) Menschen mit Behinderungen, die es diesen Gemeinschaften ermöglichen, ihre eigenen Zukunftsvisionen durch unterstützende immersive Technologien neu zu gestalten. Jain promoviert an der Concordia University in Kanada unter der Leitung des Künstlers und Forschers Chris Salter.
-
Photo: Max GosselinYesica Duarte
AR
Yesica Duarte ist Künstlerin, Forscherin, Entwicklerin und Dozentin für VR Experience Design. Sie hat einen Abschluss in audiovisueller Produktion mit Spezialisierung auf sphärisches Video und VFX. Sie hat einen Master in Technologie und Ästhetik der elektronischen Künste und studiert derzeit Specialization in Design for HCI. Sie erforscht die immersive Sprache von XR durch den Einsatz von experimentellen Wearable Interfaces und Performance. Sie hat ihre Arbeit in Kanada und auf lateinamerikanischen Plattformen präsentiert.
Credits
Artist collaboration and consultancy on disability perspectives: Eric Desrosiers and Christian Bayerlein
Mouth Interface and VR/AR Development: Puneet Jain
360-degree Video Filmmaking and Documentation: Yesica Duarte
3D Modeling and Design: Wolfgang Kienreich and Nelson Silva
Technical consultant: Nelson Silva
I want to thank Percepto Collective for the 360-degree video content that was shot during the art-residency at Société des arts technologiques [SAT] in Montreal, Canada sponsored and supported by Conseil des arts de Montréal.
This work was initiated as part of the FOUNDING LAB program at IT:U and Ars Electronica in Linz, Austria (2023-2024). The FOUNDING LAB is realized as a Public Partnership between Ars Electronica GmbH and Co KG and the Institute of Digital Sciences (IT:U), Austria and financed through funds from the Austrian Federal Ministry of Education, Science and Research.
