Im/material Spaces – Virtual and Augmented Reality eröffnen neue Zugänge zu Kulturerbe

Was unterscheidet eigentlich VR und AR? Was kann die Technik für Kulturinstitutionen überhaupt realistisch leisten? Und was kann sie bisher noch nicht? Vorträge von Franziska Ritter, Pablo Dornhege (DTHG digital) und Maren Demant (Invisible Room).

Augmented Reality, Virtual Reality, Mixed Reality: nicht nur in der Tech-Branche, sondern auch im Kulturbereich sind dies seit geraumer Zeit die neuen Trendbegriffe. Überall wo Technik eingesetzt werden kann, um die Besucher*innenerfahrung zu verbessern oder einfach aufregender zu gestalten – zum Beispiel durch VR-Brillen im Museum – wollen Kulturinstitutionen vorne mit dabei sein. Hierbei ist das Verständnis dafür, was Virtual Reality, Augmented Reality und Mixed Reality unterscheidet oft noch gar nicht gewachsen. Was unterscheidet also eigentlich VR und AR? Was kann die Technik für Kulturinstitutionen bisher überhaupt realistisch leisten? Und was kann sie bisher noch nicht?

Um diese Fragen – und die passenden Antworten – ging es auf der Veranstaltung „Im/material Spaces – Virtual and Augmented Reality eröffnen neue Zugänge zu Kulturerbe“, die am 26. November auf Einladung von und in den Räumen der Technologiestiftung Berlin mit den Referent*innen Franziska Ritter und Pablo Dornhege (beide forschen und unterrichten an mehreren Hochschulen und leiten gemeinsam das Forschungsprojekt ‚Im/material Theatre Spaces‘) und Maren Demant (XR Designerin und Gründerin von Invisible Room) stattfand.

In seinem Vortrag zu den Grundlagen der Virtual und Augmented Reality erläuterte Pablo Dornhege mithilfe eines Begriffglossars das Wesen von Virtual und Augmented Reality und zeigte mögliche Wege für einen mediengerechten Umgang mit den Technologien auf. Der folgende Leitfaden fasst die wichtigsten Grundlagen aller Referent*innen-Beiträge zusammen:

AR + VR in Kulturinstitutionen – ein Leitfaden

Die Geschichte immersiver Technologien

Immersive Technologien sind nicht erst in den vergangenen Jahren entstanden, sondern gehören schon seit Jahrhunderten zum Repertoire von Kunst, Kultur und Wissenschaft. Dabei täuschte schon das frühe Barocktheater durch seine tiefenperspektivische Bühnengestaltung eine erweiterte räumliche Realität vor, die einzig und allein im Kopf der Betrachter*innen entstand. Ähnliche Beispiele finden sich in der Geschichte der Menschheit immer wieder: So versuchten Künstler*innen der Romantik mit riesigen Panorama-Gemälden etwa, den Betrachter*innen einen 360-Grad-Eindruck bestimmter Szenen zu bieten.

19. / 20. Jahrhundert – Virtuelle Reise mit Stereoskopie

In der Wende zum 20. Jahrhundert ermöglichte das Kaiserpanorama bis zu 25 Personen gleichzeitig mit automatisch wechselnden stereoskopischen Bildserien ein “virtuelles Reisen” an ferne Orte.

1950er – Kino mit Gerüchen

1954 entwickelte der Produzent und Kameramann Morton Heilig das Sensorama, das die erste vollimmersiven Kinoerfahrungen bieten sollte. Dazu experimentierte Heilig mit einem Gerät, das nicht nur bewegte Bilder zeigen, sondern auch zu den Szenen passende Gerüche ausschütten sollte.

1960er und 70er – Die Kunst entdeckt die ‚künstliche Realität‘

Weiter fortgeschritten war 1968 das von dem Computertechniker Ivan Sutherland entwickelte „Sword of Damocles“, das gemeinhin als das erste Head-Mounted Display (HMD) gilt. Dieses vermochte es bereits, digitale Bilder in das Sichtfeld des Betrachters einzublenden und somit eine Mischform des digitalen und des analogen Raums zu schaffen. Mitte der 1970er-Jahre experimentierten Computerkünstler*innen wie Myron Krueger dann bereits mit dem Begriff „Artificial Reality“ oder „künstliche Realität“. Kruegers Artificial-Reality-Versuchslabor namens „Videoplace“ an der University of Connecticut erlaubte es, durch Bewegung des eigenen Körpers mit einer computergenerierten künstlichen Realität zu interagieren.

1980er – Vorläufer erster VR-Brillen im heutigen Sinne

Moderne Vorläufer der heutigen VR-Brillen entstanden derweil Mitte der 1980er- und Anfang der 1990er-Jahre in den Entwicklungslaboren der NASA, die diese nutzten, um Astronaut*innen auf den Einsatz im All vorzubereiten. Erste im Handel erhältliche VR-Systeme, beziehungsweise Virtual-Reality-Helme, waren 1994 zum Beispiel der Forte VFX1 Headgear. Die massentauglichen 3D-Grafikkarten, die kurz darauf auf den Markt kamen, beschleunigten diese Entwicklung noch weiter.

Der Grundstein für den aktuellen Hype um immersive Technologien und insbesondere VR wurde dann allerdings durch das iPhone gelegt: Mit dem hochauflösenden Display moderner Smartphones sowie den verbauten Neigungs- und Beschleunigungssensoren war das Fundament für einen Quantensprung in Bezug auf neue Virtual-Reality-Systeme, wie beispielsweise die Oculus Rift, endgültig geschaffen.

Seit Virtual Reality ein Begriff ist und immersive Technologien auch von Otto-Normalverbraucher*innen im Handel erworben werden können, herrscht um die genauen Begriffsbezeichnungen rund um die künstliche Realität ein reines Chaos. Dabei sollte grundsätzlich erwähnt werden, dass die bekanntesten Begriffe – Virtual Reality, Mixed Reality und Augmented Reality – allesamt dazu dienen, bestimmte Abstufungen der Virtualisierung von Realität zu beschreiben:

Endgeräte für die Darstellung virtueller Welten

Um VR- und AR-Erfahrungen erlebbar zu machen, gibt es bisher eine ganze Reihe von Endgeräten. AR kann dabei bereits über Smartphones, Tablets und Smartglasses erfahrbar gemacht werden. Um digitale Elemente im realen Raum zu verankern, gibt es drei verschiedene Verfahren:

• Markerbasierte Systeme, bei denen per Kamera ein Bild aufgenommen wird, dessen Kontrastpunkte durch die Software automatisch erkannt und analysiert werden
• Markerlose Systeme, bei denen man – wie zum Beispiel beim IKEA-Wohnungsplaner – 3D-Objekte aus einer Datenbank zieht und diese in eine digitale Darstellung des Raums einsetzt. Hier wird die Position der digitalen Objekte durch die Anwendung, und nicht durch einen Marker definiert.
• Ortsbasierte Systeme, bei denen virtuelle Objekte an vorbestimmten Orten sichtbar werden (zum Beispiel durch den Einsatz eines Smartphones mit GPS-Ortung).

Auch mobile VR-Systeme wie VR-Brillen und VR-Headsets sind derweil bei weitem nicht alle gleich. Dabei unterscheidet man im Normalfall zwischen sogenannten 3DOF- und 6DOF-Systemen, wobei „DOF“ für „degrees of freedom“ (dt.: „Grade der Freiheit“) steht:

• Bei 3DOF-Systemen wie der Oculus „Go“ oder Google Cardboard kann sich der/die User*in umschauen, das heißt nach oben und unten schauen und den Kopf neigen und drehen, sich den digitalen Objekten allerdings nicht nähern, da das System die eigene Position im Raum nicht erfasst.
• Bei 6DOF-Systemen wie der Oculus Rift oder HTC Vive kommt neben der Rotation der Perspektive auch noch die Bewegung im Raum dazu. Man kann sich virtuellen Objekten also nicht nur annähern, sondern sich auch um sie herum bewegen.

Weitere Unterschiede bestehen zudem bei der Mobilität und der Darstellungsqualität der jeweiligen Geräte. Während verkabelte VR-Headsets zwar meist eine höhere Rechenleistung bieten und komplexere Anwendungen abspielen können, ist die Bewegungsfreiheit bei diesen Geräten eingeschränkt. Bei kabellosen Systemen ist derweil die volle Bewegungsfreiheit garantiert, dafür leidet oftmals die Bildqualität.

Dabei wird oftmals unterschätzt, wie stark praktische Hürden den erfolgreichen Einsatz von AR- und VR-Systemen einschränken können: Der Tragekomfort, die Kompatibilität mit klassischen Sehkorrekturbrillen und Hygienefragen stehen dabei oft ganz oben auf der Liste der Bedenken.

Nicht zuletzt aufgrund unerwarteter Schwierigkeiten wie dieser, kann es sich für Kulturinstitutionen anbieten, bei VR- und AR-Projekten neben der Hilfe bei der technologischen Entwicklung auch auf zusätzliche Unterstützung in der Betreuung der Systeme zu bauen. Durch die Anwesenheit von geschultem Personal kann vielen Neunutzer*innen die Berührungsangst mit der Technik genommen werden.

Zudem bietet es sich für Kulturinstitutionen an, VR- und AR-Projekte erst einmal in kleinerem Rahmen zu planen und umzusetzen, um langsam Erfahrung mit der Umsetzung zu sammeln und Nutzer*innen– etwa im Museumskontext oder im Theater – an die neue Technik heranzuführen.

Chancen und Risiken von VR und AR in Kulturinstitutionen

Im Kontext der Arbeit von Kultureinrichtungen kann der Einsatz von VR und AR sowohl Chancen bieten als auch Risiken bergen. So haben immersive Technologien etwa im Museumsraum das Potenzial, die Sichtbarkeit von Ausstellungen zu steigern, Besucher*innen neue sinnliche und erkenntnistheoretische Perspektiven zu eröffnen und Sammlungsobjekte mittels digitaler Informationen zu kontextualisieren. Darüber hinaus können Nutzer*innen mittels VR und AR erstmals mit historischen Objekten interagieren und Detailinformationen wahrnehmen, die ohne Technik nicht sichtbar wären – etwa Hintergrunddetails zu Ausstellungsstücken, die digital eingeblendet werden.

Gleichzeitig kann der beliebige und undurchdachte Einsatz von VR und AR jedoch auch den inhaltlichen Faden einer Ausstellung stören und Besucher*innen im Zweifelsfall überfordern. Insbesondere dann, wenn vorher nicht genau geklärt worden ist, warum immersive Technologien zum Einsatz kommen sollen und welchen Zweck sie innerhalb des Programms – über den reinen technologischen Aha-Effekt hinaus – überhaupt erfüllen sollen. Nicht zuletzt deshalb sollte schon frühzeitig geklärt werden, welche Rolle VR- und AR-Stationen als Addition zu den eigentlichen Exponaten einnehmen sollen.

Geht es darum, die realen Exponate sichtbarer zu machen? Soll das physische Format eher in den Hintergrund treten? Oder sollen die immersiven Technologien einen ganz eigenen Teil der Ausstellung bilden? All diese Fragen gilt es zu beantworten, um das Potenzial von VR und AR bestmöglich für die eigenen Zwecke auszuschöpfen. Bedacht werden sollte dabei in jedem Fall auch, dass immersive Technologien nicht nur einen positiven Neuheitswert, sondern aufgrund ihrer kurzen Geschichte innerhalb kultureller Institutionen teilweise auch noch einen gewissen Störfaktor mit sich bringen: So können sich Besucher*innen etwa durch das Tragen einer VR-Brille vom Rest des Publikums abgegrenzt fühlen oder gar körperlich auf die VR-Erfahrung reagieren, zum Beispiel mit Schwindelgefühlen.

Fallbeispiele

Im Rahmen der Veranstaltung wurden an neun Stationen VR- und AR-Projekte vorgestellt. Dies kam bei den Teilnehmer*innen zu 100% sehr gut an, da so ein praktischer Einblick in die Vielfältigkeit der technischen Möglichkeiten geboten wurde.

Vorgestellte VR / AR Projekte

mehr erfahren

Literatur / Artikel / Links

• Projekt museum4punkt0 mit Teilprojekten zu VR und AR
• Studie des Deutschen Auswandererhaus Bremerhaven zu Möglichkeiten und Grenzen musealer Vermittlung mit VR
• Beitrag von Musermeku „Virtual Reality im Museum: Wird VR-Technologie die Kunst revolutionieren?“
• Website von Pablo Dornhege: Parallelwelten – VR in künstlerischen und musealen Kontexten
• Beitrag von Fluter.de „VR-Experience Auschwitz: Die Banalisierung des Holocaust?“

Blogs und Podcasts

• Virtuelle Narrative Räume
• Storytelling in VR
• Plattform und Datenbank für VR Kunst
• Podcast zu den Potentialen von XR, Immersiven Storytelling…

Text: Kai Schnier