Die Felswand von Bangudae über dem Daegokcheon, als Panorama

Fallstudie · Mixed Reality · Erster Platz

Die Petroglyphen von Bangudae per Mixed Reality in den Innenraum holen

Die Petroglyphen von Bangudae und Cheonjeon-ri säumen eine Felswand am Bach Daegokcheon in Ulsan. Bangudae XR ist eine Mixed-Reality-App für Meta Quest 3, die das Kulturerbe des Bachs, von den Felsritzungen bis zu Dinosaurierfährten, in jeden Innenraum bringt.

Erster Platz3. Korea Heritage Digital Contents Contest, 2024

Aus dem Ausstellungsfilm: die Felsbildtafel, aus Fotos in 3D rekonstruiert.

Rolle

Design und Entwicklung, mit Prof. KwanMyung Kim, Fachbereich Design der UNIST

Plattform

Meta Quest 3 mit Passthrough-Mixed-Reality, entwickelt in Unreal Engine 5

Erfassung

Feldfotografie, Photogrammetrie, 360°-Panoramen, KI-gestütztes Gaussian Splatting mit Luma AI

Auszeichnung

Erster Platz, 3. Korea Heritage Digital Contents Contest (2024)

Veranstalter

Korea Heritage Service und Korea National University of Heritage

Kategorie

Entwicklung digitaler Kulturerbe-Inhalte mit XR

Vor Ort betrachten Besucher die Felsritzungen vom anderen Ufer aus, oft durch ein Fernrohr. Das Kulturerbe ist sichtbar, aber physisch unerreichbar. Das Projekt nutzt Mixed Reality, um es in greifbare Nähe zu holen.

Felddokumentation am Daegokcheon

Die Feldarbeit dokumentierte die Landschaft, die Felsoberflächen und die Art, wie Besucher die Stätte heute betrachten.

Der Daegokcheon schlängelt sich zwischen grünen Hügeln und Felsvorsprüngen — Das Tal des Daegokcheon.

Ein Fernrohr an einem Zaun, dessen Bildschirm eine vergrößerte Felsoberfläche zeigt, im Hintergrund die Felswand — Ein Fernrohr, auf die Felswand am anderen Ufer gerichtet.

Eine Reproduktion in Schwarz und Creme, die jede eingeritzte Figur der Felstafel verzeichnet — Eine Reproduktion, die jede eingeritzte Figur der Tafel verzeichnet.

3D-Erfassung mit Photogrammetrie und Gaussian Splatting

Photogrammetrie verwandelte Felsoberflächen in texturierte Meshes; KI-gestütztes Gaussian Splatting erfasste Gebäude und größere Bauwerke.

Eine photogrammetrische Rekonstruktion einer Felswand in drei Ansichten: Ausgangsfoto, texturiertes Modell und untexturiertes Mesh — Eine mit Photogrammetrie rekonstruierte Felsoberfläche: Ausgangsfoto, texturiertes Modell und Mesh.

Eine zweite Rekonstruktion einer Felsbildtafel mit hervorgehobenen Figuren, texturiert und als Mesh — Eine Felsbildtafel mit hervorgehobenen Figuren, als Textur und als Mesh.

Eine Gaussian-Splatting-Rekonstruktion einer geschwungenen Steinmauer — Ein Steinbauwerk, mit Gaussian Splatting in Luma AI rekonstruiert.

Passthrough-Mixed-Reality für Kulturerbe im Innenraum

Passthrough hält Nutzer in ihrer physischen Umgebung verankert, während die gescannten Artefakte vor ihnen erscheinen.

Aufgenommen im Passthrough-Modus auf Meta Quest 3: die gescannten Artefakte, durchblättert mit Zurück, Start und Weiter.

Räumliche Verankerung durch Passthrough

Passthrough bewahrt das Bewusstsein für den realen Raum, während die Artefakte vor den Nutzern angezeigt werden.

Chronologische Abfolge

Fünf gescannte Artefakte erscheinen in chronologischer Reihenfolge, von Dinosaurierfährten aus dem Mesozoikum bis zur Joseon-Dynastie, jedes mit Titel, Epoche und Beschreibung.

Minimale Navigation

Die Navigation beschränkt sich auf Zurück, Start und Weiter. So bleibt das Erlebnis stabil, leicht erlernbar und leicht zu testen.

Hauptmenü

Ein Hauptmenü für vier Inhaltstypen

3D-Artefakte, 3D-Umgebungen, Panoramen und eine Fotogalerie sind über ein Menü erreichbar, das über dem Raum erscheint. Das Layout ist erweiterbar, sodass neue Bereiche und Scans hinzukommen können, sobald sie verfügbar sind.

Eine Gaussian-Splatting-Rekonstruktion eines traditionellen koreanischen Tors mit Mauer

Designentscheidungen

Bewusst minimale Interaktion

Die Oberfläche beschränkt sich auf Zurück, Start und Weiter, damit das Erlebnis stabil und leicht zu testen bleibt. Panoramen und eine Fotogalerie lassen künftige Besucher die Stätte schon vor dem Besuch erkunden.

Ergebnis

Erster Platz, 3. Korea Heritage Digital Contents Contest

Das Projekt gewann 2024 den ersten Platz beim 3. Korea Heritage Digital Contents Contest, ausgerichtet vom Korea Heritage Service und der Korea National University of Heritage. Die Beiträge wurden in einer schriftlichen Vorrunde und einer Abschlusspräsentation vor Ort bewertet.

Danyal präsentiert an einem Rednerpult auf der Bühne vor einer großen Leinwand — Präsentation in der Finalrunde.

Nächste FallstudieAR in LebensgrößeAR in Lebensgröße für iPhone und Apple Vision Pro, evaluiert auf den eigenen iPhones der Teilnehmenden zu Hause.