Mixed Reality

Natürlich zwischen den Welten wandeln

| Redakteur: Juliana Pfeiffer

Mit der Mixed-Reality-Lösung vom Fraunhofer HHI lässt sich eine simulierte Welt in Echtzeit und in hoher Qualität mit der echten Welt verbinden.
Bildergalerie: 1 Bild
Mit der Mixed-Reality-Lösung vom Fraunhofer HHI lässt sich eine simulierte Welt in Echtzeit und in hoher Qualität mit der echten Welt verbinden. (Bild: Fraunhofer Heinrich-Hertz-Institut)

Das Fraunhofer Heinrich-Hertz-Institut HHI hat eine X-Reality-Technologie entwickelt, die es Nutzern von Virtual Reality (VR) ermöglicht, natürlicher und in Echtzeit zwischen realen und virtuellen Welten miteinander zu interagieren. Diese Technologie stellt das Institut auf der diesjährigen Cebit am Stand E78 in Halle 27 vor.

Mixed Reality-Anwendungen eröffen überall wo Zusammenarbeit auch über Distanzen hinweg nötig ist, neue Möglichkeiten – etwa im Bereich Remote Assistance. Muss ein Monteur vor Ort etwas reparieren, kann sich zum Beispiel in Zukunft sein Kollege im Büro über eine VR-Brille ein virtuelles Bild von der Situation in 3D verschaffen und sogar virtuell und berührungslos in die Szenerie eingreifen, indem er dem Monteur etwa die richtigen Bauteile oder Handgriffe zeigt. "Die von uns dafür entwickelte Lösung kann eine simulierte Welt in Echtzeit und hoher Qualität mit der echten Welt verbinden und neue Blickwinkel oder Kollaborationen eröffnen", erklärt Paul Chojecki, Projektleiter am Fraunhofer HHI. "Die körperliche Interaktion ohne störende Controller ist natürlicher und bequemer. Die Lösung lässt sich flexibler etwa an die Körpergröße des Nutzers anpassen und erhöht die Immersion. Zugleich kann sie Symptome der Bewegungskrankheit mindern, die häufig durch VR-Szenarien aufkommen."

Hochaufgelöste 3D-Objekt- und Körpererfassung für Mixed Reality Interaktionen

Das Verfahren basiert im Wesentlichen auf zwei Technologien: In der echten Welt erfassen acht Kameras, jeweils vier Paare, die Szene von allen Seiten und erzeugen mit bis zu 30 Hertz Tiefenkarten davon. Zudem werden Gesten und dynamische Bewegungen erkannt. Diese Daten werden dann durch Algorithmen zusammengefasst, codiert und in Echtzeit mit den dazugehörigen 3D-Texturen an die VR-Station übertragen.

Im virtuellen Szenario hingegen nimmt eine weitere 3D-Kamera den VR-Nutzer auf. Dank der Fraunhofer HHI-Algorithmen zur 3D-Körpererfassung und Gesteninterpretation kann dieser ohne störende Controller oder Marker natürlich in der VR-Szene interagieren. Er wird dort sozusagen als beweglicher Ganzkörper-Avatar repräsentiert und sieht seinen eigenen Körper und seine Gestik im virtuellen Raum. "Erst die Kombination der beiden Technologien ermöglicht eine einzigartige Lösung für neue Mixed Reality Interaktions- und Kollaborationsszenarien", so Chojecki.

Einsatz von speziellen Bildverarbeitungsalgorithmen

Das Feedback aus der virtuellen Welt wird in der realen Szene durch eine Projektion dargestellt. Für diese projizierte Augmentierung kommen spezielle Bildverarbeitungsalgorithmen ebenfalls aus der Fraunhofer-HHI-Schmiede zum Einsatz. Diese sorgen dafür, dass die Hinweise und Bedienelemente optisch korrekt dargestellt sind, auch wenn die Flächen, auf die projiziert wird, sich bewegen oder geneigt werden.

Die Anwendungsfelder der X-Reality-Lösung sind vielseitig: Neben Remote Assistance lässt sich das Verfahren im Rapid Prototyping, bei der Mensch-Roboter-Interaktion und der Telekommunikation einsetzen oder in Telepresence- sowie Gaming-Sessions. So können zwei räumlich getrennte Personen etwa ein Brettspiel miteinander spielen.

Am Fraunhofer-Stand auf der CEBIT können Besucher sich an einem 3D-Puzzle probieren und sich Hilfe aus der virtuellen Welt holen. In der Demo wird dem VR-Nutzer das reale Objekt live in die VR-Umgebung projiziert und erläutert. Er kann dann virtuell darauf reagieren und diese Reaktionen in die reale Situation zurückspiegeln. (jup)

Kommentare werden geladen....

Kommentar zu diesem Artikel abgeben

Der Kommentar wird durch einen Redakteur geprüft und in Kürze freigeschaltet.

Anonym mitdiskutieren oder einloggen Anmelden

Avatar
Zur Wahrung unserer Interessen speichern wir zusätzlich zu den o.g. Informationen die IP-Adresse. Dies dient ausschließlich dem Zweck, dass Sie als Urheber des Kommentars identifiziert werden können. Rechtliche Grundlage ist die Wahrung berechtigter Interessen gem. Art 6 Abs 1 lit. f) DSGVO.
  1. Avatar
    Avatar
    Bearbeitet von am
    Bearbeitet von am
    1. Avatar
      Avatar
      Bearbeitet von am
      Bearbeitet von am

Kommentare werden geladen....

Kommentar melden

Melden Sie diesen Kommentar, wenn dieser nicht den Richtlinien entspricht.

Kommentar Freigeben

Der untenstehende Text wird an den Kommentator gesendet, falls dieser eine Email-hinterlegt hat.

Freigabe entfernen

Der untenstehende Text wird an den Kommentator gesendet, falls dieser eine Email-hinterlegt hat.

copyright

Dieser Beitrag ist urheberrechtlich geschützt. Sie wollen ihn für Ihre Zwecke verwenden? Infos finden Sie unter www.mycontentfactory.de (ID: 45347705 / Entwurf)