Wie Tele-Immersion Videoanrufe durch 3D-Präsenz in Echtzeit ersetzt

5

Das Holodeck war nicht nur ein cooles Versatzstück in Star Trek. Es war eine Blaupause. Die Fans sahen zu, wie die Enterprise-Crew einen Raum betrat, in dem sich Hologramme solide, greifbar und echt anfühlten. Heute bauen Ingenieure endlich die Infrastruktur auf, um diese Science-Fiction-Fantasie greifbare Realität werden zu lassen. Wir bewegen uns in Richtung eines Kommunikationsnetzwerks, das es Ihnen und Ihren Freunden ermöglicht, in einem gemeinsamen simulierten Raum zu interagieren, unabhängig davon, ob Sie sich im Nebenraum oder Tausende von Kilometern voneinander entfernt befinden.

Die Kernkomponenten dieser Tele-Immersion -Technologie sind bereits online. Es ist die akademische und industrielle Antwort auf das Holodeck. Videokonferenzen haben bereits bewiesen, dass wir ohne physische Nähe umfangreiche Daten in Echtzeit austauschen können. Tele-Immersion greift dieses Konzept auf und sprengt die Grenzen von Flachbildschirmen. Es entsteht eine zentrale, simulierte Umgebung, in der sich alle virtuell versammeln. Niemand verlässt seinen Schreibtisch.

Stellen Sie sich vor, dass sich Mitarbeiter in Los Angeles, New York, Tokio und Paris in diesem neuen Raum treffen. Sie werden Kollegen die Hand schütteln, die nur als High-Fidelity-Projektionen existieren.

Jenseits des Flachbildschirms: Warum herkömmliche Videokonferenzen scheitern

Im Büro der Zukunft wird man keine Nummer mehr wählen. Sie werden Ihr System befehlen. „Computer, ruf Joe in London an.“ Plötzlich flackert Ihre Bürowand. Joe sitzt dir gegenüber. Auf seiner Seite spiegelt sich die Erfahrung wider. Das ist das Versprechen der Tele-Immersion: entfernte Menschen in einen einzigen, gemeinsamen räumlichen Kontext zu bringen. Geschäftsreisen werden obsolet.

Aktuelle Videokonferenzlösungen sind kaputt. Wir alle haben die Verzögerung ertragen. Das Video ruckelt. Der Ton ist nicht synchronisiert. Noch wichtiger ist, dass die Ansicht statisch ist. Wenn Sie aufstehen und das enge Sichtfeld der Webcam verlassen, verschwinden Sie aus dem Gespräch. Du bist ein verpixelter Kopf auf einem Stock.

Tele-Immersion behebt dieses Problem. Sie können das Sichtfeld der Kamera nicht verlassen, da die Kamera den gesamten Raum erfasst. Sie können sich im Büro Ihres Kollegen umsehen, indem Sie Ihre Perspektive auf dem Display ändern. Es funktioniert wie ein Fenster in ihre physische Realität, nicht wie ein flaches Porträt.

Der Motor hinter dem Hologramm

Die Erstellung dieser Umgebungen erfordert eine Rechenleistung, die die eines durchschnittlichen Heim-PCs in den Schatten stellt. Der Prozess ist eine dreistufige Schleife, die in Millisekunden abläuft:

  1. Erkennung: Das System erkennt die Anwesenheit von Personen und Objekten im physischen Raum.
  2. Tracking: Es kartiert ihre Bewegungen im 3D-Raum.
  3. Projektion: Die Daten werden für den Remote-Benutzer an eine stereoimmersive Oberfläche gesendet.

Das ist nicht nur theoretisch. Im Mai 2000 erreichten Forscher der University of North Carolina (UNC), der University of Pennsylvania und Advanced Networks and Services im Rahmen der National Tele-Immersion Initiative (NTII) einen wichtigen Meilenstein. Ein Benutzer am UNC in Chapel Hill sah lebensechte, dreidimensionale Bilder von Kollegen in Philadelphia und New York. Die Latenz war niedrig genug, dass sich die Interaktion unmittelbar anfühlte.

Tele-Immersion vs. Virtual Reality: Was ist der Unterschied?

Menschen verwechseln diese Technologien oft. Sie sind nicht gleich. Virtual Reality (VR) versetzt Sie in eine vollständig computergenerierte 3D-Welt. Sie können durch digitale Wälder wandern. Sie können virtuelle Schwerter abholen. Tele-Immersion ist in diesem Stadium anders. Es erstellt eine 3D-Ansicht der realen Welt. Sie sehen Ihren tatsächlichen Kollegen in 3D gerendert, können jedoch derzeit nicht mit der Raumphysik interagieren oder die Szene verändern.

Der nächste Schritt besteht darin, diese Felder zusammenzuführen. Stellen Sie sich eine VR-Umgebung vor, in der Sie Objekte manipulieren können, überlagert mit echten tele-immersiven Teilnehmern.

Anwendungen aus der Praxis

Der Nutzen geht weit über den Sitzungssaal hinaus. Denken Sie über Gaming nach. Stellen Sie sich eine Welt ohne Joysticks vor. Du bist mitten im Spiel. Du kämpfst gegen Monster. Sie erzielen Touchdowns. Ihre Körperbewegungen steuern die Aktion direkt.

Auch das Reisen ändert sich. In den Ferien fliegen Sie nicht zu Ihrer Familie. Sie rufen sie in einen gemeinsamen holografischen Raum. Letztendlich könnte haptisches Feedback eine körperliche Berührungsempfindung ermöglichen. Auch hochkarätige Berufe können davon profitieren. Ärzte können in simulierten Operationen mit Remote-Experten trainieren. Soldaten können Kampfszenarien in fotorealistischen Umgebungen proben, ohne den Stützpunkt zu verlassen.

Holografische Displays

Die Hardware hinter frühen tele-immersiven Systemen fühlt sich weniger wie Unterhaltungselektronik an, sondern eher wie ein Laborexperiment. Benutzer sitzen nicht nur vor einem Bildschirm. Sie schnallen sich eine Spezialbrille und ein Head-Tracking-Gerät an. Dieses Setup überwacht, wo Sie hinschauen, und ermöglicht dem System, das 3D-Bild in Echtzeit anzupassen.

Auf der anderen Seite der Verbindung ist der Prozess ebenso technisch. Sieben Standard-Videokameras verfolgen die projizierte Person. Zwei zusätzliche Kameras erfassen die tatsächlichen Lichtmuster im Raum. Diese Lichter helfen bei der Berechnung präziser Entfernungen und stellen sicher, dass die Tiefe auf Ihrem Bildschirm der Realität entspricht. Den Kopf nach rechts bewegen? Das Bild verschiebt sich genau so, als ob Sie in diesem Raum stünden.

Die Mechanik der polarisierten Tiefe

Der Bildschirm teilt und polarisiert das Bild. Ihr linkes Auge sieht eine Version. Dein rechtes Auge sieht ein anderes. Die Brille kombiniert diese Signale. Ihr Gehirn fügt sie zu einem einzigen 3D-Bild zusammen. Es handelt sich um das gleiche Prinzip wie bei einer polarisierten 3D-Filmbrille der alten Schule, wird jedoch auf Live-Präsenz aus der Ferne angewendet.

Erste Tests, wie der bei UNC im Mai, zeigten erhebliche Mängel. Die Erfahrung ist alles andere als nahtlos. Die projizierten Szenen werden nur dreimal pro Sekunde aktualisiert. Diese niedrige Bildrate führt zu einem ruckelnden Bild. Es bricht die Illusion. Wenn die Rate 10 Bilder pro Sekunde erreichen würde, wäre das Ergebnis anders. Sie würden durch ein Fenster auf eine andere Person schauen, nicht auf eine Diashow ihres Gesichts.

Infrastrukturengpässe und zukünftige Lösungen

Die Schaffung einer echten holografischen Umgebung erfordert enorme Rechenleistung. Wissenschaftler treiben verschiedene Technologien voran, um diese Probleme zu lösen.

  • Internet2 soll die aktuelle Internet-Infrastruktur ersetzen. Es bietet Geschwindigkeiten, die 1.000-mal schneller sind als das heutige Breitband. Diese Bandbreite ist für die Übertragung der riesigen Datenströme, die durch Teleimmersion erzeugt werden, nicht verhandelbar.
  • Stereo-immersive Displays müssen weiterentwickelt werden, um kristallklare Ansichten der übertragenen Szenen zu präsentieren. Die aktuelle Technologie hat Probleme mit der Klarheit.
  • Haptische Sensoren zielen darauf ab, Benutzern das Berühren von Projektionen zu ermöglichen. Das Ziel ist ein taktiles Feedback, das reale Objekte nachahmt.
  • Desktop-Supercomputer werden benötigt, um die Billionen von Berechnungen für holografische Umgebungen durchzuführen. Alternativ könnte ein verteiltes Netzwerk von Computern diese Verarbeitungslast teilen.

Vom Arbeitsweg zum Küchentisch

Tele-Immersion droht die Grenze zwischen physischer Präsenz und digitaler Verbindung zu verwischen. Es verspricht, das ultimative Remote-Arbeitstool zu sein. Der Pendelverkehr zur Hauptverkehrszeit könnte völlig verschwinden. Anstatt zu fahren, projizieren Sie sich in den Konferenzraum.

Reisen wird zum Alltagsgegenstand. Müssen Sie an einer Besprechung teilnehmen? Tele-Immersion bringt Sie dorthin. Müssen Sie zum Abendessen zu Hause sein? Sie können in die Küche Ihrer Familie projizieren. Die Technologie steckt noch in den Kinderschuhen. Die Möglichkeiten sind noch weit offen.

Tele-Immersion wird die Grenzen zwischen realen und computergenerierten Bildern verwischen.

Für diejenigen, die die Entwicklung dieser Systeme verfolgen, bieten mehrere Ressourcen tiefergehende Einblicke. Verwandte Artikel behandeln holographisches Gedächtnis, erweiterte Realität und die Mechanismen der Teleportation. Spezifische Forschungszentren wie Tele-Immersion Research der Brown University und die National Tele-Immersion Initiative bieten technische Erkenntnisse. Das NSF Science and Technology Center for Graphics and Visualization erforscht ebenfalls die zugrunde liegende Wissenschaft.