LightSpace und der interaktive Raum. Die Zukunft laut Microsoft

Bei Microsoft Research arbeitet man schon lange an Technologien zur Erkennung und Interaktion mit der Umwelt. Kinect ist das paradigmatische Beispiel, aber nicht das einzige. LightSpace ist ein weiteres Projekt auf diesem Gebiet der Redmonder Forschungsabteilung. Durch die Kombination von Elementen der Oberflächenerkennung mit Augmented Reality und dank Tiefenkameras und Projektoren macht LightSpace jede Oberfläche im Raum und sogar den freien Raum dazwischen interaktiv.

Das Ziel von LightSpace ist es, Interaktion in der alltäglichen Umgebung zu ermöglichen, indem verschiedene Elemente als Projektionsflächen verwendet werden.Das System verwendet Tische oder Wände, um Grafiken anzuzeigen, die es Benutzern ermöglichen, mit Händen und Gesten projizierte Inh alte zu manipulieren. Obwohl in Demos nur Tisch und Wand verwendet werden, kann LightSpace eine größere Anzahl von Oberflächen erkennen und als interaktives Display verwenden.

Interaktion mit jeder Oberfläche

Das System ermöglicht nicht nur die Erkennung mehrerer Hände, als wäre es ein Multi-Touchscreen, sondern fügt auch neue Interaktionen mit dem Körper hinzu, die Übergänge zwischen verschiedenen Oberflächen ermöglichen Beispielsweise können wir Inh alte von einem zum anderen verschieben, indem wir einfach eine Hand auf das betreffende Objekt legen und die Zieloberfläche berühren. Auf diese Weise simuliert LightSpace Inh alte, die durch unseren Körper von einem Teil des Raums zum anderen wandern.

Zusätzlich zum Verschieben des Inh alts von einer Oberfläche auf eine andere ermöglicht Ihnen das System, ihn daraus zu extrahieren und in Ihren Händen zu h alten, als wäre er ein physisches Objekt.Dazu projiziert es eine rote Kugel auf die Hand, die den jeweiligen Inh alt darstellt. Der Benutzer kann es auf diese Weise durch den Raum transportieren und sogar mit anderen Benutzern tauschen. Um es wieder auf eine Oberfläche zu bringen, bringen Sie es einfach näher daran, damit es übertragen wird und der Inh alt erneut darauf wiedergegeben wird.

Die vom System verwendete Tiefenerkennung erlaubt es auch, Darstellungen außerhalb der Oberflächen selbst zu erzeugen Also, wie in der Demo gezeigt, können wir Navigieren Sie durch die Optionen eines Menüs, indem Sie unsere Hände in die Luft heben oder senken. Das System erkennt die Höhe, in der es zwischen den verschiedenen Optionen variiert. Wie der Rest ist dies nur ein Beispiel dafür, was mit LightSpace erreicht werden könnte.

Wie funktioniert es

Um den Raum derart interaktiv zu gest alten, verwendet das System mehrere Tiefenkameras und ProjektorenDiese sind so kalibriert, dass sie die reale Position der Objekte und Oberflächen im Raum erkennen, sodass darauf Grafiken dargestellt werden können. Dazu erfasst jede der Kameras die Fundtiefe des jeweiligen Objekts und unterscheidet zwischen stabilen Objekten im Raum und anderen mobilen Objekten wie dem Nutzer selbst. Jedes Pixel wird in eine reale Koordinate umgewandelt.

LightSpace verwendet diese Daten, um ein 3D-Netz aus den Elementen des Raums zu erstellen und die Oberflächen zu erkennen, auf die der Inh alt projiziert werden kann. Das Modell des Raums wird verwendet, um die Interaktionen der Benutzer in der Umgebung zu erkennen Die bisher verwendeten Kameras ermöglichen es, die Bewegungen der Benutzer zu erkennen und ihre Konturen zu unterscheiden und die Position der Hände genau zu erkennen.

Das System interpretiert somit die Gesten des Benutzers, um jede der implementierten Aktionen auszuführen.Einige davon haben wir bereits gesehen, wie zum Beispiel das Arbeiten mit Inh alten auf beliebigen Oberflächen, das Übertragen von einem zum anderen oder das Transportieren im Raum selbst, als wäre es ein reales Objekt. Aber das System könnte andere Anweisungen implementieren und mehr Aktionen auf jeder Oberfläche ermöglichen.

Hier kann jeder seiner Fantasie freien Lauf lassen. Das Ziel ist es, jede Oberfläche in einen interaktiven Bildschirm zu verwandeln. Ohne zusätzliche Monitore oder Bewegungssensoren verwandelt LightSpace jeden Raum in einen neuen Arbeits- oder Spielbereich In etwas mehr Zukunftsfähiges.

In Xataka-Windows | Die Zukunft laut Microsoft Weitere Informationen | Microsoft Research