Gehen auf Mars mit Microsoft Hololens

Letzte Woche sah es für mich so aus, als würde ich auf dem Mars laufen. Ich verwendete das neue HoloLens von Microsoft (siehe Abbildung), das im Rahmen der Einführung von Windows 10 angekündigt wurde, und die Mars-Demo war eine der wenigen, die das Unternehmen der Presse erlaubte, eine Testversion des Headsets und der holographischen Erweiterungen zu verwenden das Betriebssystem.

Ich habe in den letzten Jahren eine Reihe von Headsets für virtuelle Realität und erweiterte Realität verwendet und viel Zeit mit Google Glass verbracht. In gewisser Weise fühlt sich HoloLens wie eine Erweiterung dessen an, was einige dieser Produkte zu tun versuchen. in anderen fühlt es sich ganz anders an.

"Willkommen bei Windows Holographic", sagte Projektleiter Alex Kipman (oben), als das Produkt vorgestellt wurde. Das Konzept werde zu eindringlicheren Spielweisen führen, zu neuen Möglichkeiten zu lernen, zusammenzuarbeiten und zu kreieren, sagte er.

Microsoft hat sich sehr bemüht, das Projekt nicht Virtual Reality oder Augmented Reality zu nennen, sondern das Konzept, dass es sich dabei um Hologramme handelt, ständig verwendet. Es unterscheidet sich ein wenig von den Hologrammen, die Sie in den Filmen sehen könnten - in der Fiktion benötigen Sie normalerweise kein spezielles Headset -, aber die angezeigten Bilder sind dreidimensional. Ich denke, der Name macht Sinn.

Kipman sprach über die vielfältigen Verwendungsmöglichkeiten von Hologrammen in der realen Welt. So sah ein Ingenieur Anweisungen in einer Überlagerung auf einem Objekt, das er zu bauen oder zu reparieren versuchte, ein Architekt, der durch ein Design ging, ein Chirurg, der ein Verfahren lernte Oder verwandeln Sie das Wohnzimmer einfach in eine surreale Spielumgebung.

Microsoft kündigte tatsächlich zwei Produkte an - eines ist eine Reihe von APIs, die sich auf das menschliche und holographische Verständnis konzentrieren und Windows Holographic genannt werden und Teil von Windows 10 sein werden, und das zweite ist eine Hardware mit dem Namen HoloLens. Microsoft möchte unbedingt, dass Entwickler und potenzielle andere Hardwaregerätehersteller die Anwendungen und Geräte entwickeln, mit denen dies zu einem echten Markt wird, und fordert Entwickler, die an Oculus Rift, Magic Leap und Google Glass von Facebook arbeiten, ausdrücklich auf, "Hologramme mit uns zu erstellen". Ein Problem ist natürlich, dass es viele Plattformen gibt. Mit der Ankündigung soll versucht werden, eine kritische Masse an Entwicklern für Windows Holographic zu gewinnen. Zumindest für VR scheint Oculus derzeit die größte Begeisterung zu haben.

HoloLens ist ein Set durchsichtiger holographischer Linsen mit Geräuschen und Sensoren. Es enthält die normalen CPU- und GPU-Komponenten sowie das, was das Unternehmen als dritte, holographische Prozessoreinheit (HPU) bezeichnet, die Gesten versteht und die Welt um uns herum räumlich abbildet. Das Gerät läuft ohne Kabel, während Terabytes an Informationen verarbeitet werden, sagte Kipman, aber das Unternehmen muss noch echte Hardwaredetails angeben.

Das Unternehmen führte eine Reihe interessanter Demos auf der Bühne durch, aber ich war mehr daran interessiert, es selbst auszuprobieren, und Microsoft hat in dem Labor, in dem HoloLens im Keller des Unternehmens erstellt wurde, vier Demo-Erlebnisse für die Presse erstellt Besucherzentrum.

Eines davon war eher eine Demonstration von HoloStudio durch Microsoft, einer Umgebung zum Erstellen von Hologrammen und optionalem 3D-Drucken (was normalerweise über einen 3D-Dienst erfolgt, da die Hologramme in der Regel mehrere Farben umfassen und aufwändiger sind als die meisten privaten 3D-Drucker klar kommen). Bei der Vorführung auf der Bühne wurde ein maßgeschneiderter Quad-Copter erstellt. Später zeigte uns eine kleinere Vorführung, wie man einen personalisierten USB-Stick mit dem Bild eines "Weltraum-Koalas" herstellt.

Die Umgebung sah aus wie ein interessantes Designstudio, in dem man ziemlich einfach anfangen kann, aber das hat tatsächlich einiges an Tiefe. Ich würde wahrscheinlich einige Zeit brauchen, um den Dreh raus zu bekommen, aber ich vermute, dass Leute, die Produkte wie 3D Studio Max von Autodesk oder eine ähnliche Software verwenden, das ziemlich einfach finden würden.

Für die anderen drei Demos haben wir Prototypversionen des HoloLens-Headsets aufgesetzt. Anstatt der relativ kompakten roten Einheiten, die auf der Bühne gezeigt wurden, fühlten sich diese wirklich wie technische Prototypen an - die Hardware, mit der das Headset betrieben wurde, befand sich in einer separaten Box, die Sie trugen, und beide waren an einen Computer gebunden. (Die fertige Hardware scheint beträchtlich größer als Google Glass zu sein, ist jedoch etwas kleiner als das Oculus Rift-Headset und funktioniert drahtlos. Sie ist nicht so elegant, wie Sie vielleicht möchten, sieht aber wie ein Konsumprodukt aus.) Das Headset scheint zu haben eine Reihe von Kameras und Sensoren an der Vorderseite und an den Seiten. Sie setzen es auf Ihren Kopf (über Ihre Brille, wenn Sie sie tragen), ziehen es fest, und dann scheint das Gerät ein Bild vor die Linsen im Gerät zu projizieren, während Sie dennoch die Außenwelt sehen.

Das erste davon war HoloBuilder, ein Programm, mit dem Sie Objekte in dem Raum um Sie herum erstellen, verschieben und zerstören können. Es fühlte sich wie Minecraft an, wie Sie kleine Objekte manipulieren, aber mit einigen wesentlichen Unterschieden. Sie konnten virtuelle Gegenstände auf einen Tisch in der physischen Welt stellen oder an eine Wand hängen, und es sah wirklich so aus, als wären die holografischen Bilder echte Objekte, die vor Ihnen saßen. In einigen Teilen der Demo sah es so aus, als könnte man Dinge über realen Objekten sehen. In anderen Fällen sah es so aus, als würdest du den Tisch durchschneiden und Dinge darunter sehen. Es schien ziemlich cool zu sein. Ich kann mir leicht eine zukünftige Version vorstellen, die Minecraft-Fans anspricht.

In einer weiteren Demo wurde gezeigt, wie Sie es mit einer Version von Skype for HoloLens verwenden können. In dieser Demo bestand die Aufgabe darin, einen Lichtschalter zu installieren, während jemand am anderen Ende des Gesprächs, der die normale Skype-Version auf einem Laptop verwendete, über den Vorgang sprach. In der HoloLens konnte ich die Person in einem Fenster sprechen sehen, das vor mir schwebte, als ich mich umsah oder an einen bestimmten Ort geheftet wurde. Im Gegenzug konnte er sehen, was ich durch die HoloLens sah. Also sah er die Werkzeuge, den Schalter und die Öffnung für den Lichtschalter. Das Visier hat Mikrofone und Lautsprecher, so dass die Konversation ziemlich normal schien. Die Person auf der anderen Seite des Gesprächs konnte Zeiger auf das Werkzeug zeichnen, das ich verwenden sollte, und Diagramme zeigen, wie ich den Schalter ausrichte und welche Drähte wohin führen. Als ich fertig war, schalteten sie den Strom wieder ein und der Lichtschalter funktionierte.

Ich bin mir nicht sicher, ob wir dies für solch einfache Operationen benötigen, aber Sie können sich leicht vorstellen, dass es in einer Vielzahl von industriellen Anwendungen eingesetzt wird, von der Montage bis zur Reparatur, wo Sie Anweisungen zum Freisprechen benötigen. Die Idee ist nicht neu: Ich habe ähnliche Ideen in einer Reihe von "intelligenten Brillen" gesehen, die für industrielle Benutzer entwickelt wurden, wie z. B. die Moverio-Brillen von Epson und die M-100-Brille von Vuzix. Augmented Reality in industriellen Anwendungen ist jedoch sehr sinnvoll, und die Möglichkeit, Zeichnungen direkt über dem, was Sie sehen, anzeigen zu lassen, scheint ein guter Schritt nach vorn zu sein.

Die interessanteste Demo war jedoch die Marsoberfläche mit einer Anwendung, die mit dem Jet Propulsion Laboratory (JPL) der NASA anhand von Daten und Bildern entwickelt wurde, die vom Curiosity Rover auf der Oberfläche des Planeten gesammelt wurden. Ziel ist es, mit HoloLens den Wissenschaftlern zu helfen, den Rover zu kontrollieren und die Marslandschaft besser zu verstehen. (JPL hat zuvor gezeigt, wie man die Welt in einer Demo mit Oculus Rift erkundet, obwohl ich das noch nicht ausprobiert habe.)

Als erster Schritt, nachdem ich die Brille aufgesetzt hatte, konnte ich erleben, wie ich durch den Dingo Gap-Bereich des Mars lief. Was mich beeindruckte, war, dass es mir wirklich so vorkam, als würde ich auf dem Dingo Gap gehen Planetenoberfläche. Hier wurde der dreidimensionale Aspekt der Hologramme wirklich lebendig.

Im zweiten Szenario können Sie den als John Klein bekannten Bereich erkunden, in dem Sie sich und sogar unter Objekten umsehen können, um ein Gefühl für die Dimensionalität des Bereichs zu bekommen. An einem Punkt konnte man durch das Visier auf einen Bildschirm schauen, der die ursprünglichen Schwarzweißbilder zeigte, aber diese sahen sehr statisch aus; es war eine ganz andere erfahrung, die eigentliche landschaft in farbe und in 3d zu sehen. Es war, als ob die reale Welt in die künstliche Welt eingebrochen wäre, in der ich ging.

Der letzte Teil der Mars-Demo beinhaltete die Erkundung eines Wegpunktes namens "The Kimberley" in der Nähe des Berges. Sharp, wo ich mit jemandem von JPL zusammenarbeiten konnte, der auch die HoloLens-Technologie einsetzte. Er erschien auf dem Bildschirm als goldfarbener Avatar, der ein bisschen aussah wie ein Science-Fiction-Alien aus den 1950er Jahren, und konnte mit mir über die Landschaft und das, was wir sahen, sprechen. Ich konnte Fahnen auf einen Abschnitt der Landschaft setzen, damit der Rover seine MastCam verwenden konnte, die detailliertere Bilder aufnehmen konnte, und einige Steine ​​für die ChemCam des Rovers auswählen, die einen Laser sendet, um einen Abschnitt von Steinen zu verbrennen, um seine Chemikalie zu bestimmen Komposition.

Dies war nur eine Demo, aber Sie können sich leicht vorstellen, wie ein Team von NASA-Wissenschaftlern die Technologie nutzen könnte, um die Marsoberfläche besser zu verstehen und den Rover zu steuern, um ihn optimal zu nutzen. Und natürlich können Sie sich einige sehr eindringliche Erlebnisse vorstellen.

Insgesamt war HoloLens eine der beeindruckendsten Demonstrationen, die ich je gesehen habe. Andere Augmented-Reality-Headsets waren sehr interessant, und ich sehe ihr Potenzial sicherlich in industriellen Anwendungen, und ich habe in Oculus Rift ein paar sehr fesselnde Spiele gesehen. Aber der in HoloLens eingebettete holografische Effekt - die Idee, dass alles in 3D angezeigt wird und Sie sich tatsächlich in der Welt bewegen können - schien etwas sehr Neues zu sein. Wir werden warten müssen, um das endgültige Visier und die echten Anwendungen zu testen, um zu sehen, ob dieses Konzept wirklich für einen Mainstream-Markt bereit ist, aber es ist auf jeden Fall beeindruckend.