Mit den Live-Action-Kamerasystemen von Facebook können Sie an virtuellen Orten Schritte unternehmen





Virtual Reality hat ein Imageproblem.

Während viele Kameras sphärische Aufnahmen von realen Szenen aufnehmen, die Sie sich dann in VR ansehen können (siehe 10 Breakthrough Technologies 2017: The 360-Degree Selfie ), erfassen die meisten von ihnen nicht auch Tiefendaten. Das bedeutet, wenn Sie ein High-End-Virtual-Reality-Headset wie das Oculus Rift tragen und sich ein sphärisches Video von beispielsweise dem Eiffelturm ansehen (und nicht eine computergerenderte Version davon), bewegt sich das Bild mit Sie, wenn Sie sich ducken, springen oder von einer Seite zur anderen treten. Das ist im besten Fall ärgerlich und im schlimmsten Fall Übelkeit verursachend.

Facebook, das seit dem Kauf des Headset-Herstellers Oculus im Jahr 2014 einer der größten Befürworter der virtuellen Realität ist, will dies mit zwei neuen sphärischen Kamerasystemen beheben, die am Mittwoch vorgestellt wurden. Beide drehen Live-Action-Aufnahmen, mit denen Sie sich in der virtuellen Realität in etwa anderthalb Metern Raum bewegen können. Das Unternehmen plant, sie noch in diesem Jahr in Produktion zu bringen.



Die Kamerasysteme mit den Namen X24 und X6 (die Zahlen beziehen sich auf die Anzahl der einzelnen Kameras in jedem Modell) könnten virtuelle Erlebnisse wie das Ansehen von Konzerten, den Besuch berühmter Sehenswürdigkeiten oder das Erkunden von Museen viel ansprechender machen, egal ob Sie dies alleine oder mit tun Eine andere Person. Sie benötigen jedoch immer noch ein Headset, das Ihre Position im Raum und die Drehung Ihres Kopfes verfolgen kann, um das Filmmaterial wirklich zu nutzen.

Was wir mit VR im Allgemeinen versuchen, ist, die Menschen in die Immersionskurve zu bringen, sagte der Chief Technology Officer von Facebook Mike Schröpfer . Die Endvision ist es, Sie so nah wie möglich an das Gefühl zu bringen, dass Sie tatsächlich dort sind.

Eine Handvoll Unternehmen hat bereits High-End-Kameras für die Erfassung von Live-Action-Virtual-Reality gebaut, wie z Ozo von Nokia Kamera, Googles Jump und Lytro’s Immerge (siehe Lytro baut eine Kamera, um virtuelle Live-Action-Realität aufzunehmen). Aber nur ein paar (Lytro ist einer von ihnen) geben vor, Filmmaterial zu filmen und Tiefeninformationen aufzuzeichnen, wie Facebook es mit X24 und X6 tut, und noch kein Unternehmen hat ein solches Gerät populär gemacht.



Während X24 und X6 für Profis gedacht sind, sagte Schroepfer, dass die Technologie schließlich auch zu Verbraucherprodukten führen wird.

Die neuen Kamerasysteme, die auf der jährlichen F8-Entwicklerkonferenz von Facebook vorgestellt wurden, kommen ein Jahr, nachdem das soziale Netzwerk sein UFO-ähnliches ausgerollt hat Surround 360 , das über 17 Kameras verfügte und gestochen scharfe, sphärische 3D-Bilder aufnehmen sollte. Facebook hat den Surround 360 nicht verkauft, aber die Technologie über GitHub jedem zur Verfügung gestellt, der einen mit handelsüblichen Teilen herstellen wollte.

Der Surround 360 enthielt jedoch nicht die Art von 3-D-Informationen, die der X24 und der X6 aufzeichnen werden. Mit ihren Linsenpositionen und der dazugehörigen Software können die neuen Systeme rekonstruieren, wie die Welt aussehen sollte, während Sie sich bewegen, sagte Schroepfer.



In Demos von Rohmaterial, das mit dem X24 aufgenommen wurde und das ich mir letzte Woche über ein Oculus Rift-Headset angesehen habe, sah ich eine sphärische Szene einer üppigen Regenwaldausstellung vom Aussichtspunkt eines Laufstegs nahe der Spitze der Ausstellung aus, an der Schmetterlinge vorbeischwirrten sowie ein Tunnel in einem Aquarium mit herumschwimmenden Fischen. Da das Filmmaterial Tiefeninformationen enthielt und das Headset Bewegungen mit sechs Freiheitsgraden verfolgen kann, konnte ich mich in den Szenen bewegen und die Bäume im Regenwald, die Touristen auf den Bänken im Tunnel und die über und um uns herumwandernden Fische beobachten.

Ein Großteil des Filmmaterials sah gestochen scharf aus, und es war sehr cool, sich in einer lebensechten Szene frei bewegen zu können. An der Technik muss aber noch gearbeitet werden, oder zumindest etwas bearbeitet werden, um das Bildmaterial zu bereinigen: Das Laub im Regenwald sah zum Beispiel streifig aus, und auch an anderer Stelle bemerkte ich ein Schimmern.

Brian Cabral , Facebooks technischer Leiter und Leiter des Teams, das die Geräte hergestellt hat, sagte, dass die physische Anordnung der Kameras es ermöglicht, jedes Pixel in einer bestimmten Szene aus vielen verschiedenen Blickwinkeln zu erfassen, und dann wird Mathematik verwendet, um seine Tiefe abzuschätzen.



Sobald Sie wissen, wo es sich in der Szene befindet, können Sie sich bewegen, sagte er und fügte hinzu, dass das Schimmern bereinigt wird, wenn die Systeme in Produktion gehen.

Cabral sagte, Facebook werde die Technologie an mehrere noch nicht genannte Partner lizenzieren, damit sie Kameras herstellen können.

Die Idee sei, mehrere Modelle für das Wachstum des Ökosystems zu haben, sagte er.

verbergen