Apple-Patente für Gesten- und Blicksteuerung für Geräte

Ein neues Apple-Patent, das am Dienstag veröffentlicht wurde, legt nahe, dass das Unternehmen Fernseher und Mac-Displays entwickelt, die Sie mit Ihren Augen steuern können. Wenn die Blicksteuerung nicht Ihren Vorstellungen entspricht, können Sie einfach gestikulieren. Maus, Tastatur und sogar der Touchscreen würden zumeist irrelevant.

Das iPhone 7 Plus verfügt über zwei Kameraobjektive, die, obwohl bei der Präsentation nicht erwähnt, 3D-Tiefenmapping ermöglichen. Google hat mit Project Tango an dieser Technologie gearbeitet, sodass es für Apple sinnvoll ist, am Wettbewerb teilzunehmen. Während alle von der Realität des Headsets gehyped wurden, hat Tim Cook, CEO von Apple, ein- oder zweimal angedeutet, dass das Unternehmen A.R. Plänen gibt es eine andere Form von Augmented Reality im Block - und eine, die keine sperrige, tragbare Technologie erfordert.

Es ist fast wie es ist telekinetisch Technologie, die die Realität selbst verstärkt (oder verstärkt) und die Grenzen zwischen Technologie und der realen Welt verwischt. Das Patent fasst den aktuellen Stand der Dinge zusammen: „Wenn physische taktile Eingabegeräte wie Knöpfe, Rollen oder Touchscreens verwendet werden, aktiviert und deaktiviert ein Benutzer normalerweise die Steuerung einer Benutzeroberfläche durch Berühren und / oder Manipulieren des physischen Geräts.“ Aber damit Erfindungsgemäß kann der Benutzer auf eine Maus oder ein Trackpad, eine Tastatur und einen Touchscreen verzichten und stattdessen lediglich eine Geste oder einen Blick zur Steuerung des Computers ausführen.

Wenn zwei oder mehr Kameras zusammenarbeiten, können sie das menschliche Auge imitieren und somit ein 3D-Bild ausgeben. Die Software weiß dann, wo sich der Benutzer befindet, wie sein Skelett aussieht, und kann entsprechend reagieren.

Ausführungsformen der vorliegenden Erfindung beschreiben Zeigegesten zum Eingreifen interaktiver Gegenstände, die auf einer Anzeige dargestellt werden, die mit einem Computer gekoppelt ist, der eine Benutzeroberfläche mit gemischter Modalität ausführt, die eine dreidimensionale (3D) Erfassung durch einen 3D-Sensor der Bewegung oder Positionsänderung von einem oder einem Gerät umfasst mehr Körperteile, üblicherweise eine Hand oder ein Finger, des Benutzers.

Das Patent beschreibt verschiedene Gesten wie Point-Select, Point-Touch und Point-Hold, mit denen Benutzer Schnittstellen an einem Fernsehgerät oder einem Computerbildschirm steuern können.

Zum Beispiel kann der Benutzer eine Liste von interaktiven Elementen (z. B. Filme), die auf der Anzeige angezeigt werden, horizontal bewegen, indem er ein horizontales Bildlauffeld mit der Point-Touch-Geste bearbeitet. Mit der Point-Hold-Geste kann der Benutzer Kontextinformationen für ein auf der Anzeige angezeigtes interaktives Element anzeigen. Als Reaktion darauf, dass der Benutzer eine Point-Hold-Geste mit einem Symbol ausführt, das einen Film darstellt, kann der Computer ein Popup-Fenster mit Informationen wie einer Plotzusammenfassung, einer Überprüfung und Darstellern anzeigen.

Gemäß diesem Patent kann das System außerdem den Blick eines Benutzers erkennen und auf gerichtete Augenbewegungen reagieren. Hier ist es mit Apples eigenen Worten:

… Durch ein computergestütztes System mehrere interaktive Elemente auf einer mit dem Computer gekoppelten Anzeige darstellen, die von einer mit dem Computer gekoppelten Erfassungsvorrichtung eine Eingabe empfangen, die eine Blickrichtung eines Benutzers darstellt, einen Zielpunkt auf der Anzeige identifiziert, der auf der Anzeige basiert Blickrichtung, Verknüpfen des Zielpunktes mit einem ersten interaktiven Element, das auf der Anzeige erscheint, und ansprechend auf den Zielpunkt, Öffnen eines oder mehrerer zweiter interaktiver Elemente auf der Anzeige.

Wenn Gestikulationen das nicht für Sie abschneiden, könnte die Blicksteuerung Das System erkennt, wohin der Benutzer schaut, und kann daher ableiten, was der Benutzer tun möchte, "um dadurch die Notwendigkeit einer Maus und / oder einer Tastatur zu vermeiden", heißt es in dem Patent.

Etwas so unkompliziert und umständlich wie das Anpassen der Lautstärke Ihrer Lautsprecher würde zum Kinderspiel. Das Patent beschreibt sowohl die visuelle als auch die gestische Kontrolle der Lautsprecherlautstärke. Mit seinen Augen könnte der Benutzer "auf eine Oberseite eines an den Computer gekoppelten Lautsprechers" blicken, was dazu führen würde, dass der Computer "die Lautstärke des Lautsprechers anhebt" (wenn der Benutzer auf die Unterseite des Lautsprechers blickt, von Natürlich würde die Lautstärke abnehmen.) Mit Gesten kann der Benutzer auch die Lautsprecherlautstärke steuern. Der Benutzer zeigt mit einer Hand auf den Lautsprecher und gestikuliert mit der anderen Hand nach oben oder unten. „Wenn der Benutzer eine Point-Touch-Geste nach unten zeigt und auf den Lautsprecher zeigt, kann der Computer den Lautstärkepegel des Lautsprechers verringern“, heißt es in dem Patent.

Es ist eine andere Form von Augmented Reality und eine, die vielleicht früher Wellen schlagen wird als diese mysteriösen Magic Leap-Headsets. Leap Motion, ein anderes Unternehmen im Virtual-Reality-Spiel, hat selbst die Technologie zur Handaufzeichnung perfektioniert. Ein Apple-Streifzug im Feld könnte jedoch das Spiel verändern, vor allem in Kombination mit Eye-Tracking-Funktionen.

Stellen Sie sicher, dass Sie sich nicht fragen, was mit der Privatsphäre passiert, wenn all diese Technologie zum Mainstream wird. Glücklicherweise haben sich Cook und Apple für einen guten Ruf eingesetzt.