Apple Patents Gesture i Gaze Controls dla urządzeń

Nowy patent Apple opublikowany we wtorek sugeruje, że firma rozwija telewizory i wyświetlacze Mac, które można kontrolować oczami. Jeśli kontrola wzrokowa nie pasuje do Twoich upodobań, możesz po prostu gestykulować. Mysz, klawiatura, a nawet ekran dotykowy stałyby się w większości bez znaczenia.

IPhone 7 Plus ma dwie soczewki aparatu, które, choć nie wspomniane podczas prezentacji, umożliwiają trójwymiarowe mapowanie głębi. Google pracuje nad tą technologią za pomocą Project Tango, więc Apple musi konkurować ze sobą. Podczas gdy wszyscy są podekscytowani rozszerzoną rzeczywistością zestawu słuchawkowego, a prezes firmy Apple, Tim Cook, zasugerował raz lub dwa, że ​​firma ma A.R. plany, istnieje inna forma rozszerzonej rzeczywistości w bloku - i to taka, która nie wymaga obszernej, poręcznej technologii.

To prawie tak telekinetyczny technologia, która sama zwiększa (lub poprawia) rzeczywistość, zacierając granice między technologią a światem rzeczywistym. Patent podsumowuje obecny stan rzeczy: „Podczas korzystania z fizycznych dotykowych urządzeń wejściowych, takich jak przyciski, rolki lub ekrany dotykowe, użytkownik zazwyczaj włącza i wyłącza kontrolę interfejsu użytkownika, dotykając i / lub manipulując urządzeniem fizycznym”. Wynalazek, użytkownik może zrezygnować z myszy lub gładzika, klawiatury i ekranu dotykowego, a zamiast tego jedynie gestem lub spojrzeniem sterować komputerem.

Dwie lub więcej kamer, pracując razem, mogą naśladować ludzkie oczy, a zatem mogą wyświetlać obraz 3D. Oprogramowanie wie wtedy, gdzie jest użytkownik, jak wygląda jego szkielet i może odpowiednio zareagować.

Przykłady wykonania niniejszego wynalazku opisują gesty wskazujące do angażowania interaktywnych elementów prezentowanych na wyświetlaczu sprzężonym z komputerem wykonującym mieszany interfejs użytkownika modalności, który obejmuje trójwymiarowe (3D) wykrywanie, przez czujnik 3D, ruchu lub zmiany położenia jednego lub więcej części ciała, zazwyczaj dłoni lub palca użytkownika.

Patent opisuje różne gesty, takie jak Point-Select, Point-Touch i Point-Hold, które umożliwiają użytkownikom sterowanie interfejsami na ekranie telewizora lub komputera.

Na przykład, użytkownik może przewijać w poziomie listę interaktywnych elementów (np. Filmów) prezentowanych na wyświetlaczu, manipulując poziomym polem przewijania za pomocą gestu Punkt-dotyk. Gest Point-Hold umożliwia użytkownikowi wyświetlenie informacji kontekstowych dla interaktywnego elementu prezentowanego na wyświetlaczu. Na przykład, w odpowiedzi na wykonanie przez użytkownika gestu „Przytrzymaj punkt” na ikonie przedstawiającej film, komputer może wyświetlić wyskakujące okienko zawierające informacje, takie jak podsumowanie fabuły, recenzja i członkowie obsady.

Ponadto, zgodnie z tym patentem, system może wykryć wzrok użytkownika, umożliwiając mu reakcję na ukierunkowane ruchy oczu. Oto w słowach Apple:

… Prezentując, za pomocą skomputeryzowanego systemu, wiele interaktywnych elementów na wyświetlaczu połączonym z komputerem, odbierającym, z urządzenia czujnikowego sprzężonego z komputerem, wejście reprezentujące kierunek spojrzenia użytkownika, identyfikujące punkt docelowy na wyświetlaczu w oparciu o kierunek spojrzenia, powiązanie punktu docelowego z pierwszym interaktywnym elementem pojawiającym się na wyświetlaczu i reagującym na punkt docelowy, otwarcie jednego lub więcej drugich interaktywnych elementów na wyświetlaczu.

Ponownie, jeśli gestykulacja nie jest dla ciebie odpowiednia, kontrola wzrokowa może po prostu. System wykrywa, gdzie użytkownik się szuka, i dlatego może wywnioskować, co użytkownik chce zrobić, „eliminując w ten sposób potrzebę myszy i / lub klawiatury”, stwierdza patent.

Coś tak prostego, ale kłopotliwego, ponieważ regulacja głośności głośników stałaby się prosta. Patent opisuje wizualną i gestykulacyjną kontrolę głośności głośnika. Użytkownik może spojrzeć „w górę głośnika sprzężonego z komputerem”, co doprowadziłoby komputer do „podniesienia poziomu głośności głośnika” (jeśli użytkownik patrzy na spód głośnika, z Oczywiście głośność zmniejszyłaby się.) Za pomocą gestów użytkownik mógł również kontrolować głośność głośnika. Użytkownik wskazywał jedną ręką na głośnik, a drugą ręką gestem w górę lub w dół. „Podobnie, jeśli użytkownik wykona gest dotykowy w dół, wskazując w kierunku głośnika, komputer może obniżyć poziom głośności głośnika”, stwierdza patent.

To kolejna forma rozszerzonej rzeczywistości, która może zacząć tworzyć fale wcześniej niż, powiedzmy, tajemnicze zestawy słuchawkowe Magic Leap. Leap Motion, inna firma w grze wirtualnej rzeczywistości, sama doskonali technologię śledzenia ręki. Ale wypad Apple w pole może zmienić grę, zwłaszcza w połączeniu z możliwościami śledzenia oczu.

Po prostu upewnij się, że nie zastanawiasz się, co dzieje się z prywatnością, gdy cała ta technologia staje się głównym nurtem. Na szczęście Cook i Apple starają się utrzymać dobrą reputację.