Raport mniejszości – historia pewnego interfejsu

Krótka historia interfejsu opartego na gestach dłoni (ang. gestures), znanego szerokiej publiczności głównie z filmu Raport Mniejszości.

Zaczęło się od zegarka

Idea bezprzewodowego manipulatora nie jest nowa. Od jakiegoś czasu rozmaite urządzenia umożliwiają sterowanie za pomocą technologii radiowych. Większość z nich ma własny interfejs fizyczny – najczęściej naciśnięcie odpowiedniego przycisku powoduje wykonanie jakiejś funkcji przewidzianej przez programistów systemu. Od dawna jednak specjaliści od HCI (ang. Human-Computer Interaction) pracowali nad „bardziej bezpośrednią” formą manipulacji – przy użyciu gestów wykonywanech rękoma. Oto kilka wybranych projektów.

2001 – Jun Rekimoto z Computer Science Laboratory firmy Sony konstruuje zegarek z wbudowanymi czujnikami ruchu. Zegarek rozpoznaje m.in. gesty otwierania i zamykania dłoni, co umożliwia właścicielowi poruszanie kursorem oraz klikanie. Rozwiązanie stanowi przełom w stosunku do dotychczasowych – przenośnych manipulatorów w postaci myszek i klawiatur. Wynalazek, zaprezentowany podczas piątej edycji Wereable Computing Symposium, potrafi rozpoznać różne kształty dłoni.

newscientist.com – Wristwatch gives remote control of computer

…było trochę science-fiction

2002 – John Underkoffler z MIT proponuje twórcom filmu Raport mniejszości wykorzystanie interfejsu opartego na gestach. Tymczasem sam Underkoffler już jako niezależny konsultant zostaje zatrudniony przez firmę z przemysłu obronnego do wcielenia pomysłu w życie. Stworzony system wykorzystuje specjalne rękawice, ekran projekcyjny oraz kamery.

…i sterowanie nosem…

2004 – Dmitry Gorodnichy – Perceptual Vision project leader z Instytutu technologii informacyjnych kanadyjskiego National Research Council wykorzystuje Perceptual Vision Technology do kontrolowania aplikacji poprzez ruchy głową. Dwie kamery internetowe podłączone do komputera rozpoznają specyficzne zmiany położenia nosa w trzech wymiarach, co umożliwia interakcję z systemem. Autorowi przyświeca idea budowania inteligentnych, bezprzewodowych Interfejsów percepcyjnych, służących wspieraniu konwencjonalnych urządzeń – myszki, joysticka, track ball. Nouse – tak brzmi nazwa urządzenie (ang. Nose as Mouse – nos jako mysz) obsługuje podwójne kliknięcie, wywoływane mruganiem oka, może także użyć zdefiniowanej przez użytkownika ekspresji twarzy do wykonania określonej funkcji.

Na stronie dostępne są wersje demonstracyjne aplikacji, które można pobrać i przetestować.

Institute for Information Technology

…rzucanie komputerem…

2005 – nowy model laptopów Apple Powerbook zostaje wyposażony w czujnik ruchu, zabezpieczający głowicę dysku twardego w momencie upadku. Amit Singh, inżynier z Kalifornii, stworzył aplikacje do manipulowania systemem przy wykorzystaniu poruszania komputerem. Na stronie dostępne pliki programu.
kernelthread.com

a dalej już poszło z górki

2005:

• Microsoft buduje własny prototyp interfejsu (Microsoft touch light)
• Zaczynają powstawać produkty komercyjne – Laser Active Tracking, Go Monkey gesture based interface