Sterowanie wzrokiem w urządzeniach mobilnych

Wyobraźcie sobie, że zamiast poruszać palcem po ekranie waszego smartfona, po prostu na niego patrzycie, a on wie że jedno mrugnięcie oczami oznacza wykonaj połączenie, a dwa włącz aparat i zrób zdjęcie. W wyniku prac badawczych prowadzonych w Uniwersytetu Georgii w USA i niemieckiego Instytutu Informatyki im. Maxa Plancka nad nawigacją po interfejsie smartfona lub tabletu za pomocą wzroku, obecnie jest to już możliwe dzięki wbudowanemu aparatowi i okulografii – technice umożliwiającej rejestrację aktywności wzrokowej poprzez śledzenie ruchu gałek ocznych. Celem jest stworzenie oprogramowania służącego do sterowania smartfonem wzrokiem.

Algorytm wykorzystuje przednią kamerę urządzenia do rozpoznawania gdzie w danej chwili spogląda użytkownik. Na obecnym etapie prac osiągnięto dokładność śledzenia rzędu jednego centymetra. Możliwy zakres błędu wydaje się mały, to jednak zbyt mała obecna dokładność rozwiązania nie pozwala wprowadzić go do powszechnego użytku. Aby system stał się niezawodny potrzeba co najmniej dziesięciokrotnie większej rozdzielczości. Ta powinna zostać poprawiona dzięki zbieraniu kolejnych danym. Pracę rozpoczęto od stworzenia aplikacji przeznaczonej na iPhone’a, która zbiera informacje o tym jak ludzie patrzą na telefon w różnych okolicznościach. Wzrok jest rejestrowany frontową kamerą – w tym czasie ekran urządzenia wyświetla pulsujące kropki w różnych miejscach.

Dane uzyskane z pierwszej aplikacji posłużyły do stworzenia następnej, przechwytującej twarz użytkownika. Ten algorytm rozpoznaje pozycję i kierunek, w którym zwrócona została głowa i oczy oraz stara się zauważyć, wzrok użytkownika jest skupiony na ekranie. Aplikacja ma obecnie w bazie dane około 1500 osób. Do zredukowania błędu śledzenia do 0,5 cm potrzeba 10 tysięcy zeskanowanych twarzy, zatem jeszcze sporo czasu minie zanim algorytm będzie w pełni użyteczny.

Gdy to jednak nastąpi śledzenie wzroku stanie się ogólnodostępne i użyteczne. Do czego można to jednak wykorzystać? Bezdotykowe sterowanie nawigacją w samochodzie, zastosowania medyczne (śledzenie ruchu gałek ocznych jest wykorzystywane przy stawianiu diagnozy schizofrenii i wstrząśnienia mózgu), czy zabawa w mobilnych grach – przykłądy można mnożyć.