Кстати, интересный факт - во всех футуристических фильмах XX века было все что угодно, кроме мобильных телефонов!

А понимание действий руками - нет ничего невозможного. Например проецирование изображения на плоскость с инфракрасным излючением (или что сложнее), которое работает по принципу той же клавиатуры...