Touch & Point – Gestenbasierte Interaktion in Virtual Earth

Im Rahmen der Entwicklung einer Gestenbeschreibungssprache für Multitouch und der Untersuchung einer allgemeinen Formalisierung von Gesten habe ich mich in meinem Großen Beleg mit dem Thema „Kombination gestenbasierter Interaktion multimodaler Anwendungen“ beschäftigt. Ergebnis der Arbeit ist ein Prototyp, der es ermöglicht in einer digitalen Karte (Virtual Earth) sowohl mit Multitouch- als auch mit einfachen berührungslosen Gesten zu navigieren. Als Trackingsysteme werden hierbei der Microsoft Surface und eine darüber positionierte Wiimote als Infrarotkamera eingesetzt. Ein selbstgebauter Handschuh mit vier IR-LEDs dient der abstrakten Modellierung der Hand und der sicheren Erkennung berührungsloser Gesten.