Räumliche Gestenerkennung und Natural User Interfaces mit Microsoft Kinect

Abstract

Der vorliegende Beitrag stellt Ansätze zur Realisierung von gestenbasierten User- Interfaces und Anwendungen auf Basis des 3D Sensors Microsoft Kinect in Verbindung mit Frameworks wie OpenNI und NITE vor. Nach einer kurzen Einführung in die genutzte Hard- und Software wird eine prototypische Applikation und die dieser zu Grunde liegenden Interaktionskonzepte skizziert. Hierbei kommen neben ein- und mehrhändigen Gesten insbesondere auch Konzepte wie virtuelle Cursor und Echtzeit Motion Capturing zur Analyse der Körperhaltung — lokal als auch im räumlichen Kontext — zum Einsatz. Im dritten Teil werden die vorgestellten Interaktionskonzepte schließlich diskutiert und auf Herausforderungen und Probleme — wie die Unterscheidung zwischen intentionalen und nicht-intentionalen Gesten — eingegangen.