Ανάπτυξη ενός qualifier input control με τη χρήση του Microsoft Kinect Sensor.

Abstract

Η παρούσα εργασία ασχολείται με το θέμα της αλληλεπίδρασης ανθρώπου - υπολογιστή και παρουσιάζει το σχεδιασμό, την ανάπτυξη και την υλοποίηση μιας φυσικής διεπαφής πολυτροπικού τύπου. Η ανάπτυξη των νέων τεχνικών αλληλεπίδρασης τα τελευταία χρόνια καλούν για μια αλλαγή στην ανάπτυξη και τη μεθοδολογία σχεδιασμού των διεπαφών με νέες και καινοτόμες τεχνικές. Ο κύριος σκοπός του λογισμικού που αναπτύχθηκε ήταν η εξοικείωση του χρήστη με αυτά τα νέα είδη των αλληλεπιδράσεων που εξελίσσονται με ταχείς ρυθμούς. Παράλληλα ένας δεύτερος στόχος της παρούσας εργασίας ήταν η βελτίωση και η υλοποίηση ενός πολυτροπικού συστήματος που το όνομά του είναι MIDAS.Αυτό το σύστημα αναφέρεται στη φυσική αλληλεπίδραση μεταξύ ενός χρήστη - πρόσωπο και μιας μηχανής υπολογιστή. ΤοMicrosoft Kinect, ένας πολύ-αισθητήρας της Microsoft, χρησιμοποιήθηκε ως συσκευή εισόδου του εν λόγω συστήματος το οποίο έχει αναπτυχθεί σε γλώσσα προγραμματισμού C #. Επίσης, μελετήθηκε το Microsoft Kinect SDK ούτως ώστε να αποκομιστούν όλα τα πλεονεκτήματα των τριών βασικών λειτουργιών του Kinect, Speech Recognition- Gesture Recognition- Skeleton Tracking.

This thesis addresses the issue of human - computer interaction and presents the design, development and implementation of a multimodal natural user interface system. The development of new interaction techniques in recent years call for a change in the development and design methodology of interfaces to new and innovative techniques. The main purpose of this project was to familiarize the user in these new types of interactions which are evolving rapidly. Beside that a second purpose of this project was the improvement of a multimodal natural user interface which name is MIDAS. This system refers to the natural interaction between a user - person and a computer machine. Microsoft Kinect, the Microsoft’s multi-sensor, was used as input device of this system which has been developed in programming language C#. Also, Microsoft SDK for Kinect was studied to take all the advantages of the three basic Kinect functions , Speech-Recognition – Gesture Recognition –Skeleton Tracking.