Μέθοδοι εξαγωγής και κωδικοποίησης χαρακτηριστικών για την αναγνώριση ανθρώπινων δράσεων και χειρονομιών με εφαρμογές στην επικοινωνία ανθρώπου-μηχανής

Κάρδαρης, Νικόλαος; Kardaris, Nikolaos

dc.contributor.author	Κάρδαρης, Νικόλαος	el
dc.contributor.author	Kardaris, Nikolaos	en
dc.date.accessioned	2016-03-30T11:46:11Z
dc.date.available	2016-03-30T11:46:11Z
dc.date.issued	2016-03-30
dc.identifier.uri	https://dspace.lib.ntua.gr/xmlui/handle/123456789/42285
dc.identifier.uri	http://dx.doi.org/10.26240/heal.ntua.11709
dc.rights	Default License
dc.subject	Αναγνώριση δράσεων	el
dc.subject	Αναγνώριση χειρονομιών	el
dc.subject	Αναπαράσταση βίντεο	el
dc.title	Μέθοδοι εξαγωγής και κωδικοποίησης χαρακτηριστικών για την αναγνώριση ανθρώπινων δράσεων και χειρονομιών με εφαρμογές στην επικοινωνία ανθρώπου-μηχανής	el
heal.type	bachelorThesis
heal.classification	Όραση υπολογιστών	el
heal.classification	Αναγνώριση προτύπων	el
heal.language	el
heal.access	free
heal.recordProvider	ntua	el
heal.publicationDate	2015-10-30
heal.abstract	Η παρούσα διπλωματική εργασία πραγματεύεται το πρόβλημα της αυτόματης ταξινόμησης και αναγνώρισης ανθρώπινων δράσεων και χειρονομιών σε βίντεο καθώς την εφαρμογή τους κυρίως στην αλληλεπίδραση ανθρώπου-μηχανής. Αντιμετωπίζουμε την αναγνώριση δράσεων και χειρονομιών υπό κοινό πρίσμα, θεωρώντας τις τελευταίες ως ειδικές περιπτώσεις των πρώτων. Για την εξαγωγή χαρακτηριστικών βασιζόμαστε σε ευρέως χρησιμοποιούμενα χαρακτηριστικά: τα χωρο-χρονικά σημεία ενδιαφέροντος και τις πυκνές τροχιές. Εν συνεχεία πειραματιζόμαστε εκτενώς με μια σειρά αναπαραστάσεων βίντεο, όπως οι Bag-of-Words, χωρο-χρονικές πυραμίδες, VLAD και διάνυσμα Fisher. Για την αξιολόγηση των διαφορετικών μεθόδων πραγματοποιούμε τα πειράματά μας σε μια σειρά βάσεων δεδομένων, οι οποίες είναι διαδεδομένες στη διεθνή βιβλιογραφία. Επίσης, αξιολογούμε την επίδοση των χρησιμοποιούμενων μεθόδων στην ερευνητική βάση χειρονομιών MOBOT, η οποία περιέχει ένα ευρύ σύνολο χειρονομιών που εκτελούνται από ηλικιωμένους και ως εκ τούτου παρουσιάζει ιδιαίτερες προκλήσεις. Τέλος, περιγράφουμε την εφαρμογή των παραπάνω στη δημιουργία ενός διαδραστικού περιβάλλοντος επικοινωνίας ανθρώπου-ρομπότ μέσω οπτικής αναγνώρισης χειρονομιών. Για το σκοπό αυτό αναπτύξαμε ένα σύστημα εντοπισμού των των χειρονομιών, το οποίο μας επιτρέπει την αναγνώρισή τους σε συνεχή ροή βίντεο.	el
heal.abstract	The aim of this thesis is to deal with the problem of automatic human action and gesture recognition, as well as its application in human-computer interaction. We examine action and gesture recognition from a common point of view, with the latter considered as a special case of the former. We employ ``state-of-the-art" visual feature extraction methods, such as spatiotemporal interest points, and dense trajectories. We further experiment with widely used video representation methods, such as Bag-of-Words, spatio-temporal pyramids, VLAD and Fisher vector. Different methods are evaluated on popular action databases which constitute standard benchmarks in the literature. We also evaluate our system on the challenging MOBOT dataset, which contains various gestures performed by elderly people. Last but not least, we describe the basic steps towards the development of an on-line gesture recognition system for the purpose of human-robot interaction. We developed a gesture activity detection system which allows gesture recognition from a continuous video steam, by localizing gestures in time.	en
heal.advisorName	Μαραγκός, Πέτρος	el
heal.committeeMemberName	Μαραγκός, Πέτρος	el
heal.committeeMemberName	Παπαβασιλόπουλος, Γεώργιος	el
heal.committeeMemberName	Ποταμιάνος, Γεράσιμος	el
heal.academicPublisher	Εθνικό Μετσόβιο Πολυτεχνείο. Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστών. Τομέας Σημάτων, Ελέγχου και Ρομποτικής. Εργαστήριο Όρασης Υπολογιστών, Επικοινωνίας Λόγου και Επεξεργασίας Σημάτων	el
heal.academicPublisherID	ntua
heal.numberOfPages	113 σ.
heal.fullTextAvailability	true