Αναγνώριση και Μοντελοποίηση Νοηματικής Γλώσσας με την Χρήση Οπτικής Επεξεργασίας και Στατιστικών Μεθόδων

Θεοδωράκης, Σταύρος

dc.contributor.author	Θεοδωράκης, Σταύρος	el
dc.date.accessioned	2015-01-23T08:38:14Z
dc.date.available	2015-01-23T08:38:14Z
dc.date.issued	2015-01-23
dc.identifier.uri	https://dspace.lib.ntua.gr/xmlui/handle/123456789/40094
dc.identifier.uri	http://dx.doi.org/10.26240/heal.ntua.1508
dc.rights	Default License
dc.subject	Αναγνώριση Νοηματικής Γλώσσας, Αναγνώριση Χειρονομιών από πολυτροπικά δεδομένα, Δεδομενοκεντικές και γλωσσικές υπομονάδες, Στατιστική μοντελοποίηση, Κρυφά Μρκοβιανά Μοντέλα, Οπτική επεξεργασία	el
dc.subject	Αναγνώριση Νοηματικής Γλώσσας, Αναγνώριση Χειρονομιών από πολυτροπικά δεδομένα, Δεδομενοκεντικές και γλωσσικές υπομονάδες, Στατιστική μοντελοποίηση, Κρυφά Μρκοβιανά Μοντέλα, Οπτική επεξεργασία.	el
dc.title	Αναγνώριση και Μοντελοποίηση Νοηματικής Γλώσσας με την Χρήση Οπτικής Επεξεργασίας και Στατιστικών Μεθόδων	el
dc.contributor.department	Σημάτων, Ελέγχου, και Ρομποτικής	el
heal.type	doctoralThesis
heal.classification	Μηχανική Μάθηση, Όραση Υπολογιστών	el
heal.classification	Μηχανική Μάθηση, Όραση Υπολογιστών	el
heal.language	el
heal.access	free
heal.recordProvider	ntua	el
heal.publicationDate	2014-06-17
heal.abstract	Η διδακτορική αυτή έρευνα επικεντρώνεται στην αυτόματη επεξεργασία βίντεο νοηματικής γλώσσας, στην εξαγωγή χαρακτηριστικών, στη μοντελοποίηση και τελικά στην αναγνώριση νοηματικής γλώσσας συνδυάζοντας τα ερευνητικά πεδία της Αναγνώρισης Προτύπων και ́Ορασης Υπολογιστών. Σε αυτά τα πλαίσια αναπτύσσονται μέθοδοι για την οπτική επεξεργασία βίντεο νοηματικής γλώσσας και την εξαγωγή χαρακτηριστικών που σχετίζονται με τους αρθρωτές όπως τα χέρια και το κεφάλι. Επιπλέον αναπτύσσονται στατιστικές μέθοδοι για τη μοντελοποίηση και αναγνώριση της νοηματικής γλώσσας. Πιο συγκεκριμένα αναπτύσσονται μέθοδοι για τη μοντελοποίηση της νοηματικής γλώσσας κάνοντας χρήση δεδομενοκεντρικών υπομονάδων. Οι δεδομενοκεντρικές υπομονάδες αποτελούν τα δομικά στοιχεία που απαρτίζουν τα νοήματα και κατασκευάζονται αυτόματα καθοδηγούμενες από τα δεδομένα εκπαίδευσης. Στόχος τους είναι να μοντελοποιήσουν τα διαφορετικά είδη κίνησης, θέσης και χειρομορφής των χεριών του νοηματιστή κατά την άρθρωση ενός νοήματος. Επιπλέον η μοντελοποίηση των παραπάνω υπομονάδων εμπλουτίζεται από την αξιοποίηση γλωσσικής-φωνητικής πληροφορίας. Ακόμα, λόγω των πολλαπλών παράλληλων ροών πληροφορίας (π.χ. θέση, κίνηση των χεριών, είδος χειρομορφής κ.τ.λ) αναπτύσσονται μέθοδοι για την σύμμειξη των διαφορετικών καναλιών πληροφορίας με απώτερο σκοπό την αναγνώριση της νοηματικής γλώσσας. Οι μέθοδοι που προτείνονται συνδυάζονται σε ένα συνολικό σύστημα επεξεργασίας, εκπαίδευσης και αναγνώρισης και αξιολογούνται σε προτυποποιημένα σώματα βίντεο νοηματικών γλωσσών. Συγκρίσεις με σύγχρονες μεθόδους από τη βιβλιογραφία οδηγούν σε βελτιώσεις σε σχέση με βασικές υπάρχουσες μεθόδους. Οι επιδράσεις της έρευνας αυτής και των εφαρμογών της αναμένεται να έχουν διεπιστημονικό χαρακτήρα, όπως για παράδειγμα στη γλωσσολογία και ανάλυση των νοηματικών γλωσσών καθώς και την αυτόματη επεξεργασία και επισημείωση μεγάλων σωμάτων βίντεο νοηματικών γλωσσών. Τέλος, αναπτύχθηκε ένα σύστημα αναγνώρισης χειρονομιών από πολυτροπικά δεδομένα, τα οποία περιλαμβάνουν οπτικές αλλά και ακουστικές ροές πληροφορίας. Πιο συγκεκριμένα αναπτύχθηκαν αλγόριθμοι για τη μοντελοποίηση και σύμμειξη των πολυτροπικών ροών πληροφορίας, με απώτερο στόχο την ανίχνευση και αναγνώριση πολυτροπικών χειρονομιών.	el
heal.advisorName	Μαραγκός, Πέτρος	el
heal.committeeMemberName	Καραγιάννης, Γεώργιος	el
heal.committeeMemberName	Κόλλιας, Στέφανος	el
heal.committeeMemberName	Σταφυλοπάτης, Ανδρέας	el
heal.committeeMemberName	Τζαφέστας, Κωνσταντίνος	el
heal.committeeMemberName	Ποταμιάνος, Γεράσιμος	el
heal.committeeMemberName	Αργυρός, Αντώνιος	el
heal.academicPublisher	Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστών	el
heal.academicPublisherID	ntua
heal.numberOfPages	148
heal.fullTextAvailability	true