Αυτόματη εκτίμηση Engagement κατά την αλληλεπίδραση παιδιών με ρομπότ με τη χρήση πόζας

Anagnostopoulou, Dafni; Αναγνωστοπούλου, Δάφνη

dc.contributor.author	Anagnostopoulou, Dafni	en
dc.contributor.author	Αναγνωστοπούλου, Δάφνη	el
dc.date.accessioned	2021-07-12T06:42:51Z
dc.date.available	2021-07-12T06:42:51Z
dc.identifier.uri	https://dspace.lib.ntua.gr/xmlui/handle/123456789/53602
dc.identifier.uri	http://dx.doi.org/10.26240/heal.ntua.21300
dc.rights	Αναφορά Δημιουργού - Μη Εμπορική Χρήση - Παρόμοια Διανομή 3.0 Ελλάδα	*
dc.rights.uri	http://creativecommons.org/licenses/by-nc-sa/3.0/gr/	*
dc.subject	Engagement	en
dc.subject	Αλληλεπίδραση Παιδιού-Ρομπότ	el
dc.subject	Κοινωνικά ρομπότ	el
dc.subject	Πόζα	el
dc.subject	Βαθιά συνελικτικά δίκτυα	el
dc.subject	Engagement estimation	en
dc.subject	Child robot interaction	en
dc.subject	Social robots	en
dc.subject	Deep convolutional networks	en
dc.subject	OpenPose	en
dc.title	Αυτόματη εκτίμηση Engagement κατά την αλληλεπίδραση παιδιών με ρομπότ με τη χρήση πόζας	el
dc.title	Engagement estimation during child robot interaction using pose	en
heal.type	bachelorThesis
heal.classification	Computer Vision	en
heal.classification	Όραση Υπολογιστών	el
heal.language	el
heal.access	free
heal.recordProvider	ntua	el
heal.publicationDate	2020-12
heal.abstract	Σκοπός αυτής της διπλωματικής εργασίας είναι η αυτόματη εκτίμηση του engagementκατά την αλληλεπίδραση παιδιών με ρομπότ με την αξιοποίηση της πόζας του ανθρώπινου σώματος. Η εκτίμηση του engagement αποτελεί απαραίτητη προϋπόθεση για τηνοικοδόμηση φυσικής αλληλεπίδρασης μεταξύ παιδιού και ρομπότ. Ειδικά στην περίπτωση παιδιών με διαταραχές αυτιστικού φάσματος, η δυνατότητα των ρομπότ να εκτιμούν αυτόματα το engagement των παιδιών τους επιτρέπει να προσαρμόζουν τη συμπεριφοράτους ανάλογα με τους εκάστοτε εκπαιδευτικούς και θεραπευτικούς σκοπούς. Πραγματοποιούμε εκτίμηση του engagement με τη χρήση της πόζας τόσο για παιδιά με διαταραχές αυτιστικού φάσματος όσο και για τυπικώς αναπτυσσόμενα παιδιά. Δουλέψαμε με αρκετές διαφορετικές βαθιές αρχιτεκτονικές και καταλήξαμε σε συνελικτικές αρχιτεκτονικέςπου υπερτερούν σε σχέση με προηγούμενες προτεινόμενες μεθόδους, είτε χρησιμοποιούν τρισδιάστατες είτε δισδιάστατες συντεταγμένες των σημείων του σκελετού των παιδιών. Ακόμη, για να αξιολογήσουμε τη δυνατότητα γενίκευσης των μοντέλων μας, τα έχουμε εφαρμόσει σε διαφορετικά σύνολα δεδομένων με διαφορετικές καταστάσεις και συμμετέχοντες κατά τις αλληλεπιδράσεις. Τα μοντέλα μας επιτυγχάνουν σημαντικά αποτελέσματαστην εκτίμηση του engagementτων παιδιών σε ποικιλία συνθηκών, καταστάσεων και αλληλεπιδράσεων.	el
heal.abstract	In this work we estimate children engagement during Child Robot Interaction using pose data. Estimating the engagement of children is an essential prerequisite for constructing natural Child-Robot Interaction. Especially in the case of children with Autism Spectrum Disorder, monitoring the engagement of the other party allows robots to adjust their actions according to the educational and therapeutic goals in hand. We delve into engagement estimation using pose data for both children with autism spectrum disorders and typically developing children. We have been working with several different deep neural network architectures and have concluded to the ones that outperform previous methods when they use either 3D or 2D coordinates of pose keypoints and explore their performance under variable conditions, in different databases depicting ASD and TD children interacting with robots or humans. Moreover, in order to evaluate the generalization of our models, we test them on different data sets with different situations and participants during the interaction. Our resulting models achieve important success in engagement estimation for children in a variety of conditions, situations and interactions.	en
heal.advisorName	Maragos, Petros	en
heal.advisorName	Μαραγκός, Πέτρος	el
heal.committeeMemberName	Ποταμιάνος, Γεράσιμος	el
heal.committeeMemberName	Τζαφέστας, Κωνσταντίνος	el
heal.academicPublisher	Εθνικό Μετσόβιο Πολυτεχνείο. Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστών	el
heal.academicPublisherID	ntua
heal.numberOfPages	106 σ.	el
heal.fullTextAvailability	false