Αναγνώριση συναισθήματος στην αλληλεπίδραση ανθρώπου-ρομπότ με την χρήση του NAO

Abstract

Στην παρούσα διπλωματική εργασία μελετήθηκε η δυνατότητα σύνδεσης του ανθρωποειδούς ρομπότ NAO με ήδη υπάρχων νευρωνικό δίκτυο. Ο τελικός στόχος ήταν η αναγνώριση των έξι βασικών συναισθημάτων σε ανθρώπους: χαρά, φόβος, λύπη, έκπληξη, αηδία και θυμός, όπως επίσης και η ουδετερότητα, με σκοπό να χρησιμοποιηθεί σε όλων των ειδών εφαρμογές, για άτομα που χρήζουν βοήθεια, για μαθητές ή για ψυχαγωγία. Εκτός από την χρήση του NAO, η μεθοδολογία που ακολουθήθηκε χρησιμοποίησε τεχνολογίες όπως sockets, νευρωνικά δίκτυα και τα διαθέσιμα modules του NAO, προκειμένου να κατασκευαστεί μία αρχιτεκτονική τύπου client-server που θα επιτρέψει αποστολή δεδομένων από και προς το ρομπότ. Το τελικό πρόγραμμα που κατασκευάστηκε περιλαμβάνει συζήτηση με τον άνθρωπο, λήψη της φωτογραφίας του και ανάλυση του συναισθήματός του με χρήση του DeepFace API. Τέλος, για την λήψη δεδομένων υπό κανονικές συνθήκες και μετέπειτα αξιολόγηση της αποτελεσματικότητας της εργασίας, πραγματοποιήθηκε παράδειγμα εφαρμογής του λογισμικού σε ένα φεστιβάλ. Συγκεκριμένα, επιχειρήθηκε η αναγνώριση των συναισθημάτων των παρευρισκόμενων μετά από την αλληλεπίδρασή τους με το ρομπότ με ικανοποιητικά αποτελέσματα.