Έξυπνο γάντι με δυνατότητα εκμάθησης κινήσεων και φωνητικών εντολών καθώς και αποστολής δεδομένων μέσω bluetooth

Κώτσαινας, Παναγιώτης

Smart glove with the ability to learn movements and voice commands, as well as transmit data via Bluetooth

Διπλωματική εργασία

Author

Κώτσαινας, Παναγιώτης

Date

2023-07

Advisor

Drosos, Christos

ΔΙΠΛΩΜΑΤΙΚΗ Εργασία - Κώτσαινας Παναγιώτης-es.pdf (3.768Mb)

Keywords

Arduino ; Τεχνητή νοημοσύνη ; Μηχανική μάθηση ; Artificial intelligence ; Machine learning

Abstract

Η παρούσα διπλωματική εργασία εστιάζει στη δημιουργία ενός έξυπνου γαντιού με δυνατότητες αναγνώρισης κινήσεων και φωνητικών εντολών, με σκοπό τη βελτίωση της επικοινωνίας και της αυτονομίας των ατόμων με οπτικές και κινητικές δυσκολίες. Για να επιτευχθεί ο σκοπός χρησιμοποιούνται διάφοροι αισθητήρες όπως επιταχυνσιόμετρο, μικρόφωνο, οπτικοί αισθητήρες και περιβαλλοντικοί αισθητήρες, καθώς και τεχνικές μηχανικής μάθησης (Machine Learning) και της τεχνητής νοημοσύνης (Artificial Intelligence) για εκμάθηση κινήσεων και φωνητικών εντολών. Το γάντι επικοινωνεί μέσω Bluetooth και προβάλλει τα δεδομένα σε μια οθόνη με γραφική απεικόνιση. Τα αποτελέσματα παρέχουν προηγμένες λειτουργίες για την κατανόηση των συνθηκών περιβάλλοντος και την επικοινωνία με το περιβάλλον. Μελλοντικές βελτιώσεις περιλαμβάνουν την ανάπτυξη περισσότερων εφαρμογών και λειτουργιών για ευκολότερη προσαρμογή στις ανάγκες των χρηστών με οπτικές και κινητικές δυσκολίες.

Abstract

The purpose of this thesis is to develop a smart glove with motion recognition and voice command capabilities. These functionalities will be achieved using sensors such as accelerometers, microphones, light sensors, color recognition sensors, and temperature sensors. The main tools employed for this research will be Machine Learning and Artificial Intelligence, used to learn and interpret hand gestures and voice commands. The application of this smart glove primarily targets individuals with mobility difficulties. The glove will transmit data via Bluetooth and display it on a graphical interface. Additionally, the glove features LED indicators that allow users to adjust the color settings. It can be utilized for color recognition either through visual display or voice output. Users can train the glove with specific words and gestures to create shortcuts and adapt to new environmental conditions. Future enhancements may involve the development of additional applications and functionalities to better cater to the needs of individuals with visual-motor difficulties.