BEGIN:VCALENDAR VERSION:2.0 PRODID:-//TUC//Events//EN CALSCALE:GREGORIAN BEGIN:VTIMEZONE TZID:Europe/Athens TZNAME:EEST DTSTART:19700329T030000 RRULE:FREQ=YEARLY;BYDAY=-1SU;BYMONTH=3 BEGIN:STANDARD TZOFFSETFROM:+0200 TZOFFSETTO:+0300 TZNAME:EET DTSTART:19701025T040000 RRULE:FREQ=YEARLY;BYDAY=-1SU;BYMONTH=10 END:STANDARD END:VTIMEZONE BEGIN:VEVENT CREATED:20240924T133630Z LAST-MODIFIED:20240924T133630Z DTSTAMP:20260817T224907Z UID:1786996147@tuc.gr SUMMARY:Παρουσίαση Διπλωματικής Εργασίας κ. Γεωργίου Πρωτοπαπαδάκη - Σχολή ΗΜΜΥ LOCATION: DESCRIPTION:https://www.ece.tuc.gr/el/katalogos- ekdiloseon?tx_tucevents2_tuceventsdi splay%5Baction%5D=show&tx_tucevents2 _tuceventsdisplay%5Bcontroller%5D=Ev ent&tx_tucevents2_tuceventsdisplay%5 Bevent%5D=7226&cHash=3305b3b9cb2510b d35dbbf16a71c59c0\nΠΟΛΥΤΕΧΝΕΙΟ ΚΡΗΤΗ Σ\n Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστών\n Πρόγραμμα Π ροπτυχιακών Σπουδών\n ΠΑΡΟΥΣΙΑΣΗ ΔΙΠ ΛΩΜΑΤΙΚΗΣ ΕΡΓΑΣΙΑΣ\n Γεωργίου Πρωτοπ απαδάκη \n με θέμα\n Πολυτροπική Διε παφή Χρήστη για Αυτόνομη Οδήγηση σε Επαυξημένη Πραγματικότητα Προσομοιωμ ένη σε Εικονική Πραγματικότητα\n Mul timodal User Interface for Autonomou s Driving in Augmented Reality Simul ated in Virtual Reality\n Εξεταστική Επιτροπή\n Καθηγήτρια Αικατερίνη Μα νιά (επιβλέπουσα)\n Καθηγητής Μιχαήλ Λαγουδάκης\n Καθηγητής Αντώνιος Δελ ηγιαννάκης\n Περίληψη\n Καθώς τα αυτ όνομα οχήματα γίνονται όλο και πιο σ υνηθισμένα στην καθημερινή ζωή, η αν άπτυξη αποτελεσματικών και διαισθητι κών Διεπαφών Χρήστη (UIs) για την αλ ληλεπίδραση των επιβατών γίνεται όλο και πιο σημαντική. Τεχνικές πολυτρο πικής αλληλεπίδρασης, όπως ο εντοπισ μός ματιών και οι φωνητικές εντολές, φαίνονται να προσφέρουν ελπιδοφόρες λύσεις παρέχοντας διαισθητικές μεθό δους ελέγχου χωρίς τη χρήση χεριών. Αυτή η διπλωματική εργασία παρουσιάζ ει έναν προσομοιωτή βασισμένο στην Ε ικονική Πραγματικότητα (VR), σχεδιασ μένο για την εξερεύνηση αυτών των αλ ληλεπιδράσεων σε μια Οθόνη Επαυξημέν ης Πραγματικότητας (AR) στο παρμπρίζ , μέσα σε ένα περιβάλλον κινητού γρα φείου σε αυτόνομα κινούμενο όχημα. Τ ο σύστημα συνδυάζει τεχνικές αλληλεπ ίδρασης με τη χρήση του βλέμματος, ό πως το κλείσιμο των ματιών και ο χρό νος παρατεταμένου βλέμματος, καθώς κ αι φωνητικές εντολές, για να προσφέρ ει μια διεπαφή χωρίς τη χρήση χεριών για τον έλεγχο λειτουργιών του οχήμ ατος, όπως το κλιματιστικό και το ρα διόφωνο, καθώς και εργασίες γραφείου , όπως οι τηλεφωνικές κλήσεις και η αποστολή μηνυμάτων.\n Το σύστημα χρη σιμοποιεί την συσκευή απεικόνισης HT C Vive Pro Eye με τις βιβλιοθήκες SR anipal SDK για την παρακολούθηση των ματιών σε πραγματικό χρόνο, σε συνδ υασμό με το TobiiXR SDK για προηγμέν ες αλληλεπιδράσεις που βασίζονται στ ο βλέμμα. Κατασκευασμένο με τη μηχαν ή παιχνιδιών Unity, ο προσομοιωτής ε πιτρέπει στους χρήστες να βιώσουν τη ν εμπειρία ενός αυτόνομου οχήματος π ου κινείται σε ένα αστικό περιβάλλον . Οι Αναγνωριστές Ομιλίας και Υπαγόρ ευσης της Unity χρησιμοποιούνται επί σης για την υλοποίηση φωνητικών εντο λών και τη μετατροπή ομιλίας σε κείμ ενο. Οι δυνατότητες αυτού του συστήμ ατος αξιολογήθηκαν με βάση μελέτες χ ρηστών, μετρώτας τους χρόνους ολοκλή ρωσης εργασιών, τα λάθη κατά τη διάρ κεια συγκεκριμένων εργασιών και τις προτιμήσεις των χρηστών σε διάφορα ε πίπεδα εξοικείωσης με την τεχνολογία Εικονικής Πραγματικότητας. Επιπλέον , το σύστημα εξερευνά την έννοια του κινητού γραφείου, όπου οι χρήστες μ πορούν να παραμένουν παραγωγικοί ενώ το όχημα κινείται αυτόνομα.\n Η λεπ τομερής αξιολόγηση απόδοσης επικεντρ ώνεται σε μετρήσεις αλληλεπίδρασης χ ρήστη, συμπεριλαμβανομένης της απόκρ ισης και των ποσοστών σφάλματος για κάθε μέθοδο αλληλεπίδρασης μέσω του βλέμματος. Μεθοδολογίες Αξιολόγησης Χρηστικότητας και Μετρήσεις Εμπειρία ς Χρήστη χρησιμοποιήθηκαν με τη συμμ ετοχή 12 ατόμων, προσφέροντας ανατρο φοδότηση για την αποτελεσματικότητα των τεχνικών αλληλεπίδρασης. Τα αποτ ελέσματα δείχνουν προτίμηση για τις αλληλεπιδράσεις με το κλείσιμο των μ ατιών και τις φωνητικές εντολές ως π ρος την ταχύτητα, ενώ ο παρατεταμένο ς χρόνος του βλέμματος έδειξε προοπτ ική για βελτίωση της ακρίβειας με πε ραιτέρω εκπαίδευση. Η μελέτη τονίζει επίσης τη σημασία της εμπιστοσύνης των χρηστών στα αυτόνομα οχήματα, πο υ ενισχύεται από την ανατροφοδότηση του χρήστη σε πραγματικό χρόνο από τ ο όχημα. Η εργασία αυτή συμβάλλει στ ο εξελισσόμενο πεδίο των διεπαφών χρ ήστη που βασίζονται στην Επαυξημένη Πραγματικότητα στα αυτόνομα οχήματα, προσφέροντας πληροφορίες για τον σχ εδιασμό διεπαφών και τεχνικών αλληλε πίδρασης για συστήματα υψηλής αυτομα τοποίησης.\n Abstract \n As autonomo us vehicles become more common in da ily life, developing effective and i ntuitive User Interfaces (UIs) for p assenger interaction is becoming inc reasingly important. Multimodal inte raction techniques, like eye trackin g and voice commands, seem like prom ising solutions by providing hands-f ree and intuitive control methods. T his thesis introduces a VR-based sim ulator designed to explore these int eractions on an Augmented Reality (A R) windshield display (WSD) within a mobile office setting in an autonom ously driven vehicle. The system com bines gaze-based interaction techniq ues, such as eye blink and dwell-tim e, as well as voice commands to offe r a hands-free interface for control ling vehicle functions, such as air conditioning and radio, as well as o ffice tasks like phone calls and mes saging.\n The system uses the HTC Vi ve Pro Eye with SRanipal SDK for rea l-time eye tracking, together with T obiiXR SDK for advanced gaze-based i nteractions. Built using the Unity g ame engine, the simulator enables th e users to experience an autonomous vehicle while navigating an urban en vironment. Unity’s Speech and Dictat ion Recognizers also help to impleme nt voice command interactions and sp eech to text writing. This system’s capabilities were evaluated based on user studies, measuring task comple tion times, errors throughout specif ic tasks, and user preferences acros s different levels of VR familiarity . Additionally, the system explores the concept of the mobile office, wh ere users can stay productive while the vehicle autonomously navigates.\ n The detailed performance evaluatio n focuses on user interaction metric s, including responsiveness and erro r rates for each eye-gaze modality. Usability Testing and User Experienc e Metrics evaluation methods were us ed with 12 participants, providing f eedback on the effectiveness of the interaction techniques. The results show a preference for eye blink and voice command interactions for speed , though dwell-time demonstrated pot ential for improved accuracy with tr aining. The study also emphasizes th e importance of user trust in autono mous vehicles, enhanced by real-time feedback from the vehicle. This wor k con tributes to the evolving field of AR-driven user interfaces in aut onomous driving, offering insights i nto future interface design and user interaction techniques for highly a utomated systems. \n STATUS:CONFIRMED ORGANIZER;RSVP=FALSE;CN=TUC;CUTYPE=TUC:mailto:webmaster@tuc.gr DTSTART:20241002T100000 DTEND:20241002T110000 TRANSP:OPAQUE CLASS:DEFAULT END:VEVENT END:VCALENDAR