Σύστημα απεικόνισης της ακουστικά μεταδιδόμενης συναισθηματικής πληροφορίας μέσω υποτίτλων για εφαρμογές κινούμενης εικόνας

  1. MSc thesis
  2. Καραμάνος, Ανδρέας - Γεώργιος
  3. Μεταπτυχιακή Εξειδίκευση στα Πληροφοριακά Συστήματα (ΠΛΣ)
  4. 29 Σεπτεμβρίου 2018 [2018-09-29]
  5. Ελληνικά
  6. 61
  7. Μαργουνάκης, Δημήτριος
  8. Εξαγωγή Συναισθήματος | Υπότιτλοι | Κατηγοριοποίηση ήχου
  9. 3
  10. 1
  11. 37
  12. Περιέχει 3 πίνακες και 22 εικόνες
    • Σκοπός της παρούσας εργασίας είναι η ανάπτυξη ενός συστήματος που θα χρησιμοποιεί τεχνικές εξαγωγής συναισθήματος από ομιλία για την συναισθηματική ανάλυση διαλόγων μιας τηλεοπτικής ή κινηματογραφικής παραγωγής με σκοπό την μεταφορά της συναισθηματικής πληροφορίας αυτής από το ηχητικό κανάλι στο οπτικό μέσω του κατάλληλου χρωματισμού των υποτίτλων και μέσω κινούμενης εικόνας. Παράλληλα γίνεται προσπάθεια εντοπισμού - αναγνώρισης γενικών ήχων που περιέχονται σε ένα αρχείο βίντεο (π.χ. ήχοι τηλεφώνου ή κραυγής κλπ) με σκοπό την μεταφορά και αυτών στο οπτικό κανάλι μέσω της κινούμενης εικόνας που ουσιαστικά θα παίζει το ρόλο ενός βοηθού ήχου (animated sound assistant). Αρχικά γίνεται περιγραφή των ηχητικών χαρακτηριστικών που επηρεάζονται από το συναίσθημα, καθώς και των αλγορίθμων – μεθόδων που βοηθούν στον εντοπισμό του συναισθήματος μέσω αυτών των ηχητικών χαρακτηριστικών. Ακολουθεί η καταγραφή των πρακτικών αποτύπωσης συναισθημάτων στο κείμενο, αναλύοντας τις πιο συνηθισμένες, όπως τα emoticons, ο τρόπος αποτύπωσης στα κόμικς αλλά και η σχέση χρώματος και συναισθήματος. Στη συνέχεια αναλύεται το σύστημα που αναπτύχθηκε με τις επεκτάσεις του, ενώ γίνεται και καταγραφή των συμπερασμάτων από την παρουσίαση του συστήματος σε φίλους του κινηματογράφου, σε άτομα με προβλήματα ακοής αλλά και σε ειδικούς των εμπλεκόμενων κλάδων.
    • This project aims at the development of a system that will use applications that can extract emotion from speech for the sentiment analysis of dialogues in a television or movie production in order to transfer the emotional information from the auditory to the visual channel through color scales of the subtitle fonts or through animation. The possibility of detecting general sounds in movies (like phone ring, scream etc.) is also investigated, so that they are also transferred in the visual channel through animation or even better through an animated sound assistant. The paper starts with the analysis of the main sound features that are affected from emotions and the presentation of the algorithms that can track these emotions through sound events. The ways of representing emotion in text is then recorded, with focus on emoticons usage, text in comics and the relation between color and emotion. The specifications of system developed are the given, followed by the conclusions of its usage from fans of movie productions and from a few people with hearing problems.
  14. Items in Apothesis are protected by copyright, with all rights reserved, unless otherwise indicated.