GR1009234B - Συσκευη παρακολουθησης εκτελεσης μουσικων κειμενων απο ατομα με προβληματα ορασης - Google Patents
Συσκευη παρακολουθησης εκτελεσης μουσικων κειμενων απο ατομα με προβληματα ορασης Download PDFInfo
- Publication number
- GR1009234B GR1009234B GR20170100183A GR20170100183A GR1009234B GR 1009234 B GR1009234 B GR 1009234B GR 20170100183 A GR20170100183 A GR 20170100183A GR 20170100183 A GR20170100183 A GR 20170100183A GR 1009234 B GR1009234 B GR 1009234B
- Authority
- GR
- Greece
- Prior art keywords
- musical
- text
- braille
- user
- output
- Prior art date
Links
- 238000012545 processing Methods 0.000 claims abstract description 7
- 238000000034 method Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 7
- 239000013598 vector Substances 0.000 claims description 5
- 230000001771 impaired effect Effects 0.000 claims description 3
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000009877 rendering Methods 0.000 claims description 2
- 230000000694 effects Effects 0.000 claims 1
- 238000011156 evaluation Methods 0.000 abstract description 5
- 230000011664 signaling Effects 0.000 abstract 1
- 230000006870 function Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 210000000689 upper leg Anatomy 0.000 description 2
- 229920000049 Carbon (fiber) Polymers 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000004917 carbon fiber Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005755 formation reaction Methods 0.000 description 1
- 210000002414 leg Anatomy 0.000 description 1
- 230000005923 long-lasting effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- VNWKTOKETHGBQD-UHFFFAOYSA-N methane Chemical compound C VNWKTOKETHGBQD-UHFFFAOYSA-N 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 229920002994 synthetic fiber Polymers 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 208000029257 vision disease Diseases 0.000 description 1
- 230000004393 visual impairment Effects 0.000 description 1
- 239000002023 wood Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B15/00—Teaching music
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/001—Teaching or communicating with blind persons
- G09B21/003—Teaching or communicating with blind persons using tactile presentation of the information, e.g. Braille displays
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/001—Teaching or communicating with blind persons
- G09B21/007—Teaching or communicating with blind persons using both tactile and audible presentation of the information
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B25/00—Models for purposes not provided for in G09B23/00, e.g. full-sized devices for demonstration purposes
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Machine Translation (AREA)
Abstract
Συσκευή για την αυτόματη παρακολούθηση της εκτέλεσης, από άτομα με προβλήματα όρασης, ενός μουσικού κειμένου, ώστε να είναι δυνατή τόσο η αξιολόγηση της ικανότητας του χρήστη στην αναπαραγωγή του κειμένου με κάποιο μουσικό όργανο, όσο και η ταχύτερη ανάγνωση των επόμενων τμημάτων του κειμένου. Δέχεται ως είσοδο ηλεκτρονικά αρχεία μουσικής, τα οποία και αποθηκεύει εσωτερικά (7) ενώ διαθέτει εισόδους για την απευθείας σύνδεση σε αυτήν μουσικών οργάνων (1, 2). Τα ηχητικά χαρακτηριστικά της εξόδου ενός επιλεγμένου αρχείου και της παραγόμενης από το μουσικό όργανο ακολουθίας, οδηγούνται για σύγκριση στην κεντρική μονάδα επεξεργασίας της συσκευής (5). Το αποτέλεσμα χρησιμοποιείται είτε για την παραγωγή ηχητικής ειδοποίησης σε περίπτωση λάθους είτε για την ανανέωση του περιεχομένου μιας εξόδου κυψελών Braille (3), ώστε να παρουσιάσουν τα σύμβολα της γραφής Braille που αντιστοιχούν στο τρέχων σημείο εκτέλεσης και των μουσικών συμβόλων που το ακολουθούν.
Description
ΠΕΡΙΓΡΑΦΗ
ΣΥΣΚΕΥΗ ΠΑΡΑΚΟΛΟΥΘΗΣΗΣ ΕΚΤΕΛΕΣΗΣ ΜΟΥΣΙΚΩΝ ΚΕΙΜΕΝΩΝ ΑΠΟ
ΑΤΟΜΑ ΜΕ ΠΡΟΒΛΗΜΑΤΑ ΟΡΑΣΗΣ
Η παρούσα εφεύρεση αφορά μια συσκευή αυτόματης παρακολούθησης της εκτέλεσης ενός μουσικού κειμένου και απευθύνεται σε άτομα με προβλήματα όρασης, με σκοπό να είναι δυνατή τόσο η αξιολόγηση της ικανότητας του χρήστη στην αναπαραγωγή του κειμένου με κάποιο μουσικό όργανο, όσο και η ταχύτερη ανάγνωση των επόμενων τμημάτων του κειμένου. Για την αντίληψη των σημείων του κειμένου γίνεται χρήση της μουσικής έκφανσης της γραφής Braille.
Η πλειονότητα των συστημάτων ανάγνωσης που έχουν αναπτυχθεί για αμβλύωπες και τυφλούς είναι προσανατολισμένη στην απόδοση απλών πεζών κειμένων με χαρακτηριστικούς εκπρόσωπους τους ανάγλυφους εκτυπωτές (embossers) και τις ανανεώσιμες οθόνες (refreshable displays). Οι μεν πρώτοι χρησιμοποιούν ειδικό χαρτί πάνω στο οποίο αποτυπώνονται μέσω μιας διαδικασίας τα σύμβολα της γραφής Braille ενώ οι δεύτεροι περιλαμβάνουν μια σειρά από πεπερασμένο αριθμό κυψελών Braille, κάθε μία από τις οποίες δύναται να αναπαριστά ένα χαρακτήρα ανά χρονική στιγμή.
Τα τελευταία χρόνια έχουν γίνει προσπάθειες εκμετάλλευσης της γραφής Braille για την απόδοση μουσικών κειμένων, προκειμένου αυτά να μπορούν να αναγνωστούν από τυφλούς ή άτομα μειωμένης όρασης. Το έγγραφο US7985913 περιγράφει μεθόδους και συστήματα για τη μετατροπή ψηφιακών μουσικών κειμένων σε γραφή Braille και αντίστροφα και για τη δημιουργία εξόδου σε μορφή Braille απευθείας από την είσοδο ενός μουσικού πληκτρολογίου.
Αν και η αυτοματοποίηση του μετασχηματισμού του κειμένου επιταχύνει την διαδικασία και αίρει την απαίτηση επίβλεψής της από κάποιον βλέποντα (πχ μουσικοδιδάσκαλο), τα προτεινόμενα συστήματα δεν καταφέρνουν να δώσουν ουσιαστικές λύσεις σε σημαντικά προβλήματα.
Αφενός οι τιμές των συστημάτων που χρησιμοποιούνται για την παρουσίαση των συμβόλων Braille είναι αρκετά υψηλές (της τάξης κάποιων χιλιάδων Ευρώ), κυρίως, γιατί αυτά είναι προσανατολισμένα να αποδίδουν πεζά κείμενα και ως εκ τούτου περιλαμβάνουν μεγάλο αριθμό κυψελών Braille που αυξάνουν τον όγκο και το κόστος τους. Αφετέρου επειδή ακριβώς δεν έχουν κατασκευαστεί με γνώμονα την εξυπηρέτηση μουσικών κειμένων και δεν έχουν εκπαιδευτικό προσανατολισμό, στερούνται πλήρως βασικών δυνατοτήτων χρήσιμων σε όσους ασχολούνται με τη μουσική.
Για να γίνει όμως ευκολότερα αντιληπτή η ανάγκη διαφορετικής αντιμετώπισης των πεζών και των μουσικών κειμένων πρέπει να σημειώσουμε ότι κατά κύριο λόγο η ανάγνωση των πρώτων γίνεται με σκοπό την πληροφόρηση ενώ των δεύτερων την εκμάθηση. Στην περίπτωση των μουσικών κειμένων, απαιτείται μια διαφορετική διαδικασία που περιλαμβάνει πέρα από την ανάγνωση, την απομνημόνευση της πληροφορίας και την ορθή εκτέλεση της στο μουσικό όργανο. Είναι σύνηθες μάλιστα ο χρήστης να γνωρίζει, από προηγούμενες επαναλήψεις, μεγάλα τμήματα της υπό εξέταση μουσικής ακολουθίας και να χρειάζεται την υπενθύμιση ενός μόνο κομματιού. Ο βλέποντας έχει το πλεονέκτημα ότι το μάτι μπορεί γρήγορα να μεταβάλει το σημείο εστίασης πάνω στην παρτιτούρα σε αντίθεση με τα άτομα με προβλήματα όρασης τα οποία βασίζονται σε χρονοβόρες απτικές διαδικασίες για το σκανάρισμα των συμβόλων είτε επί του ειδικού χαρτιού είτε επί των κυψελών Braille κάποιας ανανεώσιμης οθόνης. Αν για παράδειγμα κατά την εκτέλεση μιας μουσικής σύνθεσης, ένας μη βλέποντας δεν είναι βέβαιος για τις νότες στο 7° κατά σειρά μέτρο τότε θα πρέπει να διακόψει την εκτέλεση της σύνθεσης πριν το 7° μέτρο, να μεταβάλει χειροκίνητα την έξοδο της ανανεώσιμης οθόνης ώστε αυτή να φτάσει στο υπό εξέταση μέτρο και να μπορέσει να αναγνώσει τις νότες δια της αφής.
Τέλος πρέπει να αναφερθούμε και στην απουσία δυνατότητας μουσικής αυτοαξιολόγησης, των υπαρχόντων συστημάτων. Ο εκπαιδευόμενος κατά την ανάγνωση του κειμένου, απομνημονεύει νότες και τις εκτελεί χωρίς να γνωρίζει αν αυτό που έπαιξε είναι το σωστό. Σε αυτές τις περιπτώσεις απαιτείται η ύπαρξη τρίτου ατόμου (πχ μουσικοδιδάσκαλος) επιφορτισμένου με αυτήν την ευθύνη.
Σκοπός της παρούσας εφεύρεσης είναι να προσφέρει μια ολοκληρωμένη συσκευή που εκτός από την ανάγνωση μουσικών κειμένων, θα έχει την δυνατότητα αυτόματης παρακολούθησης της εκτέλεσής τους. Με αυτόν τον τρόπο, θα επιτρέπει σε αμβλύωπες ή τυφλούς εκπαιδευόμενους στην ευρωπαϊκή μουσική, αφενός την άμεση προσπέλαση του μουσικού περιεχομένου στο σημείο εκτέλεσης, αφετέρου την αξιολόγηση της ορθής εκτέλεσης του υπό εξέταση κομματιού.
Παράλληλα ενσωματώνει τεχνολογίες και σχεδιαστικές διαφοροποιήσεις, ώστε να καλύψει επιπρόσθετες ανάγκες και απαιτήσεις που δημιουργούνται από την ενασχόληση των χρηστών με τη μουσική. Αναλυτικότερα, διακρίνεται από μικρό σχετικά μέγεθος, κατασκευή από συνθετικά υλικά μεγάλης αντοχής και μικρού βάρους (ανθρακονήματα) και εναλλακτικά από ειδικό ξύλο μικρού μοριακού βάρους, επαναφορτιζόμενη μπαταρία μεγάλης διάρκειας και δυνατότητες ασύρματης δικτύωσης, μεγιστοποιώντας έτσι την ικανότητα φορητότητάς της. Επίσης διαθέτει λειτουργία δόνησης για την παραγωγή απτικών ερεθισμάτων προκειμένου να γνωστοποιηθούν στον χρήστη ειδοποιήσεις και λοιποί συναγερμοί που προκύπτουν κατά τη λειτουργία της. Τέλος, παρουσιάζει κοίλη εσοχή στο κάτω μέρος της, ώστε να μπορεί να προσαρμοστεί με την βοήθεια ιμάντα στον μηρό του χρήστη σε ειδικές περιπτώσεις (χρήση της συσκευής από συμμετέχοντες σε ορχηστρικά σχήματα).
Ο τρόπος λειτουργίας της συγκεκριμένης συσκευής μπορεί να κατανοηθεί πλήρως από την ακολουθούσα αναλυτική περιγραφή και με αναφορά στα επισυναπτόμενα σχέδια.
Το σχήμα 1 παρουσιάζει ένα σχηματικό διάγραμμα που περιλαμβάνει τα σχετικά με την εφεύρεση τμήματα της συσκευής και τον τρόπο αλληλεπίδρασης τους. Διακρίνουμε δύο εισόδους, μια για την σύνδεση της αναλογικής εξόδου των μουσικών οργάνων (1) και μια υποδοχή MIDI (2) για την υποστήριξη μουσικών πληκτρολογίων. Επίσης υπάρχει η κεντρική μονάδα επεξεργασίας (5) με το ενσωματωμένο λογισμικό (6) στην οποία επιτελούνται όλες οι απαραίτητες διεργασίες. Για την αποθήκευση των μουσικών κειμένων έχει προβλεφθεί η ύπαρξη εσωτερικής κάρτα μνήμης (7). Τέλος υπάρχουν και δύο έξοδοι, η μια για την παρουσίαση των ανάγλυφων συμβόλων Braille (3) και η άλλη για την απόδοση του ήχου (4).
Το σχήμα 2 εστιάζει στα σημαντικότερα τμήματα του λογισμικού της συσκευής που σχετίζονται με την εφεύρεση. Τα τμήματα αυτά αποτελούνται από κομμάτια κώδικα που επιτελούν ξεχωριστές μεταξύ τους λειτουργίες και συνεργάζονται ώστε να επιτύχουν το τελικό αποτέλεσμα που περιγράφεται στην παρούσα εφεύρεση. Έτσι υπάρχει το τμήμα XML to MIDI (8) το οποίο μετατρέπει αρχεία MusicXML σε μορφή MIDI, το τμήμα Audio to MIDI (9) το οποίο αναλαμβάνει την μετατροπή της αναλογικής εισόδου ήχου επίσης σε μορφή MIDI, το τμήμα MIDI to Braille (10) για τον μετασχηματισμό MIDI περιεχομένου στην αντίστοιχη πληροφορία συμβόλων Braille και τέλος το τμήμα MIDI cmp (11) στο οποίο επιτελείται η σύγκριση των διανυσμάτων των κύριων χαρακτηριστικών (τονικό ύψος, διάρκεια, ένταση) καθενός εκ των μουσικών σημαδιών (νότες) ενός από τα αποθηκευμένα μουσικά κείμενα με το αντίστοιχο διάνυσμα που προκύπτει από την εκτέλεση του ίδιου κειμένου από διασυνδεδεμένο μουσικό όργανο, ώστε το αποτέλεσμά της να οδηγήσει τις μονάδες εξόδου της συσκευής.
Στα σχήματα 3 και 4 παρουσιάζονται διαγραμματικά οι τρόποι χρησιμοποίησης των προαναφερθέντων τμημάτων λογισμικού για την επίτευξη των λειτουργιών της παρούσας εφεύρεσης. Αρχικά, στο σχήμα 3 έχουμε την διαδικασία που ακολουθείται κατά την εισαγωγή ενός αρχείου στη συσκευή. Αν το αρχείο είναι μορφής MusicXML (12), οδηγείται στο τμήμα XML to MIDI (8) του λογισμικού όπου και μετατρέπεται σε MIDI διαμόρφωση. Η έξοδος αυτής της διαδικασίας περικλείεται σε αρχείο ώστε μαζί με τα αρχεία εισαγωγής που είναι ήδη σε μορφή MIDI (13) να αποτελόσουν το σύνολο των αρχείων (14) που αποθηκεύονται σε ειδικό χώρο εντός της συσκευής (7) και σχηματίζουν το μητρώο αρχείων του χρήστη. Οποιοδήποτε από τα αρχεία αυτά του μητρώου, μπορεί σε μεταγενέστερο χρόνο και κατ’ επιθυμία του χρήστη, να ανακληθεί στην κεντρική μονάδα επεξεργασίας (5) και διαμέσου του τμήματος MIDI to Braille (10) να αναπαραχθεί (15) τόσο η ακολουθία των συμβόλων Braille όσο και η ηχητική ακολουθία στις αντίστοιχες εξόδους (3) και (4).
Στη συνέχεια, στο σχήμα 4 παρουσιάζεται το διάγραμμα ροής για τις λειτουργίες της παρακολούθησης του κειμένου και της αυτοαξιολόγησης. Πρώτα επιλέγεται ένα μουσικό κείμενο από τα ήδη αποθηκευμένα εντός της συσκευής (14), το οποίο θα αποτελέσει την βάση αναφοράς και ως εκτούτου οδηγείται στο πρώτο σκέλος του τμήματος του λογισμικού MIDI cmp (11), ώστε να εξαχθούν τα κύρια μουσικά χαρακτηριστικά της κάθε νότας (τονικό ύψος, διάρκεια, ένταση) όπως αυτά αποδίδονται από το πρωτόκολλο MIDI. Στο δεύτερο σκέλος, οδεύει κατ’ επιλογή του χρήστη (15), είτε η αναλογική είσοδος ήχου / Lineln (18) είτε η ψηφιακή είσοδος που χρησιμοποιεί το πρωτόκολλο επικοινωνίας MIDI (19). Στην αναλογική είσοδο (18) μπορεί να συνδεθεί η έξοδος ήχου ενός μουσικού οργάνου, είτε απευθείας είτε μέσω προενισχυτή, που ικανοποιεί τα καθορισμένα επίπεδα τάσης γραμμής. Σε αυτή την περίπτωση, προκειμένου να καταστεί εφικτή η σύγκριση, απαιτείται η παρεμβολή του τμήματος λογισμικού Audio to MIDI (9) με σκοπό να μετατρέψει σε μορφή MIDI την λαμβανόμενη πληροφορία. Αντίστοιχα στην είσοδο MIDI (19) μπορεί να συνδεθεί η έξοδος μουσικού οργάνου ή συσκευής που ικανοποιεί τις απαιτήσεις του πρωτοκόλλου MIDI για την μεταφορά της μουσικής πληροφορίας. Η σύγκριση μεταξύ των εισόδων και του κειμένου επιτελείται από το τμήμα MIDI cmp (11) σε πραγματικό χρόνο, δηλαδή σύμφωνα με τον ρυθμό ανανέωσης της πληροφορίας της επιλεγμένης εισόδου. Ανάλογα με την επιλεγμένη από τον χρήστη κατάσταση λειτουργίας (16), το αποτέλεσμα της σύγκρισης οδηγεί διαφορετικά, διαμέσου του τμήματος MIDI to Braille (10), την απόκριση της συσκευής. Έτσι στην περίπτωση της παρακολούθησης του κειμένου (20), δεν απαιτείται απόλυτη ταύτιση του μουσικού περιεχομένου του κειμένου και της εκτελούμενης από το όργανο μελωδίας αλλά λαμβάνονται υπόψη κάποιες ανοχές στην σύγκριση. Ζητούμενη σε αυτή την κατάσταση, είναι πρωτίστως η εύρεση του τρέχοντος σημείου εκτέλεσης, ώστε το περιεχόμενο της εξόδου των συμβόλων Braille (3) να μεταβάλλεται αυτόματα και πάντα σε συγχρονισμό με την εκτέλεση. Με αυτόν τον τρόπο, ο χρήστης έχει την δυνατότητα να αναγνώσει άμεσα τις επόμενες νότες από το σημείο μέχρι το οποίο έχει παίξει με το μουσικό όργανο και να συνεχίσει την εκτέλεση του κομματιού. Αντίθετα στην περίπτωση της αυτοαξιολόγησης (17) είναι απαραίτητη η ταύτιση των περιεχομένων των δύο εισόδων του τμήματος MIDI cmp (11), ενώ σε περίπτωση διαφωνίας τους (που σημαίνει ότι ο χρήστης έχει παίξει διαφορετική νότα από αυτή που υπάρχει στο κείμενο) παράγεται ακουστική ειδοποίηση στην έξοδο ήχου (4).
Στο σχήμα 5 αποτυπώνεται μια προοπτική όψη της συσκευής στην οποία μπορούμε να διακρίνουμε τα εξωτερικά χαρακτηριστικά της. Φαίνονται τα ηχεία (21-22) που αποτελούν την έξοδο ήχου (4) και οι δώδεκα ανανεώσιμες κυψέλες (23-34) για την παρουσίαση των συμβόλων Braille (3). Ο χρησιμοποιούμενος τύπος ανανεώσιμης κυψέλης στηρίζεται στην χρήση πιεζοηλεκτρικών υλικών για την ανύψωση ή μη εμβόλων ώστε να αποδοθεί ανάγλυφα το εκάστοτε σύμβολο και περιγράφεται διεξοδικά στο έγγραφο ΕΡ0281746. Ωστόσο πρέπει στο σημείο αυτό να σημειωθεί ότι η εφεύρεση δεν δεσμεύεται από τον συγκεκριμένο τρόπο υλοποίησης των ανανεώσιμων κυψελών και θα μπορούσαν σε άλλη εκδοχή, να αντικατασταθούν από εναλλακτικές μεθόδους όπως για παράδειγμα αυτές που κάνουν χρήση του ηλεκτρομαγνητισμού για το ανεβοκατέβασμα των εμβόλων. Το μουσικό κείμενο παρουσιάζεται στον χρήστη τμηματικά (μέγιστος αριθμός 12 νότες) και γίνεται αντιληπτό σε αυτόν με σάρωση των κυψελών από το δάκτυλο (δείκτη) του χεριού του.
Στο ίδιο σχήμα, μπορούμε επιπρόσθετα να διακρίνουμε τα τέσσερα κουμπιά ελέγχου (35-38) και τα τέσσερα κουμπιά πλοήγησης (39-42). Τα κουμπιά ελέγχου επιτρέπουν την μεταβολή των ρυθμίσεων και του τρόπου λειτουργίας της συσκευής ενώ με τα κουμπιά πλοήγησης μπορεί ο χρήστης να επιλέξει κάποιο από τα αποθηκευμένα στη συσκευή μουσικά κείμενα ως αναφορά. Κατά την εναλλαγή των αποθηκευμένων αρχείων με χρήση των πλήκτρων (39) και (40) αναγγέλλεται από τα ηχεία της συσκευής (21 , 22) ο τίτλος της επιλεγμένης μουσικής σύνθεσης.
Με κατεύθυνση από πάνω προς τα κάτω στο σχήμα 6, αρχικά συναντάμε την αριστερή όψη, στην οποία διακρίνουμε το κουμπί τροφοδοσίας (45) με διττή χρησιμότητα. Με παρατεταμένο πάτημα μπορούμε να εκκινήσουμε και να τερματίσουμε τη συσκευή ενώ εφόσον είναι σε λειτουργία, με στιγμιαίο πάτημα μεταπίπτει σε κατάσταση χαμηλής κατανάλωσης ενέργειας ή επανέρχεται από αυτήν. Επίσης υπάρχει θύρα USB (46) μέσω της οποίας συνδέουμε το καλώδιο τροφοδοσίας. Συνεχίζοντας στη δεξιά όψη υπάρχουν τα κουμπιά αύξησης (47) και μείωσης (48) της έντασης του ήχου καθώς και η αναλογική είσοδος ήχου Lineln (49). Τέλος στην πίσω όψη βρίσκεται η υποδοχή του καλωδίου MIDI (50) για σύνδεση με μουσικά όργανα μέσω πρωτοκόλλου MIDI και η δεύτερη θύρα USB (51) για ενσύρματη σύνδεση με ηλεκτρονικό υπολογιστή. Στην όψη αυτή είναι εύκολα διακριτή και η καμπυλότητα του κάτω μέρους της συσκευής (52) ώστε να μπορεί να προσαρμοστεί στο πόδι του χρήστη αν αυτό απαιτηθεί.
Το σχήμα 7 δείχνει το κάτω μέρος μιας κατά μήκος τομής της συσκευής. Μπορούμε να διακρίνουμε την εσοχή για την επαναφορτιζόμενη μπαταρία (55) αλλά και την ύπαρξη δύο εγκοπών (53-54), αριστερά και δεξιά της κάτω επιφάνειας, στις οποίες μπορεί να προσαρμοστεί ιμάντας στήριξης για την υποστήριξη της δυνατότητας τοποθέτησης επί του μηρού του χρήστη. Η διαμόρφωση αυτή συνίσταται κατά την συμμετοχή σε ορχηστρικά σχήματα επιτρέποντας έτσι την χρήση της συσκευής αφενός ως αναφορά της εκτελούμενης μελωδίας, αφετέρου με την χρήση της λειτουργίας δόνησης επιτρέπει την ειδοποίηση του χρήστη για το πότε πρέπει να ξεκινήσει το κομμάτι του.
Για να γίνουν εύκολα αντιληπτές οι δύο λειτουργίες ακολουθεί χαρακτηριστικό παράδειγμα.
Ας υποθέσουμε ότι το επιλεγμένο μουσικό κείμενο έχει το εξής περιεχόμενο: "ντο ρε μι φα σολ λα σι ντο ρε μι φα σολ λα σι ντο ρε μι φα σολ λα σι". Έχοντας επιλέξει το κείμενο αναφοράς, συνδέουμε στην είσοδο MIDI, ένα μουσικό πληκτρολόγιο. Θέλουμε να κάνουμε χρήση της λειτουργίας παρακολούθησης. Στην έξοδο Braille (3) και συγκεκριμένα στις δώδεκα ανανεώσιμες κυψέλες (23 - 34) εμφανίζονται τα σύμβολα Braille για τις νότες "ντο ρε μι φα σολ λα σι ντο ρε μι φα σολ". Εκτελούμε την νότα “ντο” στο πληκτρολόγιο και η έξοδος Braille ολισθαίνει κατά μία θέση αριστερά και τώρα εμφανίζει τα σύμβολά για τις νότες "ρε μι φα σολ λα σι ντο ρε μι φα σολ λα". Συνεχίζουμε την εκτέλεση στο πληκτρολόγιο, με τις νότες “ρε μι φα” και η έξοδος Braille (3) ολισθαίνει τώρα κατά τρεις θέσεις και εμφανίζει τα σύμβολα "σολ λα σι ντο ρε μι φα σολ λα σι ντο ρε". Συνεχίζοντας την εκτέλεση, μετά από άλλες τρεις πάλι νότες υποθέτουμε την λανθασμένη απόδοση της δεύτερης εξ αυτών, για παράδειγμα “σολ σολ σι”. Ανεξάρτητα από το λάθος, επειδή εδώ μας ενδιαφέρει πρωτίστως η ανάγνωση, η συσκευή δεν ειδοποιεί για το λάθος και ανανεώνει όπως πριν την έξοδο Braille κατά τρεις θέσεις εμφανίζοντας "ντο ρε μι φα σολ λα σι ντο ρε μι φα σολ". Το εύρος ανοχής στις λανθασμένες νότες (αν θα είναι μία, δύο συνεχόμενες κλπ) είναι παραμετρικό και μπορεί να καθοριστεί από τον χρήστη. Μέχρι αυτή τη στιγμή, δεν έχει γίνει χρήση της συσκευής, υποθέτοντας ότι το συγκεκριμένο κομμάτι του κειμένου είναι γνωστό. Καθώς συνεχίζουμε όμως να παίζουμε διαπαστώνουμε ότι μετά από άλλες τέσσερις νότες δεν θυμόμαστε ακριβώς τις επόμενες και εκεί χρειαζόμαστε την βοήθεια της συσκευής. Έτσι έχοντας παίξει “ντο ρε μι φα” η έξοδος έχει γίνει "σολ λα σι ντο ρε μι φα σολ" και κατά συνέπεια μπορούμε, σαρώνοντας με το δάκτυλο, να γνωρίζουμε άμεσα τις νότες οι οποίες ακολουθούν και στο συγκεκριμένο παράδειγμα είναι “σολ λα σι κλπ”. Σε αντιπαραβολή, σύμφωνα με τον κλασικό τρόπο ανάγνωσης θα έπρεπε ο χρήστης, να διαβάζει τις πρώτες νότες, να τις εκτελεί στο όργανο, να πατάει το κουμπί για την ανανέωση της εξόδου Braille με τις επόμενες νότες, να τις διαβάζει πάλι με το δάχτυλο και ούτω καθεξής.
Στην λειτουργία της αξιολόγησης, η ειδοποιός διαφορά είναι ότι στο λάθος η συσκευή σταματάει την περαιτέρω επεξεργασία και ειδοποιεί είτε ηχητικά είτε με δόνηση τον χρήστη επ’ αυτού.
Claims (5)
1. Συσκευή παρακολούθησης εκτέλεσης μουσικών κειμένων για άτομα με προβλήματα όρασης, χαρακτηριζόμενη από το ότι διαθέτει δύο εισόδους, μία που επιτρέπει την εισαγωγή του ηχητικού αποτελέσματος ενός μουσικού οργάνου σε αναλογική μορφή (1) και μία σε ψηφιακή μορφή κωδικοποιημένη σύμφωνα με το πρωτόκολλο MIDI (2), ένα επεξεργαστή (5) στον οποίο επιτελούνται όλες οι απαιτούμενες διεργασίες και δύο εξόδους, η μία για την απόδοση του ήχου (4) και η άλλη για την παρουσίαση των ανάγλυφων συμβόλων Braille με χρήση ανανεώσιμων κυψελών (3).
2. Συσκευή σύμφωνα με την αξίωση 1, χαρακτηριζόμενη από το ότι διαθέτει υποδοχή USB (51) και εσωτερική μονάδα μη πτητικής μνήμης (7) για την μεταφορά μέσω καλωδίου από εξωτερική πηγή, ηλεκτρονικών αρχείων και την μόνιμη αποθήκευση τους εντός της συσκευής.
3. Μέθοδος σύγκρισης του περιεχομένου ενός μουσικού κειμένου σε ηλεκτρονική μορφή και της εξόδου ενός μουσικού οργάνου η οποία περιλαμβάνει τις ακόλουθες φάσεις:
α) Ανάκληση ενός αποθηκευμένου αρχείου μουσικού κειμένου (14) από την μνήμη της συσκευής (7) και οδήγηση του στην κεντρική μονάδα επεξεργασίας (5) όπου αναλύεται και παράγονται τα χαρακτηριστικά διανύσματα (τονικό ύψος, διάρκεια, ένταση) των μουσικών σημαδιών (νότες) από τα οποία αποτελείται.
β) Όδευση στην κεντρική μονάδα επεξεργασίας (5), του ακουστικού αποτελέσματος που παράγεται από διασυνδεδεμένα μουσικά όργανα είτε στην αναλογική (1) είτε στην ψηφιακή είσοδο (2) και εξαγωγή του διανύσματος μουσικών χαρακτηριστικών (τονικό ύψος, διάρκεια, ένταση) σε πραγματικό χρόνο, δηλαδή κατά την στιγμή της εκτέλεσης.
γ) Σύγκριση από την κεντρική μονάδα επεξεργασίας (5) του διανύσματος που παράγεται στο βήμα β) με το αναμενόμενο από το βήμα α) ώστε να αξιολογηθεί με βάση κάποιο προκαθορισμένο όριο ανοχής αν αυτά ταυτίζονται ή όχι.
χαρακτηριζόμενη από το ότι επιτρέπει την παρακολούθηση του τρέχοντος σημείου εκτέλεσης εντός του μουσικού κειμένου.
4. Μέθοδος σύμφωνα με την αξίωση 3, χαρακτηριζόμενη από το ότι σε περίπτωση ταύτισης του αποτελέσματος σύγκρισης, παράγει πληροφορία για την οδήγηση της εξόδου των ανανεώσιμων κυψελών Braille (3), ώστε αυτές να παρουσιάσουν τα σύμβολα της γραφής Braille που αντιστοιχούν στο τρέχων σημείο εκτέλεσης και των μουσικών συμβόλων που το ακολουθούν. Με αυτόν τον τρόπο είναι δυνατή η άμεση ανάγνωση από τον χρήστη του περιεχομένου ακριβώς μετά από το σημείο που έχει σταματήσει η εκτέλεση.
5. Μέθοδος σύμφωνα με την αξίωση 3, χαρακτηριζόμενη περαιτέρω από το ότι σε περίπτωση διαφοροποίησης του αποτελέσματος σύγκρισης, παράγει ηχητική ειδοποίηση σφάλματος στην έξοδο ήχου (4) προς ενημέρωση του χρήστη.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GR20170100183A GR1009234B (el) | 2017-04-19 | 2017-04-19 | Συσκευη παρακολουθησης εκτελεσης μουσικων κειμενων απο ατομα με προβληματα ορασης |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GR20170100183A GR1009234B (el) | 2017-04-19 | 2017-04-19 | Συσκευη παρακολουθησης εκτελεσης μουσικων κειμενων απο ατομα με προβληματα ορασης |
Publications (1)
Publication Number | Publication Date |
---|---|
GR1009234B true GR1009234B (el) | 2018-02-22 |
Family
ID=62045032
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
GR20170100183A GR1009234B (el) | 2017-04-19 | 2017-04-19 | Συσκευη παρακολουθησης εκτελεσης μουσικων κειμενων απο ατομα με προβληματα ορασης |
Country Status (1)
Country | Link |
---|---|
GR (1) | GR1009234B (el) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070166693A1 (en) * | 2006-01-18 | 2007-07-19 | Blas Carlos J | Inaudible midi interpretation device |
WO2007092479A2 (en) * | 2006-02-06 | 2007-08-16 | Lydia Machell | Braille music systems and methods |
WO2009156901A2 (en) * | 2008-06-27 | 2009-12-30 | Koninklijke Philips Electronics N.V. | Device, method, and computer-readable medium for providing musical feedback |
DE102011114284A1 (de) * | 2011-09-26 | 2013-03-28 | Handy Tech Elektronik Gmbh | System zur Umsetzung von Positionsinformationen basierend auf taktilen Präsentationen |
US20150143975A1 (en) * | 2013-11-28 | 2015-05-28 | Shlomo Michael Farber | Musical Notation Interface for the Visually Impaired |
-
2017
- 2017-04-19 GR GR20170100183A patent/GR1009234B/el active IP Right Grant
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070166693A1 (en) * | 2006-01-18 | 2007-07-19 | Blas Carlos J | Inaudible midi interpretation device |
WO2007092479A2 (en) * | 2006-02-06 | 2007-08-16 | Lydia Machell | Braille music systems and methods |
WO2009156901A2 (en) * | 2008-06-27 | 2009-12-30 | Koninklijke Philips Electronics N.V. | Device, method, and computer-readable medium for providing musical feedback |
DE102011114284A1 (de) * | 2011-09-26 | 2013-03-28 | Handy Tech Elektronik Gmbh | System zur Umsetzung von Positionsinformationen basierend auf taktilen Präsentationen |
US20150143975A1 (en) * | 2013-11-28 | 2015-05-28 | Shlomo Michael Farber | Musical Notation Interface for the Visually Impaired |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Vincent et al. | Learning Style Awareness. | |
Abril | Untangling general music education | |
Fan et al. | Design rationale: opportunities and recommendations for tangible reading systems for children | |
Patterson et al. | The child, the text and the teacher: Reading primers and reading instruction | |
Senjam | Assistive technology for people with visual loss | |
Wiggins et al. | Integrating through Conceptual Connections: Focusing on conceptual connections can make it possible for music teachers to develop interdisciplinary curricula without sacrificing the integrity of their own discipline | |
Armes et al. | Implementing universal design principles in music teaching | |
Bryant | Six dots: A story of young Louis Braille | |
KR101729060B1 (ko) | 블록을 이용한 교육용 음악보드 및 이를 포함하는 음악교육 시스템 | |
KR101094715B1 (ko) | 시각 장애인을 위한 점자 학습용 훈련 장치 | |
CN112204639B (zh) | 用于训练使用者的大脑的装置、程序及方法 | |
Park | How useful is braille music?: A critical review | |
Stefanov et al. | An Overview of some popular devices and technologies designed for blind and visually impaired people | |
GR1009234B (el) | Συσκευη παρακολουθησης εκτελεσης μουσικων κειμενων απο ατομα με προβληματα ορασης | |
Hsiao et al. | How we do it: adaptation of music instruction for pediatric cochlear implant recipients | |
US20150140522A1 (en) | Methods and systems for tactile code interpretation | |
Garcia | Learning styles and piano teaching | |
JP6661851B2 (ja) | コミュニケーションエイド装置及びその使用方法 | |
Juliana et al. | The role of the school library in empowering visually impaired children with lifelong information literacy skills | |
GR20170200064U (el) | Συσκευη αναγνωσης μουσικων κειμενων για ατομα με προβληματα ορασης | |
Killedar et al. | Inclusive Education for Persons with Disabilities: A case study of Resource Centre for Inclusive Education in Shivaji University, Kolhapur | |
Lohmeyer | Reading strategy differences between college choral, band, and jazz musicians: Evidence for musical multiliteracies | |
Gordon | Essential preparation for beginning instrumental music instruction | |
CN101477760A (zh) | 盲文电子词典 | |
Huang et al. | Critical perspectives on learning interface design of music sight-singing: Audition vs. vision |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PG | Patent granted |
Effective date: 20180420 |