WO2007135282A1 - Communication method for deaf and/or deaf-mute persons and method of implementation thereof - Google Patents

Communication method for deaf and/or deaf-mute persons and method of implementation thereof Download PDF

Info

Publication number
WO2007135282A1
WO2007135282A1 PCT/FR2007/000845 FR2007000845W WO2007135282A1 WO 2007135282 A1 WO2007135282 A1 WO 2007135282A1 FR 2007000845 W FR2007000845 W FR 2007000845W WO 2007135282 A1 WO2007135282 A1 WO 2007135282A1
Authority
WO
WIPO (PCT)
Prior art keywords
selection
key
module
sentence
keyboard
Prior art date
Application number
PCT/FR2007/000845
Other languages
French (fr)
Inventor
Olivier De Masfrand
Original Assignee
Olivier De Masfrand
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olivier De Masfrand filed Critical Olivier De Masfrand
Publication of WO2007135282A1 publication Critical patent/WO2007135282A1/en

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00Teaching, or communicating with, the blind, deaf or mute

Definitions

  • the present invention relates to a communication method for particular a sentence construction and its preferentially portable device implementation. It applies more particularly, but not exclusively, to persons provisionally or permanently and totally or partially dumb and / or dumb using or not using sign language or to anyone preferring not to show an accent, stuttering, difficulty in articulating.
  • the invention can be applied to elderly persons who have suffered cerebral injury, persons who no longer have vocal cords or tongues following an operation for cancer, and children with autism. Finally, paralyzed and tracheotomized persons may use a larger device.
  • dumb and / or dumb people need to get in touch with other people.
  • the object of the invention is to solve these disadvantages, in particular:
  • Another advantage of the system is to seek to save time on a classic keyboard input that can annoy the speaker because it is carried out letter by letter.
  • the system offers a whole set of features that fully or partially saves the typing of words or the number of clicks and allows you to anticipate phrases or words that occur repeatedly in a regular conversation.
  • the system is visually adjustable for comfort for people with a vision disorder and can adjust for example the size of characters entered or the keyboard but also the size of pictograms or video sequences of sign language.
  • the finger can also be used as a stylus when choosing large keys
  • a display module that can include a screen
  • a memory module for storing at least one database
  • input and / or selection means comprising keys that can be physical or virtual, and possibly a stylus; said method comprising the steps of: a) displaying general topics; b) an action on a key corresponding to a general theme; c) a scrolling of information relating to the general theme thus selected; d) a selection of the appropriate relative information by action on the corresponding key; e) storage in memory of the selection; f) if there is additional information relating to the selected information, a scrolling of said additional information or the process goes directly to step j); (g) a selection of additional information; h) storage in memory of the selection; i) a repetition of steps f) to h) until there is no further information; j) a display of the sentence or message thus constructed on the screen and / or a vocalization of said message by means of a synthetic voice.
  • each step of selection and storage may be followed by a display step.
  • the keys may be physical and / or virtual, such as those of a keyboard.
  • the physical and / or virtual keys can be animated or configurable. In the case of animated keys, they may consist for example of an icon representing a general theme.
  • the method may further enable the speech synthesis of all or part of the constructed sentence.
  • the device may further comprise a speech synthesis module, means for controlling said speech synthesis and listening means such as earphones, a headset or a speaker.
  • a speech synthesis module means for controlling said speech synthesis and listening means such as earphones, a headset or a speaker.
  • the speech synthesis can be triggered automatically with each selection or by using a specific key after having partially or entirely composed a sentence.
  • the device may include visual means for tracking the speech utterance and the progression of the sentence.
  • the syllables of the sentence may change color or be highlighted as and when they are spoken so that the disabled person, especially the deaf person, can know when the sentence is over.
  • a progress bar of the sentence utterance may be displayed.
  • the display module may include means for enlarging a text for example for the visually impaired or to allow reading for several interlocutors at a time.
  • the device according to the invention may comprise a virtual alphanumeric touch keyboard of the QWERTY, QWERTY or ABCD type or else customized in particular according to the frequency of use of the input keys.
  • a virtual alphanumeric touch keyboard of the QWERTY, QWERTY or ABCD type or else customized in particular according to the frequency of use of the input keys.
  • it may also include means of analysis and suggestion in order to entirely or partially save the typing of words that occur so that the typing of "pro” proposes words such as "pro profession, professional, probable, etc. And after the next 3 letters “bab” forming “probab”, the system proposes headed by a "likely” probability of use, likelihood "probably”. For this purpose, as and when entering a term, said means of analysis and suggestion propose terms that can match.
  • the user strikes on a virtual keyboard QWERTY or QWERTY or ABCD or other custom and type a word or a phrase of his choice which is then vocalized after selection with stylus and pressure on the "play" button.
  • the system is designed in such a way that pressing the "enter” key after typing triggers the synthesis voice of the entire line upstream.
  • the user creates and chooses totally free themes that group on several topics prewritten sentences and whose total or partial selection allows storage and / or display and possibly voice synthesis.
  • the theme mode can be prepared by the user for the theme "doctor” and sentences will be entered such as "I have fever” “I have sore joints,””I feel nausea,””I need to renew my prescription for this drug X”.
  • Another example of a theme can be "clothing" with phrases to address a salesman such as “I'm wearing a 43" “I'm looking for a 42" shirt “Do you have the same model of another color? ? ".
  • this theme mode assumes a pre-keyboard phase. For example, pressing the "Enter” key twice may create a colored frame around the phrase. You just have to touch the frame at any point so that the text is automatically vocalized. A phrase can also be selected by song by selecting the word or phrase with the stylus and clicking on the "play” button, but this precise selection requires a manual address.
  • the user has an abbreviated keyboard that allows to configure a personal virtual keyboard with eg 59 keys.
  • the corresponding abbreviation chosen by the user for example “Bj” corresponds to “Hello” and “O” corresponds to “Yes” and “AR” corresponds to "Goodbye”. It may also be of a frequent phrase, for example "hello, I'm dumb, can you help me please?"
  • the device comprises a central negation key which, when it is actuated, makes it possible to display a corresponding full negation keyboard in place of the affirmative key, ie the negation, either to the complement, or to the plural or to the vouvoiement of the term or of the previously selected sentence.
  • the key previously selected is "sir”
  • pressing the negation key will make it appear: "gentlemen” and “never” will be the opposite of "always”, "how are you going?" you? Will be the way of "how are you?" Or the complement of "I am dumb” will be "I am not deaf, you can speak normally”.
  • the keys will have different colors depending on whether it is negation, complement, vouvoiement or plural or if it does not exist.
  • the user can choose between an immediate vocalization when he has memorized the keyboard or in support of the "play" button as long as he is learning and he will want to check the message beforehand displaying on the screen before it is vocalized so as not to make an error vis-à-vis its interlocutor.
  • the keys are fully configurable and carry a two-letter abstract chosen by the user, so “Hello” for example bears the letters "Bj” and goodbye can be identified by "AR”.
  • the position of the key is precisely defined by the user among the 5 rows of 12 keys for the keyboard of 59 keys.
  • the interrogative keys are marked by a different form compared to the affirmatives and the user can group in the same zone close terms such as for example Sir, Madam, Miss.
  • the number of keys is itself configurable so that people with a tremor or poor eyesight can use fewer keys
  • the system also allows you to press several keys at once, and then start all the words. For example you can press successively on 3 keys: “hello” then the key “madam” then “how are you?" And vocalize by pressing the "play” button “Hello ma'am, how are you? ".
  • the relative and / or additional information may correspond to sounds recorded for example musical or emitted by a person. Indeed, the vocal synthesis does not easily make it possible to vocalize very common onomatopoeia of the language whose intonation gives all the meaning such as an "oh” admiring or pain, an "ah” of astonishment or relief.
  • pre-recorded sounds can be used for waiting music while building a sentence or signal to attract attention, and silence before starting speech synthesis.
  • the relative and / or additional information may correspond to pictograms, that is to say to a simple and / or animated drawing.
  • pictograms For example, the diagram of a toilet allows to ask where are the toilets.
  • these pictograms can be classified by themes and by level of difficulty or complexity. For example, the choice of the theme emotion or sensation may suggest mimicry suggesting "I'm tired,””I'msad,””I'mangry.”
  • this mode does not require mastering the alphabet.
  • the relative and / or additional information may correspond to pre-written sentences or to animated sequences in sign language.
  • the device according to the invention may comprise means for selecting the different general themes.
  • This device can be useful in various ways:
  • a message presented in a graphic form such as a slide that can be full screen and including text and / or images, possibly accompanied by a voice synthesis of this message.
  • a graphic form such as a slide that can be full screen and including text and / or images, possibly accompanied by a voice synthesis of this message.
  • the most common message may be "I'm dumb” and on a second slide "would you like to help me? And on a third "thank you”.
  • the passage from one slide to another is done, either automatically and timed, or by means of an action on a key of the device.
  • the interlocutor approached, having agreed to help can hear the spoken message of the user for example with a headset or a speaker if it is not useful to be discreet.
  • a sentence can also be selected totally or partially with a stylus for example, and then be validated to have a full screen display and / or a corresponding speech synthesis.
  • the relative and / or additional information may correspond to animated sequences in sign language and to terms, expressions and corresponding pre-written sentences.
  • the device can perform translations between spoken language and sign language.
  • the mute person chooses one or more animated sequences representing what it means, in sign language, the corresponding sentence is displayed and / or is translated into speech synthesis. For example, the three signs corresponding to "me”, “want”, “eat” will be converted to "I want to eat”.
  • the device may include or use a search engine to allow, in the opposite direction, the interlocutor not knowing the sign language to search on the basis of keywords a complete preprogrammed sentence that is validated and scheduled according to the chronology of the sign language and corresponding to an animated sequence.
  • the selected phrase can be translated into sign language using a corresponding animated sequence.
  • sign language is used as the starting and ending message language for the user through a database of animated sequences, the response of the interlocutor become user of said device is possible through a keyword search engine that can find the answer translated into sign language.
  • This device may comprise wired or wireless data transmission means to a second display module.
  • a second display module can be added to the one that the user has in hand so that his interlocutor follows the construction of the sentence so that he patiently or anticipates the rest of the sentence.
  • a word is badly understood, it is more easy to identify a displayed error rather than stated via speech synthesis.
  • the second display module can be configured with large characters to facilitate the follow-up of the conversation by several interlocutors.
  • This second display module can also be associated with second input and / or selection means to allow the interlocutor to make a response.
  • the second input and / or selection means may be wired or wireless. In the case of second input means and / or wireless selection, it may in particular allow a remote response to a hearing-impaired person such as in a meeting around a table for example.
  • the device according to the invention may be shaped to be used with a mobile phone or the method may be integrated into mobile phones called "smartphones" which integrate a pocket computer.
  • SMS short-to-letter entry mode
  • the mute user connects a headset connected to the device connected to the phone's microphone
  • the result of a speech synthesis is performed amplified and the microphone of the phone captures the result of this synthesis in order to be able to transmit it to the remote interlocutor;
  • the mute user can then, at the same time as his interlocutor, listen for control purposes, by means of a second headset, the message, expressed by voice synthesis, he has chosen. He can also listen to the answer through the phone.
  • This variant allows a silent person to express himself discreetly on the phone and to check the messages.
  • the method and / or the device can be used to communicate by means of an instant messaging software. Entering messages can be easier and faster. As a result, communication costs may be reduced.
  • the device according to the invention may further comprise means for adjusting, for example, the size of the characters entered and / or the size of the pictograms and / or animated sequences.
  • the device according to the invention may furthermore comprise means for recording any abbreviation and any pronunciation different from the expected pronunciation for a given theme or information.
  • the device does not take into account spelling but phonetics. It is also possible to type a text in a phonetic way, and this without programming, "it's nice” can be typed "il fé bo".
  • the user can configure any abbreviation or pronunciation or both at the same time for a word. It can enable or disable these lists of abbreviations or pronunciations.
  • Users are, for example, elderly people who have had degenerative brain damage or a stroke, people who no longer have vocal cords or tongue following an operation of cancer of the throat or larynx, persons deaf or dumb whether or not they use sign language, children with autism, stutterers or voicers.
  • the device comprises means for selecting the level of complexity of the different themes and relative and additional information of the device.
  • the device may also include locating means, for example a GPS system.
  • the device according to the invention has many advantages, in particular:
  • any interlocutor can make an answer to the dumb person if this disabled person understands only the sign language;
  • FIG. 1 represents a diagram of an architecture of a device according to the invention
  • FIG. 2 represents a flowchart of a method according to the invention
  • FIGS 3a to 3c illustrate the method of the invention.
  • FIGS 4a and 4b also illustrate the method of the invention.
  • FIG. 1 illustrates a device according to the invention comprising the following elements:
  • a display module 3 at least one RAM memory 4,
  • ROM 5 containing executable programs corresponding to the various operating modes of the keyboard, to a database management system, speech synthesis, at least one database 6,
  • the method according to the invention is implemented as follows (FIG. 2): a) a display of general topics (Block 9), b) an action on a key corresponding to a general theme (Block 10), c) a scrolling of information relating to the general theme thus selected (Block 1 1), d) a selection of the appropriate relative information by action on the corresponding key (Block 12), e) a storage in memory of the selection (Block 13), f) if there is additional information (Block 14), a scrolling additional information about the selected information
  • step j otherwise the method directly performs step j), g) a selection of additional information (Block 16), h) a storage in memory of the selection (Block 17), i) if there has additional information (Block 18), a repetition of steps f) (Block 15) to h) (Block 17) else, j) a display of the sentence thus constructed (Block 19); k) possible vocalization of the sentence (Block 20).
  • FIGS. 3a to 3c show a screen 20 of a display module 3 and input and / or selection means 1 of a device according to the invention 21, the screen displaying icons corresponding to the functionalities described: free input mode 23, abbreviated keyboard 31 and general topics 24.
  • said input and / or selection means comprise dynamic keys 22 which can be actuated by pressing on the screen with the aid of a finger or a stylet (not shown).
  • These keys display icons corresponding to different general topics 24a to 24f such as "people”, “places”, “stores”, “courtesy formulas", "doctor”.
  • the device further comprises keys for controlling a speech synthesis, a "play” key 25 a "pause” key 26 and a “stop” key 27.
  • keys for controlling a speech synthesis a "play” key 25 a "pause” key 26 and a "stop” key 27.
  • the selection of a theme 24a to 24f by pressing the corresponding key leads to the display of information relating to this theme.
  • pressing the key 25 stores the selected formula in memory.
  • the selected formula remains displayed in a part of the screen which can be enlarged thanks to an enlargement function and automatically disappears once vocalized.
  • FIGS. 4a to 4b show the device according to the invention 21 with the screen 20 displaying icons corresponding to the abbreviated key mode selected 31 with the display module 3 and input and / or selection means 1.
  • said input and / or selection means comprise a keyboard 32 provided in this case with six dynamic keys 33 that can be actuated by pressing on the screen with the aid of a finger or a stylus.
  • the screen 34 displays the equivalence of the selected key "Bj" which vocalizes "Bonjour” either after pressing the key 25, or automatically.
  • the negation key 35 is actuated by pressing the corresponding key and leads to the display of the negations of the corresponding keys.
  • the selected formula "AR" remains displayed on the screen 34 and automatically disappears once vocalized to "Goodbye”.
  • the method according to the invention thus comprises: the free input mode where the user taps on a virtual keyboard and types a sentence of his choice which is then said aloud; and / or o the themes mode which groups together in several chapters detailed pre - written sentences whose total or partial selection triggers the vocal synthesis; and / or o the abbreviated keypad mode which makes it possible to configure a personal affirmation virtual keypad with, for example, 59 keys to choose from corresponding to the reading of the expression or the sentence programmed by clicking.
  • the device according to the invention comprises a central negation key which makes it possible, when it is pressed on it, to display an entire negation keyboard corresponding to said virtual affirmation keyboard, each key of the keyboard of negation corresponding to a key of the affirmation keyboard: thus, by way of example, the key of the affirmation keyboard allowing to display "always" becomes in the negation keyboard "never”; the number of keys, their content, their color, their abstract are completely configurable by the user; the sign language mode, which can be used as a start and end message language for the user thanks to a database of animated sequences, the response of said user is possible thanks to a word search engine unique or crossed key that can find the answer translated into sign language and operate it in full screen. It should be noted that a semantic analysis can also be used.
  • the dimensions of the device may be for example 10 centimeters in width to fit in a pocket.
  • the devices according to the invention may comprise larger screens, having for example a width of at least 30 centimeters, in order to allow these persons with disabilities to use rods or tutors (or equivalent means) to enable them to press virtual keys with larger dimensions.

Abstract

This invention relates to a communication method enabling construction of sentences, in particular, and the preferably portable device for implementation thereof. To this end, it offers a communication method for deaf and/or deaf-mute persons enabling sentence construction, this method being implemented via a device comprising: input and/or selection means (1) comprising keys, a processing module (2), a database management module (2), a display module (3) capable of including a screen; a memory module (4, 5), a storage module for at least one database (6), characterized in that it includes the following steps: a) displaying of general themes, b) acting on a key corresponding to a general theme, c) scrolling of information relating to the general theme thus selected, d) selection of appropriate relative information by acting on the corresponding key, e) storing the selection in memory, f) displaying the phrase or message thus constructed on the screen and/or vocalization of said message by means of voice synthesis.

Description

PROCEDE DE COMMUNICATION POUR MUETS ET/OU SOURDS - MUETS ET SON DISPOSITIF DE MISE EN OEUVRECOMMUNICATION METHOD FOR MUETS AND / OR MUTS AND ITS DEVICE FOR IMPLEMENTING THE SAME
La présente invention concerne un procédé de communication permettant notamment une construction de phrases et son dispositif préférentiellement portatif de mise en oeuvre. Elle s'applique plus particulièrement, mais non exclusivement, aux personnes provisoirement ou définitivement et totalement ou partiellement muettes et/ou sourdes - muettes utilisant ou n'utilisant pas la langue des signes ou encore à toute personne préférant ne pas montrer un accent, un bégaiement, une difficulté à articuler. L'invention peut s'appliquer à des personnes âgées ayant subi une atteinte cérébrale, les personnes n'ayant plus de cordes vocales ou de langue suite à une opération pour un cancer, et les enfants autistes, Enfin, les personnes paralysées et trachéotomisées pourront se servir d'un appareil de plus grande dimension.The present invention relates to a communication method for particular a sentence construction and its preferentially portable device implementation. It applies more particularly, but not exclusively, to persons provisionally or permanently and totally or partially dumb and / or dumb using or not using sign language or to anyone preferring not to show an accent, stuttering, difficulty in articulating. The invention can be applied to elderly persons who have suffered cerebral injury, persons who no longer have vocal cords or tongues following an operation for cancer, and children with autism. Finally, paralyzed and tracheotomized persons may use a larger device.
De façon générale, au cours de leurs activités et de leurs déplacements quotidiens, les personnes muettes et/ou sourdes - muettes ont besoin d'entrer en contact avec d'autres personnes.In general, during their daily activities and movements, dumb and / or dumb people need to get in touch with other people.
Pour communiquer, elles ont le plus souvent recours à une ardoise effaçable ou une pancarte.To communicate, they most often use an erasable slate or sign.
Cette solution n'est pas valorisante, peu rapide et peut s'avérer encombrante.This solution is not rewarding, not fast and can be cumbersome.
II existe également des dispositifs avec des touches physiques pour composer des syllabes et d'autres dispositifs plus sophistiqués utilisant un affichage et un mode de saisie de données mais ils se révèlent souvent encombrants et requièrent une manipulation longue, préjudiciable à la conversation. Ces dispositifs sont encombrants et lourds et ne peuvent pas être rangés dans une poche de chemise ou de veste.There are also devices with physical keys for composing syllables and other more sophisticated devices using a display and a data entry mode but they are often bulky and require lengthy manipulation, detrimental to the conversation. These devices are bulky and heavy and can not be stored in a shirt or jacket pocket.
D'autre part, ces dispositifs ne permettent pas d'anticiper pleinement la composition de phrases communes et répétitives, ou de donner une réponse instantanée en utilisant des phrases complexes, en raison du délai incompressible nécessaire pour réaliser la saisie.On the other hand, these devices do not make it possible to fully anticipate the composition of common and repetitive sentences, or to give an instantaneous answer by using complex sentences, because of the incompressible delay necessary to perform the input.
L'invention a pour objet de résoudre ces inconvénients notamment :The object of the invention is to solve these disadvantages, in particular:
• en diminuant le temps requis pour formuler un message ;• decreasing the time required to formulate a message;
• en anticipant la rédaction d'un message en fonction des circonstances• by anticipating the writing of a message according to the circumstances
• en adaptant de surcroît la complexité de langage au niveau de handicap d'une personne et à sa capacité à écrire ou à conceptualiser ce qu'elle veut communiquer ;• further adapting language complexity to a person's disability level and to writing or conceptualizing what they want to communicate;
• en s'adaptant à l'utilisateur en fonction de son handicap éventuellement associé en utilisant notamment des touches à la fois tactiles et virtuelles, une touche virtuelle étant totalement paramétrable ;Adapting to the user according to his possibly associated handicap by using in particular touch keys both virtual and virtual, a virtual key being fully customizable;
• en permettant de visualiser le message composé sur un écran, ce qui permet de garantir une grande discrétion.• by allowing to display the message composed on a screen, which allows to guarantee a great discretion.
Un autre avantage du système est de chercher à gagner en temps sur une saisie classique au clavier qui peut impatienter l'interlocuteur car elle est réalisée lettre par lettre. Le système propose tout un ensemble de fonctionnalités qui économise entièrement ou partiellement la frappe des mots ou le nombre de clics et permet d'anticiper des phrases ou des mots qui surviennent de manière répétitive dans une conversation habituelle.Another advantage of the system is to seek to save time on a classic keyboard input that can annoy the speaker because it is carried out letter by letter. The system offers a whole set of features that fully or partially saves the typing of words or the number of clicks and allows you to anticipate phrases or words that occur repeatedly in a regular conversation.
De plus, le système est visuellement ajustable pour plus de confort pour les personnes ayant un trouble de la vision associé et de pouvoir régler par exemple la taille des caractères saisis ou du clavier mais aussi la taille des pictogrammes ou des séquences vidéo de langue des signes. Le doigt peut aussi servir de stylet en cas de choix de grosses touchesIn addition, the system is visually adjustable for comfort for people with a vision disorder and can adjust for example the size of characters entered or the keyboard but also the size of pictograms or video sequences of sign language. The finger can also be used as a stylus when choosing large keys
A cet effet, elle propose un procédé de communication pour muets et/ou sourds - muets permettant une construction de phrases, ce procédé étant mis en œuvre par un dispositif comportant :For this purpose, it proposes a communication method for dumb and / or deaf-mutes allowing sentence construction, this method being implemented by a device comprising:
- un module d'affichage pouvant comprendre un écran ;a display module that can include a screen;
- un module de traitement ;a treatment module;
- un module de mémoire ; - un module de stockage d'au moins une base de données ;- a memory module; a module for storing at least one database;
- un module de gestion de la base de données ;- a management module of the database;
- des moyens de saisie et/ou de sélection comprenant des touches pouvant être physiques ou virtuelles, et éventuellement un stylet ; ledit procédé comprenant les étapes suivantes : a) un affichage de thèmes généraux ; b) une action sur une touche correspondant à un thème général ; c) un défilement d'informations relatives au thème général ainsi sélectionné ; d) une sélection de l'information relative appropriée par action sur la touche correspondante ; e) un stockage en mémoire de la sélection ; f) s'il y a des informations supplémentaires relatives à l'information sélectionnée, un défilement desdites informations supplémentaires sinon le procédé passe directement à l'étape j) ; g) une sélection d'une information supplémentaire ; h) un stockage en mémoire de la sélection ; i) une répétition des étapes f) à h) jusqu'à ce qu'il n'y ait plus d'informations supplémentaires ; j) un affichage de la phrase ou du message ainsi construit sur l'écran et/ou une vocalisation dudit message au moyen d'une voix de synthèse.input and / or selection means comprising keys that can be physical or virtual, and possibly a stylus; said method comprising the steps of: a) displaying general topics; b) an action on a key corresponding to a general theme; c) a scrolling of information relating to the general theme thus selected; d) a selection of the appropriate relative information by action on the corresponding key; e) storage in memory of the selection; f) if there is additional information relating to the selected information, a scrolling of said additional information or the process goes directly to step j); (g) a selection of additional information; h) storage in memory of the selection; i) a repetition of steps f) to h) until there is no further information; j) a display of the sentence or message thus constructed on the screen and / or a vocalization of said message by means of a synthetic voice.
Bien entendu, chaque étape de sélection et de stockage pourra être suivie d'une étape d'affichage. - A -Of course, each step of selection and storage may be followed by a display step. - AT -
Les touches pourront être physiques et/ou virtuelles, telles que celles d'un clavier. Les touches physiques et/ou virtuelles pourront être animées ou configurables. Dans le cas de touches animées, elles pourront consister par exemple en une icône représentant un thème général.The keys may be physical and / or virtual, such as those of a keyboard. The physical and / or virtual keys can be animated or configurable. In the case of animated keys, they may consist for example of an icon representing a general theme.
Le procédé pourra en outre permettre la synthèse vocale de tout ou partie de la phrase construite.The method may further enable the speech synthesis of all or part of the constructed sentence.
Le dispositif pourra en outre comprendre un module de synthèse vocale, des moyens de commande de ladite synthèse vocale et des moyens d'écoute tels que des oreillettes, un casque ou un haut-parleur.The device may further comprise a speech synthesis module, means for controlling said speech synthesis and listening means such as earphones, a headset or a speaker.
La synthèse vocale pourra être déclenchée automatiquement à chaque sélection ou en utilisant une touche spécifique après avoir composé partiellement ou entièrement une phrase.The speech synthesis can be triggered automatically with each selection or by using a specific key after having partially or entirely composed a sentence.
Le dispositif pourra comprendre des moyens visuels pour suivre l'énoncé vocal et la progression de la phrase. Les syllabes de la phrase pourront changer de couleur ou être surlignées au fur et à mesure où elles seront énoncées afin que la personne handicapée, notamment sourde, puisse savoir quand la phrase est terminée.The device may include visual means for tracking the speech utterance and the progression of the sentence. The syllables of the sentence may change color or be highlighted as and when they are spoken so that the disabled person, especially the deaf person, can know when the sentence is over.
Selon une variante, une barre de progression de l'énoncé de la phrase pourra être affichée.Alternatively, a progress bar of the sentence utterance may be displayed.
Le module d'affichage pourra comprendre des moyens pour agrandir un texte par exemple pour les malvoyants ou pour permettre une lecture pour plusieurs interlocuteurs à la fois.The display module may include means for enlarging a text for example for the visually impaired or to allow reading for several interlocutors at a time.
Selon une variante, le dispositif selon l'invention pourra comprendre un clavier alphanumérique tactile virtuel de type AZERTY, QWERTY ou ABCD ou encore personnalisé notamment en fonction de la fréquence d'utilisation des touches de saisie. Ainsi, il sera possible d'introduire des termes ou des expressions qui ne sont pas prévus.According to one variant, the device according to the invention may comprise a virtual alphanumeric touch keyboard of the QWERTY, QWERTY or ABCD type or else customized in particular according to the frequency of use of the input keys. Thus, it will be possible to introduce terms or expressions that are not intended.
Dans cette variante, il pourra également comprendre des moyens d'analyse et de suggestion afin d'économiser entièrement ou partiellement la frappe de mots qui surviennent de sorte que la frappe de « pro » propose des mots comme « profession, professionnel, probable, etc » et qu'après les 3 lettres suivantes « bab » formant « probab », le système propose avec en tête par un indice de fréquence d'utilisation « probable », probabilité », probablement ». A cet effet, au fur et à mesure de la saisie d'un terme, lesdits moyens d'analyse et de suggestion proposent des termes pouvant correspondre.In this variant, it may also include means of analysis and suggestion in order to entirely or partially save the typing of words that occur so that the typing of "pro" proposes words such as "profession, professional, probable, etc. And after the next 3 letters "bab" forming "probab", the system proposes headed by a "likely" probability of use, likelihood "probably". For this purpose, as and when entering a term, said means of analysis and suggestion propose terms that can match.
Selon une autre variante, dans un mode de fonctionnement avec saisie libre, l'utilisateur frappe sur un clavier virtuel AZERTY ou QWERTY ou ABCD ou autre personnalisé et tape un mot ou une phrase de son choix qui est ensuite vocalisé après sélection au stylet et pression sur le bouton "play". Toutefois, pour éviter une sélection trop précise des mots avec le stylet pour des personnes ayant des difficultés de vue ou de tremblement, le système est conçu de telle manière que l'appui de la touche « entrée » après la frappe du texte déclenche la synthèse vocale de toute la ligne en amont.According to another variant, in a mode of operation with free input, the user strikes on a virtual keyboard QWERTY or QWERTY or ABCD or other custom and type a word or a phrase of his choice which is then vocalized after selection with stylus and pressure on the "play" button. However, to avoid precise selection of words with the stylus for people with vision difficulties or shaking, the system is designed in such a way that pressing the "enter" key after typing triggers the synthesis voice of the entire line upstream.
Selon une autre variante, l'utilisateur créée et choisit des thèmes totalement librement qui regroupent sur plusieurs sujets des phrases préécrites et dont la sélection totale ou partielle permet le stockage et/ou l'affichage et éventuellement la synthèse vocale.According to another variant, the user creates and chooses totally free themes that group on several topics prewritten sentences and whose total or partial selection allows storage and / or display and possibly voice synthesis.
Ces thèmes généraux peuvent correspondre à des catégories de besoins, à des personnes ou à des catégories de personnes, à des catégories de situations tels que des magasins, des catégories de lieux. Ce mode permet de préparer un entretien avec des phrases sans faire attendre son interlocuteur le temps de la saisie en vocalisant toute une phrase en une touche avec le stylet.These general themes may correspond to categories of needs, to persons or categories of people, to categories of situations such as shops, categories of places. This mode makes it possible to prepare an interview with sentences without waiting for the interlocutor the time of the entry by vocalizing a whole sentence in a touch with the stylus.
A titre d'exemple, le mode thème pourra être préparé par l'utilisateur pour le thème « docteur » et des phrases seront saisies telles que « j'ai de la fièvre » «j'ai mal aux articulations », « j'ai des nausées », « j'ai besoin de renouveler mon ordonnance pour ce médicament X ».For example, the theme mode can be prepared by the user for the theme "doctor" and sentences will be entered such as "I have fever" "I have sore joints,""I feel nausea,""I need to renew my prescription for this drug X".
Un autre exemple de thème peut être « vêtement » avec des phrases pour s'adresser à un vendeur telles que « je chausse du 43 » « je cherche une chemise de 42 en coton » « avez-vous le même modèle d'une autre couleur ? ».Another example of a theme can be "clothing" with phrases to address a salesman such as "I'm wearing a 43" "I'm looking for a 42" shirt "Do you have the same model of another color? ? ".
Dans le thème « nourriture », on pourra trouver la liste « je voudrais un verre d'eau s'il vous plaît », « puis-je avoir le menu ? », « j'ai besoin de 4 places », « puis-je avoir l'addition ? » et cliquer en face de la ligne choisie. L'avantage de la solution thème est aussi de préparer des questions ou commentaires dans une circonstance prévue, par exemple des questions sur un dossier en vue d'une réunion et de supprimer le dossier après la tenue de la réunion.In the theme "food", we can find the list "I would like a glass of water please", "can I have the menu? »,« I need 4 places »,« Can I have the addition? And click in front of the chosen line. The advantage of the thematic solution is also to prepare questions or comments in a given circumstance, for example questions on a file for a meeting and to delete the file after the meeting.
A l'inverse de la saisie libre sur clavier ce mode thème suppose une phase de frappe au clavier préalable. La pression par exemple de la touche « entrée » à deux reprises peut éventuellement permettre de créer un cadre coloré autour de la phrase. Il suffit alors de toucher le cadre à un endroit quelconque pour que le texte soit vocalisé automatiquement. Une phrase peut également être sélectionnée par morceau en sélectionnant avec le stylet le mot ou l'expression puis en cliquant sur le bouton "play" mais cette sélection précise demande de l'adresse manuelle.In contrast to free keyboard input, this theme mode assumes a pre-keyboard phase. For example, pressing the "Enter" key twice may create a colored frame around the phrase. You just have to touch the frame at any point so that the text is automatically vocalized. A phrase can also be selected by song by selecting the word or phrase with the stylus and clicking on the "play" button, but this precise selection requires a manual address.
Selon une autre variante, l'utilisateur dispose d'un clavier abrégé qui permet de configurer un clavier virtuel personnel doté par exemple de 59 touches. Sur la touche est marquée l'abréviation correspondante choisie par l'utilisateur, par exemple « Bj» correspond à « Bonjour » et « O » correspond à « Oui » et « AR» correspond à « au revoir » II peut s'agir aussi d'une phrase fréquente, par exemple « bonjour, je suis muet, pouvez vous m'aider s'il vous plaît ?».According to another variant, the user has an abbreviated keyboard that allows to configure a personal virtual keyboard with eg 59 keys. On the key is marked the corresponding abbreviation chosen by the user, for example "Bj" corresponds to "Hello" and "O" corresponds to "Yes" and "AR" corresponds to "Goodbye". It may also be of a frequent phrase, for example "hello, I'm dumb, can you help me please?"
La frappe de la touche sélectionnée fait apparaître le mot ou l'expression dans un champ avec une fonction Zoom pour les personnes malvoyantes. Le texte est alors dit automatiquement ou en appuyant sur la touche «play » De plus, selon cette variante, le dispositif selon l'invention comprend une touche centrale de négation qui permet, lorsque l'on l'actionne, de faire apparaître un clavier entier de négation correspondant en lieu et place de la touche affirmative, soit à la négation, soit au complément, soit au pluriel soit au vouvoiement du terme ou de la phrase préalablement sélectionné. Ainsi, à titre d'exemple, si le touche préalablement sélectionnée est "monsieur", l'appui sur la touche de négation permettra de faire apparaître : "messieurs" et « jamais » sera le contraire de « toujours », « comment allez-vous ? » sera le vouvoiement de « comment vas-tu ? » ou le complément de « je suis muet » sera « je ne suis pas sourd, vous pouvez parler normalement ».Typing the selected key displays the word or phrase in a field with a Zoom function for the visually impaired. The text is then said automatically or by pressing the play key Moreover, according to this variant, the device according to the invention comprises a central negation key which, when it is actuated, makes it possible to display a corresponding full negation keyboard in place of the affirmative key, ie the negation, either to the complement, or to the plural or to the vouvoiement of the term or of the previously selected sentence. Thus, for example, if the key previously selected is "sir", pressing the negation key will make it appear: "gentlemen" and "never" will be the opposite of "always", "how are you going?" you? Will be the way of "how are you?" Or the complement of "I am dumb" will be "I am not deaf, you can speak normally".
Afin de faciliter la mémorisation de ce double clavier de 1 18 touches, les touches disposeront de couleurs différentes selon qu'il s'agit de négation, complément, vouvoiement ou pluriel ou s'il n'existe pas. De plus, l'utilisateur pourra choisir entre une vocalisation immédiate lorsqu'il aura bien mémorisé le clavier ou à l'appui de la touche "play " aussi longtemps qu'il sera en apprentissage et qu'il voudra vérifier préalablement le message s'affichant à l'écran avant qu'il soit vocalisé pour ne pas faire d'erreur vis-à-vis de son interlocuteur.In order to facilitate the memorization of this double keyboard of 1 18 keys, the keys will have different colors depending on whether it is negation, complement, vouvoiement or plural or if it does not exist. In addition, the user can choose between an immediate vocalization when he has memorized the keyboard or in support of the "play" button as long as he is learning and he will want to check the message beforehand displaying on the screen before it is vocalized so as not to make an error vis-à-vis its interlocutor.
De plus, les touches sont totalement paramétrables et portent un abrégé en deux lettres choisi par l'utilisateur, ainsi « Bonjour » porte par exemple les lettres « Bj » et au revoir est repérable par « AR ».In addition, the keys are fully configurable and carry a two-letter abstract chosen by the user, so "Hello" for example bears the letters "Bj" and goodbye can be identified by "AR".
Enfin, toujours pour aider à la mémorisation, la position de la touche est précisément définie par l'utilisateur parmi les 5 rangées de 12 touches pour le clavier de 59 touches. Les touches interrogatives sont marquées par une forme différente par rapport aux affirmatives et l'utilisateur peut regrouper dans une même zone des termes proches comme par exemple Monsieur, Madame, Mademoiselle.Finally, still to help with memorization, the position of the key is precisely defined by the user among the 5 rows of 12 keys for the keyboard of 59 keys. The interrogative keys are marked by a different form compared to the affirmatives and the user can group in the same zone close terms such as for example Sir, Madam, Miss.
Le nombre de touches est lui-même paramétrable pour que des personnes ayant un tremblement ou une mauvaise vue puissent utiliser moins de touches Le système permet également d'appuyer sur plusieurs touches à la fois, et de lancer ensuite la totalité des mots. Par exemple on peut appuyer successivement sur 3 touches : « bonjour » puis la touche « madame » puis « comment allez-vous ?» et vocaliser en actionnant sur la touche « play » «bonjour madame, comment allez vous ? ».The number of keys is itself configurable so that people with a tremor or poor eyesight can use fewer keys The system also allows you to press several keys at once, and then start all the words. For example you can press successively on 3 keys: "hello" then the key "madam" then "how are you?" And vocalize by pressing the "play" button "Hello ma'am, how are you? ".
Aussi rapidement on peut dire en cliquant sur 2 touches « au revoir messieurs ». Ainsi des phrases peuvent être rapidement vocalisées, par exemple la touche « bonjour » complétée par la touche « au revoir » avec les touches « monsieur » « madame » « mademoiselle» complétées par les pluriel et « comment vas-tu » complété par « comment allez-vous ? » permet avec 5 touches d'obtenir 42 possibilités au lieu de 42 touches dont la mémorisation aurait été fastidieuse. En effet, on peut avec ces 5 touches vocaliser par exemple « bonjour Monsieur» ainsi que « au revoir mesdemoiselles » ainsi que « bonjour mesdames, comment allez vous ? ».As quickly we can say by clicking on 2 keys "goodbye gentlemen". Thus sentences can be quickly vocalized, for example the key "hello" completed by the key "goodbye" with the keys "sir" "madam" "miss" supplemented by the plural and "how are you" completed by "how are you going? Allows with 5 keys to obtain 42 possibilities instead of 42 keys whose memorization would have been tedious. Indeed, we can with these 5 keys vocalize for example "Hello Mr." and "Goodbye ladies" and "Hello ladies, how are you? ".
Les informations relatives et/ou supplémentaires pourront correspondre à des sons enregistrés par exemple musicaux ou émis par une personne. En effet, la synthèse vocale ne permet pas aisément de vocaliser des onomatopées très courantes du langage dont l'intonation donne tout le sens telles qu'un « oh » admiratif ou de douleur, un « ah » d'étonnement ou de soulagement.The relative and / or additional information may correspond to sounds recorded for example musical or emitted by a person. Indeed, the vocal synthesis does not easily make it possible to vocalize very common onomatopoeia of the language whose intonation gives all the meaning such as an "oh" admiring or pain, an "ah" of astonishment or relief.
D'autres sons préenregistrés peuvent être utilisés pour une musique d'attente pendant la construction d'une phrase ou un signal pour attirer l'attention et que le silence se fasse avant de lancer la synthèse vocale.Other pre-recorded sounds can be used for waiting music while building a sentence or signal to attract attention, and silence before starting speech synthesis.
Les informations relatives et/ou supplémentaires pourront correspondre à des pictogrammes, c'est-à-dire à un dessin simple et/ou animé. Par exemple, le schéma d'un WC permet de demander où sont les toilettes. Pour augmenter la vitesse de sélection, ces pictogrammes pourront être classés par thèmes et par niveau de difficulté ou de complexité. Par exemple, le choix du thème émotion ou sensation pourra proposer des mimiques suggérant « je suis fatiguée », « je suis triste », « je suis en colère ».The relative and / or additional information may correspond to pictograms, that is to say to a simple and / or animated drawing. For example, the diagram of a toilet allows to ask where are the toilets. To increase the speed of selection, these pictograms can be classified by themes and by level of difficulty or complexity. For example, the choice of the theme emotion or sensation may suggest mimicry suggesting "I'm tired,""I'msad,""I'mangry."
Avantageusement, ce mode ne nécessite pas de maîtriser l'alphabet.Advantageously, this mode does not require mastering the alphabet.
Les informations relatives et/ou supplémentaires pourront correspondre à des phrases pré-écrites ou à des séquences animées en langue des signes.The relative and / or additional information may correspond to pre-written sentences or to animated sequences in sign language.
Bien entendu, le dispositif selon l'invention pourra comprendre des moyens de sélection des différents thèmes généraux.Of course, the device according to the invention may comprise means for selecting the different general themes.
Ce dispositif pourra être utile de diverses manières :This device can be useful in various ways:
II pourra permettre à l'utilisateur de se présenter en affichant un message présenté sous une forme graphique telle qu'une diapositive pouvant être en plein écran et comprenant texte et/ou images, éventuellement accompagnées d'une synthèse vocale de ce message. Cette manière de se présenter à distance n'est pas dénigrante pour les déficients de la parole comme peut l'être l'utilisation d'une ardoise effaçable ou une pancarte.It may allow the user to present himself by displaying a message presented in a graphic form such as a slide that can be full screen and including text and / or images, possibly accompanied by a voice synthesis of this message. This way of presenting oneself at a distance is not disparaging for the speech impaired, as can the use of an erasable slate or a sign.
Au contraire, le vecteur ayant une forte connotation technologique, l'usage du système est valorisant.On the contrary, the vector having a strong technological connotation, the use of the system is rewarding.
Par exemple, le message le plus courant pourra être « je suis muet » et sur une deuxième diapositive « voulez-vous m'aider ? » et sur une troisième « merci ». Le passage d'une diapositive à l'autre se fait, soit de manière automatique et minutée, soit au moyen d'une action sur une touche du dispositif. Dans un deuxième temps, l'interlocuteur approché, ayant accepté d'aider, pourra entendre le message parlé de l'utilisateur par exemple avec une oreillette ou un haut-parleur s'il n'est pas utile d'être discret.For example, the most common message may be "I'm dumb" and on a second slide "would you like to help me? And on a third "thank you". The passage from one slide to another is done, either automatically and timed, or by means of an action on a key of the device. In a second step, the interlocutor approached, having agreed to help, can hear the spoken message of the user for example with a headset or a speaker if it is not useful to be discreet.
Une phrase peut également être sélectionnée totalement ou partiellement avec un stylet par exemple, puis être validée pour avoir un affichage plein écran et/ou une synthèse vocale correspondante. Les informations relatives et/ou supplémentaires pourront correspondre à des séquences animées en langue des signes et à des termes, expressions, phrases pré-écrites correspondantes.A sentence can also be selected totally or partially with a stylus for example, and then be validated to have a full screen display and / or a corresponding speech synthesis. The relative and / or additional information may correspond to animated sequences in sign language and to terms, expressions and corresponding pre-written sentences.
Ainsi, le dispositif pourra effectuer des traductions entre langage parlé et langage des signes.Thus, the device can perform translations between spoken language and sign language.
La personne muette choisit une ou plusieurs séquences animées représentant ce qu'elle veut dire, en langue des signes, la phrase correspondant s'affiche et/ou est traduite en synthèse vocale. Par exemple, les trois signes correspondant à « moi », « vouloir », « manger » seront convertis en « je veux manger ».The mute person chooses one or more animated sequences representing what it means, in sign language, the corresponding sentence is displayed and / or is translated into speech synthesis. For example, the three signs corresponding to "me", "want", "eat" will be converted to "I want to eat".
Le dispositif pourra comprendre ou utiliser un moteur de recherche pour permettre, dans le sens inverse, à l'interlocuteur ne connaissant pas la langue des signes de rechercher sur la base de mots-clés une phrase complète préprogrammée c'est à dire validée et ordonnancée en fonction de la chronologie de la langue des signes et correspondant à une séquence animée. La phrase sélectionnée pourra être traduite en langue des signes au moyen d'une séquence animée correspondante. Dans ce mode "retour en langage des signes", le langage des signes est utilisé en tant que langage de message de départ et d'arrivée pour l'utilisateur grâce à une banque de données de séquences animées, la réponse de l'interlocuteur devenu utilisateur dudit dispositif est possible grâce à un moteur de recherche par mots clés qui permet de trouver la réponse traduite en langage des signes.The device may include or use a search engine to allow, in the opposite direction, the interlocutor not knowing the sign language to search on the basis of keywords a complete preprogrammed sentence that is validated and scheduled according to the chronology of the sign language and corresponding to an animated sequence. The selected phrase can be translated into sign language using a corresponding animated sequence. In this "sign language back" mode, sign language is used as the starting and ending message language for the user through a database of animated sequences, the response of the interlocutor become user of said device is possible through a keyword search engine that can find the answer translated into sign language.
A titre d'exemple, taper le mot "Merci" et lancer la recherche permet de trouver une liste de réponses telles que "Merci", "Merci beaucoup", "Je vous remercie", "Je te remercie", "Comment te remercier ?". Le système permet de cliquer en face de la ligne choisie pour visionner la séquence animée correspondante en langue des signes sur l'écran.For example, typing the word "Thank you" and starting the search can find a list of answers such as "Thank you", "Thank you very much", "Thank you", "Thank you", "How to thank you ? ". The system allows you to click in front of the selected line to view the corresponding animated sequence in sign language on the screen.
Ce dispositif pourra comprendre des moyens de transmission de données avec ou sans fil vers un deuxième module d'affichage. En effet, un deuxième module d'affichage pourra être ajouté à celui que l'utilisateur a en mains pour que son interlocuteur suive la construction de la phrase afin qu'il patiente ou anticipe le reste de la phrase. De plus, si un mot est mal saisi, il est plus facile d'identifier une erreur affichée plutôt qu'énoncée via la synthèse vocale.This device may comprise wired or wireless data transmission means to a second display module. Indeed, a second display module can be added to the one that the user has in hand so that his interlocutor follows the construction of the sentence so that he patiently or anticipates the rest of the sentence. Moreover, if a word is badly understood, it is more easy to identify a displayed error rather than stated via speech synthesis.
Le deuxième module d'affichage pourra être configuré avec de gros caractères afin de faciliter le suivi de la conversation par plusieurs interlocuteurs.The second display module can be configured with large characters to facilitate the follow-up of the conversation by several interlocutors.
Ce deuxième module d'affichage peut également être associé à des deuxièmes moyens de saisie et/ou de sélection pour permettre à l'interlocuteur de faire une réponse.This second display module can also be associated with second input and / or selection means to allow the interlocutor to make a response.
Les deuxièmes moyens de saisie et/ou de sélection pourront être avec ou sans fil. Dans le cas de deuxièmes moyens de saisie et/ou de sélection sans fil, il pourra notamment permettre une réponse à distance à une personne malentendante comme dans une réunion autour d'une table par exemple.The second input and / or selection means may be wired or wireless. In the case of second input means and / or wireless selection, it may in particular allow a remote response to a hearing-impaired person such as in a meeting around a table for example.
Selon une variante, le dispositif selon l'invention pourra être conformé pour être utilisé avec un téléphone portable ou le procédé pourra être intégré dans les téléphones portables appelés « smartphone » qui intègrent un ordinateur de poche. En effet, les téléphones actuels proposent l'envoi de SMS composés au moyen d'un mode de saisie lettre à lettre qui est par conséquent plus long. Deux modes de fonctionnement pourront alors être envisagés :According to one variant, the device according to the invention may be shaped to be used with a mobile phone or the method may be integrated into mobile phones called "smartphones" which integrate a pocket computer. Indeed, current phones offer the sending of SMS composed by means of a letter-to-letter entry mode which is therefore longer. Two modes of operation can then be considered:
- l'utilisateur muet connecte une oreillette branchée sur le dispositif reliée sur le microphone du téléphone ;- the mute user connects a headset connected to the device connected to the phone's microphone;
- une fois la phrase saisie grâce au dispositif, le résultat d'une synthèse vocale est réalisé de manière amplifiée et le microphone du téléphone capte le résultat de cette synthèse afin de pouvoir le transmettre à l'interlocuteur distant ;- Once the sentence entered through the device, the result of a speech synthesis is performed amplified and the microphone of the phone captures the result of this synthesis in order to be able to transmit it to the remote interlocutor;
- l'utilisateur muet peut alors, en même temps que son interlocuteur, écouter à des fins de contrôle, au moyen d'une deuxième oreillette, le message, exprimé par voix de synthèse, qu'il a choisi. Il peut également écouter la réponse au moyen du téléphone.- The mute user can then, at the same time as his interlocutor, listen for control purposes, by means of a second headset, the message, expressed by voice synthesis, he has chosen. He can also listen to the answer through the phone.
Cette variante permet à une personne muette de s'exprimer en toute discrétion au téléphone et de vérifier les messages. Selon une deuxième variante s'adressant plus particulièrement aux personnes sourdes et muettes, le procédé et /ou le dispositif pourront être utilisés pour communiquer au moyen d'un logiciel de messagerie instantanée. La saisie des messages pourra ainsi être plus simple et rapide. Par conséquent, les coûts de communications pourront être réduits.This variant allows a silent person to express himself discreetly on the phone and to check the messages. According to a second variant addressing more particularly to the deaf and dumb, the method and / or the device can be used to communicate by means of an instant messaging software. Entering messages can be easier and faster. As a result, communication costs may be reduced.
Le dispositif selon l'invention pourra en outre comprendre des moyens de réglage par exemple de la taille des caractères saisis et/ou de la taille des pictogrammes et/ou des séquences animées.The device according to the invention may further comprise means for adjusting, for example, the size of the characters entered and / or the size of the pictograms and / or animated sequences.
Selon une variante, grâce au mode programmation, le dispositif selon l'invention pourra en outre comprendre des moyens pour enregistrer toute abréviation et toute prononciation différente de la prononciation attendue pour un thème ou une information donnée.According to one variant, thanks to the programming mode, the device according to the invention may furthermore comprise means for recording any abbreviation and any pronunciation different from the expected pronunciation for a given theme or information.
Par exemple, « vs » ou « ns » ou « pcq » et « ce » pourront être les abréviations respectivement de « vous », « nous », « parce que » etFor example, "vs" or "ns" or "pcq" and "this" may be the abbreviations of "you", "us", "because" and "
« c'est »." it is ".
Lors de son fonctionnement, le dispositif ne tient pas compte de l'orthographe mais de la phonétique. Il est également possible de taper un texte de manière phonétique, et ceci sans programmation, « il fait beau » pourra être tapé « il fé bo ».During its operation, the device does not take into account spelling but phonetics. It is also possible to type a text in a phonetic way, and this without programming, "it's nice" can be typed "il fé bo".
Pour la prononciation, le mot « sandwich » sera programmé pour être de manière phonétique « sandouitche ». La prononciation est très utile pour les noms de famille.For pronunciation, the word "sandwich" will be programmed to be phonetic "sandouitche". Pronunciation is very useful for family names.
L'utilisateur peut configurer n'importe quelle abréviation ou prononciation ou les deux en même temps pour un mot. Il peut activer ou désactiver ces listes d'abréviations ou de prononciations.The user can configure any abbreviation or pronunciation or both at the same time for a word. It can enable or disable these lists of abbreviations or pronunciations.
Les utilisateurs sont par exemple des personnes âgées ayant eu une atteinte cérébrale du type dégénératif ou un accident cérébral, des personnes n'ayant plus de cordes vocales ou de langue suite à une opération d'un cancer de la gorge ou du larynx, des personnes sourdes ou sourdes muettes utilisant ou non la langue des signes, les enfants autistes, les personnes bègues ou aphones.Users are, for example, elderly people who have had degenerative brain damage or a stroke, people who no longer have vocal cords or tongue following an operation of cancer of the throat or larynx, persons deaf or dumb whether or not they use sign language, children with autism, stutterers or voicers.
Afin de s'adapter à l'âge et au niveau déclinant ou ascendant d'apprentissage de la parole, le dispositif comprend des moyens de sélection du niveau de complexité des différents thèmes et informations relatives et supplémentaires du dispositif.In order to adapt to the age and declining or ascending level of speech learning, the device comprises means for selecting the level of complexity of the different themes and relative and additional information of the device.
Le dispositif pourra également comprendre des moyens de localisation par exemple un système GPS.The device may also include locating means, for example a GPS system.
Le dispositif selon l'invention présente de nombreux avantages notamment :The device according to the invention has many advantages, in particular:
- il reconnaît plusieurs types de caractères et de symboles ;- it recognizes several types of characters and symbols;
- il possède des dimensions réduites permettant de le transporter sur soi très facilement par exemple dans la main, rangé dans une poche de chemise ou porté à la ceinture ;- It has reduced dimensions for carrying it on oneself very easily for example in the hand, stored in a shirt pocket or worn on the belt;
- il permet de préparer des textes à l'avance pour éviter la saisie ou la frappe du texte en face de l'interlocuteur ;- it allows to prepare texts in advance to avoid the seizure or the typing of the text in front of the interlocutor;
- il permet de se présenter autrement que d'une manière sonore, notamment auprès d'une personne ne connaissant pas les difficultés de parole de l'utilisateur ;it makes it possible to present oneself otherwise than in a sound manner, in particular with a person who does not know the difficulties of speech of the user;
- il permet d'adapter la complexité du langage en fonction du niveau de handicap de l'utilisateur ;- it makes it possible to adapt the complexity of the language according to the level of handicap of the user;
- il offre un mode de saisie totalement personnalisable et évolutif en fonction de l'utilisateur ;- it offers a fully customizable and scalable input mode depending on the user;
- un interlocuteur quelconque peut faire une réponse à la personne muette si cette personne handicapée ne comprend que la langue des signes ;- any interlocutor can make an answer to the dumb person if this disabled person understands only the sign language;
- il permet à une personne muette ou sourde et muette de communiquer rapidement avec un téléphone portable ou non avec un interlocuteur qui peut être sans handicap ou sourd ou sourd et muet ;- It allows a person who is mute or deaf and dumb to quickly communicate with a mobile phone or not with an interlocutor who can be without disability or deaf or deaf and dumb;
- il est polyvalent ;- it is versatile;
- il permet de gagner du temps par rapport à une saisie classique lettre par lettre qui peut impatienter l'interlocuteur ; - il peut être utilisé à domicile ou en milieu professionnel au bureau ou en déplacement à l'extérieur ;- it saves time compared to a classic letter-by-letter entry that can annoy the interlocutor; - it can be used at home or at work in the office or when traveling outside;
- il permet une conversation facilitée, relativement fluide avec une personne entendante ou non.- it allows a facilitated conversation, relatively fluid with a hearing person or not.
Des modes d'exécution de l'invention seront décrits ci-après, à titre d'exemples non limitatifs, avec référence aux dessins annexés dans lesquels :Embodiments of the invention will be described below, by way of non-limiting examples, with reference to the accompanying drawings in which:
La figure 1 représente un schéma d'une architecture d'un dispositif selon l'invention ;FIG. 1 represents a diagram of an architecture of a device according to the invention;
La figure 2 représente un organigramme d'un procédé selon l'invention ;FIG. 2 represents a flowchart of a method according to the invention;
Les figures 3a à 3c illustrent le procédé de l'invention.Figures 3a to 3c illustrate the method of the invention.
Les figures 4a et 4b illustrent également le procédé l'invention.Figures 4a and 4b also illustrate the method of the invention.
La figure 1 illustre un dispositif selon l'invention comprenant les éléments suivants :FIG. 1 illustrates a device according to the invention comprising the following elements:
- des moyens de saisie et/ou de sélection 1 ,input and / or selection means 1,
- une unité de traitement 2,a treatment unit 2,
- un module d'affichage 3, - au moins une mémoire RAM 4,a display module 3, at least one RAM memory 4,
- au moins une mémoire ROM 5 contenant des programmes exécutables correspondant aux différents modes de fonctionnement du clavier, à un système de gestion de base de données, la synthèse vocale, - au moins une base de données 6,at least one ROM 5 containing executable programs corresponding to the various operating modes of the keyboard, to a database management system, speech synthesis, at least one database 6,
- une batterie d'alimentation 7,a battery pack 7,
- éventuellement des moyens d'écoute 8 tels qu'un haut parleur.- possibly listening means 8 such as a speaker.
Le procédé selon est mis en œuvre de la façon suivante (Figure 2) : a) un affichage de thèmes généraux (Bloc 9), b) une action sur une touche correspondant à un thème général (Bloc 10), c) un défilement d'informations relatives au thème général ainsi sélectionné (Bloc 1 1 ), d) une sélection de l'information relative appropriée par action sur la touche correspondante (Bloc 12), e) un stockage en mémoire de la sélection (Bloc 13), f) s'il y a des informations supplémentaires (Bloc 14), un défilement d'informations supplémentaires relatives à l'information sélectionnéeThe method according to the invention is implemented as follows (FIG. 2): a) a display of general topics (Block 9), b) an action on a key corresponding to a general theme (Block 10), c) a scrolling of information relating to the general theme thus selected (Block 1 1), d) a selection of the appropriate relative information by action on the corresponding key (Block 12), e) a storage in memory of the selection (Block 13), f) if there is additional information (Block 14), a scrolling additional information about the selected information
(Bloc 15), sinon le procédé effectue directement l'étape j), g) une sélection d'une information supplémentaire (Bloc 16), h) un stockage en mémoire de la sélection (Bloc 17), i) s'il y a des informations supplémentaires (Bloc 18), une répétition des étapes f) (Bloc 15) à h) (Bloc 17) sinon, j) un affichage de la phrase ainsi construite (Bloc 19) ; k) une vocalisation éventuelle de la phrase (Bloc 20).(Block 15), otherwise the method directly performs step j), g) a selection of additional information (Block 16), h) a storage in memory of the selection (Block 17), i) if there has additional information (Block 18), a repetition of steps f) (Block 15) to h) (Block 17) else, j) a display of the sentence thus constructed (Block 19); k) possible vocalization of the sentence (Block 20).
Les figures 3a à 3c représentent un écran 20 d'un module d'affichage 3 et des moyens de saisie et/ou de sélection 1 d'un dispositif selon l'invention 21 , l'écran affichant des icônes correspondant aux fonctionnalités décrites : le mode saisie libre 23, clavier abrégé 31 et thèmes généraux 24.FIGS. 3a to 3c show a screen 20 of a display module 3 and input and / or selection means 1 of a device according to the invention 21, the screen displaying icons corresponding to the functionalities described: free input mode 23, abbreviated keyboard 31 and general topics 24.
En mode thème sélectionné 24, lesdits moyens de saisie et/ou de sélection comprennent des touches dynamiques 22 actionnables par pression sur l'écran à l'aide d'un doigt ou d'un stylet (non représenté). Ces touches affichent des icônes correspondant à différents thèmes généraux 24a à 24f tels que « personnes », « lieux », « magasins », « formules de politesse », « docteur ».In selected theme mode 24, said input and / or selection means comprise dynamic keys 22 which can be actuated by pressing on the screen with the aid of a finger or a stylet (not shown). These keys display icons corresponding to different general topics 24a to 24f such as "people", "places", "stores", "courtesy formulas", "doctor".
Le dispositif comprend en outre des touches permettant de commander une synthèse vocale, une touche « play » 25 une touche « pause » 26 et une touche « stop » 27. La sélection d'un thème 24a à 24f au moyen d'une pression sur la touche correspondante conduit à l'affichage des informations relatives à ce thème.The device further comprises keys for controlling a speech synthesis, a "play" key 25 a "pause" key 26 and a "stop" key 27. The selection of a theme 24a to 24f by pressing the corresponding key leads to the display of information relating to this theme.
La sélection du thème « formules de politesse » 24a par pression sur l'emplacement de l'écran où se trouve le thème entraîne par exemple l'affichage et le défilement de « s'il vous plaît » 24a1 , « merci » 24ab, « pardon » 24a3.The selection of the theme "courtesy formulas" 24a by pressing the location of the screen where the theme is located for example causes the display and scrolling of "please" 24a1, "thank you" 24ab, " forgiveness »24a3.
Une fois la sélection de la formule « s'il vous plaît » effectuée, l'actionnement de la touche 25 entraîne le stockage en mémoire de la formule sélectionnée.Once the selection of the formula "please" has been done, pressing the key 25 stores the selected formula in memory.
La formule sélectionnée reste affichée dans une partie 30 de l'écran qui peut être agrandi grâce à une fonction d'agrandissement et s'efface automatiquement une fois vocalisée.The selected formula remains displayed in a part of the screen which can be enlarged thanks to an enlargement function and automatically disappears once vocalized.
Puis, les phrases des thèmes 24a1 à 24a3 s'affichent de nouveau.Then, the phrases of themes 24a1 to 24a3 are displayed again.
Les figures 4a à 4b représentent le dispositif selon l'invention 21 avec l'écran 20 affichant des icônes correspondant au mode clavier abrégé sélectionné 31 avec le module d'affichage 3 et des moyens de saisie et/ou de sélection 1.FIGS. 4a to 4b show the device according to the invention 21 with the screen 20 displaying icons corresponding to the abbreviated key mode selected 31 with the display module 3 and input and / or selection means 1.
Sur la figure 4a, lesdits moyens de saisie et/ou de sélection comprennent un clavier 32 doté en l'espèce de six touches dynamiques 33 actionnables par pression sur l'écran à l'aide d'un doigt ou d'un stylet.In FIG. 4a, said input and / or selection means comprise a keyboard 32 provided in this case with six dynamic keys 33 that can be actuated by pressing on the screen with the aid of a finger or a stylus.
L'écran 34 affiche l'équivalence de la touche « Bj » sélectionnée qui vocalise « Bonjour » soit après pression de la touche 25, soit automatiquement.The screen 34 displays the equivalence of the selected key "Bj" which vocalizes "Bonjour" either after pressing the key 25, or automatically.
Sur la figure 4b, la touche de négation 35 est actionnée au moyen d'une pression sur la touche correspondante et conduit à l'affichage des négations des touches correspondantes.In FIG. 4b, the negation key 35 is actuated by pressing the corresponding key and leads to the display of the negations of the corresponding keys.
Ainsi « O = Oui » devient « N = Non », « Bj = Bonjour » devient « AR = Au revoir », « Me = Merci » devient « NM = Non Merci », « MR = Monsieur » devient « M2 = Messieurs », « Ai = Voulez vous m'aider ? » devient « NA = Je n'ai pas besoin d'aide ».Thus "O = Yes" becomes "N = No", "Bj = Hello" becomes "AR = Goodbye", "Me = Thank you" becomes "NM = No Thank you", "MR = Mr." becomes "M2 = Gentlemen", "Ai = Do you want to help me? Becomes "NA = I do not need help".
La formule sélectionnée « AR » reste affichée à l'écran 34 et s'efface automatiquement une fois vocalisée en « Au revoir ».The selected formula "AR" remains displayed on the screen 34 and automatically disappears once vocalized to "Goodbye".
Le procédé selon l'invention comprend ainsi : o le mode saisie libre où l'utilisateur frappe sur un clavier virtuel et tape une phrase de son choix qui est ensuite dite à haute voix ; et/ou o le mode thèmes qui regroupe sur plusieurs chapitres des phrases pré - écrites circonstanciées et dont la sélection totale ou partielle déclenche la synthèse vocale ; et/ou o le mode clavier abrégé qui permet de configurer un clavier virtuel d'affirmation personnel doté par exemple de 59 touches au choix correspondant à la lecture de l'expression ou de la phrase programmée au clic. De plus, selon cette variante, le dispositif selon l'invention comprend une touche centrale de négation qui permet, lorsque l'on appuie dessus, de faire apparaître un clavier entier de négation correspondant audit clavier virtuel d'affirmation, chaque touche du clavier de négation correspondant à une touche du clavier d'affirmation : ainsi, à titre d'exemple, la touche du clavier d'affirmation permettant d'afficher "toujours" devient dans le clavier de négation "jamais" ; le nombre de touches, leur contenu, leur couleur, leur abrégé sont totalement configurables par l'utilisateur ; o le mode langage des signes qui peut être utilisé en tant que langage de message de départ et d'arrivée pour l'utilisateur grâce à une banque de données de séquences animées, la réponse dudit utilisateur est possible grâce à un moteur de recherche par mot clé unique ou croisé qui permet de trouver la réponse traduite en langage des signes et de l'actionner en plein écran. Il est à noter qu'une analyse sémantique pourra également être utilisée.The method according to the invention thus comprises: the free input mode where the user taps on a virtual keyboard and types a sentence of his choice which is then said aloud; and / or o the themes mode which groups together in several chapters detailed pre - written sentences whose total or partial selection triggers the vocal synthesis; and / or o the abbreviated keypad mode which makes it possible to configure a personal affirmation virtual keypad with, for example, 59 keys to choose from corresponding to the reading of the expression or the sentence programmed by clicking. Moreover, according to this variant, the device according to the invention comprises a central negation key which makes it possible, when it is pressed on it, to display an entire negation keyboard corresponding to said virtual affirmation keyboard, each key of the keyboard of negation corresponding to a key of the affirmation keyboard: thus, by way of example, the key of the affirmation keyboard allowing to display "always" becomes in the negation keyboard "never"; the number of keys, their content, their color, their abstract are completely configurable by the user; the sign language mode, which can be used as a start and end message language for the user thanks to a database of animated sequences, the response of said user is possible thanks to a word search engine unique or crossed key that can find the answer translated into sign language and operate it in full screen. It should be noted that a semantic analysis can also be used.
Bien entendu, l'invention ne se limite pas aux exemples précédemment décrits.Of course, the invention is not limited to the examples described above.
Par exemple, en mode pictogramme, la sélection d'un thème « vêtements », entraînera le défilement de différents vêtements, puis la sélection d'un vêtement entraînera le défilement et la sélection de couleurs pour aboutir à une expression qui pourra être « chapeau noir ».For example, in pictogram mode, selecting a "clothes" theme will scroll through different garments, then selecting a garment will cause scrolling and color selection to result in an expression that may be "black hat" ".
A titre d'exemple non limitatif, les dimensions de l'appareil pourront être par exemple de 10 centimètres en largeur pour tenir dans une poche.By way of non-limiting example, the dimensions of the device may be for example 10 centimeters in width to fit in a pocket.
Pour les personnes victimes de paralysies et déficientes de la voix, les dispositifs selon l'invention pourront comprendre de plus grands écrans, ayant par exemple une largeur d'au moins 30 centimètres, afin de permettre à ces personnes handicapées d'utiliser des tiges ou des tuteurs (ou des moyens équivalents) afin de leur permettre d'appuyer sur des touches virtuelles ayant de plus grandes dimensions. For persons suffering from paralysis and deficiency of the voice, the devices according to the invention may comprise larger screens, having for example a width of at least 30 centimeters, in order to allow these persons with disabilities to use rods or tutors (or equivalent means) to enable them to press virtual keys with larger dimensions.

Claims

Revendications claims
1. Procédé de communication pour muets et/ou sourds - muets permettant une construction de phrase, ce procédé étant mis en œuvre par un dispositif comportant :A communication method for dumb and / or deaf-mutes for sentence construction, said method being implemented by a device comprising:
- des moyens de saisie et/ou de sélection (1 ) comprenant des touches,input and / or selection means (1) comprising keys,
- un module de traitement (2),a treatment module (2),
- un module de gestion de la base de données (2),a module for managing the database (2),
- un module d'affichage (3) pouvant comprendre un écran ; - un module de mémoire (4, 5),- a display module (3) may include a screen; a memory module (4, 5),
- un module de stockage d'au moins une base de données (6), caractérisé en ce qu'il comprend les étapes suivantes : a) un affichage de thèmes généraux (9), b) une action sur une touche correspondant à un thème général (10), c) un défilement d'informations relatives au thème général ainsi sélectionné (11 ), d) une sélection de l'information relative appropriée par action sur la touche correspondante (12), e) un stockage en mémoire de la sélection (13), f) s'il y a des informations supplémentaires relatives à l'information sélectionnée (14), un défilement desdites informations supplémentaires (15) sinon le procédé passe directement à l'étape j), g) une sélection d'une information supplémentaire (16), h) un stockage en mémoire de la sélection (17), i) s'il y a des informations supplémentaires (18), une répétition des étapes f) à h) sinon : j) un affichage de la phrase ou du message ainsi construit sur l'écran et/ou une vocalisation dudit message au moyen d'une voix de synthèse.- A storage module of at least one database (6), characterized in that it comprises the following steps: a) a display of general topics (9), b) an action on a key corresponding to a theme general (10), c) a scrolling information relating to the general theme thus selected (11), d) a selection of the appropriate relative information by action on the corresponding key (12), e) a storage in memory of the selection (13), f) if there is additional information relating to the selected information (14), a scrolling of said additional information (15) or the method goes directly to step j), g) a selection of additional information (16), h) storage in memory of the selection (17), i) if there is additional information (18), a repetition of steps f) to h) otherwise: j) a display of the sentence or message thus constructed on the screen and / or a vocalization of said message to the means of a synthetic voice.
2. Procédé selon la revendication 1 , caractérisé en ce que chaque étape de sélection et de stockage est suivie d'une étape d'affichage. 2. Method according to claim 1, characterized in that each step of selection and storage is followed by a display step.
3. Procédé selon l'une des revendications 1 et 2, caractérisé en ce que la synthèse vocale est déclenchée automatiquement à chaque sélection en utilisant une touche spécifique virtuelle et paramétrable après avoir composé partiellement ou entièrement une phrase.3. Method according to one of claims 1 and 2, characterized in that the speech synthesis is triggered automatically at each selection using a specific virtual key and parameterizable after having partially or entirely composed a sentence.
4. Procédé selon l'une des revendications 1 à 4, caractérisé en ce que les thèmes généraux correspondent à des situations courantes, à des actions, à des catégories de besoins, à des personnes ou à des catégories de personnes, à des catégories de situations tels que des magasins, des catégories de lieux.4. Method according to one of claims 1 to 4, characterized in that the general topics correspond to common situations, actions, categories of needs, persons or categories of people, categories of situations such as shops, categories of places.
5. Procédé selon la revendication 1 , caractérisé en ce que les informations correspondent à des sons enregistrés par exemple musicaux ou émis par une personne.5. Method according to claim 1, characterized in that the information corresponds to sounds recorded for example musical or emitted by a person.
6. Procédé selon l'une des revendications précédentes, caractérisé en ce que les informations correspondent à des pictogrammes ou à des séquences animées en langue des signes.6. Method according to one of the preceding claims, characterized in that the information correspond to pictograms or animated sequences in sign language.
7. Dispositif pour la mise en œuvre de la revendication 1 , caractérisé en ce qu'il comporte :7. Device for implementing claim 1, characterized in that it comprises:
- des moyens de saisie et/ou de sélection (1 ) comprenant des touches,input and / or selection means (1) comprising keys,
- un module de traitement (2), - un module de gestion de la base de données (2),a processing module (2), a management module of the database (2),
- un module d'affichage (3),a display module (3),
- un module de mémoire (4, 5),a memory module (4, 5),
- un module de stockage d'au moins une base de données (6).a module for storing at least one database (6).
8. Dispositif selon la revendication 7, caractérisé en ce qu'il comprend : o le mode saisie libre où l'utilisateur frappe sur un clavier virtuel et tape une phrase de son choix qui est ensuite dite à haute voix ; et/ou o le mode thèmes qui regroupe sur plusieurs chapitres des phrases pré - écrites circonstanciées et dont la sélection totale ou partielle déclenche la synthèse vocale ; et/ou o le mode clavier abrégé qui permet de configurer personnellement un clavier virtuel d'affirmation doté par exemple de 59 touches au choix correspondant à la lecture de l'expression ou de la phrase programmée au clic ; de plus, le dispositif selon l'invention comprend une touche centrale de négation qui permet, lorsque l'on appuie dessus, de faire apparaître un clavier entier de négation correspondant audit clavier virtuel d'affirmation, chaque touche du clavier de négation correspondant à une touche du clavier d'affirmation : ainsi, à titre d'exemple, la touche du clavier d'affirmation permettant d'afficher "toujours" devient dans le clavier de négation "jamais" ; le nombre de touches, leur contenu, leur couleur, leur abrégé sont totalement configurables par l'utilisateur ; o le mode langage des signes qui peut être utilisé en tant que langage de message de départ et d'arrivée pour l'utilisateur grâce à une banque de données de séquences animées, la réponse dudit utilisateur est possible grâce à un moteur de recherche par mot clé unique ou croisé qui permet de trouver la réponse traduite en langage des signes et de l'actionner en plein écran.8. Device according to claim 7, characterized in that it comprises: o free entry mode where the user hits on a virtual keyboard and types a sentence of his choice which is then said aloud; and or o the themes mode, which groups together in several chapters detailed pre - written sentences whose total or partial selection triggers speech synthesis; and / or o the abbreviated keyboard mode which makes it possible to personally configure a virtual affirmation keypad with, for example, 59 keys of choice corresponding to the reading of the expression or the sentence programmed by clicking; moreover, the device according to the invention comprises a central negation key which makes it possible, when it is pressed on it, to display an entire negation keyboard corresponding to said virtual affirmation keyboard, each key of the negation keyboard corresponding to a key of the affirmation keyboard: thus, by way of example, the key of the affirmation keyboard allowing to display "always" becomes in the negation keyboard "never"; the number of keys, their content, their color, their abstract are completely configurable by the user; the sign language mode, which can be used as a start and end message language for the user thanks to a database of animated sequences, the response of said user is possible thanks to a word search engine unique or crossed key that can find the answer translated into sign language and operate it in full screen.
9. Dispositif selon l'une des revendications 7 à 8, caractérisé en ce que les touches sont virtuelles.9. Device according to one of claims 7 to 8, characterized in that the keys are virtual.
10. Dispositif selon l'une des revendications 7 à 9, caractérisé en ce qu'il comprend en outre un module de synthèse vocale, des moyens de commande de ladite synthèse vocale et des moyens d'écoute de la phrase. 10. Device according to one of claims 7 to 9, characterized in that it further comprises a speech synthesis module, control means of said speech synthesis and listening means of the sentence.
1 1. Dispositif selon l'une des revendications 7 à 10, caractérisé en ce qu'il comprend en outre des moyens visuels pour suivre l'énoncé vocal et la progression de la phrase.1 1. Device according to one of claims 7 to 10, characterized in that it further comprises visual means for tracking the vocal utterance and the progression of the sentence.
12. Dispositif selon l'une des revendications 7 à 11 , caractérisé en ce qu'il comprend un moteur de recherche pour permettre à l'interlocuteur ne connaissant pas la langue des signes de rechercher sur la base de mots-clés une phrase complète préprogrammée c'est à dire validée et ordonnancée en fonction de la chronologie de la langue des signes et correspondant à une séquence animée.12. Device according to one of claims 7 to 11, characterized in that it comprises a search engine to allow the interlocutor not knowing the sign language to search on the basis of keywords a complete preprogrammed sentence that is, validated and scheduled according to the chronology of the sign language and corresponding to an animated sequence.
13. Dispositif selon l'une des revendications 7 à 12, caractérisé en ce qu'il comprend des moyens de transmission de données avec ou sans fil vers un deuxième module d'affichage avec des deuxièmes moyens de saisie et/ou de sélection pour la réponse.13. Device according to one of claims 7 to 12, characterized in that it comprises wired or wireless data transmission means to a second display module with second input means and / or selection for the reply.
14. Dispositif selon l'une des revendications 7 à 13, caractérisé en ce qu'il est conformé pour être utilisé avec un téléphone portable ou intégré dans les téléphones portables appelés « smartphone ».14. Device according to one of claims 7 to 13, characterized in that it is shaped to be used with a mobile phone or integrated in mobile phones called "smartphone".
15. Dispositif selon l'une des revendications 7 à 14, caractérisé en ce qu'il comprend en outre des moyens pour enregistrer toute abréviation et toute prononciation différente de la prononciation attendue pour un thème ou une information donné.15. Device according to one of claims 7 to 14, characterized in that it further comprises means for recording any abbreviation and any pronunciation different from the pronunciation expected for a given theme or information.
16. Dispositif selon l'une des revendications 7 à 15, caractérisé en ce qu'il comprend des moyens de sélection du niveau de complexité des différents thèmes et informations relatives et supplémentaires du dispositif.16. Device according to one of claims 7 to 15, characterized in that it comprises means for selecting the level of complexity of the different themes and related and additional information of the device.
17. Dispositif selon l'une des revendications 7 à 16, caractérisé en ce qu'i comprend des moyens de localisation par exemple un système GPS. 17. Device according to one of claims 7 to 16, characterized in that i comprises locating means for example a GPS system.
PCT/FR2007/000845 2006-05-18 2007-05-18 Communication method for deaf and/or deaf-mute persons and method of implementation thereof WO2007135282A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0604468A FR2901396B1 (en) 2006-05-18 2006-05-18 PORTABLE OR INTERACTIVE AND UNIVERSAL VOCAL OR NON-VOICE COMMUNICATION DEVICE FOR DEFICIENTS OR DISABLED PERSONS OF THE WORD AND MUTE
FR0604468 2006-05-18

Publications (1)

Publication Number Publication Date
WO2007135282A1 true WO2007135282A1 (en) 2007-11-29

Family

ID=36954695

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR2007/000845 WO2007135282A1 (en) 2006-05-18 2007-05-18 Communication method for deaf and/or deaf-mute persons and method of implementation thereof

Country Status (2)

Country Link
FR (1) FR2901396B1 (en)
WO (1) WO2007135282A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020084431A1 (en) * 2018-10-22 2020-04-30 2542202 Ontario Inc. Assistive communication device, method, and apparatus
US10854110B2 (en) 2017-03-03 2020-12-01 Microsoft Technology Licensing, Llc Automated real time interpreter service

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5317671A (en) * 1982-11-18 1994-05-31 Baker Bruce R System for method for producing synthetic plural word messages
US20030223455A1 (en) * 2002-05-29 2003-12-04 Electronic Data Systems Corporation Method and system for communication using a portable device

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5146502A (en) * 1990-02-26 1992-09-08 Davis, Van Nortwick & Company Speech pattern correction device for deaf and voice-impaired
FR2801158B1 (en) * 1999-11-17 2002-03-08 Sagem PORTABLE APPARATUS COMPRISING GUIDANCE MEANS, METHOD OF USING SUCH APPARATUS AND CORRESPONDING GUIDANCE METHOD
US6377925B1 (en) * 1999-12-16 2002-04-23 Interactive Solutions, Inc. Electronic translator for assisting communications

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5317671A (en) * 1982-11-18 1994-05-31 Baker Bruce R System for method for producing synthetic plural word messages
US20030223455A1 (en) * 2002-05-29 2003-12-04 Electronic Data Systems Corporation Method and system for communication using a portable device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10854110B2 (en) 2017-03-03 2020-12-01 Microsoft Technology Licensing, Llc Automated real time interpreter service
WO2020084431A1 (en) * 2018-10-22 2020-04-30 2542202 Ontario Inc. Assistive communication device, method, and apparatus
CN113168782A (en) * 2018-10-22 2021-07-23 2542202安大略公司 Auxiliary communication equipment, method and device

Also Published As

Publication number Publication date
FR2901396B1 (en) 2010-01-01
FR2901396A1 (en) 2007-11-23

Similar Documents

Publication Publication Date Title
Sennott et al. Autism, aac, and proloquo2go
Crystal Txtng: The gr8 db8
Harris Voice interaction design: crafting the new conversational speech systems
CN108352006A (en) Intelligent automation assistant in instant message environment
US20090066722A1 (en) System, Device, and Method for Conveying Information Using Enhanced Rapid Serial Presentation
Alliano et al. A review of 21 iPad applications for augmentative and alternative communication purposes
Robitaille The illustrated guide to assistive technology and devices: Tools and gadgets for living independently
TW200809706A (en) Method of learning the second language through picture guiding
CA2608345A1 (en) Method and apparatus to individualize content in an augmentative and alternative communication device
Norén et al. Participants’ dynamic orientation to folder navigation when using a VOCA with a touch screen in talk-in-interaction
Ghorbel et al. Towards accessibility guidelines of interaction and user interface design for Alzheimer’s disease patients
Angel-Perez Martin Crimp’s nomadic voices
WO2007135282A1 (en) Communication method for deaf and/or deaf-mute persons and method of implementation thereof
Whitaker Developing inclusive mobile apps
Hennig Natural user interfaces and accessibility
FR3067140A1 (en) METHOD FOR GENERATING A SEGMENTED TEXTUAL DOCUMENT IN RHESES TO BE GRAPHICALLY MADE IN EVIDENCE
JP2005128711A (en) Emotional information estimation method, character animation creation method, program using the methods, storage medium, emotional information estimation apparatus, and character animation creation apparatus
Martin et al. Living through a computer voice: a personal account
Ephratt Iconic silence: A semiotic paradox or a semiotic paragon?
Yeh et al. Assisting the visually impaired to deal with telephone interview jobs using information and commutation technology
Holst-Knudsen Subversive Imitation: Agnès Varda’s Le Bonheur
Poutiainen Finnish cultural discourses about the mobile phone communication
Fretheim et al. Token-reflexive, anaphoric and deictic functions of ‘here’
Hiryanto et al. UI/UX Prototype of Visually Interactive Communication and Reading Aid for Autistic Children with Speech Disability
Bowers Grammatical constraints and motivations for English/Afrikaans codeswitching: Evidence from a local radio talk show

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 07731479

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 07731479

Country of ref document: EP

Kind code of ref document: A1