KR20110014372A - System for interacting braille education using the feel presentation device and the method therefor - Google Patents
System for interacting braille education using the feel presentation device and the method therefor Download PDFInfo
- Publication number
- KR20110014372A KR20110014372A KR1020090072007A KR20090072007A KR20110014372A KR 20110014372 A KR20110014372 A KR 20110014372A KR 1020090072007 A KR1020090072007 A KR 1020090072007A KR 20090072007 A KR20090072007 A KR 20090072007A KR 20110014372 A KR20110014372 A KR 20110014372A
- Authority
- KR
- South Korea
- Prior art keywords
- braille
- unit
- character information
- tactile presentation
- voice
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/04—Devices for conversing with the deaf-blind
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/001—Teaching or communicating with blind persons
- G09B21/007—Teaching or communicating with blind persons using both tactile and audible presentation of the information
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/02—Devices for Braille writing
Abstract
Description
본 발명은 촉감 제시장치를 이용한 점자 교육 상호작용 시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 입력수단으로 점자에 해당하는 문자정보를 입력함에 따라 이에 대응하는 질문이나 응답에 해당하는 문자정보를 점자에 해당하는 음성신호와 충격신호로 점자 교육을 대화방식으로 진행함으로써 점자 교육을 하는 촉감 제시장치를 이용한 점자 교육 상호작용 시스템 및 그 방법에 관한 것이다.The present invention relates to a system for braille education interaction using a tactile presentation device and a method thereof, and more particularly to inputting character information corresponding to braille as an input means to display braille information corresponding to a question or an answer corresponding thereto. The present invention relates to a braille education interaction system and a method using a tactile presentation device for braille education by conducting a braille education in a conversational manner with a voice signal and an impact signal corresponding thereto.
일반적으로, 시각 장애자들을 위한 점자(Braille)는, 6개의 점자용 돌기(Dot)를 이용하여, 문자의 초성, 중성, 종성, 그리고 사전에 약정된 약자, 숫자, 알파벳 등을 각각 표현하고 있다.In general, Braille for the visually impaired uses six Braille dots to express initial, neutral, and final letters, numbers, and alphabets of letters.
특히, 시각 장애인들이 사용하는 점자는 점판 또는 점자용 묵지를 이용하여 만들어지는데, 점자는 일정한 간격으로 점판을 통하여 구멍을 뚫어 볼록하게 표기가 되며, 손가락으로 점판 또는 점자용 묵지를 접촉해서 점자를 인식한다.In particular, the braille used by the visually impaired is made using a dot plate or braille paper, and the braille is marked convexly by puncturing through the plate at regular intervals. do.
이러한 점자는 시각 장애인에게는 중요한 정보획득 수단으로서, 시각 장애인 이 스스로 읽고 쓸 수 있는 유일한 문자이며, 시각 장애인의 지식교육을 가능하게 해주기 때문에 세종대왕의 훈민정음에 버금가는 문자라 해서 '훈맹정음'이라 불리운다.Such Braille is an important means of acquiring information for the visually impaired, and is the only character that the visually impaired can read and write by themselves.
또한, 점자는 시각 장애인들이 쉽게 쓸 수 있는 유일한 방법으로서, 촉각을 활용한 문자생활이 가능하게 해주며, 시각 및 청각의 중복장애인에게 실질적인 의사소통 수단이 된다. 즉, 시각 장애인은 점자를 모르더라도 말로 의사소통을 할 수 있지만, 시각과 청각이 동시에 손상을 입은 장애인에게는 점자가 거의 유일하고 확실한 의사소통 수단이 되는 것이다.In addition, Braille is the only way for the visually impaired to use easily, enabling text life using tactile sensations, and being a practical means of communication for the visually and hearing impaired. In other words, the visually impaired person can communicate verbally without knowing the braille, but for the disabled person who has both visual and hearing impairments, Braille is almost the only and reliable means of communication.
또한, 점자를 이용하는 경우 시각 장애인은 정독과 재독을 할 수 있다. 즉, 다른 사람이 책을 읽어주는 대면낭독을 통해 책의 내용을 듣는 경우 책 내용을 자세히 이해할 수 없거나 다시 책을 보려면 늘 다른 사람의 도움을 받아야 하기 때문에 매우 번거로움을 느끼게 된다. 그러나 점자책을 이용하는 경우 필요할 때마다 언제든지 다시 책을 읽을 수 있으며, 책의 내용을 생각하면서 읽을 수 있으므로 점자를 이용한 정독이 가능한 것이다.In addition, when using Braille, the visually impaired may read and reread. In other words, if you listen to the contents of a book through face-to-face reading that others read, you may find it very cumbersome because you cannot understand the contents of the book in detail, or you must always seek help from others. However, if you use a braille book, you can read it again whenever you need it, and you can read it while thinking about the contents of the book.
하지만, 점자는 읽기 속도가 목독이나 청독보다 현저하게 느리다는 단점이 있다. 즉, 점자는 시각 장애인의 촉각으로만 감지하므로 눈으로 글을 읽거나 대면낭독에 비해 읽기 속도가 떨어지는 단점이 있다.However, Braille has the disadvantage that reading speed is significantly slower than reading or reading. In other words, Braille detects only the tactile sense of the visually impaired, so it has a disadvantage in that the reading speed is slower than reading in the eye or reading face to face.
일반적으로, 문자, 음성, 그림, 영상 등을 포함하는 멀티미디어 정보 서비스가 발달함에 따라 장애인을 위한 하드웨어 및 소프트웨어가 개발되고 있다.In general, as multimedia information services including texts, voices, pictures, images, and the like develop, hardware and software for the disabled have been developed.
시각장애인들을 위한 정보단말기는 청각과 촉감 등을 효율적으로 지원할 수 있는 사용자 인터페이스를 적용함으로서 사용자가 지닌 제한적 능력을 보완할 수 있어야 한다.Information terminals for the visually impaired should supplement user's limited ability by applying a user interface that can effectively support hearing and touch.
현재까지 시각 장애자용 단말기는 점자 디스플레이(Braille Display), 점자 키보드(Braille Keyboard) 등을 이용한 텍스트 판독기(Text Reader)나 워드프로세서(word Processor) 용도로 개발되었다. 그러나, 이러한 기능만을 가지는 시각장애인용 단말기들은 다양한 점자 정보의 학습을 위한 효율적인 정보단말기로 이용될 수 없는 문제점이 있다.Until now, the terminal for the visually impaired has been developed for a text reader or a word processor using a braille display or a braille keyboard. However, there is a problem that the terminal for the visually impaired having only such a function cannot be used as an efficient information terminal for learning various braille information.
본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로, 본 발명의 목적은 입력수단으로 점자에 해당하는 문자정보를 입력함에 따라 이에 대응하는 음성 또는 촉감 제시장치를 통해 출력하는 촉감 제시장치를 이용한 점자 교육 상호작용 시스템 및 그 방법을 제공함에 있다.The present invention has been made in view of the above problems, and an object of the present invention is to provide a braille using a tactile display device that outputs a corresponding voice or tactile display device as text information corresponding to Braille is input as an input means. An educational interaction system and method thereof are provided.
또한, 본 발명의 다른 목적은 사용자로부터 입력받는 음성을 인식하고, 인식한 음성을 실시간으로 점자 변환하여 촉감 제시장치를 통해 출력하는 촉감 제시장치를 이용한 점자 교육 상호작용 시스템 및 그 방법을 제공함에도 있다.In addition, another object of the present invention is to provide a braille education interaction system and method using a tactile presentation device that recognizes a voice input from a user, converts the recognized voice into braille in real time, and outputs it through a tactile presentation device. .
그리고, 본 발명의 다른 목적은 사용자로부터 입력받은 음성을 인식하고, 대응되는 응답데이터를 기설정된 메모리 서치를 통해 추출하여 음성 또는 촉감 제시장치를 통해 출력시키도록 한 대화방식 점자 교육 상호작용 시스템 및 그 방법을 제공함에 있다.Another object of the present invention is to recognize a voice input from a user, and to extract a corresponding response data through a predetermined memory search, and output the output through a voice or tactile presentation apparatus. In providing a method.
본 발명은 촉감 제시장치를 이용한 점자 교육 상호작용 시스템에 있어서, 전자기기의 표면에 마련되어 다양한 형태의 위치접촉 또는 가압접촉을 감지하여 점자에 해당하는 문자정보로 변환하고, 상기 점자에 해당하는 충격신호를 발생하여 문자정보를 출력하는 촉감 제시부; 상기 문자정보에 따라 질문 또는 응답에 대응하여 추출될 문자정보를 저장하는 메모리부; 및 상기 문자정보에 따라 질문 또는 응답에 대응하여 추출될 문자정보를 상기 메모리부로부터 불러들여 충격신호로 변환하여 출력하도록 하는 제어부; 를 포함하는 것을 특징으로 한다.The present invention provides a braille educational interaction system using a tactile presentation device, which is provided on a surface of an electronic device to detect various types of position contact or pressurized contact and converts it into character information corresponding to braille, and an impact signal corresponding to the braille. A tactile presenting unit for generating character information by generating a; A memory unit for storing character information to be extracted in response to a question or a response according to the character information; And a controller configured to retrieve character information to be extracted in response to a question or a response according to the character information from the memory unit, convert the character information into a shock signal, and output the shock signal. Characterized in that it comprises a.
한편, 본 발명은 점자 교육 상호작용 시스템을 이용한 방법에 있어서, (a) 제어부가 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보를 입력받는 단계; (b) 상기 제어부가 상기 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 해당 문자정보를 불러들이는 단계; (c) 상기 제어부가 상기 메모리부로부터 불러들인 문자정보를 음성신호 및 충격신호로 변환하도록 하는 단계; 및 (d) 상기 제어부가 변환된 음성신호를 상기 음성 인식부를 통해 출력하고, 변환된 충격신호를 상기 촉감 제시부를 통해 출력하도록 하는 단계; 를 포함하는 것을 특징으로 한다.On the other hand, the present invention provides a method using a braille educational interaction system, the method comprising the steps of: (a) the control unit receives the converted character information through the speech recognition unit or the tactile presentation unit; (b) the control unit retrieving character information corresponding to a question or a response preset in a memory unit using the converted character information and retrieving the corresponding character information; (c) causing the control unit to convert text information read from the memory unit into a voice signal and a shock signal; And (d) outputting the converted voice signal through the voice recognition unit and outputting the converted shock signal through the tactile presentation unit; Characterized in that it comprises a.
상기와 같은 본 발명에 따르면, 입력수단으로 점자에 해당하는 문자정보를 입력함에 따라 이에 대응하는 음성 및 촉감 제시장치를 통해 출력하여 사용자에게 점자 교육을 하는 효과가 있다.According to the present invention as described above, by inputting the character information corresponding to the braille as the input means it has the effect of outputting through the corresponding voice and tactile presentation device to the user in braille education.
또한, 사용자로부터 입력받는 음성을 인식하고, 인식한 음성을 실시간으로 점자 변환하여 촉감 제시장치를 통해 출력하는 효과가 있다.In addition, there is an effect of recognizing a voice received from the user, converting the recognized voice into braille in real time and outputting the same through a tactile presentation device.
그리고 사용자로부터 입력받는 음성을 인식하고, 대응되는 응답데이터를 기설정된 메모리 서치를 통해 추출하여 출력하는 대화방식으로 사용자와 대화를 진행함으로써 점자 교육을 하는 효과가 있다.And it recognizes the voice input from the user, and has the effect of braille education by talking to the user in a conversational manner to extract and output the corresponding response data through a predetermined memory search.
본 발명의 구체적 특징 및 이점들은 첨부도면에 의거한 다음의 상세한 설명 으로 더욱 명백해질 것이다. 이에 앞서 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.Specific features and advantages of the present invention will become more apparent from the following detailed description based on the accompanying drawings. In the meantime, when it is determined that the detailed description of the known functions and configurations related to the present invention may unnecessarily obscure the subject matter of the present invention, it should be noted that the detailed description is omitted.
도 1은 본 발명의 일실시예에 따른 촉감 제시장치를 이용한 점자 교육 상호작용 시스템의 개략적인 구성도이다.1 is a schematic configuration diagram of a braille education interaction system using a tactile presentation device according to an embodiment of the present invention.
도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 촉감 제시장치를 이용한 점자 교육 상호작용 시스템은 음성 인식부(100), 촉감 제시부(200), 메모리부(300), 제어부(400)를 포함하여 구성된다.As shown in FIG. 1, the braille educational interaction system using the tactile presentation apparatus according to an embodiment of the present invention includes a
-음성 인식부(100)-
음성 인식부(100)는 외부로부터 음성데이터를 수신하고, 수신한 음성데이터를 분석하여 점자에 해당하는 문자정보로 변환하고, 상기 문자정보를 음성신호로 변환하여 출력하는 구성요소이다. 본 실시예에 따른 음성 인식부는 사용자로부터 음성 입력수단(마이크)를 통해 수신한 음성신호를 분석하고 그 음성신호를 점자에 해당하는 문자정보로 변환하고, 문자정보를 음성신호로 변환하여 음성 출력수단(스피커)를 통해 출력한다.The
-촉감 제시부(200)-Tactile presentation (200)
촉감 제시부(200)는 전자기기의 표면에 마련되어 다양한 형태의 위치접촉 또는 가압접촉을 감지한 감지신호를 점자에 해당하는 문자정보로 변환하고, 점자에 해당하는 충격신호를 발생하여 문자정보를 출력하는 구성요소이다. The tactile presenting
이러한 촉감 제시부는 터치 스크린(210), 점자 디스플레이(220), 촉감 제시 모듈(230)로 구성되고, 문자정보를 입출력한다. 이때, 상기 터치 스크린과 점자 디스플레이 상에 사용자가 해당 문자정보에 따른 점자를 느낄 수 있도록 촉감 제시모듈(230)을 통해 감지신호에 따른 충격신호를 발생하도록 한다. 이때, 상기 감지신호에 해당하는 충격신호를 발생하기 위해 상기 전자기기의 내부에 마련되어 상기 터치 스크린과 점자 디스플레이로 상기 문자정보에 따른 점자를 느낄 수 있도록 충격을 발생 또는 전달하는 촉감 제시모듈(230)이 구비된다.The tactile presentation unit includes a
여기서, 촉감 제시부의 터치 스크린(210)은 입력 영역이 6분할되어 분할된 영역의 위치접촉 또는 가압접촉에 따라 감지한 감지신호를 토대로 점자에 해당하는 문자정보로 변환한다.Here, the
이러한 터치 스크린(210)은 예를 들어, 저항막 방식, 정전용량 방식, 초음파(SAW)방식, 적외선(IR)방식 등을 이용한 터치 패널로 구성될 수 있다.The
저항막 방식의 터치패널은 투명전극이 코팅된 두 장의 기판으로 구성되 있고, 손가락이나 펜을 통해 화면에 압력을 주면 그 부위의 기판이 서로 달라붙음에 따라 위치를 감지하는 방식으로서, 가격이 싸고 정확도가 높다는 장점이 있어 PDA, PMP, 네비게이션 등과 같은 소형 가전에 주로 쓰이고 있다.The resistive touch panel is composed of two substrates coated with a transparent electrode, and when the pressure is applied to the screen with a finger or a pen, the position of the substrate is attached to each other and the position is sensed. Due to its high accuracy, it is mainly used in small home appliances such as PDA, PMP, and navigation.
또한 정전용량 방식의 터치패널은 인체에서 발생하는 정전기를 감지하는 원리를 사용하고, 이에 따라 전기가 통하지 않는 부도체로는 아무리 눌러도 인식하지 못하며, 내구성이 강하고 투과성이 좋으며 반응시간이 빠르다.In addition, the capacitive touch panel uses the principle of detecting static electricity generated in the human body, and thus it cannot be recognized as a non-conductive non-conductor no matter how hard it is pressed, and it has strong durability, good permeability, and fast reaction time.
또한 초음파 방식의 터치패널은 패널의 표면에 초음파를 방출해 위치를 감지하고, 화면 터치 시, 초음파가 손가락에 흡수되므로 화면에서 초음파가 약해진 부 위를 인지하는 원리를 이용한다.In addition, the ultrasonic touch panel detects a position by emitting ultrasonic waves on the surface of the panel, and when the screen is touched, the ultrasonic waves are absorbed by the finger, and thus, the ultrasonic panel is used to recognize the weakened portion of the ultrasonic waves on the screen.
또한 적외선 방식의 터치패널은 직진성을 가진 적외선이 장애물을 만나면 차단되는 특성을 활용한 것으로, 다른 방식과 달라 유리기판 1장으로도 구현이 가능하고, 1장의 기판만을 사용하기에 화면 투과율이 가장 좋으며 주로 50인치 이상 대형 화면에 주로 적용되고 있다.In addition, the infrared touch panel utilizes the characteristic that infrared rays with straightness are blocked when they meet obstacles. Unlike other methods, the touch panel can be realized with one glass substrate, and the screen transmittance is best because only one substrate is used. It is mainly applied to large screens larger than 50 inches.
촉감 제시모듈(230)은 AC모터, DC모터, Rotary Type/Linear Type 진동모터, 서보모터, 보이스 코일 액츄에이터, 솔레노이드 액추에이터, 피에조 액추에이터, 초음파 액추에이터, 세라믹 액추에이터, 전기활성폴리머 액추에이터, 형상기억합금 액추에이터(shape memory alloy) 중 어느 하나 또는 이들의 조합으로 구성된 것을 특징으로 한다.The
상술한 바와 같이 촉감 제시장치(200)는 다양한 원리를 이용한 터치패널, 점자 디스플레이로 구성될 수 있고, 이외에도 전자기기에 구비된 다수의 입력버튼, 센싱수단 등 전자기기에 데이터를 입력하기 위한 어떠한 수단이라도 포함하여 구성될 수 있다.As described above, the
-메모리부(300)-
메모리부(300)는 상기 음성 인식부 및 촉감 제시부를 통해 입력받는 문자정보에 따라 추출될 문자정보를 미리 설정함으로써 사용자와 대화식 상호작용을 할 수 있도록 다양한 질문이나 응답에 대응하는 문자정보를 저장하는 구성요소이다. 이러한 메모리부는 다양한 서적 관련 컨텐츠에 대한 문자정보를 저장하는 외부 메모리(310)를 포함한다.The
여기서, 문자정보를 예를 들면, 점자 교육을 위한 자음, 모음, 약자, 약어, 단어, 문장들을 포함한다. 이때, 문장은 사용자와 대화가 가능하도록 다양한 예문형태로 설정될 수 있음은 물론이다.Here, the character information includes, for example, consonants, vowels, abbreviations, abbreviations, words, and sentences for braille education. At this time, the sentence may be set in a variety of example sentences to enable the conversation with the user.
-제어부(400)-
제어부(400)는 음성 인식부 또는 촉감 제시부로부터 입력받은 문자정보, 또는 메모리부에 미리 설정된 질문이나 응답에 대응하는 문자정보를 음성신호 및 충격신호로 변환한 후, 음성신호는 스피커로 출력하고, 충격신호는 촉감 제시부로 출력하도록 하는 구성요소이다.The
또한 본 실시예에 따른 제어부는 음성 인식부 또는 촉감 제시부를 통해 입력받은 문자정보를 판단하여 일반 모드 또는 음성 모드 또는 점자 모드를 선택하는 모드 제어모듈(410)을 포함한다.In addition, the control unit according to the present embodiment includes a
본 실시예에 따른 일반 모드를 설명하면, 제어부가 음성 인식부 또는 촉감 제시부를 통해 입력받은 문자정보가 일반 모드를 선택하는 것으로 판단한 경우, 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 불러들여 음성신호 및 충격신호로 변환하도록 상기 음성 인식부 및 촉감 제시부를 제어한 뒤, 변환된 음성신호를 스피커를 통해 출력하고, 변환된 충격신호를 촉감 제시부를 통해 출력하도록 하며, 이에 사용자로부터 촉감 제시부의 터치 스크린 또는 점자 디스플레이를 통해 점자에 대응하는 문자정보를 입력받는다.Referring to the general mode according to the present embodiment, when the controller determines that the text information input through the voice recognition unit or the tactile presentation unit selects the general mode, the memory unit is converted into the text information converted through the voice recognition unit or the tactile presentation unit. The voice recognition unit and the tactile presenting unit are controlled to retrieve and retrieve text information corresponding to a predetermined question or answer to the voice signal and the shock signal, and then output the converted voice signal through a speaker and output the converted shock. The signal is output through the tactile presentation unit, and the user receives text information corresponding to the braille through the touch screen or the braille display of the tactile presentation unit.
그리고, 제어부는 사용자로부터 입력받은 문자정보에 따라 메모리부로부터 질문 또는 응답에 대응하는 문자정보를 불러들여 음성신호 및 충격신호로 변환한 후, 변환된 음성신호 및 충격신호를 출력하도록 한다.The controller reads the text information corresponding to the question or the response from the memory unit according to the text information input from the user, converts the text information into a voice signal and a shock signal, and then outputs the converted voice signal and the shock signal.
본 실시예에 따른 음성 모드를 설명하면, 제어부가 음성 인식부 또는 촉감 제시부를 통해 입력받은 문자정보가 음성 모드를 선택하는 것으로 판단한 경우, 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 불러들여 음성신호로 변환한 뒤, 변환된 음성신호를 스피커를 통해 출력하도록 하고, 이에 사용자로부터 음성 인식부 또는 촉감 제시부를 통해 점자에 대응하는 문자정보를 입력받는다.Referring to the voice mode according to the present embodiment, when the controller determines that the text information input through the voice recognition unit or the tactile presentation unit selects the voice mode, the memory unit is converted into the text information converted through the voice recognition unit or the tactile presentation unit. Search for and retrieve text information corresponding to a preset question or answer into a voice signal, and then output the converted voice signal through a speaker, thereby responding to braille from a user through a voice recognition unit or a tactile presentation unit. Receive text information.
그리고, 제어부는 사용자로부터 입력받은 문자정보에 따라 메모리부로부터 응답에 대응하는 문자정보를 불러들여 음성신호로 변환한 후, 변환된 음성신호를 스피커로 출력하도록 한다.The controller reads the character information corresponding to the response from the memory unit according to the character information input from the user, converts the character information into a voice signal, and outputs the converted voice signal to the speaker.
본 실시예에 따른 점자 모드를 설명하면, 제어부가 음성 인식부 또는 촉감 제시부를 통해 입력받은 문자정보가 점자 모드를 선택하는 것으로 판단한 경우, 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 불러들여 충격신호로 변환한 후, 촉감 제시부로 출력하도록 하고, 이에 사용자로부터 음성 인식부 또는 촉감 제시부를 통해 점자에 대응하는 문자정보를 입력받는다.Referring to the braille mode according to the present embodiment, when the controller determines that the text information input through the voice recognition unit or the tactile presentation unit selects the braille mode, the memory unit is converted into the character information converted through the voice recognition unit or the tactile presentation unit. Search and retrieve the character information corresponding to the preset question or answer to convert the signal into a shock signal, and outputs it to the tactile presenting unit, and receives the character information corresponding to the braille from the user through the voice recognition unit or the tactile presenting unit. .
그리고, 제어부는 사용자로부터 입력받은 문자정보에 따라 메모리부로부터 응답에 대응하는 문자정보를 불러들여 충격신호로 변환한 후, 충격신호를 촉감 제시부로 출력하도록 한다.The control unit reads the character information corresponding to the response from the memory unit according to the character information input from the user, converts the character information into a shock signal, and outputs the shock signal to the tactile presenting unit.
이에 따라 본 발명의 일실시예에 따른 촉감 제시장치를 이용한 점자 교육 상호작용 시스템은 사용자의 입력에 따라 지속적인 질문 또는 응답에 해당하는 문자정보를 제공함으로써, 사용자와 대화방식으로 진행함으로써 점자 교육을 하는 효과가 있다.Accordingly, the braille education interaction system using a tactile presentation device according to an embodiment of the present invention provides text information corresponding to a continuous question or answer according to a user's input, thereby performing braille education by proceeding in a conversational manner with the user. It works.
한편, 상술한 점자 교육 상호작용 시스템을 이용한 방법(이하, "점자 교육 방법"이라 함)에 대하여 도 2를 참조하여 설명하면 다음과 같다.Meanwhile, a method using the aforementioned braille education interaction system (hereinafter, referred to as a "braille education method") will be described with reference to FIG. 2.
도 2는 본 발명의 일실시예에 따른 점자 교육 방법의 전체 흐름도이고, 도 3은 본 발명의 일실시예에 따른 음성 모드에 따른 점자 교육 방법의 흐름도이며, 도 4는 본 발명의 일실시예에 따른 점자 모드에 따른 점자 교육 방법의 흐름도이다.2 is a flowchart of a braille education method according to an embodiment of the present invention, Figure 3 is a flowchart of a braille education method according to a voice mode according to an embodiment of the present invention, Figure 4 is an embodiment of the present invention Is a flowchart of a braille education method according to braille mode.
도 2에 도시된 바와 같이, 제어부는 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보를 입력받는다(S2).As shown in FIG. 2, the controller receives the converted text information through the voice recognition unit or the tactile presentation unit (S2).
다음으로, 제어부는 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보가 일반 모드 또는 음성 모드 또는 점자 모드 인지를 판단한다(S4).Next, the controller determines whether the text information converted through the voice recognition unit or the tactile presentation unit is the normal mode, the voice mode, or the braille mode (S4).
다음으로, 제 S4 단계의 판단결과, 일반 모드로 판단한 경우, 제어부는 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 해당 문자정보를 불러들인다(S6).Next, when the determination result of the step S4, in the normal mode, the control unit searches for the character information corresponding to the question or response preset in the memory unit with the character information converted through the voice recognition unit or the tactile presentation unit, and the corresponding character information. Recall (S6).
다음으로, 제어부는 메모리부로부터 불러들인 문자정보를 음성 신호 및 충격 신호로 변환한다(S8).Next, the control unit converts the text information imported from the memory unit into a voice signal and a shock signal (S8).
다음으로, 제어부는 제 S8 단계에서 변환된 음성 신호를 스피커를 통해 출력 하고, 변환된 충격 신호를 촉감 제시부를 통해 출력한다(S10).Next, the control unit outputs the voice signal converted in the step S8 through the speaker, and outputs the converted shock signal through the tactile presentation unit (S10).
그리고, 제어부는 음성 인식부 또는 촉감 제시부를 통해 문자정보를 입력받는 경우(S12), 상기 제 S4 단계로 그 절차를 이행한다.If the controller receives the text information through the voice recognition unit or the tactile presentation unit (S12), the control unit proceeds to the step S4.
또한, 도 3에 도시된 바와 같이, 본 실시예에 따른 제 S4 단계의 판단결과, 음성 모드로 판단한 경우, 제어부는 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 해당 문자정보를 불러들인다(S22).In addition, as shown in FIG. 3, when it is determined in the voice mode as a result of the determination in step S4 according to the present embodiment, the controller is configured to display a question set in the memory unit with the text information converted through the voice recognition unit or the tactile presentation unit. The character information corresponding to the response is retrieved and the corresponding character information is retrieved (S22).
다음으로, 제어부는 메모리부로부터 불러들인 문자정보를 음성 신호로 변환한다(S24).Next, the control unit converts the character information imported from the memory unit into a voice signal (S24).
다음으로, 제어부는 제 S24 단계에서 변환된 음성 신호를 스피커를 통해 출력한다(S26).Next, the controller outputs the voice signal converted in step S24 through the speaker (S26).
다음으로, 제어부는 음성 인식부 또는 촉감 제시부를 통해 점자에 대응하는 문자정보를 입력받는 경우(S28), 상기 제 S22 단계로 그 절차를 이행한다.Next, when the controller receives text information corresponding to the braille through the voice recognition unit or the tactile presentation unit (S28), the control unit proceeds to the step S22.
그리고, 도 4에 도시된 바와 같이, 본 실시예에 따른 제 S4 단계의 판단결과, 점자 모드로 판단한 경우, 제어부는 음성 인식부 또는 촉감 제시부를 통해 변환된 문자정보로 메모리부에 기설정된 질문 또는 응답에 대응하는 문자정보를 검색하여 해당 문자정보를 불러들인다(S32).As shown in FIG. 4, when it is determined in the braille mode as a result of the determination in step S4 according to the present embodiment, the controller is configured to ask a question previously set in the memory unit with the character information converted through the voice recognition unit or the tactile presentation unit. The character information corresponding to the response is retrieved and the corresponding character information is retrieved (S32).
다음으로, 제어부는 메모리부로부터 불러들인 문자정보를 충격신호로 변환한다(S34).Next, the control unit converts the character information retrieved from the memory unit into a shock signal (S34).
다음으로, 제어부는 제 S34 단계에서 변환된 충격신호를 촉감 제시부를 통해 출력한다(S36).Next, the controller outputs the shock signal converted in the step S34 through the tactile presentation unit (S36).
다음으로, 제어부는 음성 인식부 또는 촉감 제시부를 통해 점자에 대응하는 문자정보를 입력받는 경우(S38), 상기 제 S32 단계로 그 절차를 이행한다.Next, when the controller receives the character information corresponding to the braille through the voice recognition unit or the tactile presentation unit (S38), the control unit proceeds to the step S32.
상기와 같은 본 발명에 따르면, 입력수단으로 점자에 해당하는 문자정보를 입력함에 따라 이에 대응하는 음성 및 촉감 제시장치를 통해 출력하여 사용자에게 점자 교육을 하는 효과가 있다.According to the present invention as described above, by inputting the character information corresponding to the braille as the input means it has the effect of outputting through the corresponding voice and tactile presentation device to the user in braille education.
또한, 사용자로부터 입력받는 음성을 인식하고, 인식한 음성을 실시간으로 점자 변환하여 촉감 제시장치를 통해 출력하는 효과가 있다.In addition, there is an effect of recognizing a voice received from the user, converting the recognized voice into braille in real time and outputting the same through a tactile presentation device.
그리고 사용자로부터 입력받는 음성을 인식하고, 대응되는 응답데이터를 기설정된 메모리 서치를 통해 추출하여 출력하는 대화방식으로 사용자와 대화를 진행함으로써 점자 교육을 극대화시키는 효과가 있다.And it recognizes the voice input from the user, and has the effect of maximizing the braille education by having a conversation with the user in a conversational manner to extract and output the corresponding response data through a predetermined memory search.
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것이 아니며, 기술적 사상의 범주를 일탈함이 없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서, 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.As described above and described with reference to a preferred embodiment for illustrating the technical idea of the present invention, the present invention is not limited to the configuration and operation as shown and described as described above, it is a deviation from the scope of the technical idea It will be understood by those skilled in the art that many modifications and variations can be made to the invention without departing from the scope of the invention. Accordingly, all such suitable changes and modifications and equivalents should be considered to be within the scope of the present invention.
도 1은 본 발명의 일실시예에 따른 촉감 제시장치를 이용한 점자 교육 상호작용 시스템의 개략적인 구성도.1 is a schematic configuration diagram of a braille education interaction system using a tactile presentation device according to an embodiment of the present invention.
도 2는 본 발명의 일실시예에 따른 점자 교육 방법의 전체 흐름도.2 is an overall flowchart of a braille education method according to an embodiment of the present invention.
도 3은 본 발명의 일실시예에 따른 음성 모드에 따른 점자 교육 방법의 흐름도.3 is a flowchart of a braille education method according to a voice mode according to an embodiment of the present invention.
도 4는 본 발명의 일실시예에 따른 점자 모드에 따른 점자 교육 방법의 흐름도.4 is a flowchart of a braille education method according to a braille mode according to an embodiment of the present invention.
** 도면의 주요 부분에 대한 부호의 설명 ** ** Description of symbols for the main parts of the drawing **
100 : 음성 인식부 200 : 촉감 제시부100: speech recognition unit 200: tactile presentation unit
210 : 터치 스크린 220 : 점자 디스플레이210: touch screen 220: braille display
230 : 촉감 제시모듈 300 : 메모리부230: tactile presentation module 300: memory
310 : 외부 메모리 400 : 제어부310: external memory 400: controller
410 : 모드제어모듈410 mode control module
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090072007A KR101087640B1 (en) | 2009-08-05 | 2009-08-05 | System for interacting Braille education using the feel presentation device and the method therefor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090072007A KR101087640B1 (en) | 2009-08-05 | 2009-08-05 | System for interacting Braille education using the feel presentation device and the method therefor |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20110014372A true KR20110014372A (en) | 2011-02-11 |
KR101087640B1 KR101087640B1 (en) | 2011-11-30 |
Family
ID=43773582
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090072007A KR101087640B1 (en) | 2009-08-05 | 2009-08-05 | System for interacting Braille education using the feel presentation device and the method therefor |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101087640B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011155833A (en) * | 2010-01-27 | 2011-08-11 | Ls Industrial Systems Co Ltd | Apparatus and method for processing input data of protective relay |
KR101324201B1 (en) * | 2011-09-15 | 2013-11-20 | 한국과학기술원 | Vibration generating module, actuator using the same, and handheld device |
JP7055508B1 (en) * | 2021-02-01 | 2022-04-18 | ▲広▼州大学 | Braille learning device and operation method |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101999281B1 (en) * | 2017-09-26 | 2019-10-01 | 최한솔 | User terminal for studying braille and operating method thereof |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3043622B2 (en) | 1996-07-26 | 2000-05-22 | 日本電気通信システム株式会社 | Information display device |
JP2866931B2 (en) | 1997-02-18 | 1999-03-08 | 郵政省通信総合研究所長 | Braille learning device |
KR100810573B1 (en) | 2006-06-07 | 2008-03-18 | (주)아이디팩트글로벌 | Electronic braille apparatus |
-
2009
- 2009-08-05 KR KR1020090072007A patent/KR101087640B1/en not_active IP Right Cessation
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011155833A (en) * | 2010-01-27 | 2011-08-11 | Ls Industrial Systems Co Ltd | Apparatus and method for processing input data of protective relay |
US8711913B2 (en) | 2010-01-27 | 2014-04-29 | Ls Industrial Systems Co., Ltd. | Device and method for processing input data of protective relay |
KR101324201B1 (en) * | 2011-09-15 | 2013-11-20 | 한국과학기술원 | Vibration generating module, actuator using the same, and handheld device |
JP7055508B1 (en) * | 2021-02-01 | 2022-04-18 | ▲広▼州大学 | Braille learning device and operation method |
Also Published As
Publication number | Publication date |
---|---|
KR101087640B1 (en) | 2011-11-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Rantala et al. | Methods for presenting braille characters on a mobile device with a touchscreen and tactile feedback | |
US6230135B1 (en) | Tactile communication apparatus and method | |
KR101650099B1 (en) | A wearable haptic pattern display device for blind | |
US5736978A (en) | Tactile graphics display | |
US10121388B2 (en) | Methods, systems, and apparatuses to convey chorded input | |
US20060033725A1 (en) | User created interactive interface | |
KR101774707B1 (en) | Bluetooth IoT Keyboard Capable of Keyboard Mapping For Each Personal | |
Gorlewicz et al. | The graphical access challenge for people with visual impairments: Positions and pathways forward | |
US10861347B2 (en) | Device and method for teaching phonics using a touch detecting interface | |
Sarkar et al. | A low cost microelectromechanical Braille for blind people to communicate with blind or deaf blind people through SMS subsystem | |
KR101087640B1 (en) | System for interacting Braille education using the feel presentation device and the method therefor | |
Al-Qudah et al. | Utilizing mobile devices' tactile feedback for presenting braille characters: an optimized approach for fast reading and long battery life | |
Oproescu et al. | Software and hardware solutions for Using the keyboards by blind people | |
GB2311888A (en) | Tactile communication system | |
Singh et al. | HELF (Haptic Encoded Language Framework): a digital script for deaf-blind and visually impaired | |
Wu et al. | A haptic keypad design with a novel interactive haptic feedback method | |
KR100381870B1 (en) | Apparatus and method for pointing a braille | |
Tamer et al. | A low duration vibro-tactile representation of Braille characters | |
Alnfiai et al. | Improved Singeltapbraille: Developing a Single Tap Text Entry Method Based on Grade 1 and 2 Braille Encoding. | |
KR100805259B1 (en) | User created interactive interface | |
Reed et al. | Haptic Communication of Language | |
Sturm et al. | Communicating through gestures without visual feedback | |
Reinders et al. | Designing conversational multimodal 3D printed models with people who are blind | |
KR102449962B1 (en) | Braille keyboard system based on smartphone case | |
Gorlewicz et al. | The Graphical Access Challenge for People with Visual Impairments: Positions and Pathways Forward. In D. Cvetkovic (ed), Interactive Multimedia-Multimedia Production and Digital Storytelling |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
LAPS | Lapse due to unpaid annual fee |