KR101157928B1 - System for announce hearing-impaired persons including emotion information and method for announce using the same - Google Patents

System for announce hearing-impaired persons including emotion information and method for announce using the same Download PDF

Info

Publication number
KR101157928B1
KR101157928B1 KR1020100022933A KR20100022933A KR101157928B1 KR 101157928 B1 KR101157928 B1 KR 101157928B1 KR 1020100022933 A KR1020100022933 A KR 1020100022933A KR 20100022933 A KR20100022933 A KR 20100022933A KR 101157928 B1 KR101157928 B1 KR 101157928B1
Authority
KR
South Korea
Prior art keywords
sound
information
hearing impaired
emotional information
guide
Prior art date
Application number
KR1020100022933A
Other languages
Korean (ko)
Other versions
KR20110103726A (en
Inventor
박연규
강대임
최인묵
김민석
송한욱
이성준
Original Assignee
한국표준과학연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국표준과학연구원 filed Critical 한국표준과학연구원
Priority to KR1020100022933A priority Critical patent/KR101157928B1/en
Publication of KR20110103726A publication Critical patent/KR20110103726A/en
Application granted granted Critical
Publication of KR101157928B1 publication Critical patent/KR101157928B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F11/00—Methods or devices for treatment of the ears or hearing sense; Non-electric hearing aids; Methods or devices for enabling ear patients to achieve auditory perception through physiological senses other than hearing sense; Protective devices for the ears, carried on the body or in the hand
    • A61F11/04—Methods or devices for enabling ear patients to achieve auditory perception through physiological senses other than hearing sense, e.g. through the touch sense
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources

Abstract

본 발명은 청각장애인 주변에서 발생되는 다양한 소리를 수집 및 분석하여 해당 음장을 가시화하고, 분석된 소리에 대해 아날로그적인 감성정보로 제공함으로써 청각장애인 주변에서 발생하는 상황에 대해 보다 다양한 방식으로 안내를 할 수 있는 감성정보를 포함하는 청각장애인용 안내 시스템 및 그를 이용한 안내 방법에 관한 것이다. 이와 같은 본 발명 감성정보를 포함하는 청각장애인용 안내 시스템은 마이크 수단을 통해 소리를 입력받고, 입력된 소리를 정량적으로 분석하여 디스플레이 수단을 통해 해당 소리의 음장이나 음장 대상을 가시화하여 정량정보로 디스플레이하며, 제 1 통신수단을 통해 분석된 소리 데이터를 전송하는 청각장애인용 안내장치; 그리고, 제 2 통신수단을 통해 청각장애인용 안내장치에서 전송된 소리 정보에 따라 대응되는 감성정보를 질감, 진동 및 냉온감 중 적어도 하나를 이용하여 출력하는 감성정보 출력장치;를 포함하여 구성된다.The present invention collects and analyzes various sounds generated around the hearing impaired to visualize the sound field, and provides analog emotional information on the analyzed sound to guide the situation in the vicinity of the hearing impaired in various ways. It relates to a guide system for the hearing impaired including emotional information, and a guide method using the same. The guide system for the hearing impaired including the information of the present invention as described above receives the sound through the microphone means, quantitatively analyzes the input sound and visualizes the sound field or the sound field object of the corresponding sound through the display means and displays it as quantitative information. A guide device for the hearing impaired to transmit sound data analyzed through the first communication means; And, the emotional information output device for outputting the corresponding emotional information by using at least one of the texture, vibration and cold sense according to the sound information transmitted from the guide device for the hearing impaired through the second communication means.

Description

감성정보를 포함하는 청각장애인용 안내 시스템 및 그를 이용한 안내방법{System for announce hearing-impaired persons including emotion information and method for announce using the same}System for announce hearing-impaired persons including emotion information and method for announce using the same}

본 발명은 청각장애인 주변에서 발생되는 다양한 소리를 수집 및 분석하여 해당 음장을 가시화하고, 분석된 소리에 대해 아날로그적인 감성정보로 제공함으로써 청각장애인 주변에서 발생하는 상황에 대해 보다 다양한 방식으로 안내를 할 수 있는 감성정보를 포함하는 청각장애인용 안내 시스템 및 그를 이용한 안내 방법에 관한 것이다. The present invention collects and analyzes various sounds generated around the hearing impaired to visualize the sound field, and provides analog emotional information on the analyzed sound to guide the situation in the vicinity of the hearing impaired in various ways. It relates to a guide system for the hearing impaired including emotional information, and a guide method using the same.

장애인, 장애우, 장애자는 신체 장애와 정신 장애를 비롯하여 여러 이유로 일상적인 활동에 제약을 받는 장애를 가진 사람들을 이른다. 크게 태어났을 때부터 장애를 가진 선천적 장애인과, 사고 등으로 나중에 장애를 갖게 된 후천적 장애인으로 나눌 수 있다. 장애인, 장애우, 장애자는 일반적으로 모두 같은 뜻으로 받아들이고 있지만, 사람들마다 쓰는 용어는 서로 다르다. People with disabilities, people with disabilities and people with disabilities are people with disabilities that are limited to daily activities for a number of reasons, including physical and mental disabilities. It can be divided into two groups: one born with a disability since birth and one who has a disability later due to an accident. People with disabilities, people with disabilities and people with disabilities generally accept the same meanings, but different terms are used by different people.

그 중 청각장애인은 소리를 못 듣거나, 들어도 사람이 이해할 수 없는 소리로 들려서 이해하지 못하는 장애인이다. 여기서, 청각 장애는 소리를 들을 수 있는 능력이 상당히 떨어져 있거나 전혀 들리지 않는 상태의 장애이다. Among them, the hearing impaired person is a person who does not understand because they cannot hear or hear the sound. Here, a hearing impairment is a disorder in a state where the ability to hear sounds is considerably separated or not heard at all.

청각 장애의 정도는 관점에 따라 여러 종류의 단계 구분이 있다. 이때, 소리를 전혀 들을 수 없거나 잔존 청력이 있다 하더라도 소리만으로는 의사 소통이 불가능한 경우를 농(聾)이라 하고, 보청기와 같은 기구의 도움으로 잔존 청력을 사용하여 의사소통이 가능한 경우를 난청이라 한다. 하지만, 청각 장애인에게 환경 소리의 인식 또는 음성을 통한 정보의 전달은 불가능하더라도 본인의 시야 내에서는 소리가 들리지 않아도 본인에 능력에 따라 주변의 현재 상황을 어느 정도는 파악할 수 있다. 하지만, 청각장애인을 위한 보조도구로 주로 보청기만 이용되고 있는데, 청력손실이 심한 농에 가까운 장애인의 경우 음의 전달이 불가능한 문제점이 있다. 따라서, 가정이나 직장 등에서 자신을 호출하는 경우에 자신을 호출하는지 유무에 대한 변별력을 같지 못하는 등의 문제점이 있다. 특히, 청각장애인이 외출 시 인도나 도로 등에서 긴급한 상황을 요하는 차량의 경적소리, 화재 경보 등의 소리를 인식하지 못하는 경우 불편함을 떠나 위험에 노출될 수 있는 문제점이 있었다.
The degree of hearing impairment can be classified into different stages depending on the point of view. At this time, even if there is no sound at all or there is a residual hearing is not possible to communicate only by sound is called (농), and the case of being able to communicate using the residual hearing with the help of instruments such as hearing aids is called hearing loss. However, even if it is impossible for the hearing impaired to recognize the environmental sound or to transmit information through the voice, it is possible to grasp the current situation of the surroundings to some extent depending on the ability of the person without hearing the sound within the field of vision. However, only the hearing aid is mainly used as an aid for the hearing impaired, and in the case of a disabled person with a severe hearing loss, it is impossible to transmit sound. Therefore, there is a problem such as not distinguishing whether or not to call themselves when calling themselves at home or at work. In particular, when a deaf person does not recognize the sound of a horn, a fire alarm, etc. of the vehicle requiring an urgent situation on the sidewalk or road, there is a problem that can be exposed to danger leaving the inconvenience.

따라서, 본 발명은 상기와 같은 종래 기술의 제반 단점과 문제점을 해결하기 위한 것으로, 본 발명은 청각장애인 주변에서 발생되는 다양한 소리를 수집 및 분석하여 해당 음장을 가시화하고, 분석된 소리에 대해 아날로그적인 감성정보로 제공함으로써 청각장애인 주변에서 발생하는 상황에 대해 보다 다양한 방식으로 안내를 할 수 있는 감성정보를 포함하는 청각장애인용 안내 시스템 및 그를 이용한 안내 방법을 제공함에 그 목적이 있다.
Accordingly, the present invention is to solve the above-mentioned disadvantages and problems of the prior art, the present invention collects and analyzes a variety of sounds generated in the vicinity of the hearing impaired to visualize the sound field, analogous to the analyzed sound The purpose of the present invention is to provide a guide system for the hearing impaired person and a guide system using the same, including emotional information that can guide in a variety of ways about the situation occurring around the hearing impaired.

상기와 같은 목적을 달성하기 위한 본 발명은 마이크 수단을 통해 소리를 입력받고, 입력된 소리를 정량적으로 분석하여 디스플레이 수단을 통해 해당 소리의 음장이나 음장 대상을 가시화하여 정량정보로 디스플레이하며, 제 1 통신수단을 통해 분석된 소리 데이터를 전송하는 청각장애인용 안내장치; 그리고, 제 2 통신수단을 통해 청각장애인용 안내장치에서 전송된 소리 정보에 따라 대응되는 질감, 진동, 냉온감의 감성정보 중 적어도 하나를 출력하는 감성정보 출력장치;를 포함하여 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템을 제공한다.
In order to achieve the above object, the present invention receives a sound through a microphone means, quantitatively analyzes the input sound, and visualizes the sound field or the sound field object of the corresponding sound through the display means and displays the quantitative information. Guide device for the hearing impaired to transmit the sound data analyzed through the communication means; And an emotional information output device for outputting at least one of texture information, vibration information, and emotional information of a cold feeling corresponding to the sound information transmitted from the guide device for the hearing impaired through the second communication means. Provides a guide system for the deaf including emotional information.

여기서, 청각장애인용 안내장치는, 마이크 수단에서 수집한 소리를 분석하여 소리의 위치나 세기를 정량적인 소리 데이터로 분석하는 음장분석수단과, 음장이나 음장 대상을 디스플레이 수단에서 디스플레이할 수 있도록 영상처리하는 영상신호 처리수단과, 청각장애인용 안내장치의 구동프로그램과, 음장분석수단에서 분석된 소리에 대한 패턴정보나, 음장 또는 음장 대상을 디스플레이수단에서 가시화하여 디스플레이하기 위한 가시화 정보가 데이터베이스화되어 구축되는 제 1 저장수단과, 청각장애인용 안내장치에 전원을 공급하는 제 1 전원수단과, 음장분석수단에서 분석된 음원의 위치나 세기에 따른 소리 데이터를 제 1 저장수단에 데이터베이스화한 자료와 비교하여 디스플레이수단에서 가시화하여 디스플레이하도록 제어하고, 음원의 위치와 세기에 따른 소리 데이터를 제 1 통신수단을 통해 감성정보 출력장치로 전송하도록 제어하는 제 1 제어수단을 더 포함하여 구성됨이 바람직하다.
Here, the guide device for the hearing impaired, the sound field analysis means for analyzing the sound collected by the microphone means to analyze the position or intensity of the sound as quantitative sound data, and the image processing to display the sound field or sound field object on the display means The image signal processing means, the driving program of the guide device for the hearing impaired, the pattern information on the sound analyzed by the sound field analysis means, and the visualization information for visualizing and displaying the sound field or the sound field object on the display means. Comparing the first storage means, the first power means for supplying power to the guide device for the hearing impaired, and the sound data according to the position or intensity of the sound source analyzed by the sound field analysis means with the data stored in the first storage means. Control the display means to visualize and display the position of the sound source Preferably, the apparatus further comprises first control means for controlling the sound data according to the power intensity to be transmitted to the emotion information output device through the first communication means.

그리고, 제 1 통신수단과 제 2 통신수단은, 유선 또는 적외선, 블루투스, 지그비, 무선랜 통신 방식 중 하나의 통신방식으로 통신하도록 구성됨이 바람직하다.
The first communication means and the second communication means are preferably configured to communicate in one of a wired or infrared, Bluetooth, Zigbee, and wireless LAN communication methods.

한편, 마이크 수단은, 마이크가 어레이 또는 매트릭스 형태로 구성됨이 바람직하다.
On the other hand, the microphone means, the microphone is preferably configured in the form of an array or matrix.

여기서, 제 1 제어수단은 음장분석수단에서 분석된 소리의 세기나 패턴이 설정된 세기 이상이거나 설정된 패턴인 경우에 디스플레이수단을 통해 가시화되거나,제 1 통신수단을 통해 감성정보 출력장치로 출력되도록 제어함이 바람직하다.
Here, the first control means controls to be visualized through the display means or output to the emotional information output device through the first communication means when the intensity or pattern of the sound analyzed by the sound field analysis means is equal to or greater than the set intensity. This is preferred.

그리고, 설정된 세기는, 청각장애인용 안내장치 주변에서 발생된 소리 중 청각장애인이 주의를 기울여야하는 환경소음 이상의 세기이고, 설정된 패턴은 교차로, 횡단보도에서의 시각장애인용 벨소리나, 지하철역사에서의 지하철 진입 시 벨소리, 기차의 경적소리, 자동차의 경적소리, 소방차, 경찰차, 구급차의 사이렌 소리, 노래, 행진곡, 북소리, 웃음소리, 고함소리 패턴 중 적어도 하나인 것이 바람직하다.
And, the set intensity is the intensity of the environmental noise that the deaf should pay attention among the sound generated around the guide device for the hearing impaired, the set pattern is the intersection, the ringtone for the visually impaired at the crosswalk, subway in the subway station At least one of a ringing sound, a horn sound of a train, a horn sound of a car, a fire engine, a police car, an ambulance siren, a song, a march, a drum sound, a laughter, and a yelling sound may be preferred.

한편, 음장 대상이란 소리를 발생시킨 대상물인 것이 바람직하다.
On the other hand, it is preferable that a sound field object is an object which produced the sound.

또한, 감성정보 출력장치는, 청각장애인용 안내장치와 통신하기 위한 제 2 통신수단과, 제 2 통신수단을 통해 수신된 소리 데이터에 대하여 질감으로 출력하는 질감출력수단과, 제 2 통신수단을 통해 수신된 소리 데이터에 대하여 진동으로 출력하는 진동출력수단과, 제 2 통신수단을 통해 수신된 소리 데이터에 대하여 냉온열로 출력하는 열전소자수단과, 감성정보 출력장치를 구동하기 위한 구동프로그램과 청각장애인이나 일반인들을 대상으로 질감, 진동 또는 냉온열에 대한 실험에 의해 구해진 감성정보 데이터가 저장되는 제 2 저장수단과, 감성정보 출력장치에 전원을 공급하는 제 2 전원수단과, 제 2 통신수단에서 수신한 소리 데이터에 대해 제 2 저장수단을 참조하여 질감출력수단, 진동출력수단 및 열전소자수단 중 적어도 하나를 통해 청각장애인이 인식할 수 있는 감성 정보로 출력하도록 제어하는 제 2 제어수단을 포함하여 구성됨이 바람직하다.In addition, the emotional information output device, through the second communication means for communicating with the guide device for the hearing impaired, the texture output means for outputting the texture of the sound data received through the second communication means, and through the second communication means Vibration output means for outputting the received sound data in a vibration, thermoelectric element means for outputting the sound data received through the second communication means in cold and hot heat, a drive program for driving the emotional information output device and the hearing impaired person Second storage means for storing emotional information data obtained by an experiment on texture, vibration, or cold / heat for the general public, second power means for supplying power to the emotional information output device, and received from the second communication means. Hearing impairment through at least one of texture output means, vibration output means and thermoelectric means with reference to the second storage means for the sound data It is preferably configured to include a second control means for controlling to output the emotional information that can be recognized by the phosphorus.

상기 감성정보 출력장치(200)를 구동하기 위한 구동프로그램과 청각장애인이나 일반인들을 대상으로 상기 질감, 진동 또는 냉온열에 대한 실험에 의한 감성정보 데이터가 저장되는 제 2 저장수단(250)과,Second storage means 250 for storing the emotion information data by the experiment for the texture, vibration or cold and heat for the drive program for driving the emotion information output device 200 and the hearing impaired or ordinary people,

여기서, 질감출력수단은, 소리 데이터에 포함된 소리의 세기나 패턴정보에 따라 돌기 형상의 핀 어레이를 이용하여 질감 정보나 기호 정보로 출력되고, 진동출력수단은, 소리 데이터에 포함된 소리의 세기나 패턴정보에 따라 진동의 세기가 조절되어 출력되거나 동일한 패턴의 진동으로 출력되고, 열전소자수단은, 소리 데이터에 포함된 소리의 세기나 패턴정보에 따라 열의 세기가 조절되어 출력되거나 동일한 패턴으로 열의 세기가 조절됨이 바람직하다.
Here, the texture output means is output as texture information or symbol information by using the protrusion-shaped pin array according to the intensity or pattern information of the sound included in the sound data, and the vibration output means is the intensity of the sound contained in the sound data. B) the intensity of the vibration is adjusted and output according to the pattern information, or is output as the vibration of the same pattern, and the thermoelectric element is output by adjusting the intensity of the heat according to the intensity or pattern information of the sound included in the sound data or in the same pattern. The intensity is preferably adjusted.

그리고, 청각장애인용 안내장치는, 안경 형태로 구성되고, 디스플레이 수단은 안경의 렌즈부분에 구성됨이 바람직하다.
In addition, the guide device for the hearing impaired is configured in the form of glasses, the display means is preferably configured in the lens portion of the glasses.

한편, 감성정보 출력장치는, 일측에 감성정보 출력장치의 올바른 식별위치를 나타내는 곡면홈을 갖는 장방형의 패널 형태로 구성됨이 바람직하다.
On the other hand, the emotion information output device is preferably configured in the form of a rectangular panel having a curved groove on one side indicating the correct identification position of the emotion information output device.

또한, 소리의 세기는 주파수와 음압으로 구분되고, 소리 패턴은 소리 간격으로 구분됨이 바람직하다.
In addition, the sound intensity is divided into frequency and sound pressure, and the sound pattern is preferably divided into sound intervals.

여기서, 디스플레이수단은 플렉시블한 투명 또는 반투명한 LCD나, LED 디스플레이, AMOLED 디스플레이 및 전자잉크 중 하나로 구성됨이 바람직하다.
Here, the display means is preferably composed of a flexible transparent or translucent LCD, LED display, AMOLED display and electronic ink.

그리고, 상기한 목적을 달성하기 위하여 본 발명은 청각장애인용 안내장치가 마이크 수단을 통해 주변소리를 수집하는 단계; 제 1 제어수단이 음장분석수단을 통해 수집된 소리에 대한 위치, 세기 및 패턴을 분석하는 단계; 제 1 제어수단이 상기 분석된 소리를 정량정보와 감성정보로 분류하는 단계; 분류한 정량정보는 청각장애인용 안내장치의 디스플레이수단을 통해 디스플레이하고, 감성정보는 상기 제 1 통신수단을 통해 감성정보 출력장치로 전송하는 단계; 그리고, 감성정보 출력장치는 상기 청각장애인용 안내장치에서 전송된 감성정보를 수신하여 감성정보를 질감이나, 진동, 열전달 중 하나 이상의 방식으로 출력하는 단계;를 포함하여 이루어지는 것이 바람직하다.
And, in order to achieve the above object, the present invention comprises the steps of collecting the ambient sound through the microphone means for the guide device for the hearing impaired; Analyzing, by the first control means, the position, intensity, and pattern of the sound collected through the sound field analysis means; Classifying, by the first control means, the analyzed sound into quantitative information and emotional information; Displaying the classified quantitative information through a display means of a guide device for the hearing impaired, and transmitting the emotion information to the emotion information output device through the first communication means; In addition, the emotional information output device preferably comprises the step of receiving the emotional information transmitted from the guide device for the hearing impaired and outputting the emotional information by one or more of the texture, vibration, heat transfer method.

여기서, 정량정보는 수집 및 분석된 소리의 위치나 세기, 패턴 정보 중 하나 이상이고, 감성정보는, 기쁨, 슬픔, 공포, 혐오, 분노 정보 중 적어도 하나인 것이 바람직하다.
Here, the quantitative information is one or more of the location, intensity, and pattern information of the collected and analyzed sound, and the emotion information is preferably at least one of joy, sadness, fear, disgust, and anger information.

그리고, 청각장애인용 안내장치는 음장 대상을 가시화하여 정량정보로 디스플레이하는 경우, 음장 대상의 주변이 깜빡이도록 하거나, 음장 대상에 대하여 별도의 색을 입혀 가시화시킴이 바람직하다.
In addition, the guide device for the deaf may visualize the sound field object and display it as quantitative information. It is preferable to visualize the sound field object by flickering or by applying a separate color to the sound field object.

한편, 감성정보 출력장치는 감성정보를 질감이나, 진동, 열전달 중 적어도 하나의 방식으로 출력하는 경우 질감이나, 진동, 열전달 중 적어도 하나 이상의 방식을 이용하여 기쁨, 슬픔, 공포, 혐오, 분노 중 적어도 하나의 감성을 느끼도록 출력하는 것이 바람직하다.
Meanwhile, when the emotional information output device outputs the emotional information by at least one of texture, vibration, and heat transfer, the emotion information output device uses at least one of texture, vibration, and heat transfer to at least one of joy, sadness, fear, disgust, and anger. It is preferable to output so as to feel one emotion.

또한, 감성정보는 청각장애인이나 일반인들을 대상으로 질감, 진동 및 냉온감 정보를 제공한 후 실험에 의해 구해진 것이거나, 청각장애인들을 대상으로 별도의 교육을 통해 질감, 진동 및 냉온감 정보에서 감성정보를 취득할 수 있도록 하는 것이 바람직하다.
In addition, the emotional information is obtained by experiment after providing texture, vibration and cold feeling information for the hearing impaired or ordinary people, or emotional information from the texture, vibration and cold feeling information through separate education for the hearing impaired. It is desirable to be able to obtain.

상기와 같은 본 발명에 의하면 다음과 같은 효과가 있다.According to the present invention as described above has the following effects.

첫째, 청각장애인의 주변에서 발생하는 소리를 분석하여 청각장애인에게 시각적으로 안내함과 동시에 촉각적으로 안내함으로써 주변에서 발생하는 다양한 정보에 대해 용이하게 인식할 수 있다.First, by analyzing the sound generated in the vicinity of the hearing impaired to visually and tactile guidance to the hearing impaired can easily recognize a variety of information generated in the vicinity.

둘째, 청각장애인의 주변에서 발생하는 소리를 분석하여 음원의 위치나 세기를 그래픽으로 제공함으로써 음원의 위치를 정확히 알 수 있어 해당 음원이 발생한 대상에 대한 정확한 대응이 가능하다.Second, by analyzing the sound generated in the vicinity of the hearing impaired by providing the position or intensity of the sound source graphically, it is possible to accurately know the position of the sound source, it is possible to accurately respond to the target of the sound source.

셋째, 청각장애인의 주변에서 발생하는 소리를 분석하여 감성정보출력장치를 통해 음원에 대한 정보를 제공하는 경우 일반인에 비해 타감각기관이 예민한 청각장애인에게 주변 소리에 대하여 빠르게 인식할 수 있도록 하고, 심리적인 안정감 역시 얻을 수 있어 이동 중 심리적으로 보다 안정된 심리 상태에서 이동할 수 있다.
Third, when analyzing the sound generated in the vicinity of the hearing impaired to provide information about the sound source through the emotional information output device, the other sense organs can recognize the sound impaired to the hearing impaired more sensitive than the general public, and psychological A sense of stability can also be obtained, allowing you to move from a more psychological state of mind during the move.

도 1은 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템을 설명하기 위한 블록 구성도,
도 2는 도 1에 나타낸 청각장애인용 안내장치를 상세히 설명하기 위한 블록 구성도,
도 3은 도 1에 나타낸 감성정보 출력장치를 상세히 설명하기 위한 블록 구성도,
도 4는 본 발명에 따른 청각 장애인용 안내장치를 구현한 구현 예를 설명하기 위한 도면,
도 5는 본 발명에 따른 감성정보 출력장치를 구현한 구현 예를 설명하기 위한 도면,
도 6 내지 도 7은 본 발명에 따른 청각장애인용 안내장치의 실시 예를 설명하기 위한 도면,
도 8 내지 도 10은 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 실시 예를 설명하기 위한 도면,
도 11은 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 화살표 핀 어레이를 설명하기 위한 도면,
도 12는 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 사용예를 설명하기 위한 도면,
도 13은 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내방법을 설명하기 위한 플로우차트이다.1 is a block diagram illustrating a guide system for the hearing impaired including emotional information according to the present invention;
Figure 2 is a block diagram for explaining in detail the guide device for the hearing impaired shown in Figure 1,
3 is a block diagram illustrating in detail the emotion information output device shown in FIG.
4 is a view for explaining an implementation example implementing the guide device for the hearing impaired according to the present invention,
5 is a view for explaining an implementation example implementing the emotion information output device according to the present invention;
6 to 7 are views for explaining an embodiment of a guide device for the hearing impaired according to the present invention,
8 to 10 are views for explaining an embodiment of the texture output means of the emotion information output apparatus according to the present invention,
11 is a view for explaining the arrow pin array of the texture output means of the emotion information output apparatus according to the present invention;
12 is a view for explaining an example of the use of the texture output means of the emotion information output apparatus according to the present invention;
13 is a flowchart illustrating a guide method using a guide system for the hearing impaired including emotional information according to the present invention.

이하, 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템 및 그를 이용한 안내 방법의 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, with reference to the accompanying drawings, a preferred embodiment of a guide system for hearing impaired persons and a guide method using the same, including emotional information according to the present invention will be described in detail.

아울러, 본 발명에서 사용되는 용어는 가능한 한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며 이 경우는 해당되는 발명의 설명부분에서 상세히 그 의미를 기재하였으므로, 단순한 용어의 명칭이 아닌 용어가 가지는 의미로서 본 발명을 파악하여야 함을 밝혀두고자 한다. 또한 실시예를 설명함에 있어서 본 발명이 속하는 기술 분야에 익히 알려져 있고, 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 요지를 흐리지 않고 더욱 명확히 전달하기 위함이다.
In addition, although the term used in the present invention is selected as a general term that is widely used at present, there are some terms selected arbitrarily by the applicant in a specific case. In this case, since the meaning is described in detail in the description of the relevant invention, It is to be understood that the present invention should be grasped as a meaning of a term that is not a name of the present invention. Further, in describing the embodiments, descriptions of technical contents which are well known in the technical field to which the present invention belongs and which are not directly related to the present invention will be omitted. This is for the sake of clarity of the present invention without omitting the unnecessary explanation.

도 1은 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템을 설명하기 위한 블록 구성도이다. 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템은 도 1에 나타낸 바와 같이, 청각장애인용 안내장치(100) 및 감성정보 출력장치(200)로 구성된다.1 is a block diagram illustrating a guide system for the hearing impaired including emotional information according to the present invention. Guide system for the hearing impaired including emotional information according to the present invention, as shown in Figure 1, comprises a guide device for the hearing impaired 100 and the emotional information output device 200.

여기서, 청각장애인용 안내장치(100)는 통신수단을 구비하고, 마이크 수단을 통해 소리를 수집하며, 수집된 소리를 정량적으로 분석하여 디스플레이 수단을 통해 해당 소리의 음장(sound field)이나 음장 대상(object)을 가시화하여 정량정보로 디스플레이한다. 여기서, 청각장애인용 안내장치(100)의 통신수단은 유선 또는 무선 방식으로 구성할 수 있으며, 무선 방식의 경우 적외선, 블루투스, 지그비 및 무선랜 방식 등을 이용할 수 있다. 참고로, 음장이란 음파가 존재하고 있는 매질의 영역이다. 여기서, 정량정보란 수집 및 분석된 소리의 위치나 세기, 패턴과 같은 정보 등이다.Here, the guide device 100 for the hearing impaired includes a communication means, collecting the sound through the microphone means, quantitatively analyze the collected sound through the display means of the sound field (sound field) or sound field target ( visualize and display quantitative information. Here, the communication means of the guide device 100 for the hearing impaired may be configured in a wired or wireless manner, in the case of a wireless manner may use infrared, Bluetooth, ZigBee and WLAN. For reference, a sound field is an area of a medium in which sound waves exist. Here, the quantitative information is information such as the location, intensity, and pattern of the collected and analyzed sound.

그리고, 감성정보 출력장치(200)는 통신수단을 통해 청각장애인용 안내장치(100)에서 전송된 소리 정보에 따라 대응되는 질감, 진동, 냉온감의 감성정보를 출력한다. 여기서, 감성정보란, 노래, 행진곡, 북소리, 웃음소리, 비명소리, 비난소리, 고함소리 등과 같이 기쁨, 슬픔, 공포, 혐오 및 분노 정보일 수 있다.
Then, the emotion information output device 200 outputs the emotional information of the corresponding texture, vibration, cold sense according to the sound information transmitted from the guide device for the hearing impaired through the communication means. Here, the emotional information may be joy, sadness, fear, disgust and anger information, such as songs, marches, drums, laughter, screams, blame, and shouts.

도 2는 도 1에 나타낸 청각장애인용 안내장치를 설명하기 위한 블록 구성도이다. 본 발명에 다른 청각장애인용 안내장치는 도 2에 나타낸 바와 같이, 제 1 통신수단(110), 마이크 수단(120), 음장분석수단(130), 디스플레이 수단(140), 영상신호 처리수단(150), 제 1 저장수단(160), 제 1 전원수단(170) 및 제 1 제어수단(180)으로 구성된다.FIG. 2 is a block diagram illustrating a guide device for the hearing impaired person illustrated in FIG. 1. As shown in FIG. 2, the guide device for the hearing impaired according to the present invention includes the first communication means 110, the microphone means 120, the sound field analysis means 130, the display means 140, and the image signal processing means 150. ), The first storage means 160, the first power supply means 170 and the first control means 180.

여기서, 제 1 통신수단(110)은 감성정보 출력장치(200)와 통신하기 위한 것으로 유선 또는 무선통신 수단으로 구성할 수 있으며, 무선통신수단으로 구성하는 경우 적외선, 블루투스, 지그비, 무선랜 통신 방식을 이용할 수 있다.Here, the first communication means 110 is for communicating with the emotion information output device 200 may be configured as a wired or wireless communication means, in the case of the wireless communication means infrared, Bluetooth, Zigbee, wireless LAN communication method Can be used.

마이크 수단(120)은 적어도 하나의 마이크로 구성할 수 있으며, 마이크를 어레이나 매트릭스 형태로 구성하여 청각장애인의 주변의 소리를 수집한다.The microphone unit 120 may be configured with at least one microphone, and collects the sounds of the hearing impaired by configuring the microphone in an array or matrix form.

음장분석수단(130)은 마이크 수단(120)에서 수집한 소리를 분석하여 음원의 위치나 세기를 정량적인 소리 데이터로 분석한다. 이와 같은 정량적 분석결과에 따라 소리에 대한 위치나 세기와 소리 패턴을 분석하게 된다. 여기서 소리의 세기로는 주파수(높낮이)와 음압(크고 작은 소리)로 나눌 수 있다. 그리고, 소리 패턴은 소리 간격으로 나눌 수 있다. Sound field analysis means 130 analyzes the sound collected by the microphone means 120 to analyze the position or intensity of the sound source as quantitative sound data. According to the result of quantitative analysis, the position, intensity and sound pattern of the sound are analyzed. Sound intensity can be divided into frequency (height) and sound pressure (large and small sound). The sound pattern may be divided into sound intervals.

디스플레이 수단(140)은 음장분석수단(130)에서 분석된 소리의 위치와 세기에 대한 소리 데이터에 따라 음장이나 음장 대상을 시각적으로 인식할 수 있도록 가시화하여 디스플레이한다. 이를 위하여 디스플레이 수단(140)은 플렉시블한 투명 또는 반투명한 LCD, LED 디스플레이, AMOLED 디스플레이, 전자잉크 중 하나로 구성할 수 있다. The display unit 140 visualizes and displays a sound field or a sound field object according to sound data of the position and intensity of the sound analyzed by the sound field analysis unit 130. To this end, the display means 140 may be configured as one of a flexible transparent or translucent LCD, LED display, AMOLED display, electronic ink.

영상신호 처리수단(150)은 음장이나 음장 대상을 디스플레이 수단(140)에서 디스플레이할 수 있도록 영상처리한다. 여기서, 음장 대상이란 음원을 발생시킨 대상물로써, 사람, 자동차, 기차, 지하철, 선박 등일 수 있다.The image signal processing means 150 performs image processing so that the display means 140 displays a sound field or a sound field object. Here, the sound field object is an object generating a sound source, and may be a person, a car, a train, a subway, a ship, or the like.

제 1 저장수단(160)은 청각장애인용 안내장치의 구동프로그램과, 음장분석수단(130)에서 분석된 소리에 대한 패턴정보나, 음장 또는 음장 대상을 디스플레이수단(140)에서 가시화하여 디스플레이하기 위한 가시화 정보를 데이터베이스화여 구축된다. 여기서, 패턴정보로는 교차로, 횡단보도에서 시각장애인용 벨소리나, 지하철역사에서의 지하철 진입 시 벨소리, 기차의 경적소리, 자동차의 경적소리, 소방차, 경찰차, 구급차 등의 사이렌 소리 패턴일 수 있다. 그리고, 가시화 정보로는 음장이나 음장 대상(예로써, 자동차)을 다양한 방식으로 강조하여 표시하기 위한 그래픽 표시 방식 등일 수 있다. 한편, 소리에 대한 패턴 정보는 이외에도 노래, 행진곡, 북소리, 웃음소리, 고함소리 등에 대한 정보 역시 데이터베이스화하여 구축할 수 있다. The first storage unit 160 is a drive program for the guide device for the hearing impaired, pattern information on the sound analyzed by the sound field analysis means 130, or for displaying the sound field or sound field object on the display means 140 for display Visualization information is built by database. Here, the pattern information may be a ringtone for the visually impaired at an intersection or a crosswalk, a ringtone when the subway enters a subway station, a horn sound of a train, a horn sound of a car, a fire engine, a police car, an ambulance, or a siren sound pattern. The visualization information may be a graphic display method for emphasizing and displaying a sound field or a sound field object (for example, an automobile). On the other hand, in addition to the pattern information on the sound, information about songs, marches, drums, laughter, yells, etc. can also be built into a database.

제 1 전원수단(170)은 청각장애인용 안내장치(100)에 전원을 공급한다. 예로써, 2차 전지 또는 건전지를 사용할 수 있다.The first power supply unit 170 supplies power to the guide device 100 for the hearing impaired. By way of example, secondary batteries or dry batteries can be used.

제 1 제어수단(180)은 음장분석수단(130)에서 분석된 음원의 위치나 세기에 따른 소리 데이터를 제 1 저장수단(160)에 데이터베이스화한 자료와 비교하여 이를 디스플레이수단(140)에서 가시화하여 디스플레이하도록 제어한다. 그리고, 음원의 위치와 세기에 따른 소리 데이터를 제 1 통신수단(110)을 통해 감성정보 출력장치(200)로 송신한다. 이때, 제 1 제어수단(180)은 음장분석수단(130)에서 분석된 소리의 세기나 패턴이 설정된 세기 이상이거나 패턴인 경우에만 디스플레이수단(140)을 통해 가시화하거나 제 1 통신수단(110)을 통해 감성정보 출력장치(200)로 출력하도록 제어할 수 있다. 여기서 설정된 세기란 청각장애인 주변에서 발생된 소리 중 청각장애인이 주의를 기울여야 하는 환경소음이상의 세기로써, 이는 실험이나 현장경험에 따라 다양하게 조절할 수 있다. 또한, 소리 패턴의 경우는 교차로, 횡단보도에서 시각장애인용 벨소리나, 지하철역사에서의 지하철 진입 시 벨소리, 기차의 경적소리, 자동차의 경적소리, 소방차, 경찰차, 구급차 등의 사이렌 소리 패턴 등이다.
The first control unit 180 compares the sound data according to the position or intensity of the sound source analyzed by the sound field analysis unit 130 with the data stored in the database in the first storage unit 160 and visualizes it in the display unit 140. Control to display. Then, the sound data according to the position and intensity of the sound source is transmitted to the emotion information output device 200 through the first communication means 110. In this case, the first control means 180 visualizes through the display means 140 or the first communication means 110 only when the intensity or pattern of the sound analyzed by the sound field analysis means 130 is equal to or greater than the set intensity. It can be controlled to output to the emotion information output device 200 through. The intensity set here is an intensity above the environmental noise that the hearing impaired should pay attention among the sounds generated in the vicinity of the hearing impaired, which can be variously adjusted according to experiment or field experience. In addition, the sound patterns include ringtones for the visually impaired at intersections and pedestrian crossings, ringtones when the subway enters the subway station, horn sounds of trains, horn sounds of cars, fire trucks, police cars, ambulances, and the like.

도 3은 도 1에 나타낸 감성정보 출력장치를 상세히 설명하기 위한 블록 구성도이다. 본 발명에 따른 감성정보 출력장치는 도 3에 나타낸 바와 같이, 제 2 통신수단(210), 질감출력수단(220), 진동출력수단(230), 열전소자수단(240), 제 2 저장수단(250), 제 2 전원수단(260) 및 제 2 제어수단(270)으로 구성된다.3 is a block diagram illustrating in detail the emotion information output device shown in FIG. Emotional information output device according to the present invention, as shown in Figure 3, the second communication means 210, texture output means 220, vibration output means 230, thermoelectric element means 240, the second storage means ( 250), the second power supply means 260 and the second control means 270.

여기서, 제 2 통신수단(210)은 청각장애인용 안내장치(100)와 통신하기 위한 것으로 유선 또는 무선통신 수단으로 구성할 수 있으며, 무선통신수단으로 구성하는 경우 적외선, 블루투스, 지그비, 무선랜 통신 방식을 이용할 수 있다.Here, the second communication means 210 is for communicating with the guide device for the hearing impaired 100 can be configured as a wired or wireless communication means, when configured as a wireless communication means infrared, Bluetooth, Zigbee, WLAN communication Method can be used.

질감출력수단(220)은 제 2 통신수단(210)을 통해 수신된 소리 데이터에 대하여 청각장애인이 이를 질감으로 느낄 수 있도록 돌기 형상의 핀 어레이를 이용해 출력한다. 즉, 핀 어레이에 의한 질감 정보를 제공한다. 이때, 소리의 세기나 패턴에 따라 돌기 형상의 핀 어레이로 출력할 수도 있고, 문자 정보나 기호 정보로 제공할 수 있다. 여기서, 문자정보로는 왼쪽, 오른쪽, 위, 아래, 앞, 뒤 등 방향정보이거나, 벨, 경적, 싸이렌, 웃음, 울음, 음악 등을 나타내는 돌기 형상의 핀 어레이일 수 있다. 기호 정보는 소리방향에 대한 화살표 핀 어레이일 수 있다.The texture output unit 220 outputs the sound data received through the second communication unit 210 using a protrusion-shaped pin array so that the hearing impaired person can feel it as a texture. That is, the texture information by the pin array is provided. At this time, the output may be output as a projection pin array according to the sound intensity or pattern, or may be provided as character information or symbol information. Here, the character information may be direction information such as left, right, up, down, front, and back, or may be a pin-shaped pin array indicating a bell, a horn, a siren, a laugh, a cry, music, or the like. The symbol information may be an array of arrow pins for the sound direction.

진동출력수단(230)은 제 2 통신수단(210)을 통해 수신된 소리 데이터에 대하여 청각장애인이 이를 진동으로 느낄 수 있도록 소리 데이터를 진동으로 출력한다. 즉, 진동의 세기에 의한 질감 정보를 제공한다. 이때, 소리의 크기에 따라 진동의 세기를 상대적으로 조절할 수 있다. 다시 말하면 소리의 크기가 큰 경우에는 강한 진동으로, 소리의 크기가 상대적으로 작은 경우에는 약한 진동이 발생되도록 할 수 있다. 또한, 진동의 패턴 역시 소리 패턴과 동기되어 진동되도록 할 수 있다.The vibration output unit 230 outputs sound data as vibration so that the hearing impaired person can feel it as vibration with respect to the sound data received through the second communication means 210. That is, the texture information by the strength of vibration is provided. At this time, it is possible to relatively adjust the intensity of the vibration according to the volume of the sound. In other words, when the loudness of the sound is large, a strong vibration may occur, and when the loudness of the sound is relatively small, a weak vibration may be generated. In addition, the pattern of vibration may also be vibrated in synchronization with the sound pattern.

열전소자수단(240)은 제 2 통신수단(210)을 통해 수신된 소리 데이터에 대하여 청각장애인이 이를 열로 느낄 수 있도록 소리 데이터를 열로 출력한다. 즉, 온도에 의한 냉온감 정보를 제공한다. 여기서, 열전소자는 열에너지를 전기에너지로, 전기에너지를 열에너지로 직접 변환시킬수 있는 기능성 전자부품이며, 펠티어(Peltier) 소자라고도 부른다. 또한 열을 흡열면에서 방열면으로 이동시키는 열대책 부품으로, 열전방향의 열전에 의해 냉각, 가열의 변환이 가능하다. 이러한 열전소자수단(240)의 이용예로는 평상시에는 따듯한 열을 출력하고, 청각장애인이 인식하여야 할 소리가 발생된 경우에는 차가운 열을 출력하도록 할 수 있다. 물론, 이와 같은 온열정보는 계절이나 주변 온도에 따라 반대로 출력되도록 구성할 수 있다. 그리고, 열전소자의 온도 역시 소리의 크기나 소리 패턴 정보에 따라 여러 단계로 구분하여 제공하거나 동기화할 수 있다.The thermoelectric element 240 outputs the sound data as heat so that the hearing impaired person can feel it as heat with respect to the sound data received through the second communication means 210. That is, it provides the cool and cold feeling information by the temperature. Here, the thermoelectric element is a functional electronic component capable of directly converting thermal energy into electrical energy and electrical energy into thermal energy, and is also called a Peltier device. In addition, it is a tropical component that moves heat from the heat absorbing surface to the heat radiating surface, and cooling and heating can be switched by thermoelectric in the thermoelectric direction. As an example of the use of the thermoelectric element 240, it is possible to output the warm heat in normal times, and to output the cold heat when a sound to be recognized by the hearing impaired is generated. Of course, such heat information can be configured to be output in reverse depending on the season or ambient temperature. In addition, the temperature of the thermoelectric element may also be divided or provided in several stages according to the loudness or sound pattern information, or may be synchronized.

제 2 저장수단(250)은 감성정보 출력장치(200)를 구동하기 위한 구동프로그램과 감성정보 데이터가 저장된다. 여기서, 감성정보를 간략하게 설명하면, 감성은 지성과 더불어 사물을 이해하는 인간의 능력이다. 감성은 논리적인 축적과는 다른 정보처리의 양식이고, 감성과 감성정보의 특징으로는 다의성, 개인성, 상황의존성을 들 수 있다. 감정과 정서는 감성의 일부인데 감성정보 처리에서는 환경과 신체적인 특징을 고려할 필요가 있다. 이와 같은 감성정보 처리에는 물리, 생리, 심리, 인지의 각 계층이 있다. 감성정보는 인터페이스에 있어서 특히 중요한 역할을 하며 이러한 감성정보의 취급에서는 오감의 감각양식을 고려해야 한다. 본 발명에서는 이와 같은 감성정보에 대하여, 예를 들면, 기쁨, 슬픔, 공포, 혐오 및 분노와 같은 감성 정보 데이터를 구성하고, 해당 정보를 질감출력수단(220), 진동출력수단(230), 열전소자수단(240) 중 적어도 하나를 통해 출력한다. 한편, 이와 같은 기쁨, 슬픔, 공포, 혐오 및 분노와 같은 감성 정보 데이터는 청각장애인이나 일반인들을 대상으로 실험에 의해 구할 수 있다. 즉, 청각장애인이나 일반인들을 대상으로 기쁨, 슬픔, 공포, 혐오 및 분노를 느끼는 질감, 진동 및 냉온감 정보를 다양한 실험을 통해 취득할 수 있다. 또한, 취득한 정보를 통해 청각장애인들에게 별도의 교육을 통해 해당 질감, 진동 및 냉온감 정보가 기쁨, 슬픔, 공포, 혐오 및 분노 중 어떠한 것을 나타내는지 알 수 있도록 할 수도 있다.The second storage means 250 stores a driving program and emotion information data for driving the emotion information output apparatus 200. Here, briefly describing the emotion information, emotion is the human ability to understand things with intelligence. Emotion is a form of information processing that is different from logical accumulation, and the characteristics of emotion and emotional information include versatility, personality, and situational dependency. Emotions and emotions are part of emotions, and in processing emotional information, it is necessary to consider the environment and physical characteristics. In such emotional information processing, there are physical, physiological, psychological, and cognitive layers. Emotional information plays a particularly important role in the interface, and the handling of the five senses should take into account the sense style of the five senses. According to the present invention, for the emotional information, for example, emotional information data such as joy, sadness, fear, disgust and anger are constructed, and the information is output to the texture output means 220, vibration output means 230, and thermoelectric. Output through at least one of the device means (240). On the other hand, emotional information data such as joy, sadness, fear, disgust and anger can be obtained by experiments for the hearing impaired or the general public. That is, textures, vibrations, and coldness feelings of joy, sadness, fear, disgust, and anger may be acquired through various experiments for the hearing impaired or the general public. In addition, the acquired information may be provided to the hearing impaired by a separate education so that the texture, vibration, and warmth information may indicate joy, sadness, fear, disgust, and anger.

본 발명에서는 오감의 감각양식 중 하나인 촉각을 통해 주변 소리에 대한 정보를 제공한다. 이때, 질감출력수단(220), 진동출력수단(230) 및 열전소자수단(240)을 통해 질감이나, 진동, 열전달 중 하나 이상으로 청각장애인의 주변에서 발생하는 소리에 대한 정보를 제공한다. 물론, 필요에 따라서는 질감출력수단(220), 진동출력수단(230) 및 열전소자수단(240) 중 하나만을 선택적으로 구성할 수도 있다. 이때, 제 2 저장수단(250)에는 소리 데이터에 대한 정보를 질감 데이터나 진동 데이터 및 냉/온 데이터 중 하나 이상으로 전달할 수 있도록 해당 정보와 대응되는 데이터 형태로 출력될 수 있도록 하는 프로그램이 저장된다. 다시 말하면, 앞에서 설명한 바와 같이 질감출력수단(220)은 청각장애인이 주의를 기울여야 할 정도의 소리발생시 음장 방향에 대한 정보를 화살표 핀 어레이로 표시하도록 할 수 있다. 그리고, 진동 출력수단(230)은 청각장애인이 주의를 기울여야 할 정도의 소리발생 시 진동으로 이를 출력하도록 할 수 있다. 한편, 열전소자수단(240)은 청각장애인이 주의를 기울여야 할 정도의 소리발생 시 체온과 대비하여 체온보다 냉열과 온열 중 하나로 출력하도록 할 수 있다.In the present invention provides information about the ambient sound through the sense of touch of one of the five senses. At this time, the texture output means 220, the vibration output means 230 and the thermoelectric element 240 provides information about the sound generated in the vicinity of the hearing impaired by one or more of the texture, vibration, heat transfer. Of course, if necessary, only one of the texture output means 220, the vibration output means 230, and the thermoelectric element 240 may be selectively configured. At this time, the second storage means 250 is stored in the program to output the information on the sound data in the form of data corresponding to the information so as to transmit at least one of the texture data, vibration data and cold / hot data is stored. . In other words, as described above, the texture output means 220 may display the information on the sound field direction as an arrow pin array when the hearing impaired sound needs attention. In addition, the vibration output unit 230 may output the vibration as a vibration occurs when the hearing impaired person should pay attention. On the other hand, the thermoelectric element 240 may be output as one of the heat and cold than the body temperature in contrast to the body temperature when the sound occurs to the hearing impaired should pay attention.

여기서, 청각장애인이 주의를 기울여야할 정도의 소리란, 교차로, 횡단보도에서 시각장애인용 벨소리나, 지하철역사에서의 지하철 진입 시 벨소리, 기차의 경적소리, 자동차의 경적소리, 소방차, 경찰차, 구급차 등의 사이렌 소리 패턴일 수 있다. Here, the sound that the hearing impaired should pay attention to is a ringtone for the visually impaired at an intersection or a crosswalk, a ringing sound when entering the subway in a subway station, a horn of a train, a horn of a car, a fire truck, a police car, an ambulance, etc. May be a siren sound pattern.

이와 같은, 질감출력수단(220), 진동 출력수단(230) 및 열전소자수단(240)을 이용하는 경우 청각장애인은 오감을 통해 자신이 주의를 기울여야 할 정도의 소리 데이터가 있다는 정보를 획득할 수 있으므로 보다 신속하게 정확한 정보를 획득할 수 있는 효과가 있다. When using the texture output means 220, vibration output means 230 and thermoelectric element 240, the hearing impaired person can obtain information that there is sound data enough to pay attention through the five senses It is effective to obtain accurate information more quickly.

제 2 전원수단(260)은 감성정보 출력장치(200)에 전원을 공급한다.The second power supply unit 260 supplies power to the emotion information output device 200.

제 2 제어수단(270)은 제 2 통신수단(210)에서 수신한 소리 데이터에 대해 제 2 저장수단(250)을 참조하여 질감출력수단(220), 진동출력수단(230) 및 열전소자수단(240) 중 적어도 하나를 통해 청각장애인이 인식할 수 있는 감성 정보로 출력하도록 제어한다.
The second control means 270 refers to the texture output means 220, the vibration output means 230, and the thermoelectric element means with reference to the second storage means 250 for the sound data received from the second communication means 210. 240 to output the emotional information that the hearing impaired person can recognize through at least one.

도 4는 본 발명에 따른 청각장애인용 안내장치의 구현 예를 설명하기 위한 사시도이다. 본 발명에 따른 청각장애인용 안내장치의 구현 예는 도 4에 나타낸 바와 같이 안경(300)에 구성된 것을 나타낸 것이다. 한편, 이와 같은 안경(300)에 다수의 마이크와 디스플레이 장치가 형성된다. 여기서, 마이크는 전방 마이크(121)만으로 구성할 수도 있고, 전방 마이크(121)는 물론 후방 마이크(122), 좌측 마이크(123) 및 우측 마이크(124)로 구성할 수 있다. 그리고, 디스플레이 장치(141)는 안경(300)의 렌즈부분에 형성된다.
Figure 4 is a perspective view for explaining an embodiment of a guide device for the hearing impaired according to the present invention. An embodiment of the guide device for the hearing impaired according to the present invention shows that the glasses 300 are configured as shown in FIG. 4. Meanwhile, a plurality of microphones and a display device are formed in such glasses 300. Here, the microphone may be configured of only the front microphone 121, or may be configured of the rear microphone 122, the left microphone 123, and the right microphone 124 as well as the front microphone 121. The display device 141 is formed on the lens portion of the glasses 300.

도 5는 본 발명에 따른 감성정보 출력장치를 구현한 구현 예를 설명하기 위한 도면이다. 본 발명에 따른 감성정보 출력장치(200)는 도 5에 나타낸 바와 같이, 일측에 곡면홈(280)을 갖는 장방형의 감성정보 출력패널(400)로 구성할 수 있다. 이때, 질감출력을 위한 핀 어레이 패널(221)은 형성된 다수의 핀 홈(222) 및 돌기 형상의 핀(223)들로 구성된다. 이와 같은 핀 어레이 패널(221)은 다수의 돌기 형상의 핀(223)들이 핀 홈(222)의 내부에서 외부로 왕복이송되도록 할 수 있다. 그리고, 진동출력을 위한 제 1 내지 제 4 진동장치(231)(232)(233)(234)는 감성정보 출력패널(400)에 하나 이상 구성할 수 있다. 또한, 열전소자(241)는 감성정보 출력패널(400)의 내부에 열선 형태로 구성할 수 있다. 여기서, 곡면홈(280)은 청각장애인에게 감성정보 출력패널(400)을 손으로 잡는 경우 식별위치를 나타내는 것으로, 핀 어레이 패널(221)을 통해 핀 어레이로 문자나 기호 등을 나타낼 때 올바르게 인식하도록 하기 위한 기준점의 역할을 할 수 있다.
5 is a view for explaining an implementation example implementing the emotion information output device according to the present invention. As shown in FIG. 5, the emotion information output apparatus 200 according to the present invention may be configured as a rectangular emotion information output panel 400 having a curved groove 280 on one side. At this time, the pin array panel 221 for the texture output is composed of a plurality of the formed fin groove 222 and the projection pin 223. The pin array panel 221 may allow a plurality of protrusion-shaped pins 223 to be reciprocated from the inside of the pin groove 222 to the outside. In addition, one or more first to fourth vibration devices 231, 232, 233, and 234 for vibration output may be configured in the emotion information output panel 400. In addition, the thermoelectric element 241 may be configured in the form of a hot wire inside the emotion information output panel 400. Here, the curved groove 280 indicates an identification position when the emotional information output panel 400 is held by a hand to the hearing impaired, so that the curved groove 280 correctly recognizes a letter or a symbol through a pin array panel 221. Can serve as a reference point for

도 6 내지 도 7은 본 발명에 따른 청각장애인용 안내장치의 실시 예를 설명하기 위한 도면이다. 본 발명에 따른 청각장애인용 안내장치의 실시 예는 도 6에서와 같이 청각장애인이 안경을 쓴 상태에서 도로(500)를 주행 중인 제 1 내지 제 3 차량(610)(620)(630)을 바라보고 있는 경우를 나타낸 것이다. 이때, 제 1 차량(610)인 택시에서 경적을 울리는 경우 청각장애인용 안내장치(100)의 마이크 수단(120)에서는 해당 경적에 대한 소리가 수집된다. 이어, 수집된 경적 소리는 음장분석수단(130)에서 음원의 위치나 세기에 따른 소리 데이터로 분석된다. 그리고 분석된 소리 데이터는 제 1 제어수단(180)에 의해 디스플레이수단(140)에서 청각장애인이 시각적으로 확인할 수 있도록 디스플레이된다. 이때, 다양한 방식으로 제 1 차량(610)이 음원이 발생된 위치라는 것을 표현할 수 있는데, 도 7에서는 제 1 차량(610)의 강조 표시 방식으로 제 1 차량(610) 주변이 깜빡이도록 하고 있는 것을 나타내고 있다. 이외에도 제 1 차량(610) 부분에 대하여 적색이나 청색 등과 같이 별도의 색을 입힐 수도 있다. 따라서, 청각 장애인은 제 1 차량(610)에서 경적이 울린 것을 시각적으로 확인할 수 있다.
6 to 7 is a view for explaining an embodiment of the guide device for the hearing impaired according to the present invention. An embodiment of a guide device for the hearing impaired according to the present invention is directed to the first to third vehicles 610, 620, and 630 driving the road 500 while the deaf are wearing glasses as shown in FIG. It is a case of seeing. At this time, when the horn is ringed in the taxi, which is the first vehicle 610, the microphone 120 of the guide device 100 for the hearing impaired collects the sound for the horn. Subsequently, the collected horn sound is analyzed by the sound field analysis means 130 as sound data according to the position or intensity of the sound source. The analyzed sound data is displayed by the first control means 180 so that the hearing impaired person can visually check the display means 140. In this case, the first vehicle 610 may represent the location where the sound source is generated in various ways. In FIG. 7, the periphery of the first vehicle 610 is blinked by the highlight display method of the first vehicle 610. It is shown. In addition, a separate color such as red or blue may be applied to the portion of the first vehicle 610. Therefore, the deaf person may visually confirm that the horn is sounded in the first vehicle 610.

도 8 내지 도 10은 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 실시 예를 설명하기 위한 도면이다. 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 실시예는 우선, 도 8에 나타낸 바와 같이, 평상시에는 핀(223)들이 핀 홈(222)내에 삽입된 상태로 존재한다. 이때, 청각장애인 주변에서 청각장애인이 인식하여야 할 큰 소리가 발생한 경우 핀(223)들이 핀 홈(222)에서 외부로 돌출된다. 여기서, 도 9에서는 핀 홈(222)내의 모든 핀(223)들이 외부로 돌출된 것을 나타내고 있고, 도 10에서는 핀 홈(222)내의 핀(223) 중 일부의 핀(223)들이 돌출된 것을 나타내고 있다. 이때, 도 9의 경우는 도 10에 비해 상대적으로 큰 소리가 발생된 것을 나타내고 있다. 따라서, 청각장애인은 감성정보 출력장치(200)의 질감출력수단(220), 진동출력수단(230) 및 열전소자수단(240) 중 하나를 통해 소리가 발생한 것을 감지한 후 디스플레이장치(141)를 통해 시각적으로 확인할 수 있다. 그에 따라 특히 측면이나 후방에서 발생된 소리를 시각적으로 확인할 수 있다. 또한, 핀(223)들을 소리 패턴에 따라 핀홈(222)내에서 삽입 및 돌출을 반복하도록 하는 경우 핀 어레이에 의한 질감 패턴만으로 소리의 종류를 예측할 수 있다. 다시 말하면 일반적으로 장애인들은 일반인들에 비해 예민한 촉감을 갖고 있으므로 이러한 구성과 작용으로 충분히 주변 소리에 대한 정보를 제시할 수 있다.
8 to 10 are views for explaining an embodiment of the texture output means of the emotion information output apparatus according to the present invention. In the embodiment of the texture output means of the emotion information output apparatus according to the present invention, as shown in FIG. 8, the pins 223 are normally inserted into the pin grooves 222. At this time, when a loud sound to be recognized by the deaf occurs around the deaf, the pins 223 protrude outward from the pin groove 222. Here, FIG. 9 shows that all the pins 223 in the pin grooves 222 protrude outwards, and FIG. 10 shows that some of the pins 223 of the pins 223 in the pin grooves 222 protrude. have. In this case, FIG. 9 shows that a relatively loud sound is generated compared to FIG. 10. Therefore, the hearing impaired person detects that the sound is generated through one of the texture output means 220, the vibration output means 230, and the thermoelectric element 240 of the emotional information output device 200, and then displays the display device 141. This can be confirmed visually. This makes it possible to visually check the sound, especially from the side or rear. In addition, when the pins 223 are repeatedly inserted and protruded into the pin grooves 222 according to the sound pattern, the type of sound may be predicted only by the texture pattern formed by the pin array. In other words, people with disabilities generally have a more sensitive touch than the general public, and this configuration and action can provide enough information about the surrounding sounds.

도 11은 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 화살표 핀 어레이를 설명하기 위한 도면이다. 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 화살표 핀 어레이는 음장방향에 대한 정보를 화살표 핀 어레이로 제공할 수 있는 것을 나타내고 있다.
11 is a view for explaining the arrow pin array of the texture output means of the emotion information output apparatus according to the present invention. The arrow pin array of the texture output means of the emotion information output device according to the present invention indicates that the information on the sound field direction can be provided by the arrow pin array.

도 12는 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 일 사용 예를 나타낸 도면이다. 본 발명에 따른 감성정보 출력장치 중 질감출력수단의 일 사용 예는 도 12에 나타낸 바와 같이 청각장애인이 손가락을 감성정보 출력패널(400)의 핀 어레이(221)에 접촉한 상태를 나타내고 있다. 물론, 이와 같은 사용 예는 청각장애인에 따라 다양한 방식으로 접촉하여 사용할 수 있다. 12 is a view showing an example of use of the texture output means of the emotion information output apparatus according to the present invention. An example of the use of the texture output means of the emotion information output device according to the present invention shows a state in which a hearing impaired person touches a finger to the pin array 221 of the emotion information output panel 400 as shown in FIG. 12. Of course, such a use example can be used in contact in various ways depending on the hearing impaired.

도 13은 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내방법을 설명하기 위한 플로우차트이다. 본 발명에 따른 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법은 도 13에 나타낸 바와 같이, 청각장애인용 안내장치(100)는 마이크 수단(120)을 통해 주변소리를 수집한다(S100).13 is a flowchart illustrating a guide method using a guide system for the hearing impaired including emotional information according to the present invention. In the guide method using the guide system for the hearing impaired including emotional information according to the present invention, as shown in FIG. 13, the guide device for the hearing impaired person 100 collects the ambient sound through the microphone means 120 (S100). .

그리고, 제 1 제어수단(180)은 수집된 소리가 분석이 필요한가를 판단한다(S120).In addition, the first control unit 180 determines whether the collected sound needs analysis (S120).

판단결과(S120) 분석이 필요하다면 음장분석수단(130)을 통해 수집된 소리에 대한 위치, 세기 및 패턴을 분석한다(S140).If it is necessary to analyze the determination result (S120) analyzes the position, intensity and pattern for the sound collected through the sound field analysis means 130 (S140).

이어, 제 1 제어수단(180)은 분석된 소리를 정량정보와 감성정보로 분류한다(S160). 이때, 정량정보와 감성정보의 분류는 제 1 저장수단(160)에 데이터베이스화되어 저장된 소리에 대한 패턴 정보 자료와 분석된 소리를 비교하여 이루어진다.Subsequently, the first control unit 180 classifies the analyzed sound into quantitative information and emotional information (S160). In this case, the classification of the quantitative information and the emotional information is performed by comparing the analyzed information with the pattern information data on the sound stored in the database in the first storage means 160.

그리고, 분류한 정량정보는 청각장애인용 안내장치(100)의 디스플레이수단(140)을 통해 디스플레이하고, 감성정보는 제 1 통신수단(110)을 통해 감성정보 출력장치(200)로 전송한다(S180).Then, the classified quantitative information is displayed through the display means 140 of the guide device 100 for the hearing impaired, and emotional information is transmitted to the emotion information output device 200 through the first communication means 110 (S180). ).

감성정보 출력장치(200)는 청각장애인용 안내장치(100)에서 전송된 감성정보를 수신하여 감성정보를 질감출력수단(220), 진동출력수단(230) 및 열전소자수단(240)을 통해 질감이나, 진동, 열전달 중 하나 이상으로 출력한다(S200).The emotion information output device 200 receives the emotion information transmitted from the guide device for the hearing impaired 100 and textured the emotion information through the texture output means 220, the vibration output means 230, and the thermoelectric element 240. In addition, it outputs at least one of vibration, heat transfer (S200).

따라서, 앞서 설명한 바와 같이, 청각장애인이나 일반인들을 대상으로 질감, 진동 및 냉온감 정보에 따른 실험에 의해 구해진 것이거나, 청각장애인들을 대상으로 별도의 교육을 통해 질감, 진동 및 냉온감 정보에서 감성정보를 취득할 수 있도록 한 경우 청각장애인들은 보다 쉽게 감성정보를 이용한 안내를 받을 수 있다.
Therefore, as described above, the emotional information obtained from the experiment according to the texture, vibration and cold and cold information for the hearing impaired or ordinary people, or through the separate training for the hearing impaired emotional information from the texture, vibration and cold and cold information Deaf people can more easily receive guidance using emotional information.

이상과 같은 예로 본 발명을 설명하였으나, 본 발명은 반드시 이러한 예들에 국한되는 것이 아니고, 본 발명의 기술사상을 벗어나지 않는 범위 내에서 다양하게 변형 실시될 수 있다. 따라서 본 발명에 개시된 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 예들에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 한다.
Although the present invention has been described by way of example as described above, the present invention is not necessarily limited to these examples, and various modifications can be made without departing from the spirit of the present invention. Therefore, the examples disclosed in the present invention are not intended to limit the technical idea of the present invention but to explain the present invention, and the scope of the technical idea of the present invention is not limited by these examples. The scope of protection of the present invention should be interpreted by the following claims, and all technical ideas within the scope equivalent thereto should be construed as being included in the scope of the present invention.

100 : 청각장애인용 안내장치 110 : 제 1 통신수단
120 : 마이크수단 121, 122, 123, 124 : 마이크
130 : 음장분석수단 140 : 디스플레이수단
141 : 디스플레이 장치 150 : 영상신호 처리수단
160 : 제 1 저장수단 170 : 제 1 전원수단
180 : 제 1 제어수단 200 : 감성정보 출력장치
210 : 제 2 통신수단 220 : 질감출력수단수단
221 : 핀 어레이 패널 222 : 핀 홈
223 : 핀 230 : 진동출력수단
231, 232, 233, 234 : 진동장치 240 : 열전소자수단
241 : 열전소자 250 : 제 2 저장수단
260 : 제 2 전원수단 270 : 제 2 제어수단
280 : 곡면홈 300 : 안경
400 : 감성정보 출력패널 500 : 도로
610, 620, 630 : 차량100: guide device for the hearing impaired 110: first communication means
120: microphone means 121, 122, 123, 124: microphone
130: sound field analysis means 140: display means
141: display device 150: image signal processing means
160: first storage means 170: first power supply means
180: first control means 200: emotion information output device
210: second communication means 220: texture output means
221: pin array panel 222: pin groove
223: pin 230: vibration output means
231, 232, 233, 234: vibration device 240: thermoelectric means
241: thermoelectric element 250: second storage means
260: second power supply means 270: second control means
280: curved groove 300: glasses
400: emotional information output panel 500: road
610, 620, 630: vehicles

Claims (18)

마이크 수단(120)을 통해 소리를 입력받고, 입력된 소리를 분석하여 디스플레이 수단(140)을 통해 해당 소리의 음장이나 음장 대상을 가시화하여 정량정보로 디스플레이하며, 제 1 통신수단(110)을 통해 상기 분석된 소리 데이터를 전송하는 청각장애인용 안내장치(100); 그리고,
제 2 통신수단(210)을 통해 상기 청각장애인용 안내장치(100)에서 전송된 소리 정보에 따라 대응되는 감성정보를 질감, 진동 및 냉온감 중 적어도 하나를 이용하여 출력하는 감성정보 출력장치(200);를 포함하여 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The sound is input through the microphone means 120, the input sound is analyzed, the sound field or the sound field object of the corresponding sound is visualized and displayed as quantitative information through the display means 140, and the first communication means 110 is used. Guide device for hearing impaired device 100 for transmitting the analyzed sound data; And,
Emotional information output device 200 for outputting the emotional information corresponding to the sound information transmitted from the guide device for the hearing impaired by the second communication means 210 using at least one of texture, vibration and cold and cold Guide system for the deaf, including emotional information, characterized in that the configuration, including.
제 1 항에 있어서,
상기 청각장애인용 안내장치(100)는,
상기 마이크 수단(120)에 입력된 소리를 분석하여 소리의 위치나 세기를 소리 데이터로 분석하는 음장분석수단(130)과,
상기 음장이나 음장 대상을 상기 디스플레이 수단(140)에서 디스플레이할 수 있도록 영상처리하는 영상신호 처리수단(150)과,
상기 청각장애인용 안내장치의 구동프로그램과, 상기 음장분석수단(130)에서 분석된 소리에 대한 패턴정보나, 상기 음장 또는 음장 대상을 상기 디스플레이수단(140)에서 가시화하여 디스플레이하기 위한 가시화 정보가 데이터베이스화되어 구축되는 제 1 저장수단(160)과,
상기 청각장애인용 안내장치(100)에 전원을 공급하는 제 1 전원수단(170) 및
상기 음장분석수단(130)에서 분석된 음원의 위치나 세기에 따른 소리 데이터를 상기 제 1 저장수단(160)에 데이터베이스화한 자료와 비교하여 상기 디스플레이수단(140)에서 가시화하여 디스플레이하도록 제어하고, 상기 음원의 위치와 세기에 따른 소리 데이터를 상기 제 1 통신수단(110)을 통해 상기 감성정보 출력장치(200)로 전송하도록 제어하는 제 1 제어수단(180)을 더 포함하여 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The deaf guide device 100,
Sound field analysis means 130 for analyzing the sound input to the microphone means 120 to analyze the position or intensity of the sound as sound data;
Image signal processing means (150) for image processing to display the sound field or the sound field object on the display means (140);
The database includes a driving program of the guide device for the hearing impaired, pattern information on the sound analyzed by the sound field analyzing means 130, and visualization information for visualizing and displaying the sound field or the sound field object on the display means 140. A first storage means 160 that is constructed and constructed;
First power means 170 for supplying power to the guide device 100 for the hearing impaired and
And compares the sound data according to the position or intensity of the sound source analyzed by the sound field analysis means 130 with the data stored in the first storage means 160 to visualize and display the data in the display means 140. And first control means 180 for controlling sound data according to the position and intensity of the sound source to be transmitted to the emotion information output apparatus 200 through the first communication means 110. Information system for the deaf including emotional information.
제 1 항에 있어서,
상기 제 1 통신수단(110)과 제 2 통신수단(210)은,
유선 또는 적외선, 블루투스, 지그비, 무선랜 통신 방식 중 하나의 통신방식으로 통신하도록 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The first communication means 110 and the second communication means 210,
Guide system for the hearing impaired, including emotional information, characterized in that configured to communicate in one of the wired or infrared, Bluetooth, Zigbee, wireless LAN communication method.
제 1 항에 있어서,
상기 마이크 수단(120)은,
마이크가 어레이 또는 매트릭스 형태로 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The microphone means 120,
Guide system for the hearing impaired, including emotional information, characterized in that the microphone is configured in an array or matrix form.
제 2 항에 있어서,
상기 제 1 제어수단(180)은 상기 음장분석수단(130)에서 분석된 소리의 세기나 패턴이 설정된 세기 이상이거나 설정된 패턴인 경우에 상기 디스플레이수단(140)을 통해 가시화되거나, 상기 제 1 통신수단(110)을 통해 상기 감성정보 출력장치(200)로 출력되도록 제어함을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 2,
The first control means 180 is visualized through the display means 140 when the intensity or pattern of the sound analyzed by the sound field analysis means 130 is greater than or equal to the set intensity, or the first communication means. Guide system for the hearing impaired, including emotional information, characterized in that the control to be output to the emotional information output device 200 through (110).
제 5 항에 있어서,
상기 설정된 세기는,
상기 청각장애인용 안내장치(100) 주변에서 발생된 소리 중 청각장애인이 주의를 기울여야 하는 환경소음 이상의 세기이고,
상기 설정된 패턴은 교차로, 횡단보도에서의 시각장애인용 벨소리나, 지하철역사에서의 지하철 진입 시 벨소리, 기차의 경적소리, 자동차의 경적소리, 소방차, 경찰차, 구급차의 사이렌 소리, 노래, 행진곡, 북소리, 웃음소리, 고함소리 패턴 중 적어도 하나인 것을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 5, wherein
The set intensity is,
Among the sounds generated around the guide device 100 for the hearing impaired, the hearing impaired is more than environmental noise,
The set pattern may be a ringtone for the visually impaired at an intersection, a crosswalk, a ringtone when entering the subway in a subway station, a horn of a train, a horn of a car, a fire truck, a police car, an ambulance siren, a song, a march, a drum, Guide system for the hearing impaired, including emotional information, characterized in that at least one of laughter, yelling patterns.
제 1 항에 있어서,
상기 음장 대상이란 소리를 발생시킨 대상물인 것을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The sound field object is a guide system for the hearing impaired, including emotional information, characterized in that the object that generated the sound.
제 1 항에 있어서,
상기 감성정보 출력장치(200)는,
상기 청각장애인용 안내장치(100)와 통신하기 위한 제 2 통신수단(210)과,
상기 제 2 통신수단(210)을 통해 수신된 소리 데이터에 대하여 질감으로 출력하는 질감출력수단(220)과,
상기 제 2 통신수단(210)을 통해 수신된 소리 데이터에 대하여 진동으로 출력하는 진동출력수단(230)과,
상기 제 2 통신수단(210)을 통해 수신된 소리 데이터에 대하여 냉온열로 출력하는 열전소자수단(240)과,
상기 감성정보 출력장치(200)를 구동하기 위한 구동프로그램과 청각장애인이나 일반인들을 대상으로 상기 질감, 진동 또는 냉온열에 대한 실험에 의한 감성정보 데이터가 저장되는 제 2 저장수단(250)과,
상기 감성정보 출력장치(200)에 전원을 공급하는 제 2 전원수단(260)과,
상기 제 2 통신수단(210)에서 수신한 소리 데이터에 대해 상기 제 2 저장수단(250)를 참조하여 상기 질감출력수단(220), 진동출력수단(230) 및 열전소자수단(240) 중 적어도 하나를 통해 청각장애인이 인식할 수 있는 감성 정보로 출력하도록 제어하는 제 2 제어수단(270)을 포함하여 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The emotion information output device 200,
Second communication means 210 for communicating with the guide device 100 for the deaf,
Texture output means 220 for outputting the texture to the sound data received through the second communication means 210, and
Vibration output means 230 for outputting the vibration of the sound data received through the second communication means 210 and 230,
Thermo element means 240 for outputting the sound data received through the second communication means 210 in cold and hot heat, and
Second storage means 250 for storing the emotion information data by the experiment for the texture, vibration or cold and heat for the drive program for driving the emotion information output device 200 and the hearing impaired or ordinary people,
Second power supply means 260 for supplying power to the emotion information output device 200;
At least one of the texture output means 220, the vibration output means 230, and the thermoelectric means 240 with reference to the second storage means 250 with respect to the sound data received by the second communication means 210. Guide system for the hearing impaired, including emotional information, characterized in that it comprises a second control means for controlling to output the emotional information that can be recognized by the hearing impaired through.
제 8 항에 있어서,
상기 질감출력수단(220)은,
상기 소리 데이터에 포함된 소리의 세기나 패턴정보에 따라 돌기 형상의 핀 어레이를 이용하여 질감정보나 기호 정보로 출력되고,
상기 진동출력수단(230)은,
상기 소리 데이터에 포함된 소리의 세기나 패턴정보에 따라 진동의 세기가 조절되어 출력되거나 동일한 패턴의 진동으로 출력되고,
상기 열전소자수단(240)은,
상기 소리 데이터에 포함된 소리의 세기나 패턴정보에 따라 열의 세기가 조절되어 출력되거나 동일한 패턴으로 열의 세기가 조절됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 8,
The texture output means 220,
According to the intensity or pattern information of the sound included in the sound data is output as texture information or symbol information using a pin array of the projection shape,
The vibration output means 230,
The intensity of the vibration is adjusted or output according to the intensity or pattern information of the sound included in the sound data, or is output as the vibration of the same pattern,
The thermoelectric element 240 is,
The guide system for the hearing impaired, including emotional information, characterized in that the intensity of the heat is adjusted or output according to the intensity or pattern information of the sound included in the sound data is adjusted in the same pattern.
제 1 항에 있어서,
상기 청각장애인용 안내장치(100)는,
안경(300) 형태로 구성되고, 상기 디스플레이 수단(140)은 상기 안경(300)의 렌즈부분에 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The deaf guide device 100,
A guide system for the hearing impaired, comprising eyeglasses 300, wherein the display means 140 is configured in the lens portion of the glasses 300.
제 1 항에 있어서,
상기 감성정보 출력장치(200)는,
일측에 상기 감성정보 출력장치(200)의 올바른 식별위치를 나타내는 곡면홈(280)을 갖는 장방형의 패널 형태로 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The emotion information output device 200,
Guide system for the hearing impaired, including emotional information, characterized in that it is configured in the form of a rectangular panel having a curved groove 280 indicating the correct identification position of the emotional information output device 200 on one side.
제 2 항, 제 5 항 및 제 9 항 중 어느 하나의 항에 있어서,
상기 소리의 세기는 주파수와 음압으로 구분되고,
상기 소리 패턴은 소리 간격으로 구분됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method according to any one of claims 2, 5 and 9,
The intensity of sound is divided into frequency and sound pressure,
The sound pattern is a guide system for the hearing impaired, including emotional information, characterized in that divided into sound intervals.
제 1 항에 있어서,
상기 디스플레이수단(140)은,
플렉시블한 투명 또는 반투명한 LCD나, LED 디스플레이, AMOLED 디스플레이, 전자잉크 중 하나로 구성됨을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템.
The method of claim 1,
The display means 140,
Guide system for the hearing impaired, including emotional information, characterized in that consisting of a flexible transparent or translucent LCD, LED display, AMOLED display, electronic ink.
청구항 1에 기재된 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법에 있어서,
청각장애인용 안내장치(100)가 마이크 수단(120)을 통해 주변소리를 입력받는 단계;
제 1 제어수단(180)이 음장분석수단(130)을 통해 상기 입력된 소리에 대한 위치, 세기 및 패턴을 분석하는 단계;
상기 제 1 제어수단(180)이 상기 분석된 소리를 정량정보와 감성정보로 분류하는 단계;
상기 분류한 정량정보는 상기 청각장애인용 안내장치(100)의 디스플레이수단(140)을 통해 디스플레이하고, 상기 감성정보는 상기 제 1 통신수단(110)을 통해 감성정보 출력장치(200)로 전송하는 단계; 그리고,
상기 감성정보 출력장치(200)는 상기 청각장애인용 안내장치(100)에서 전송된 감성정보를 수신하여 상기 감성정보를 질감이나, 진동, 열전달 중 하나 이상의 방식으로 출력하는 단계;를 포함하여 이루어지는 것을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법.
In the guide method using a guide system for the hearing impaired, including the emotional information of claim 1,
The hearing impaired guide device 100 receives the ambient sound through the microphone means 120;
Analyzing, by the first control means (180), the position, intensity and pattern of the input sound through the sound field analysis means (130);
The first control means (180) classifying the analyzed sound into quantitative information and emotional information;
The categorized quantitative information is displayed on the display means 140 of the guide device for the hearing impaired person 100, and the emotion information is transmitted to the emotion information output device 200 through the first communication means 110. step; And,
The emotion information output device 200 receives the emotion information transmitted from the guide device for the hearing impaired person 100 and outputs the emotion information by one or more of texture, vibration, and heat transfer. Guide method using a guide system for the hearing impaired, including emotional information characterized by.
제 14 항에 있어서,
상기 정량정보는 상기 입력 및 분석된 소리의 위치나 세기, 패턴 정보 중 하나 이상이고,
상기 감성정보는, 기쁨, 슬픔, 공포, 혐오, 분노 정보 중 적어도 하나인 것을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법.
15. The method of claim 14,
The quantitative information is one or more of the location, intensity, pattern information of the input and analyzed sound,
The emotional information is a guide method using a guide system for the hearing impaired, including emotional information, characterized in that at least one of joy, sadness, fear, disgust, anger information.
제 14 항에 있어서,
상기 청각장애인용 안내장치(100)는 상기 음장 대상을 가시화하여 정량정보로 디스플레이하는 경우,
상기 음장 대상의 주변이 깜빡이도록 하거나, 음장 대상에 대하여 별도의 색을 입혀 가시화시킴을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법.
15. The method of claim 14,
The guide device 100 for the hearing impaired when the sound field object is visualized and displayed as quantitative information,
Guiding method using a guide system for the hearing impaired, including the emotional information characterized in that the periphery of the sound field object to blink, or by applying a separate color to the sound field object.
제 14 항에 있어서,
상기 감성정보 출력장치(200)는 상기 감성정보를 상기 질감이나, 진동, 열전달 중 하나 이상의 방식으로 출력하는 경우,
상기 질감이나, 진동, 열전달 중 하나 이상의 방식을 이용하여 기쁨, 슬픔, 공포, 혐오, 분노 중 적어도 하나의 감성을 느끼도록 출력하는 것을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법.
15. The method of claim 14,
When the emotional information output device 200 outputs the emotional information by one or more of the texture, vibration, and heat transfer,
Guidance using a guide system for hearing impaired persons, including emotional information, characterized in that the output to feel at least one of joy, sadness, fear, disgust, anger using one or more of the texture, vibration, heat transfer. Way.
제 14 항에 있어서,
상기 감성정보는 청각장애인이나 일반인들을 대상으로 상기 질감, 진동 및 냉온감 정보를 제공한 후 실험에 의해 구해진 것이거나, 상기 청각장애인들을 대상으로 별도의 교육을 통해 상기 질감, 진동 및 냉온감 정보에서 상기 감성정보를 취극할 수 있도록 하는 것을 특징으로 하는 감성정보를 포함하는 청각장애인용 안내 시스템을 이용한 안내 방법.15. The method of claim 14,
The emotional information is obtained by experiment after providing the texture, vibration, and cold feeling information for the hearing impaired or ordinary people, or through the separate training for the hearing impaired in the texture, vibration and cold feeling information Guiding method using a guide system for the hearing impaired, including the emotional information, characterized in that to allow the emotional information to be accepted.
KR1020100022933A 2010-03-15 2010-03-15 System for announce hearing-impaired persons including emotion information and method for announce using the same KR101157928B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100022933A KR101157928B1 (en) 2010-03-15 2010-03-15 System for announce hearing-impaired persons including emotion information and method for announce using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100022933A KR101157928B1 (en) 2010-03-15 2010-03-15 System for announce hearing-impaired persons including emotion information and method for announce using the same

Publications (2)

Publication Number Publication Date
KR20110103726A KR20110103726A (en) 2011-09-21
KR101157928B1 true KR101157928B1 (en) 2012-06-22

Family

ID=44954847

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100022933A KR101157928B1 (en) 2010-03-15 2010-03-15 System for announce hearing-impaired persons including emotion information and method for announce using the same

Country Status (1)

Country Link
KR (1) KR101157928B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101503338B1 (en) * 2013-10-29 2015-03-17 현대자동차주식회사 Vehicle and controlling method thereof
WO2020071577A1 (en) * 2018-10-01 2020-04-09 주식회사 넥스트이노베이션 Display module for visually impaired person

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8183997B1 (en) 2011-11-14 2012-05-22 Google Inc. Displaying sound indications on a wearable computing system
KR101329175B1 (en) * 2012-02-27 2013-11-14 한국표준과학연구원 Sound analyzing and recognizing method and system for hearing-impaired people
KR101354927B1 (en) * 2012-05-30 2014-01-27 에이알비전 (주) A wearable type head mounted display device for hearing impaired person
KR101421046B1 (en) * 2013-01-10 2014-07-23 숭실대학교산학협력단 Glasses and control method thereof
KR101455830B1 (en) * 2013-01-10 2014-11-04 숭실대학교산학협력단 Glasses and control method thereof
KR101394168B1 (en) * 2013-02-20 2014-05-15 경희대학교 산학협력단 A face information providing system and the face information providing service method for a hearing-impaired person
KR101509169B1 (en) 2013-05-07 2015-04-07 배영식 Head mounted display
WO2014182030A1 (en) * 2013-05-07 2014-11-13 Bae Youngsik Head-mounted display
KR102201486B1 (en) 2014-05-27 2021-01-12 엘지디스플레이 주식회사 See through display apparatus
CN105278197B (en) 2014-06-30 2019-03-08 乐金显示有限公司 Light control device and transparent display including light control device
KR102401938B1 (en) 2014-06-30 2022-05-26 엘지디스플레이 주식회사 Light controlling apparatus and transparent display device using the same
EP2983040B1 (en) 2014-07-25 2019-05-22 LG Display Co., Ltd. Transparent display based on a guest-host cholesteric liquid crystal device
KR102338548B1 (en) 2014-07-25 2021-12-14 엘지디스플레이 주식회사 Light controlling apparatus and transparent display device using the same
KR102143957B1 (en) * 2019-03-21 2020-08-12 박주연 Method and apparatus for providing information for the hearing impaired
KR102160742B1 (en) * 2020-05-26 2020-09-28 지정현 Alarm display device and method for the hearing impaired
KR102648566B1 (en) * 2021-08-05 2024-03-18 경북대학교 산학협력단 Hearing auxiliary system and hearing auxiliary method using sight
KR20230049320A (en) 2021-10-06 2023-04-13 전북대학교산학협력단 Liquid crystal display device

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006106711A (en) 2004-09-10 2006-04-20 Matsushita Electric Ind Co Ltd Information processing terminal
KR20080057651A (en) * 2006-12-20 2008-06-25 한국과학기술연구원 Sound recognition system and method for aurally impaired people

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006106711A (en) 2004-09-10 2006-04-20 Matsushita Electric Ind Co Ltd Information processing terminal
KR20080057651A (en) * 2006-12-20 2008-06-25 한국과학기술연구원 Sound recognition system and method for aurally impaired people

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101503338B1 (en) * 2013-10-29 2015-03-17 현대자동차주식회사 Vehicle and controlling method thereof
WO2020071577A1 (en) * 2018-10-01 2020-04-09 주식회사 넥스트이노베이션 Display module for visually impaired person
US11011076B2 (en) 2018-10-01 2021-05-18 SENSEE, Inc. Display module for visually impaired persons

Also Published As

Publication number Publication date
KR20110103726A (en) 2011-09-21

Similar Documents

Publication Publication Date Title
KR101157928B1 (en) System for announce hearing-impaired persons including emotion information and method for announce using the same
Hoang et al. Obstacle detection and warning system for visually impaired people based on electrode matrix and mobile Kinect
Baldwin et al. Perceived urgency mapping across modalities within a driving context
Riener Sensor-actuator supported implicit interaction in driver assistance systems
JP3632607B2 (en) Vehicle expression operation control system, vehicle communication system, and vehicle for expression operation
CN100583007C (en) Movable device with surface display information and interaction function
CN107111334A (en) Modular wearable equipment for passing on affective state
WO2014140853A2 (en) Apparatus and method for automatic action selection based on image context
JP2014508596A (en) Optical device for individuals with visual impairment
KR101106076B1 (en) System for announce blind persons including emotion information and method for announce using the same
KR20150037251A (en) Wearable computing device and user interface method
CN105303770A (en) Sleepy warning device with wearable display for driver and method
JP2010198100A (en) Support device for recognizing approach of others for vehicle
JP2022541703A (en) Transportation control method and device, electronic device and storage medium
CN112506336A (en) Head mounted display with haptic output
JP2021146214A (en) Techniques for separating driving emotion from media induced emotion in driver monitoring system
Jansen et al. A design space for human sensor and actuator focused in-vehicle interaction based on a systematic literature review
Otoom et al. Novel navigation assistive device for deaf drivers
Di Campli San Vito et al. Investigation of thermal stimuli for lane changes
JP2021171539A (en) Passenger emotion transmission device
CN112344948A (en) Information processing apparatus, storage medium, and information processing method
Kim et al. Design of the driver-adaptive vehicle interaction system
KR102175359B1 (en) Warning system for hearing-impaired person of vehicle
KR20190025164A (en) A method for evaluating driving ability using driving ability evaluation system
KR102194205B1 (en) System of preventing dangerous situation of driver

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150602

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160526

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee