KR101278330B1 - Speech perception apparatus and speech perception method using it - Google Patents

Speech perception apparatus and speech perception method using it Download PDF

Info

Publication number
KR101278330B1
KR101278330B1 KR1020120125241A KR20120125241A KR101278330B1 KR 101278330 B1 KR101278330 B1 KR 101278330B1 KR 1020120125241 A KR1020120125241 A KR 1020120125241A KR 20120125241 A KR20120125241 A KR 20120125241A KR 101278330 B1 KR101278330 B1 KR 101278330B1
Authority
KR
South Korea
Prior art keywords
test
unit
sound
data storage
storage unit
Prior art date
Application number
KR1020120125241A
Other languages
Korean (ko)
Inventor
장선아
Original Assignee
우송대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 우송대학교 산학협력단 filed Critical 우송대학교 산학협력단
Priority to KR1020120125241A priority Critical patent/KR101278330B1/en
Application granted granted Critical
Publication of KR101278330B1 publication Critical patent/KR101278330B1/en
Priority to PCT/KR2013/009999 priority patent/WO2014073849A1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/12Audiometering
    • A61B5/121Audiometering evaluating hearing capacity

Abstract

PURPOSE: A word perception inspecting apparatus and a word perception inspecting method using the same are provided to improve effectiveness of inspection by applying and developing inspection sentences for infants. CONSTITUTION: A storing unit is equipped with a courseware data storing unit. A subject input unit accepts responses of examinee. A sound output unit(60) has an inspecting sound output unit and an oral strengthening output unit. A screen display unit(70) outputs display information. A control processing unit(80) outputs the display information to the display output unit. [Reference numerals] (10) Hearing threshold inspecting unit; (20) Examinee input unit; (30) Examinee output unit; (40) Storing unit; (41) Inspecting sound data storing unit; (42) Courseware data storing unit; (43) Inspection data storing unit; (50) Subject input unit; (60) Sound output unit; (61) Inspecting sound output unit; (62) Oral strengthening output unit; (70) Screen display unit; (71) Visual strengthening output unit; (80) Control processing unit

Description

말지각 검사 장치 및 이를 이용한 말지각 검사방법{Speech perception apparatus and speech perception method using it}[0001] The present invention relates to a speech perception apparatus and a speech perception method using the same,

본 발명은 말지각 검사 장치 및 이를 이용한 말지각 검사방법에 관한 것으로서, 더욱 상세하게는, 청각장애 등 의사소통능력에 제한이 있거나 언어발달 중에 있는 유아를 대상으로 오픈-셋(Open-set) 검사 및 클로즈드-셋(Closed-set) 검사를 수행하되, 클로즈드-셋(Closed-set) 검사와 오픈-셋(Open-set) 검사에 구두 또는 시각 강화를 통해 말지각 검사 효율을 현저히 높일 수 있도록 한 말지각 검사 장치 및 이를 이용한 말지각 검사방법에 관한 것이다.
More particularly, the present invention relates to an apparatus and method for testing a horse's perception using an open-set test for children with limited communication skills such as hearing loss or language development. And a closed-set test is performed. However, in order to increase the efficiency of the perception test by verbal or visual strengthening in the closed-set test and the open-set test, And a horse's perception test method using the same.

인간의 의사소통 수단 중 대화는 가장 기본적이며 중요한 요소이다. 대화란 타인의 의사가 담긴 말(단어나 문장)을 듣고 자신의 의사를 담은 말(단어나 문장)을 소리를 통해 주고 받는 과정을 의미하며, 그 중 듣기는 귀를 통해 그 울림이 뇌에 전달된 후 뇌에서 말의 의미를 인지하는 프로세스를 갖고 있다. 따라서 정상적인 대화가 가능하기 위해서는 듣기 능력, 즉 말소리 지각과 말 지각이 정상이어야 한다.Dialogue is one of the most fundamental and important factors in human communication. A dialogue is a process of listening to the words (words or sentences) of another's doctors and exchanging words (words or sentences) containing their own doctors through sound. Among them, And the process of recognizing the meaning of words in the brain. Therefore, in order for normal conversation to be possible, listening ability, that is, speech perception and speech perception should be normal.

여기서, 말소리 지각이란 말소리가 귀를 통해 뇌에 정상적으로 전달되는지 여부를 의미하며, 말지각이란 정상적인 말소리 지각을 통해 말의 의미가 뇌에서 정상적으로 인지되었는지 여부를 의미한다.Here, speech perception refers to whether or not speech is normally transmitted to the brain through the ear, and horse speech perception refers to whether the meaning of speech is normally recognized in the brain through normal speech perception.

결국 말소리 지각이 비정상인 경우 통상적으로 청각능력에 장애가 있는 경우가 대부분이며, 말지각이 비정상일 경우 청각능력은 정상이나 뇌에 이상이 있는 경우가 대부분이므로 각각에 따른 치료방법은 매우 다르게 된다.If the speech perception is abnormally normal, most of the auditory ability is impaired. If the speech perception is abnormal, the auditory ability is normal or the brain is abnormal.

먼저, 말소리 지각의 정상여부를 검사하는 장치를 살펴보면,First, a device for checking whether or not the speech perception is normal,

외이, 중이, 내이로 구성되어 있는 사람의 귀는 이들 중 어느 부분에 이상이 생기면 소리를 잘못 듣게 되는데 이러한 현상을 난청이라 하며, 이러한 난청을 측정하는 일반적인 청력 검사법은 크게 두 가지 방법으로 대별되는데, 이는 6개의 주파수 대역, 즉, 250Hz, 500Hz, 1000Hz, 2000Hz, 4000Hz, 8000Hz의 주파수 대역을 기준으로 하여 검사자가 음을 뚜렷하게 들을 수 있는 높은 레벨(강도)에서 차차 레벨을 낮춰가며 측정하는 하강법(descending method)과, 들리지 않는 약한 레벨에서 차츰 높여 가며 측정하는 상승법(Ascending method), 이 두가지 방법을 절충한 수정법(modified method)의 세 가지 방법이다. A person's ears composed of the outer ear, the middle ear, and the inner ear are hearing the sound if any part of the abnormality occurs. This phenomenon is called hearing loss. The general hearing test for measuring the hearing loss is largely divided into two methods. This is based on the frequency band of six frequency bands: 250 Hz, 500 Hz, 1000 Hz, 2000 Hz, 4000 Hz and 8000 Hz. The descending method (lowering the level of the next level at a high level the descending method, the Ascending method, which gradually increases from the inaudible level to the ineffective level, and the modified method, which is a compromise between the two methods.

특히 대한민국 특허공보 10-0917714호(청력 측정 장치 및 그 제어방법)에 개시된 바와 같이 음원에 대하여 각 청력별로 보정치가 처리된 청력 측정용 음데이터를 사용하여 실제 생활과 근접한 검사자의 청력을 찾아내고 이를 바탕으로 검사자에 적합한 보청기 보정치를 계산하고, 계산된 보정치를 실제 생활과 비슷한 환경의 음원에 적용하여 청력 측정 결과 검증용 음원을 만들어 보청기 사용 전에 보청기 사용시와 동일한 경험을 하도록 하는 청력 측정 장치가 개발되어 있다.Especially, as disclosed in Korean Patent Publication No. 10-0917714 (audiometry and control method thereof), hearing ability of an inspector who is close to real life is found out by using sound data for hearing measurement in which a correction value is processed for each hearing for a sound source, A hearing aid was developed to calculate the hearing aid correction values suitable for the examiner and to apply the calculated correction values to sound sources in a similar environment to make a sound source for verification of hearing measurement results so that the user experiences the same experience as hearing aids before using the hearing aid have.

그러나 이러한 청력 측정 장치는 언어발달 중에 있는 유아에게는 검사자와의 의사소통 등의 어려움으로 인해 그 적용이 적합하지 못할 뿐만 아니라 상기 장치를 통해 말소리 지각이 비정상이라 판단한다 하더라도 이것이 곧 말지각이 정상임을 의미하지 못하므로 별도의 말 지각 검사를 수행해야하는 검사의 중복성이 존재한다.However, such a device for hearing measurement is not suitable because of the difficulty of communicating with the examinee to the infant during language development, and even if the speech perception is judged abnormal through the device, it means that the speech perception is normal And there is redundancy of the test which needs to perform a separate test.

또한, 말지각의 정상여부를 검사하는 방법을 살펴보면,In addition, as for the method of checking whether the horse's perception is normal,

현재 우리나라에서 대표적으로 사용되고 있는 것은 현재 표준화 과정에 있으며 소리 인지에서부터 문장 지각에 이르기까지 다양한 검사도구와 설문지를 이용하여 3세 이상부터 적용가능하게 개발된 EARS-K(Evaluation of Auditory Response to Speech-Korean version), 표준화 과정을 거쳤으며 단어부터 문장에 이르는 어음 검사도구인 어음청각검사(Korean Speech Audiometry), 감자 인형에 대해 듣기만으로 제시되는 지시를 따르는 방법인 Mr. Potato Head법 등이 있다.At present, the most used in Korea is the standardization process, and the EARS-K (Evaluation of Auditory Response to Speech-K) developed from 3 years of age or older by using various test tools and questionnaires from sound recognition to sentence perception (Korean Speech Audiometry), which is a standardized word-to-sentence test tool, and a method to follow instructions given by listening to a potato doll. Potato Head method.

그러나, 이는 검사자의 수행 능력 및 검사 환경 등의 검사 관련 요인에 의해 영향을 많이 받으며, 특히 의사소통 능력에 제한이 있는 대상자의 경우 측정이 불가능하거나 결과의 신뢰성이 낮을 뿐만 아니라 어휘 및 언어가 발달 중에 있는 유아는 더 많은 요인에 의해 영향을 받아 다양한 양상을 보이기 때문에 측정에 어려움이 있다. 또한 장치로서 구성되어 있는 것이 아니고 검사도구 및 설문지 등으로 구성되어진 평가 프로그램을 검사자가 수행하는 것이기 때문에 그 결과가 객관적이지 못한 문제점이 있다. However, this is influenced by test-related factors such as the test taker's ability to perform and the test environment. Especially, the subjects who have limited communication ability are not able to measure or have low reliability of results, The infant is affected by more factors and has various difficulties in measurement. Also, since the inspector carries out the evaluation program composed of the inspection tool and the questionnaire, not the apparatus, the result is not objective.

특히, 3세 이하의 아동들에게는 말지각 검사가 제공되지 못하거나 클로즈드-셋(Closed-set) 수준에서의 정보 밖에 얻지 못하는 경우가 발생하여 이러한 한계를 극복하고자 수정된 오픈-셋(Open-set) 검사가 개발되기는 하였으나 아동이 따라 말하지 않으므로 음소 수준에서의 말지각 능력에 대한 정보를 제공할 수 없는 실정이다.In particular, children less than 3 years old may not be able to obtain a test of speech perception and only obtain information at the closed-set level. To overcome these limitations, a modified open-set ) Test was developed, but since the child does not speak it, it is not possible to provide information about the speech perception ability at the phoneme level.

따라서, 따라 말하기를 통한 말지각 능력 측정 정도는 청각 재활에 직결되는 중요한 단계임을 고려할 때 우리말 음소의 빈도와 배열을 반영하고 유아들의 발달 과정 및 수준에 맞춘 말지각 검사의 개발이 시급한 실정에서 최대한 빨리 유아의 청각능력을 평가함은 물론 검사자의 수행 능력에 의존하지 않고 말지각에 관한 객관적인 평가 데이터를 제공할 수 있는 장치의 개발이 요구되고 있다.
Therefore, considering that the level of measuring the perceptual ability through speaking is an important step directly related to the hearing rehabilitation, it is necessary to develop the word perception test that reflects the frequency and arrangement of Korean phonemes, It is required to develop a device capable of providing objective evaluation data on verbal perception without relying on the performance ability of the auditor as well as evaluating the auditory ability of the infant.

상기한 종래기술에 따른 문제점을 해결하기 위해 발명된 것으로서, 본 발명은 유아들의 발달 및 수준에 맞춘 말지각 검사를 제공하며, 특히 최적의 구두 및 시각 강화 수단 및 절차를 통해 말지각 검사의 정확도 및 신뢰성을 현저히 향상시킬 수 있도록 한 말지각 검사 장치 및 이를 이용한 말지각 검사방법을 제공하는데 그 목적이 있다.Invented to solve the problems according to the prior art described above, the present invention provides a speech perception test tailored to the development and level of the infant, in particular through the oral and visual enhancement means and procedures for the accuracy of the perception test and It is an object of the present invention to provide a late perception test device and a late perception test method using the same to significantly improve the reliability.

또한, 본 발명은 검사자에게는 편의성을 제공하여 검사수행을 용이하게 하고 피검자에게는 검사에 대한 거부감을 낮춤과 동시에 몰입도를 높일 수 있도록 하여 피검사 및 검사자에게 최적의 말지각 검사 환경을 제공 및 조성할 수 있도록 한 말지각 검사 장치 및 이를 이용한 말지각 검사방법을 제공하는데 목적이 있다.
In addition, the present invention provides convenience to the examiner to facilitate the examination, and it is possible to lower the rejection of the test to the examinee and to increase the degree of immersion, thereby providing and optimizing the blood test and the optimal perception test environment for the examinee And a method for inspecting a horse's perception using the same.

상기한 바와 같은 과제를 해결하기 위한 수단으로, 본 발명인 말지각 검사 장치는,As a means for solving the above-mentioned problems,

피검자의 청력역치 측정을 위한 청력역치 검사부,A hearing threshold detector for measuring the hearing threshold of the subject,

검사방법, 검사세트, 강화방법, 정/오답 정보와 같은 검사관련 정보를 입력하는 검사자 입력부,An inspector input unit for inputting inspection related information such as an inspection method, an inspection set, a strengthening method, and correct / incorrect information;

말지각 검사에 필요한 검사음을 저장하는 검사음 데이터 저장부 및 말지각 검사에 필요한 디스플레이 정보를 저장하는 코스웨어 데이터 저장부를 구비하는 저장부,A storage unit for storing an inspection sound data storage unit for storing inspection sounds necessary for the perceptual inspection and a courseware data storage unit for storing display information necessary for the perceptual inspection,

피검자의 응답을 입력받는 피검자 입력부,A subject input unit receiving a response of the subject,

마지각 검사를 위한 검사음을 출력하는 검사음 출력부 및 구두 강화을 위한 사운드를 출력하는 구두 강화 출력부를 구비하는 사운드 출력부,A sound output unit including a test sound output unit for outputting a test sound for the final perception test and a shoe reinforcement output unit for outputting a sound for shoe reinforcement;

시각 강화를 위한 디스플레이 정보를 출력하는 화면 출력부 및A screen output unit for outputting display information for time enhancement and

검사자 입력부를 통해 입력되는 검사관련 정보에 따라 선택된 검사방법, 검사세트, 구두 및 시각강화 데이터를 저장부로부터 호출하여 상기 사운드 출력부와 화면 출력부에 출력하도록 제어하는 제어처리부를 포함하여 구성되는 것을 특징으로 한다.
And a control processor which controls to output the sound output unit and the screen output unit by calling the selected test method, test set, oral and visual enhancement data from the storage unit according to the test related information input through the tester input unit. It features.

그리고 상기 제어처리부는,The control processing unit,

상기 검사자 입력부로부터 입력된 강화방법이 시각 강화를 포함하는 경우에 상기 검사음 데이터 저장부에 저장된 문장세트의 목표문장을 호출하여 검사음 출력부를 통해 출력함과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 대응되는 디스플레이 정보를 호출하여 화면 출력부에 출력하도록 구성되되,If the method of reinforcement inputted from the examiner input unit includes visual reinforcement, the target sentence of the sentence set stored in the test sound data storage unit is called and output through the test sound output unit and the courseware stored in the courseware data storage unit. The display information corresponding to the target sentence of the call is configured to output to the screen output,

상기 목표문장과 대응되는 디스플레이 정보는 동작화면으로 이루어지고, 상기 동작화면은 화면이 전환되는 플래쉬 형태로 1초에서 10초까지 제공되는 것을 특징으로 한다.
The display information corresponding to the target sentence is composed of an operation screen, and the operation screen is provided for 1 second to 10 seconds in a flash form in which the screen is switched.

그리고 상기 제어처리부는,The control processing unit,

상기 검사자 입력부로부터 입력된 강화방법이 구두 강화를 포함하는 경우에 말지각 검사시에 상기 검사음 데이터 저장부에 저장된 문장세트의 목표문장을 호출하여 검사음 출력부를 통해 출력한 후에 피검자가 목표문장을 포함한 반응을 산출했을 때, 정/오답 여부에 따라 검사자가 검사자 입력부를 통해 입력하는 데이터에 따라 코스웨어 데이터 저장부에 저장된 코스웨어 중 대응되는 구두강화 사운드를 호출하여 구두 강화 출력부로 출력하는 것을 특징으로 한다.
If the reinforcement method inputted from the examiner input unit includes verbal reinforcement, the target sentence of the sentence set stored in the test sound data storage unit is called and output through the test sound output unit during the late perception test, and then the examinee outputs the target sentence. When calculating the response included, according to the data input by the examiner according to the correct / incorrect answer, the caller reinforcement sound of the courseware stored in the courseware data storage unit according to the data inputted by the tester output unit characterized in that the output It is done.

그리고 상기 제어처리부는 피검자가 3회 연속으로 무응답하였을 때 말지각 검사를 중단하는 것을 특징으로 한다.
The control processing unit may stop the late perception test when the examinee has not responded three times consecutively.

또한, 본 발명은 상기의 말지각 검사 장치를 이용한 말지각 검사방법으로,In addition, the present invention is a late perception test method using the above perceptual perception inspection device,

검사 관련 정보를 검사자 입력부를 통해 입력하는 단계,Inputting inspection-related information through an inspector input unit,

청력역치 검사부를 통해 청력역치 검사를 하는 단계,Performing a hearing threshold test through the hearing threshold test section,

청력역치 및 검사음압을 검사자 출력부를 통해 출력하는 단계,Outputting a hearing threshold value and an inspection sound pressure through an inspector output unit,

검사음 데이터 저장부에 저장된 예문을 검사음 출력부를 통해 출력하는 단계,Outputting an example sentence stored in the test sound data storage unit through the test sound output unit;

검사음 데이터 저장부에 저장된 문장세트의 목표문장이 제어처리부에 의해 호출되어 검사음 출력부에 출력됨과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 매칭되는 코스웨어가 화면 출력부에 출력되는 단계,The target sentence of the sentence set stored in the test sound data storage unit is called by the control processing unit and output to the test sound output unit, and the courseware matching the target sentence among the courseware stored in the courseware data storage unit is output to the screen output unit. Step being,

검사자 입력부를 통해 주검사자가 정/오답 여부를 입력하는 단계 및Inputting correct or incorrect answers by the main inspector through the inspector input unit; and

입력되는 정/오답 여부를 검사 데이터 저장부에 저장하는 단계를 포함하여 이루어지는 것을 특징으로 한다.
And storing the input / correct answer inputted in the test data storage unit.

그리고 상기의 입력되는 정/오답 여부를 검사 데이터 저장부에 저장하는 단계 이후에는,After the step of storing the input correct or incorrect answers to the test data storage unit,

클로즈드-셋(Closed-set) 검사 결과 정답인 문장으로 새로운 문장세트를 구성하여 검사 데이터 저장부에 저장하는 단계,Constructing a new sentence set into a sentence that is a correct answer result of a closed-set test, and storing it in the test data storage unit;

제어처리부에 의해 검사음 데이터 저장부에 저장된 새로운 문장세트의 목표문장이 호출되어 검사음 출력부를 통해 출력됨과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 매칭되는 시각 강화 정보가 호출되어 화면 출력부에 출력되는 단계,The target sentence of the new sentence set stored in the test sound data storage unit is called by the control processor and output through the test sound output unit, and the visual enhancement information matching the target sentence among the courseware stored in the courseware data storage unit is called and displayed. Output to the output unit,

응답음에 대해 검사자에 의한 정/오답 여부가 검사자 입력부를 통해 입력되고, 또한 제어처리부는 피검자의 응답음을 피검자 입력부로부터 전달받아 검사 데이터 저장부에 저장하는 단계 및Whether the answer sound is correct or incorrect by the inspector is input through the inspector input unit, and the control processor receives the response sound from the inspector input unit and stores the response sound from the inspector input unit and stores the inspected sound in the test data storage unit.

검사결과를 검사자 출력부를 통해 출력하는 단계가 더 구비되는 것을 특징으로 한다.
And outputting the inspection result through an inspector output unit.

또한, 상기의 말지각 검사 장치를 이용한 말지각 검사방법에 있어서,In addition, in the late perception test method using the above perceptual perception test device,

제어처리부는 오픈-셋(Open-set) 검사를 위한 문장세트를 구성하여 검사 데이터 저장부에 저장하는 단계,The control processor constructs a sentence set for an open-set test and stores the sentence set in the test data storage unit.

제어처리부에 의해 검사음 데이터 저장부에 저장된 새로운 문장세트의 목표문장이 호출되어 검사음 출력부를 통해 출력됨과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 매칭되는 시각 강화 정보가 호출되어 화면 출력부에 출력되는 단계,The target sentence of the new sentence set stored in the test sound data storage unit is called by the control processor and output through the test sound output unit, and the visual enhancement information matching the target sentence among the courseware stored in the courseware data storage unit is called and displayed. Output to the output unit,

응답음에 대해 검사자에 의한 정/오답 여부가 검사자 입력부를 통해 입력되고, 또한 제어처리부는 피검자의 응답음을 피검자 입력부로부터 전달받아 검사 데이터 저장부에 저장하는 단계 및Whether the answer sound is correct or incorrect by the inspector is input through the inspector input unit, and the control processor receives the response sound from the inspector input unit and stores the response sound from the inspector input unit and stores the inspected sound in the test data storage unit.

검사결과를 검사자 출력부를 통해 출력하는 단계가 더 구비되는 것을 특징으로 한다.
And outputting the inspection result through an inspector output unit.

상기한 바와 같은 과제해결수단을 통해, 본 발명인 말지각 검사 장치 및 이를 이용한 말지각 검사방법은,Through the problem solving means as described above, the present inventors perceptual inspection device and the late perception inspection method using the same,

유아들의 발달 및 수준에 맞춘 말지각 검사를 제공할 수 있고, 특히 최적의 구두 및 시각 강화 수단 및 절차를 통해 말지각 검사의 정확도 및 신뢰성을 현저히 향상시킬 수 있으며,Provide perceptual tests that are tailored to the development and level of the infant, and can significantly improve the accuracy and reliability of perceptual tests, especially through optimal oral and visual enhancement measures and procedures,

또한, 검사자에게는 편의성을 제공하여 검사수행을 용이하게 하고 피검자에게는 검사에 대한 거부감을 낮춤과 동시에 몰입도를 높일 수 있도록 하여 피검자 및 검사자에게 최적의 말지각 검사 환경을 제공 및 조성할 수 있는 이점이 있다.In addition, it is possible to provide the convenience to the examinee to facilitate the test, and to lower the rejection of the test to the examinee and to increase the immersion level, thereby providing an advantage of providing the optimum perception test environment for the examinee and the examinee have.

특히 검사자의 정해진 절차에 따라 간편한 기계적 조작을 이행하는 것만으로도 청력 손실의 정도나 유형에 대한 정보뿐만 아니라 말지각 정도에 대한 객관적인 정보를 파악할 수 있어서 말지각 검사의 표준화 및 신뢰성이 향상된다.In particular, by performing simple mechanical operations according to the procedure of the inspector, it is possible to obtain objective information about the degree of speech perception as well as information on the degree and type of hearing loss, thereby improving the standardization and reliability of the speech perception test.

또한, 문어가 아닌 구어를 기준으로 한 유아 전용 검사문장을 개발하여 적용함에 따라 검사의 효율성이 극대화된다.Also, by developing and applying the test pattern for infants based on vernacular rather than octopus, the efficiency of the test is maximized.

또한, 음운학 및 실험을 통해 전용 검사문장을 세트별로 개발하고 이를 난이도를 반영하여 연령별로 특화함에 따라 검사의 전문성이 강화된다.In addition, through the development of phonological and experimental tests, special test sentences are developed for each set, and the specialization of the test is enhanced as it is specialized for each age by reflecting the difficulty.

또한, 구두 강화 및 시각 강화를 병행하되 시각 강화 효과를 높이기 위하여 그림 강화 자료(코스웨어)를 함께 적용하는 등 새롭게 개발된 강화절차에 의해 정확도 및 신뢰성이 극대화되는 이점이 있다.
In addition, oral reinforcement and visual reinforcement are combined, but in order to enhance the visual reinforcement effect, the picture reinforcement material (courseware) is also applied, such as the newly developed reinforcement procedure has the advantage that the accuracy and reliability are maximized.

도 1은 본 발명에 따른 말지각 검사 장치를 도시한 블록도이다.
도 2는 본 발명에 따른 말지각 검사 장치의 코스웨어 데이터에 대한 일 실시예를 도시한 도면이다.
도 3은 본 발명에 따른 말지각 검사 장치의 클로즈드-셋(Closed-set) 검사 과정의 일예를 도시한 흐름도이다.
도 4는 본 발명에 따른 말지각 검사 장치의 오픈-셋(Open-set) 검사 과정의 일예를 도시한 흐름도이다.
FIG. 1 is a block diagram showing a horse's perception inspection apparatus according to the present invention.
FIG. 2 is a diagram showing one embodiment of courseware data of the terminal perception testing apparatus according to the present invention.
3 is a flowchart illustrating an example of a closed-set test process of the late perceptual test apparatus according to the present invention.
4 is a flowchart illustrating an example of an open-set inspection process of a speech perception inspection apparatus according to the present invention.

이하에는 첨부한 도면을 참조하여 본 발명의 바람직한 실시예에 따라 말지각 검사 장치에 대해서 상세하게 설명한다. 단, 본 발명을 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

먼저, 본 발명의 내용을 설명함에 앞서, 주요 용어를 정의하기로 한다.Prior to describing the contents of the present invention, main terms will be defined.

'검사음'은 피검자의 말지각 검사를 위해 말지각 검사 장치에서 생성된 또는 말지각 검사 장치에 저장되어 있는 음으로서, 다양한 오디오 출력 수단을 통해 출력된다.The " test sound " is output from various audio output means, which is generated by the verbal perception testing device or is stored in the verbal perception testing device for the perception test of the subject.

'검사 음압'은 검사음의 dBHL단위로 변환된 음압레벨(sound pressure level)을 의미한다.'Test sound pressure' refers to a sound pressure level converted in dBHL units of test sound.

'강화'는 검사의 효율을 증가시키기 위해 제공되는 자극을 의미한다.'Strengthening' means stimulation provided to increase the efficiency of the test.

'청력역치'는 청각역치, 순음역치 등으로 명명되는 것으로서, 가장 작은 소리를 들을 수 있는 한계치를 의미한다.'Hearing threshold' is named as auditory threshold, pure tone threshold, etc., which means the threshold value at which the smallest sound can be heard.

'클로즈드-셋(Closed-set) 검사'는 반응의 수를 제한하여 피검자가 제한된 범위 내에서 반응하도록 한 검사방법을 의미한다."Closed-set test" means a test method that limits the number of reactions and allows the subject to respond within a limited range.

오픈-셋(Open-set) 검사는 반응의 수가 제한되지 않는 개방형 검사방법을 의미한다.
An open-set test means an open test method in which the number of reactions is not limited.

도 1에 도시된 바와 같이, 본 발명에 따른 말지각 검사 장치는 청력역치 검사부(10), 검사자 입력부(20), 검사자 출력부(30), 저장부(40)를 이루는 검사음 데이터 저장부(41)와 코스웨어 데이터 저장부(42) 및 검사 데이터 저장부(43), 피검자 입력부(50), 사운드 출력부(60), 화면 출력부(70) 및 제어처리부(80)를 포함하여 이루어진다.
1, the apparatus for verifying perception of a horse according to the present invention includes an auditory threshold value checking unit 10, an examiner input unit 20, an inspector output unit 30, an inspection sound data storage unit 41, a courseware data storage unit 42, an inspection data storage unit 43, an examinee input unit 50, a sound output unit 60, a screen output unit 70 and a control processing unit 80.

상기 청력역치 검사부(10)는 통상의 청력역치 검사장치를 의미하며 상기 청력역치 검사부(10)에서의 검사음의 강도는 아동의 500Hz, 1000Hz, 2000Hz, 4000Hz의 주파수에서 얻어진 청력역치의 평균 강도에서 40dBSL 높인 강도로 한다.
The hearing threshold value checking unit 10 refers to a normal hearing threshold value checking unit and the intensity of the test sound in the hearing threshold value checking unit 10 is calculated from the average intensity of the hearing threshold obtained at frequencies of 500 Hz, 1000 Hz, 2000 Hz, 40dBSL increase in strength.

상기 검사자 입력부(20)는 검사방법{클로즈드-셋(Closed-set)인지, 오픈-셋(Open-set) 검사인지 또는 양자 모두인지 여부}, 검사세트, 강화방법{구두 강화인지 아니면 시각 강화인지 여부 및 그 구체적인 방법}, 정/오답 정보{피검자의 응답 청취 후 그 응답이 정답인지 오답인지 여부}, 검사 진행과 관련한 정보{검사 시작, 검사 중지, 검사 종료 등의 정보}, 검사관련 데이터 요청 정보 등의 검사관련 정보를 검사자가 직접 입력하는 부분으로 복수의 버튼으로 이루어진 장치나, 터치 스크린, PC 등으로 구성될 수 있다.
The examiner input unit 20 is a test method (closed-set, open-set test or both), test set, reinforcement method oral reinforcement or visual enhancement Whether the answer is correct or incorrect after listening to the subject's response}, information related to the progress of the test {information such as the start of the test, stop of the test, the end of the test}, request for test-related data The tester directly inputs test-related information such as information, and may include a device composed of a plurality of buttons, a touch screen, and a PC.

상기 검사자 출력부(30)는 검사 진행과정 등을 보여주고, 말지각 검사 결과를 제어처리부(80)를 통하여 입력받아 출력하기 위한 부분으로, 이는 통상의 디스플레이 화면일 수 있고 또는 프린트 또는 이들의 조합일 수 있다. 또한 모니터, 터치 스크린, PC 등으로 구성될 수 있다.
The inspector output unit 30 is a part for displaying an inspection process and the like and receiving a late test result through the control processing unit 80 and outputting the result. This may be a normal display screen or a print or a combination thereof. Can be. It can also be composed of a monitor, a touch screen, a PC, and the like.

상기 검사음 데이터 저장부(41)는 클로즈드-셋(Closed-set) 및 오픈-셋(Open-set) 검사를 포함한 말지각 검사에 필요한 모든 검사음을 저장한다. 검사음 데이터 저장부(41)는 총 10개의 문장세트, 후술하는 구두 강화에 제공될 구두 강화 사운드, 예문 등으로 구성될 수 있다.The test sound data storage unit 41 stores all test sounds necessary for the male perception test including closed-set and open-set tests. The test sound data storage unit 41 may be composed of a total of 10 sentence sets, oral reinforcement sounds to be provided for the oral reinforcement described later, example sentences, and the like.

상기 각 문장세트는 아래의 실시예를 따르는 것이 바람직하나, 반드시 이에 국한된 것은 아니고 아래의 규칙을 따르는 모든 실시예를 추가할 수 있음을 밝힌다.It is preferable that each of the above sentence sets follow the following embodiments, but it is not necessarily limited thereto, and all embodiments that follow the following rules may be added.

본 실시예에 따른 각 문장세트는 각 10개의 문장으로 구성되어 있는데, 각 문장은 구어체로서 유아의 언어발달 단계를 고려하여 2-4음절로 구성되며, 우리말 단모음 7개(ㅏ, ㅐ, ㅣ, ㅗ, ㅜ, ㅓ, ㅡ)와 이중모음, 자음 음소 19개의 조합으로 구성된다.Each sentence set according to the present embodiment is composed of 10 sentences each, each sentence is composed of 2-4 syllables in consideration of the language development stage of the infant as a spoken language, 7 short vowels in Korean (ㅏ, ㅐ, ㅣ, It consists of 19 combinations of, TT, ㅓ, ㅡ), double vowels, and consonant phonemes.

이렇게 10개의 문장세트를 구성하되, 가장 많이 사용된 모음들을 ‘ㅏ, ㅓ, ㅣ’, 가장 많이 사용된 자음들을 ‘ㄴ, ㅈ, ㄱ, ㄹ, ㅁ’로 구성하고 중성 -> 초성 -> 종성의 순으로 사용빈도를 분포시키며, 각 문장세트별로 총 사용 음절 수, 모음과 자음의 분포, 자음의 초성/중성/종성 비율을 발생빈도와 비슷한 수준으로 맞춤으로서 음운학에 기초한 유아의 언어발달 단계를 고려하였다.
This set of 10 sentences, the most used vowels 'ㅏ, ㅓ, ㅣ', the most used consonants composed of 'b, ㅈ, ㄱ, ㄹ, ㅁ' and neutral->primary-> final The frequency of use is distributed in the order of, and the language development stages of infants based on phonology are adjusted by adjusting the total number of syllables, vowel and consonant distribution, and the initial / neutral / final ratio of the consonants to a similar frequency. Considered.

문장세트 ASentence Set A

Figure 112012091364796-pat00001
Figure 112012091364796-pat00001

문장세트 BSentence Set B

Figure 112012091364796-pat00002
Figure 112012091364796-pat00002

문장세트 CSentence Set C

Figure 112012091364796-pat00003
Figure 112012091364796-pat00003

문장세트 DSentence Set D

Figure 112012091364796-pat00004
Figure 112012091364796-pat00004

문장세트 ESentence Set E

Figure 112012091364796-pat00005
Figure 112012091364796-pat00005

문장세트 FSentence Set F

Figure 112012091364796-pat00006
Figure 112012091364796-pat00006

문장세트 GSentence Set G

Figure 112012091364796-pat00007
Figure 112012091364796-pat00007

문장세트 HSentence Set H

Figure 112012091364796-pat00008
Figure 112012091364796-pat00008

문장세트 ISentence set I

Figure 112012091364796-pat00009
Figure 112012091364796-pat00009

문장세트 JSentence Set J

Figure 112012091364796-pat00010

Figure 112012091364796-pat00010

또한, 구두강화음은 말지각 검사에 제공되는 강화 중 구두 강화에 제공되는 ‘잘했어요’, ‘맞았어요’ 및 ‘그렇죠’로 이루어진 음성을 의미한다. 또한 예문은 ‘엄마’, ‘아빠’, 및 ‘앉아’등의 쉬운 단어로 구성될 수 있다.
In addition, verbal reinforcement sound means a voice composed of 'well done', 'right' and 'yes' provided for verbal reinforcement during the reinforcement provided in the horse perception test. Examples can also be composed of simple words such as 'mom', 'dad', and 'sitting'.

상기 코스웨어 데이터 저장부(42)는 클로즈드-셋(Closed-set) 및 오픈-셋(Open-set) 검사를 포함한 말지각 검사에 필요한 모든 화면, 즉 디스플레이 정보를 저장한다. 특히 말지각 검사에 제공되는 강화 중 시각 강화에 제공되는 모든 동영상 또는 화면 또는 이들의 조합으로 이루어진 시각적 데이터를 저장한다. 상기 코스웨어는 유아들이 말소리 자극에 보다 잘 집중하고 신뢰할 수 있는 반응을 산출하도록 하기 위해 애니메이션 형태의 그림 자극 등으로 이루어진 것으로서, 유아들을 대상으로 유아의 연령에 맞는 문장 표현의 의미와 표상간의 관계를 도출하기 위해 유아들의 반응에 근거하여 문장을 더 잘 표상하도록 구성된 것이다. The courseware data storage unit 42 stores all the screens, i.e., display information, necessary for the male perception test including the closed-set and the open-set tests. In particular, among the reinforcement provided for the late perception test, the visual data made up of all moving pictures or screens provided for visual reinforcement or a combination thereof are stored. The courseware is composed of animated stimuli in order to encourage children to concentrate more on speech stimulation and to produce a reliable response. The relationship between the meaning and representation of sentence expressions appropriate to the age of the infant is investigated. It is designed to better represent sentences based on children's responses to derive.

도 2는 코스웨어 데이터의 일 실시예를 나타낸 것으로서, ①은 하기할 예문에 사용되는 ‘엄마’를 나타내는 코스웨어로서 엄마가 반짝이며 진해지고 아이들은 흐려지며, ②는 검사음 C세트 5번 문항 ‘밥 먹어’에 사용되는 코스웨어로서 숟가락이 입 가까이 올라갔다 내려가고, ③은 검사음 C세트 3번 문항 ‘바이바이’에 사용되는 코스웨어로서 손이 좌우로 흔들리는 애니메이션을 도시하고 있다. 이 또한 반드시 이에 국한된 것은 아니고 시각 강화의 규칙을 따르는 모든 실시예를 추가할 수 있음을 밝힌다.
FIG. 2 shows an embodiment of courseware data. In FIG. 2, the courseware indicates 'mother' used in the following examples. The mother is shiny and bright and the children are blurred. As a courseware used for 'eating rice', the spoon moves up and down near the mouth, and ③ is a courseware used for the check sound C set item 3 'Bai Bai'. The animation shows the hand shaking to the left and right. It is also to be understood that this is not necessarily the case and that all embodiments conforming to the rules of visual enhancement may be added.

상기 검사 데이터 저장부(43)는 클로즈드-셋(Closed-set) 검사 결과 검사자에 의하여 입력되는 정/오답 정보를 제어처리부(80)를 통하여 입력 받아 저장하고, 오픈-셋(Open-set) 검사시 피검자가 따라 말한 소리, 즉 응답음을 바탕으로 검사자에 의하여 입력되는 모든 정/오답 정보와 피검자의 모든 응답음을 입력받아 저장하도록 구성될 수 있다.
The inspection data storage unit 43 receives the correct / incorrect information input by the inspector as a result of the closed-set inspection through the control processing unit 80, and stores the open-set inspection. In response to the sound spoken by the examinee, that is, the response sound, it may be configured to receive and store all the correct / incorrect information input by the examiner and all the response sounds of the examinee.

상기 피검자 입력부(50)는 검사음 출력부(61)를 통해 출력된 검사음 및 화면 표시부을 통해 출력된 화면에 대한 피검자의 응답을 입력받아 제어처리부(80)로 전달하는 것으로, 통상의 기계적 버튼뿐만 아니라 키패드, 터치패드 또는 터치스크린을 포함할 수 있다.
The examinee input unit 50 receives a test sound outputted through the test sound output unit 61 and a response of the examinee about the screen output through the screen display unit and transmits the response to the control processing unit 80. The normal mechanical button But may include a keypad, touchpad, or touch screen.

상기 검사음 출력부(61)는 검사음 데이터 저장부(41)에 의해 저장된 검사 주파수와 검사음압에 해당하는 검사음을 출력한다. 즉, 클로즈드-셋(Closed-set) 검사 및 오픈-셋(Open-set) 검사를 위한 문장세트를 출력한다.
The inspection sound output unit 61 outputs an inspection sound corresponding to the inspection frequency and the inspection sound pressure stored by the inspection sound data storage unit 41. That is, a statement set for closed-set inspection and open-set inspection is output.

상기 구두 강화 출력부(62)는 검사음 데이터 저장부(41)에 의해 저장된 구두 강화 사운드를 출력한다. The shoe reinforcement output unit 62 outputs the shoe reinforcement sound stored by the test tone data storage unit 41.

상기 검사음 출력부(61)와 구두 강화 출력부(62)는 사운드 출력부(60)를 이루며, 상기 사운드 출력부(60)는 상기 제어처리부(80)로부터 입력되는 디지털 신호 즉, 검사음을 아날로그 신호로 변환하여 스피커, 리시버 또는 이어폰으로 출력하는 컨버터를 포함할 수 있다.
The test sound output unit 61 and the shoe reinforcement output unit 62 form a sound output unit 60, and the sound output unit 60 is a digital signal input from the control processor 80, that is, the test sound. It may include a converter that converts the analog signal and outputs to the speaker, receiver or earphone.

상기 화면 출력부(70)는 코스웨어 데이터 저장부(42)에 저장되어 있는 코스웨어를 화면에 표시하는 것으로서, 클로즈드-셋(Closed-set) 및 오픈-셋(Open-set) 검사를 위한 화면 또는 동영상을 출력한다. 화면 표시부는 통상의 디스플레이가 사용될 수 있다.
The screen output unit 70 displays a courseware stored in the courseware data storage unit 42 and displays a screen for a closed-set and an open- Or video. A normal display can be used for the screen display portion.

본 발명은 응답음 입력부(미도시)가 더 구비될 수 있으며, 상기 응답음 입력부는 말지각 검사시 피검자가 따라 말하는 음성, 즉 아날로그신호로 된 응답음을 디지털로 변환하여 제어처리부(80)에 전달하는 것으로서, 여기에는 통상의 마이크가 사용될 수 있다.
The response sound input unit may further include a response sound input unit (not shown). The response sound input unit converts the sound of the subject, that is, Which may be a conventional microphone.

상기 제어처리부(80)는 말지각 검사 장치의 각종 입력부로부터 입력되는 신호에 따라 모든 프로세스를 제어 및 처리하는 부분으로서, 구체적으로, 검사자 입력부(20)를 통해 입력되는 검사관련 정보에 따라 해당 검사음, 구두 및 시각 강화 데이터를 저장부로부터 호출하여 사운드 출력부(60)와 화면 출력부(70)로 출력하고, 피검자 입력부(50)에 입력되는 신호에 따른 데이터를 저장부에 저장하거나 검사자 출력부(30)로 전달하는 기능을 수행한다.
The control processing unit 80 is a part for controlling and processing all processes according to signals input from various input units of the late perceptual test apparatus, and specifically, the test sound according to the test related information input through the tester input unit 20. , The oral and visual enhancement data is called from the storage unit and output to the sound output unit 60 and the screen output unit 70, and the data according to the signal input to the subject input unit 50 is stored in the storage unit or the examiner output unit Perform the function of passing to 30.

상기 제어처리부(80)에는 음압 결정수단이 구비되는데, 상기 음압 결정수단은 검사음 주파수 및 음압을 결정하기 위한 수단으로 청력역치 검사부(10)로부터 측정된 청력역치에서 40dB SL 높은 값으로 결정하여 검사음 데이터 저장부(41)에 저장한다. 이는 일반적인 대화음의 강도가 정상청력역치로부터 30 - 40dBSL에 위치하는 것에 근거하는 것임을 밝힌다.
The control processing unit 80 is provided with sound pressure determination means which determines the sound pressure frequency and the sound pressure to be 40 dB SL higher than the hearing threshold value measured by the hearing threshold value checking unit 10, And stores it in the sound data storage unit 41. This suggests that the intensity of the general audible tone is based on the location of 30 to 40 dBL from the normal hearing threshold.

상기 제어처리부(80)는 상기 검사자 입력부(20)로부터 입력된 강화방법이 시각 강화를 포함하는 경우에 상기 검사음 데이터 저장부(41)에 저장된 문장세트의 목표문장을 호출하여 검사음 출력부(61)를 통해 출력함과 동시에 코스웨어 데이터 저장부(42)에 저장된 코스웨어 중 목표문장과 대응되는 디스플레이 정보를 호출하여 화면 출력부(70)에 출력하도록 구성된다.The control processing unit 80 calls the target sentence of the sentence set stored in the test sound data storage unit 41 when the strengthening method input from the tester input unit 20 includes visual enhancement. The display information corresponding to the target sentence of the courseware stored in the courseware data storage 42 and the output through the 61) is called and output to the screen output unit 70.

여기서, 상기 목표문장과 대응되는 디스플레이 정보는 동작화면으로 이루어지고, 상기 동작화면은 화면이 전환되는 플래쉬 형태로 1초에서 10초까지 조정할 수 있다. 이와 같이 짧은 시간에 제공되는 플래쉬 형태로 한 것은 강화의 길이가 짧을수록 강화의 효과가 뛰어나기 때문이다.
Here, the display information corresponding to the target sentence is composed of an operation screen, and the operation screen can be adjusted from 1 second to 10 seconds in a flash form in which the screen is switched. The flash type provided in such a short time is that the shorter the reinforcing length, the more effective the reinforcing effect.

또한, 상기 제어처리부(80)는 상기 검사자 입력부(20)로부터 입력된 강화방법이 구두 강화를 포함하는 경우에 말지각 검사시에 상기 검사음 데이터 저장부(41)에 저장된 문장세트의 목표문장을 호출하여 검사음 출력부(61)를 통해 출력한 후에 피검자가 목표문장을 포함한 반응을 산출했을 때, 정/오답 여부에 따라 검사자가 검사자 입력부(20)를 통해 입력하는 데이터에 따라 코스웨어 데이터 저장부(42)에 저장된 코스웨어 중 대응되는 구두강화 사운드를 호출하여 구두 강화 출력부(62)로 출력하도록 구성된다.
In addition, the control processing unit 80 may output the target sentence of the sentence set stored in the test sound data storage unit 41 during the late perception test when the reinforcement method input from the examiner input unit 20 includes verbal reinforcement. When the subject calculates a response including a target sentence after outputting the test sound through the test tone output unit 61, the courseware data is stored according to the data input by the tester through the tester input unit 20 according to whether the tester inputs the correct sentence or not. It is configured to call the corresponding shoe reinforcement sound among the courseware stored in the unit 42 and output the same to the shoe reinforcement output unit 62.

상기 제어처리부(80)는 피검자가 오답을 산출하여도 10개의 검사문항을 모두 시행하도록 하나, 피검자가 3회 연속으로 무응답 오답을 산출하였을 때, 말지각 검사를 중단하도록 구성되는데, 이는 3회 연속으로 무응답할 경우 오답이 발생되는 경우에는 말지각 검사의 수행이 무의미하기 때문이다.
The control processor 80 is configured to perform all of the 10 test items even if the examinee calculates an incorrect answer. However, when the examinee calculates the non-response answering three times in a row, , And it is meaningless to carry out the test of verbal perception when an incorrect answer occurs.

또한, 상기 제어처리부(80)는 검사 결과 중 오답으로 체크된 것을 제외하고 정답으로 체크된 문장만으로 새로운 문장세트를 구성하여 검사 데이터 저장부(43)에 저장하도록 구성된다.
In addition, the control processing unit 80 is configured to construct a new set of sentences only by the sentences checked with the correct answer except for being checked as the wrong answer among the test results and to store them in the test data storage unit 43.

이하, 본 발명에 따른 말지각 검사 장치를 이용한 말지각 검사방법의 일 실시예를 구체적으로 설명하도록 한다.
Hereinafter, an embodiment of a method for inspecting a horse's perception using the horse's perception inspection apparatus according to the present invention will be described in detail.

도 3 및 도 4는 본 발명에 따른 말지각 검사 장치를 이용한 말지각 검사과정의 일 실시예를 도시한 전체 흐름도이다.
3 and 4 are an overall flowchart showing an embodiment of a late perception test process using a perceptual test device according to the present invention.

본 발명에 따른 말지각 검사 장치를 이용한 검사방법은 통상의 방음실에서 주검사자가 자극을 본 장치를 통해 제시하고 보조검사자는 피검자인 아동과 함께 방음실에 들어가서 검사를 보조하도록 함으로써 달성된다. 이때 아동의 분리 능력에 따라 보호자가 필요한 경우 함께 입실하여 검사를 진행하며 어떠한 경우에도 보호자는 아동에게 검사와 관련된 정보를 제공하지 않도록 한다.
The inspection method using a horse's perception testing apparatus according to the present invention is achieved by providing a main singer with a stimulus through a device in a normal soundproof room and a supplementary inspector to enter the soundproof room together with the child to assist the inspection. At this time, if the guardian is necessary according to the separation ability of the child, the guardian is required to enter the room together to conduct the inspection. In any case, the guardian should not provide the child with information related to the inspection.

먼저 아동이 방음실에 입실하게 되면 S1단계에서는 주검사자가 연령 및 성별 등 검사 관련 정보를 검사자 입력부(20)를 통해 입력하고 S2단계에서 청력역치 검사부(10)를 통해 청력역치 테스트를 실시한다. When the child enters the soundproof room, in step S1, the main examinee inputs test-related information such as age and gender through the tester input unit 20, and performs a hearing threshold test through the hearing threshold value checking unit 10 in step S2.

S2단계에서 측정된 청력역치를 바탕으로 제어처리부(80)는 말지각 검사의 진행여부를 결정하게 되는데, 이때 검사를 계속 진행할 수 없을 정도의 청능으로 판정되면 청력 손실정도 및 유형을 검사자 출력부(30)를 통해 출력하면서 검사를 종료하게 되고, 검사를 계속 진행할 수 있을 정도의 청능으로 판정되면 S3단계에서 그 청력역치 및 검사음압을 검사자 출력부(30)를 통해 출력하면서 검사를 진행한다. 이때 청력에 손실이 있는 경우 보청기기(보청기나 인공와우 등)를 사용한 청력역치를 산출하도록 한다.
The control processor 80 determines whether or not the speech perception test is proceeded based on the hearing threshold value measured in step S2. If the auditory perception level is determined to be such a level that the examination can not be continued at this time, 30). If it is determined that the test is audible to continue the test, the test is performed while outputting the hearing threshold value and the sound pressure of the test through the tester output unit 30 in step S3. If there is a loss of hearing, calculate the hearing threshold using a hearing aid (such as a hearing aid or cochlear implant).

S4단계에서부터 클로즈드-셋(Closed-set) 검사가 실시되는데, 검사음 데이터 저장부(41)에 저장된 예문을 검사음 출력부(61)를 통해 출력하면서 장치의 정상 작동여부 확인 및 피검자의 적응을 돕도록 한다.Closed-set inspection is performed from step S4. A check sound output unit 61 outputs an example sentence stored in the inspection sound data storage unit 41 to check whether the apparatus is operating normally, Help.

예문으로는 엄마, 아빠, 앉아 등의 간단한 단어로 함이 바람직하며, 출력된 예문에 대해 3회 연속해서 손으로 가리키는 반응이 없을 경우 보조검사자 또는 보호자가 검사반응의 모델을 보이도록 하며, 모델을 제공할 때에도 아동이 전혀 반응을 보이지 않는 경우 검사를 중단함이 바람직하다.
For example, it is preferable to use simple words such as mom, dad, and sitting, and if there is no reaction by hand for three consecutive times in the output sentence example, It is desirable to stop the test if the child does not show any response at all.

계속해서 S5단계에서는 검사자 입력부(20), 즉 터치스크린 등의 화면이나 구비된 버튼을 누름으로써 검사음 데이터 저장부(41)에 저장된 문장세트의 목표문장이 제어처리부(80)에 의해 호출되어 검사음 출력부(61)를 통해 출력됨과 동시에 코스웨어 데이터 저장부(42)에 저장된 코스웨어 중 목표문장과 매칭되는 코스웨어를 포함하는 3개의 화면(총 4개의 화면)을 정지화면으로 화면 출력부(70)에 출력한다. 이때 주검사자 및 보조검사자는 피검자에게 목표문장이 지시하는 내용과 일치하는 화면을 손으로 가리키도록 유도한다. 이때 총 10개 세트로 이루어진 문장세트별로 각 10개씩 총 100개가 순차적으로 진행될 수 있으며 1개 세트 또는 검사 목적에 따라 그 이상의 문장세트를 진행할 수 있다.
Subsequently, in step S5, the target sentence of the sentence set stored in the test sound data storage 41 is pressed by the control processor 80 by pressing a screen or a button such as a tester input unit 20, that is, a touch screen. Sound output unit 61 and at the same time the three screens (four screens in total) including the courseware matching the target sentence of the courseware stored in the courseware data storage 42, the screen output unit Output to 70. At this time, the main inspector and the secondary inspector instruct the subject to point to the screen that matches the contents indicated by the target sentence. In this case, a total of 100 pieces may be sequentially processed, each of 10 pieces for each sentence set consisting of a total of 10 sets, and more than one set of sentences may be processed according to one set or inspection purpose.

계속해서 S6단계에서는 주검사자가 검사자 입력부(20)를 통해 S5단계에서 제시되는 문장 및 화면을 통해 피검자가 가리키는 내용에 따라 정답, 오답으로 해당 버턴을 누르게 되어 정/오답 여부가 입력된다. Subsequently, in step S6, the main examiner presses the corresponding button with the correct answer or the wrong answer according to the content indicated by the examinee through the sentence and the screen presented in step S5 through the examiner input unit 20, and whether the correct or incorrect answer is input.

정답 또는 오답이 입력되는 경우 S7단계에서는 그 내용을 검사 데이터 저장부(43)에 저장하고 클로즈드-셋(Closed-set) 검사를 종료하게 되며, 필요에 따라 휴식 시간을 가지게 된다.
If the correct answer or the wrong answer is inputted, the contents are stored in the test data storage unit 43 in step S7, and the closed-set test is finished.

계속해서 S8단계에서부터는 오픈-셋(Open-set) 검사를 진행하게 되는데, 제어처리부(80)는 오픈-셋(Open-set) 검사를 위한 문장세트를 구성하여 검사 데이터 저장부(43)에 저장하게 된다.Subsequently, from the step S8, an open-set test is performed, and the control processing unit 80 forms a set of sentences for the open-set test to the test data storage unit 43. Will be saved.

여기서, 제어처리부(80)는 S6단계에서 진행되었던 클로즈드-셋(Closed-set) 검사 결과 중 오답으로 체크된 것을 제외하고 정답으로 체크된 문장만으로 새로운 문장세트를 구성하여 검사 데이터 저장부(43)에 저장할 수 있다.
Here, the control processing unit 80 constructs a new set of sentences using only the sentences checked in the correct answer, except that it is checked as an incorrect answer among the closed-set test results that were performed in step S6. Can be stored in

계속해서 S9단계에서는 제어처리부(80)에 의해 검사음 데이터 저장부(41)에 저장된 새로운 문장세트의 목표문장이 호출되어 검사음 출력부(61)를 통해 출력됨과 동시에 코스웨어 데이터 저장부(42)에 저장된 코스웨어 중 목표문장과 매칭되는 시각 강화 정보가 호출되어 화면 출력부(70)에 출력한다. 이때 주검사자 및 보조검사자는 피검자에게 목표문장을 들리는 데로 따라 말하도록 유도한다.
Subsequently, in step S9, the target sentence of the new sentence set stored in the test sound data storage unit 41 is called by the control processing unit 80 and output through the test sound output unit 61 and the courseware data storage unit 42 at the same time. ) Visual enhancement information matching the target sentence of the courseware stored in the call is output to the screen output unit (70). At this time, the main examiner and the assistant inspector are encouraged to speak according to the target sentence.

이어서 S10단계에서는 피검자가 따라 말한 소리, 즉 응답음에 대해 검사자에 의한 정/오답 여부가 검사자 입력부(20)를 통해 입력되고, 또한 이 단계에서는 제어처리부(80)는 피검자의 응답음을 피검자 입력부(50)로부터 전달받아 검사 데이터 저장부(43)에 저장하게 되고, 만일 응답음 입력부로부터 입력이 없을 때는 동일한 목표문장 및 시각 강화를 반복하되 3회를 초과하여 응답음 입력부로부터 입력이 없을 경우 해당 검사를 종료한다.
Subsequently, in step S10, whether or not a correct answer or a wrong answer by the examiner is input to the sound spoken by the examinee through the examiner input unit 20, and in this stage, the control processor 80 receives the response sound of the examinee. Received from the (50) and stored in the test data storage unit 43, if there is no input from the response tone input unit repeats the same target sentence and time enhancement, but if there is no input from the response tone input unit more than three times End the test.

S11단계에서는 상기 S10까지의 검사결과를 검사자 출력부(30)를 통해 화면 및 프린터로 출력하면서 검사를 종료한다.
In step S11, the inspection result is output to the screen and the printer through the inspector output unit 30, and the inspection is terminated.

이하 본 발명에 따른 말지각 검사 장치를 이용한 검사방법의 또 다른 실시예에 대해 구체적으로 설명하도록 한다.
Hereinafter, another embodiment of the inspection method using the horse's perception inspection apparatus according to the present invention will be described in detail.

본 발명에 따른 말지각 검사 장치를 이용한 검사방법의 또 다른 실시예는 청력역치 검사 후에 오픈-셋(Open-set) 검사를 먼저 수행한 후에 오픈-셋(Open-set) 검사의 수행이 불가능하다고 판단될 경우에 클로즈드-셋(Closed-set) 검사를 수행하는 과정으로 이루어지는데, 따라서, S1단계 --> S2단계 --> S3단계(청력역치검사) --> S8단계 --> S9단계 --> S10단계(오픈-셋 검사) --> S4단계 --> S5단계 --> S6단계 --> S7단계(클로즈드-셋 검사)의 순으로 검사가 이루어진다.
Yet another embodiment of the test method using the speech perception testing apparatus according to the present invention is that an open-set test can not be performed after the open-set test is first performed after the hearing threshold test (S2) -> S3 (Hearing Threshold Test) -> S8 -> S9 (S12). In this case, The test is performed in the order of S10 step (open-set inspection) -> S4 step -> S5 step -> S6 step -> S7 step (closed-set inspection)

10: 청력역치 검사부
20: 검사자 입력부
30: 검사자 출력부
40: 저장부 41: 검사음 데이터 저장부
42: 코스웨어 데이터 저장부 43: 검사 데이터 저장부
50: 피검자 입력부
60: 사운드 출력부 61: 검사음 출력부
62: 구두 강화 출력부
70: 화면 출력부 71: 시각 강화 출력부
80: 제어처리부
10: Hearing threshold
20: Inspector input unit
30: Inspector output section
40: storage unit 41: test sound data storage unit
42: courseware data storage unit 43: inspection data storage unit
50:
60: sound output unit 61: test sound output unit
62: shoe reinforced output unit
70: Screen output unit 71: Time enhancement output unit
80:

Claims (7)

피검자의 청력역치 측정을 위한 청력역치 검사부,
검사방법, 검사세트, 강화방법, 정/오답 정보와 같은 검사관련 정보를 입력하는 검사자 입력부,
말지각 검사에 필요한 검사음을 저장하는 검사음 데이터 저장부 및 말지각 검사에 필요한 디스플레이 정보를 저장하는 코스웨어 데이터 저장부를 구비하는 저장부,
피검자의 응답을 입력받는 피검자 입력부,
마지각 검사를 위한 검사음을 출력하는 검사음 출력부 및 구두 강화을 위한 사운드를 출력하는 구두 강화 출력부를 구비하는 사운드 출력부,
시각 강화를 위한 디스플레이 정보를 출력하는 화면 출력부 및
검사자 입력부를 통해 입력되는 검사관련 정보에 따라 선택된 검사방법, 검사세트, 구두 및 시각강화 데이터를 저장부로부터 호출하여 상기 사운드 출력부와 화면 출력부에 출력하도록 제어하는 제어처리부를 포함하여 구성되며,

상기 제어처리부는,
상기 검사자 입력부로부터 입력된 강화방법이 시각 강화를 포함하는 경우에 상기 검사음 데이터 저장부에 저장된 문장세트의 목표문장을 호출하여 검사음 출력부를 통해 출력함과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 대응되는 디스플레이 정보를 호출하여 화면 출력부에 출력하도록 구성되되,
상기 목표문장과 대응되는 디스플레이 정보는 동작화면으로 이루어지고, 상기 동작화면은 화면이 전환되는 플래쉬 형태로 1초에서 10초까지 제공되는 것을 특징으로 하는
말지각 검사 장치
A hearing threshold detector for measuring the hearing threshold of the subject,
An inspector input unit for inputting inspection related information such as an inspection method, an inspection set, a strengthening method, and correct / incorrect information;
A storage unit for storing an inspection sound data storage unit for storing inspection sounds necessary for the perceptual inspection and a courseware data storage unit for storing display information necessary for the perceptual inspection,
A subject input unit receiving a response of the subject,
A sound output unit including a test sound output unit for outputting a test sound for the final perception test and a shoe reinforcement output unit for outputting a sound for shoe reinforcement;
A screen output unit for outputting display information for time enhancement and
And a control processing unit which controls to output the sound output unit and the screen output unit by calling the selected test method, test set, verbal and visual enhancement data from the storage unit according to the test related information input through the tester input unit.

The control processing unit,
If the method of reinforcement inputted from the examiner input unit includes visual reinforcement, the target sentence of the sentence set stored in the test sound data storage unit is called and output through the test sound output unit and the courseware stored in the courseware data storage unit. The display information corresponding to the target sentence of the call is configured to output to the screen output,
Wherein the display information corresponding to the target sentence is composed of an operation screen, and the operation screen is provided in a flash form in which the screen is switched, from 1 second to 10 seconds
Horse tester
청구항 1에 있어서,
상기 제어처리부는,
상기 검사자 입력부로부터 입력된 강화방법이 구두 강화를 포함하는 경우에 말지각 검사시에 상기 검사음 데이터 저장부에 저장된 문장세트의 목표문장을 호출하여 검사음 출력부를 통해 출력한 후에 피검자가 목표문장을 포함한 반응을 산출했을 때, 정/오답 여부에 따라 검사자가 검사자 입력부를 통해 입력하는 데이터에 따라 코스웨어 데이터 저장부에 저장된 코스웨어 중 대응되는 구두강화 사운드를 호출하여 구두 강화 출력부로 출력하는 것을 특징으로 하는
말지각 검사 장치
The method according to claim 1,
The control processing unit,
If the reinforcement method inputted from the examiner input unit includes verbal reinforcement, the target sentence of the sentence set stored in the test sound data storage unit is called and output through the test sound output unit during the late perception test, and then the examinee outputs the target sentence. When calculating the response included, according to the data input by the examiner according to the correct / incorrect answer, the caller reinforcement sound of the courseware stored in the courseware data storage unit according to the data inputted by the tester output unit characterized in that the output By
Horse tester
청구항 2에 있어서,
상기 제어처리부는 피검자가 3회 연속으로 무응답하였을 때 말지각 검사를 중단하는 것을 특징으로 하는
말지각 검사 장치
The method according to claim 2,
Characterized in that the control processor stops the horse's perception test when the subject does not answer three times in a row
Horse tester
청구항 1 내지 청구항 3 중 어느 하나의 청구항에 기재된 말지각 검사 장치를 이용한 말지각 검사방법에 있어서,
검사 관련 정보를 검사자 입력부를 통해 입력하는 단계,
청력역치 검사부를 통해 청력역치 검사를 하는 단계,
청력역치 및 검사음압을 검사자 출력부를 통해 출력하는 단계,
검사음 데이터 저장부에 저장된 예문을 검사음 출력부를 통해 출력하는 단계,
검사음 데이터 저장부에 저장된 문장세트의 목표문장이 제어처리부에 의해 호출되어 검사음 출력부에 출력됨과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 매칭되는 코스웨어가 화면 출력부에 출력되는 단계,
검사자 입력부를 통해 주검사자가 정/오답 여부를 입력하는 단계 및
입력되는 정/오답 여부를 검사 데이터 저장부에 저장하는 단계를 포함하여 이루어지는 것을 특징으로 하는
말지각 검사 장치를 이용한 말지각 검사방법
A method for inspecting a horse's perception using the horse's perception inspection apparatus according to any one of claims 1 to 3,
Inputting inspection-related information through an inspector input unit,
Performing a hearing threshold test through the hearing threshold test section,
Outputting a hearing threshold value and an inspection sound pressure through an inspector output unit,
Outputting an example sentence stored in the test sound data storage unit through the test sound output unit,
The target sentence of the sentence set stored in the test sound data storage unit is called by the control processing unit and output to the test sound output unit, and the courseware matching the target sentence among the courseware stored in the courseware data storage unit is output to the screen output unit. Step being,
Inputting correct or incorrect answers by the main inspector through the inspector input unit; and
And storing the correct / incorrect input data in the test data storage unit.
Method of testing the horse's perception using a horse's perception system
청구항 4에 있어서,
상기의 입력되는 정/오답 여부를 검사 데이터 저장부에 저장하는 단계 이후에는,
클로즈드-셋(Closed-set) 검사 결과 정답인 문장으로 새로운 문장세트를 구성하여 검사 데이터 저장부에 저장하는 단계,
제어처리부에 의해 검사음 데이터 저장부에 저장된 새로운 문장세트의 목표문장이 호출되어 검사음 출력부를 통해 출력됨과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 매칭되는 시각 강화 정보가 호출되어 화면 출력부에 출력되는 단계,
응답음에 대해 검사자에 의한 정/오답 여부가 검사자 입력부를 통해 입력되고, 또한 제어처리부는 피검자의 응답음을 피검자 입력부로부터 전달받아 검사 데이터 저장부에 저장하는 단계 및
검사결과를 검사자 출력부를 통해 출력하는 단계가 더 구비되는 것을 특징으로 하는
말지각 검사 장치를 이용한 말지각 검사방법
The method of claim 4,
After the step of storing the input correct or incorrect answers to the test data storage unit,
Constructing a new sentence set into a sentence that is a correct answer result of a closed-set test, and storing it in the test data storage unit;
The target sentence of the new sentence set stored in the test sound data storage unit is called by the control processor and output through the test sound output unit, and the visual enhancement information matching the target sentence among the courseware stored in the courseware data storage unit is called and displayed. Output to the output unit,
Whether the answer sound is correct or incorrect by the inspector is input through the inspector input unit, and the control processor receives the response sound from the inspector input unit and stores the response sound from the inspector input unit and stores the inspected sound in the test data storage unit.
And outputting the inspection result through an inspector output unit
Method of testing the horse's perception using a horse's perception system
청구항 1 내지 청구항 3 중 어느 하나의 청구항에 기재된 말지각 검사 장치를 이용한 말지각 검사방법에 있어서,
제어처리부는 오픈-셋(Open-set) 검사를 위한 문장세트를 구성하여 검사 데이터 저장부에 저장하는 단계,
제어처리부에 의해 검사음 데이터 저장부에 저장된 새로운 문장세트의 목표문장이 호출되어 검사음 출력부를 통해 출력됨과 동시에 코스웨어 데이터 저장부에 저장된 코스웨어 중 목표문장과 매칭되는 시각 강화 정보가 호출되어 화면 출력부에 출력되는 단계,
응답음에 대해 검사자에 의한 정/오답 여부가 검사자 입력부를 통해 입력되고, 또한 제어처리부는 피검자의 응답음을 피검자 입력부로부터 전달받아 검사 데이터 저장부에 저장하는 단계 및
검사결과를 검사자 출력부를 통해 출력하는 단계가 더 구비되는 것을 특징으로 하는
말지각 검사 장치를 이용한 말지각 검사방법
A method for inspecting a horse's perception using the horse's perception inspection apparatus according to any one of claims 1 to 3,
The control processor constructs a sentence set for an open-set test and stores the sentence set in the test data storage unit.
The target sentence of the new sentence set stored in the test sound data storage unit is called by the control processor and output through the test sound output unit, and the visual enhancement information matching the target sentence among the courseware stored in the courseware data storage unit is called and displayed. Output to the output unit,
Whether the answer sound is correct or incorrect by the inspector is input through the inspector input unit, and the control processor receives the response sound from the inspector input unit and stores the response sound from the inspector input unit and stores the inspected sound in the test data storage unit.
And outputting the inspection result through an inspector output unit
Method of testing the horse's perception using a horse's perception system
삭제delete
KR1020120125241A 2012-11-07 2012-11-07 Speech perception apparatus and speech perception method using it KR101278330B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120125241A KR101278330B1 (en) 2012-11-07 2012-11-07 Speech perception apparatus and speech perception method using it
PCT/KR2013/009999 WO2014073849A1 (en) 2012-11-07 2013-11-06 Apparatus for testing speech perception, and method for testing speech perception using same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120125241A KR101278330B1 (en) 2012-11-07 2012-11-07 Speech perception apparatus and speech perception method using it

Publications (1)

Publication Number Publication Date
KR101278330B1 true KR101278330B1 (en) 2013-06-24

Family

ID=48867629

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120125241A KR101278330B1 (en) 2012-11-07 2012-11-07 Speech perception apparatus and speech perception method using it

Country Status (1)

Country Link
KR (1) KR101278330B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101420057B1 (en) 2013-06-18 2014-07-15 우송대학교 산학협력단 Speech perception apparatus and speech perception method using it
KR102310542B1 (en) * 2020-06-23 2021-10-07 한림대학교 산학협력단 Apparatus for testing hearing ability using monosyllable and method of the same

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010008660A (en) * 1999-07-02 2001-02-05 심계원 Hearing Test Method Utilizing Internet And It's Program Recorded Media
JP2003102706A (en) * 2001-09-28 2003-04-08 Nidek Co Ltd Hearing test device
KR20080024611A (en) * 2006-09-14 2008-03-19 유메디칼 주식회사 Pure tone audiometer with automated masking

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010008660A (en) * 1999-07-02 2001-02-05 심계원 Hearing Test Method Utilizing Internet And It's Program Recorded Media
JP2003102706A (en) * 2001-09-28 2003-04-08 Nidek Co Ltd Hearing test device
KR20080024611A (en) * 2006-09-14 2008-03-19 유메디칼 주식회사 Pure tone audiometer with automated masking

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101420057B1 (en) 2013-06-18 2014-07-15 우송대학교 산학협력단 Speech perception apparatus and speech perception method using it
KR102310542B1 (en) * 2020-06-23 2021-10-07 한림대학교 산학협력단 Apparatus for testing hearing ability using monosyllable and method of the same

Similar Documents

Publication Publication Date Title
CN111315302B (en) Cognitive function evaluation device, cognitive function evaluation system, cognitive function evaluation method, and program recording medium
US11826161B2 (en) Cognitive function evaluation device, cognitive function evaluation system, cognitive function evaluation method, and non-transitory computer-readable storage medium
Honorof et al. Perception of pitch location within a speaker’s F0 range
US20040152998A1 (en) User interface for automated diagnostic hearing test
Leung et al. Acoustic characteristics of clearly spoken English tense and lax vowels
Lawson et al. Speech audiometry
US11766209B2 (en) Cognitive function evaluation device, cognitive function evaluation system, and cognitive function evaluation method
KR102434912B1 (en) Method and device for improving dysarthria
KR20160126297A (en) System and Method of Auditory Training Applying Mobile Device
Van Zyl et al. Perception of vowels and prosody by cochlear implant recipients in noise
Sevitz et al. Obtaining objective clinical measures during telehealth evaluations of dysarthria
Chiu et al. Predicting intelligibility deficits in Parkinson's disease with perceptual speech ratings
JP6729923B1 (en) Deafness determination device, deafness determination system, computer program, and cognitive function level correction method
Kuo et al. Acoustic and perceptual correlates of faster-than-habitual speech produced by speakers with Parkinson's disease and multiple sclerosis
Nagle et al. Effect of fundamental frequency on judgments of electrolaryngeal speech
Wenrich et al. Segmental and suprasegmental perception in children using hearing aids
KR20170010602A (en) Infants' vocal development evaluation device, and system and method of auditory rehabilitation for infants
KR101278330B1 (en) Speech perception apparatus and speech perception method using it
KR101420057B1 (en) Speech perception apparatus and speech perception method using it
CN111867483A (en) Cognitive function evaluation device, cognitive function evaluation system, cognitive function evaluation method, and program
Klopfenstein Speech naturalness ratings and perceptual correlates of highly natural and unnatural speech in hypokinetic dysarthria secondary to Parkinson's disease
RU2743049C1 (en) Method for pre-medical assessment of the quality of speech recognition and screening audiometry, and a software and hardware complex that implements it
Venail et al. Validation of the French-language version of the OTOSPEECH automated scoring software package for speech audiometry
JP6639857B2 (en) Hearing test apparatus, hearing test method and hearing test program
WO2020208889A1 (en) Cognitive function evaluation device, cognitive function evaluation system, cognitive function evaluation method, and program

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160527

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170609

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee