KR102046856B1

KR102046856B1 - 청각 교육 방법, 컴퓨터 프로그램 및 시스템

Info

Publication number: KR102046856B1
Application number: KR1020180055532A
Authority: KR
Inventors: 지윤상; 홍성화; 문일준; 설혜윤; 박희성
Original assignee: 사회복지법인 삼성생명공익재단; 성균관대학교 산학협력단
Priority date: 2018-05-15
Filing date: 2018-05-15
Publication date: 2019-11-21

Abstract

본 발명의 일 실시예에 따른 청각 콘텐츠 및 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠를 사용자에게 제공하는 청각 교육 시스템은, 상기 시각 콘텐츠가 디스플레이 장치에 표시되도록 제어하고, 상기 청각 콘텐츠가 음향 출력 장치에 출력되도록 상기 디스플레이 장치 및 상기 음향 출력 장치를 제어하는 사용자 단말; 상기 사용자 단말의 제어에 따라 상기 청각 콘텐츠를 출력하는 음향 출력 장치; 상기 사용자 단말의 제어에 따라 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 표시하는 디스플레이 장치; 및 상기 사용자의 학습 콘텐츠 선택에 관한 입력 및 상기 사용자의 상기 학습 콘텐츠에 대한 피드백을 수용하는 입력 장치;를 포함하고, 상기 사용자 단말은 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고, 상기 음향 출력 장치는 상기 사용자 단말이 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력할 수 있다.

Description

청각 교육 방법, 컴퓨터 프로그램 및 시스템{METHOD, COMPUTER PROGRAM AND SYSTEM FOR HEARING EDUCATION}

본 발명은 청각 교육 방법, 컴퓨터 프로그램 및 시스템에 관한 것으로, 청각 콘텐츠 및 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠를 사용자에게 제공하는 청각 교육 방법, 컴퓨터 프로그램 및 시스템에 관한 것이다.

난청이란 청각 기관의 장애로 인해 청력이 저하된 상태를 의미한다. 세계 보건 기구 (World Health Organization, WHO)는 관절염과 고혈압 다음으로 난청을 가장 흔한 질환 중 하나라고 꼽은바 있다. WHO에 따르면 전세계 인구 5% 이상이 난청을 가지고 있으며, 현대에는 개인음향기기와 이어폰/헤드폰 사용의 증가로 소음성 난청을 겪고 있는 사람들이 증가하고 있는 추세이다.

소음성 난청의 경우 예방이 가능한 질환이며 한번 발생하면 회복이 어려우므로 활발한 난청예방 교육이 필요하나 국내에서는 예방교육이 정규 교육과정에서 실시되고 있지 않으며, 난청과 청각학에 대한 인식조차 미미한 수준이므로 난청에 대한 체계적인 예방프로그램과 기술 도입이 시급하다.

한편 난청을 진단받고 청각보조기기 사용이 필요한 경우, 실제로 청각보조기기를 사용해보고 구매하기 어렵기 때문에 자신의 난청에 적합한 청각보조기기를 찾는데 어려움이 있다.

청각보조기기를 이미 사용하고 있는 난청인의 경우에는 청각보조기기 적합 이후에도 꾸준한 미세 조정이 필요한데 현재 보청기 적합이나 미세 조정이 모두 조용한 방음부스나 검사실에서 이루어지다 보니 환자의 실제 생활환경에서의 음질이나 의사소통전략에 대한 교육이 필요하다.

전술한 배경기술은 발명자가 본 발명의 도출을 위해 보유하고 있었거나, 본 발명의 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.

본 발명은 청각 콘텐츠 뿐만 아니라 시각 콘텐츠까지 포함하는 난청 학습 콘텐츠를 사용하여 교육을 수행함으로써, 보다 입체적인 교육이 이루어 지도록 하고자 한다.

특히 난청 시뮬레이션 교육의 경우 난청 환자가 아닌 사람들이 난청 환자가 어떠한 상황에 처해 있는지를 보다 잘 이해할 수 있도록 하고자 하며, 보청기 시뮬레이션 교육의 경우 난청 환자가 자신에게 보다 잘 맞는 보청기를 선택할 수 있도록 하고자 한다.

본 발명의 일 실시예에 따른 청각 콘텐츠 및 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠를 사용자에게 제공하는 청각 교육 시스템은, 상기 시각 콘텐츠가 디스플레이 장치에 표시되도록 제어하고, 상기 청각 콘텐츠가 음향 출력 장치에 출력되도록 상기 디스플레이 장치 및 상기 음향 출력 장치를 제어하는 사용자 단말; 상기 사용자 단말의 제어에 따라 상기 청각 콘텐츠를 출력하는 음향 출력 장치; 상기 사용자 단말의 제어에 따라 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 표시하는 디스플레이 장치; 및 상기 사용자의 학습 콘텐츠 선택에 관한 입력 및 상기 사용자의 상기 학습 콘텐츠에 대한 피드백을 수용하는 입력 장치;를 포함할 수 있다.

이때 상기 사용자 단말은 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고, 상기 음향 출력 장치는 상기 사용자 단말이 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력할 수 있다.

상기 입력 장치가 난청 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우, 상기 사용자 단말은 상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하고, 상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어할 수 있다.

상기 난청 시뮬레이션 학습 콘텐츠는 시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함하고, 상기 사용자 단말은 상기 설정 콘텐츠에 대응한 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고, 상기 음향 출력 장치는 상기 사용자 단말이 상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력할 수 있다.

상기 난청 시뮬레이션 학습 콘텐츠는 복수이고, 상기 복수의 난청 시뮬레이션 학습 콘텐츠는 서로 상이한 환경에 대한 난청 시뮬레이션 청각 콘텐츠 및 난청 시뮬레이션 시각 콘텐츠를 포함하고, 상기 환경은 길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나일 수 있다.

상기 입력 장치가 보청기 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우, 상기 사용자 단말은 상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하고, 상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어할 수 있다.

상기 보청기 시뮬레이션 학습 콘텐츠는 시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함하고, 상기 사용자 단말은 상기 보청기 선택 콘텐츠에 대응한 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고, 상기 음향 출력 장치는 상기 사용자 단말이 상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력할 수 있다.

상기 보청기 시뮬레이션 학습 콘텐츠는 복수이고, 상기 복수의 보청기 시뮬레이션 학습 콘텐츠는 서로 상이한 환경에 대한 보청기 시뮬레이션 청각 콘텐츠 및 보청기 시뮬레이션 시각 콘텐츠를 포함하고, 상기 환경은 길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나일 수 있다.

상기 적어도 하나의 속성값은 난청 보상 정도에 관한 속성값, 피드백 음향 포함 정도에 관한 속성값, 잡음 포함 정도에 관한 속성값, 빔-포밍에 방향에 관한 속성값 및 음성 강조 정도에 관한 속성값 중 적어도 하나일 수 있다.

본 발명의 일 실시예에 따른 청각 콘텐츠 및 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠를 사용자에게 제공하는 청각 교육 방법은, 상기 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득하는 학습 콘텐츠 선택 단계; 상기 선택된 난청 학습 콘텐츠에 포함되는 시각 콘텐츠를 표시하도록 디스플레이 장치를 제어하고, 상기 선택된 난청 학습 콘텐츠에 포함되는 청각 콘텐츠를 출력하도록 음향 출력 장치를 제어하는 학습 콘텐츠 출력 단계; 상기 사용자의 상기 난청 학습 콘텐츠에 대한 피드백을 수용하는 피드백 수용 단계; 상기 사용자의 상기 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하는 속성값 결정 단계; 및 상기 음향 출력 장치가 상기 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하도록 상기 음향 출력 장치를 제어하는 음향 출력 장치 제어 단계;를 포함할 수 있다.

상기 학습 콘텐츠 선택 단계에서 난청 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우, 상기 학습 콘텐츠 출력 단계는 상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하는 단계; 및 상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어하는 단계;를 포함할 수 있다.

상기 난청 시뮬레이션 학습 콘텐츠는 시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함하고, 상기 피드백 수용 단계는 상기 설정 콘텐츠에 대응한 상기 사용자의 피드백을 수용하고, 상기 속성값 결정 단계는 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고, 상기 음향 출력 장치 제어 단계는 상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하도록 상기 음향 출력 장치를 제어할 수 있다.

상기 학습 콘텐츠 선택 단계에서 보청기 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우, 상기 학습 콘텐츠 출력 단계는 상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하는 단계; 및 상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어하는 단계;를 포함할 수 있다.

상기 보청기 시뮬레이션 학습 콘텐츠는 시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함하고, 상기 피드백 수용 단계는 상기 보청기 선택 콘텐츠에 대응한 상기 사용자의 피드백을 수용하고, 상기 속성값 결정 단계는 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고, 상기 음향 출력 장치 제어 단계는 상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하도록 상기 음향 출력 장치를 제어할 수 있다.

본 발명에 의하면 청각 콘텐츠 뿐만 아니라 시각 콘텐츠까지 포함하는 난청 학습 콘텐츠를 사용하여 교육을 수행함으로써, 보다 입체적인 교육이 이루어 질 수 있다.

특히 난청 시뮬레이션 교육의 경우 난청 환자가 아닌 사람들이 난청 환자가 어떠한 상황에 처해 있는지를 보다 잘 이해할 수 있도록 할 수 있으며, 보청기 시뮬레이션 교육의 경우 난청 환자가 자신에게 보다 잘 맞는 보청기를 선택하도록 할 수 있다.

도 1은 본 발명의 일 실시예에 따른 청각 교육 시스템의 구성을 개략적으로 도시한다.
도 2는 사용자의 학습 콘텐츠 선택에 관한 입력을 획득하기 위한 화면의 예시이다.
도 3은 난청 학습 콘텐츠가 '이동수단의 내부 환경인 경우'에 대한 것으로, 난청 학습 콘텐츠와 함께 다양한 항목의 설정을 위한 설정 콘텐츠가 표시된 화면의 예시이다.
도 4는 난청 학습 콘텐츠가 '화자가 소정의 위치에 고정된 환경인 경우'에 대한 것으로, 난청 학습 콘텐츠와 함께 체험해보고자 하는 보청기의 선택을 위한 보청기 시뮬레이션 학습 콘텐츠가 표시된 화면의 예시이다.
도 5는 본 발명의 일 실시예에 따른 사용자 단말에 의해 수행되는 청각 교육 방법을 설명하기 위한 흐름도이다.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.

도 1은 본 발명의 일 실시예에 따른 청각 교육 시스템의 구성을 개략적으로 도시한다.

본 발명의 일 실시예에 따른 청각 교육 시스템은 청각 콘텐츠 및 청각 콘텐츠와 유기적으로 결부(結付)된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠에 기초하여 난청 시뮬레이션을 비롯한 다양한 청각 교육을 수행할 수 있다. 이를 위하여 본 발명의 일 실시예에 따른 청각 교육 시스템은 사용자 단말(100), 음향 출력 장치(200), 디스플레이 장치(300) 및 입력 장치(400)를 포함할 수 있다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 난청 학습 콘텐츠를 음향 출력 장치(200) 및 디스플레이 장치(300)에 제공하고, 입력 장치(400)를 통해 난청 학습 콘텐츠에 대한 사용자의 피드백을 수용하여 음향 출력 장치(200)의 하나 이상의 속성값을 변경함으로써 청각 교육을 수행할 수 있다.

이러한 본 발명의 일 실시예에 따른 사용자 단말(100)은 메모리, 프로세서, 통신 모듈 그리고 입출력 인터페이스를 포함할 수 있다.

메모리는 컴퓨터에서 판독 가능한 기록 매체로서, RAM(Random Access Memory), ROM(Read Only Memory) 및 디스크 드라이브와 같은 비소멸성 대용량 기록장치(Permanent Mass Storage Device)를 포함할 수 있다. 또한, 메모리에는 운영체제와 적어도 하나의 프로그램 코드가 저장될 수 있다.

프로그램 코드는 드라이브 메커니즘(Drive Mechanism)을 이용하여 메모리와는 별도의, 컴퓨터에서 판독 가능한 기록 매체로부터 로딩될 수 있다. 이때 별도의 컴퓨터에서 판독 가능한 기록 매체는 플로피 드라이브, 디스크, 테이프, DVD/CD-ROM 드라이브, 메모리 카드 등의 컴퓨터에서 판독 가능한 기록 매체를 포함할 수 있다.

다른 실시예에서 프로그램 코드는 컴퓨터에서 판독 가능한 기록 매체가 아닌 통신 모듈을 통해 메모리에 로딩될 수도 있다. 예를 들어, 프로그램 코드는 개발자들 또는 어플리케이션의 설치 파일을 배포하는 파일 배포 시스템이 통신망을 통해 제공하는 파일들에 의해 설치되는 프로그램에 기반하여 메모리에 로딩될 수 있다.

프로세서는 기본적인 산술, 로직 및 입출력 연산을 수행함으로써, 컴퓨터 프로그램의 명령을 처리하도록 구성될 수 있다. 명령은 메모리 또는 통신 모듈에 의해 프로세서로 제공될 수 있다. 예를 들어 프로세서는 메모리와 같은 기록 장치에 저장된 프로그램 코드에 따라 수신되는 명령을 실행하도록 구성될 수 있다.

통신 모듈은 사용자 단말(100)과 연동하여 동작하는 다양한 장치와 서로 통신하기 위한 기능을 제공할 수 있다. 일례로, 통신 모듈은 사용자 단말(100)이 디스플레이 장치(300) 및/또는 음향 출력 장치(200)에 난청 학습 콘텐츠를 제공하기 위한 기능을 제공할 수 있다.

입출력 인터페이스는 입출력 장치와의 인터페이스를 위한 수단일 수 있다. 이때 입력 장치는 예를 들어 키보드 또는 마우스 등의 장치를 포함할 수 있다. 또한 출력 장치는 어플리케이션의 통신 세션을 표시하기 위한 디스플레이와 같은 장치를 포함할 수 있다. 다른 예로 입출력 인터페이스는 터치스크린과 같이 입력과 출력을 위한 기능이 하나로 통합된 장치와의 인터페이스를 위한 수단일 수도 있다. 또한, 다른 실시예에서 사용자 단말(100)은 전술한 구성요소들보다 더 많은 구성요소들을 포함할 수도 있다. 이와 같은 사용자 단말(100)은 휴대용 단말(101)일 수도 있고 퍼스널 컴퓨터(102)일 수도 있다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 난청 학습 콘텐츠를 음향 출력 장치(200) 및 디스플레이 장치(300)에 제공할 수 있다.

본 발명에서 '난청 학습 콘텐츠'는 사용자에게 난청과 관련된 청각적, 시각적 상황을 학습시키기 위한 콘텐츠로, 청각 콘텐츠 및 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 콘텐츠일 수 있다.

가령 난청 학습 콘텐츠는 난청 환자가 아닌 사람이 난청 환자가 어떻게 소리를 감지하는지를 체험할 수 있도록 하는 난청 시뮬레이션 학습 콘텐츠 일 수 있다. 이러한 난청 시뮬레이션 학습 콘텐츠의 경우 시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함할 수 있다. 사용자 단말(100)은 상술한 설정 콘텐츠에 대응한 사용자의 피드백(가령 난청의 정도나 난청의 유형 등을 조절하는 사용자의 입력)에 기초하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하고, 이를 음향 출력 장치(200)에 전송할 수 있다. 이때 음향 출력 장치(200)는 사용자 단말(100)이 결정한 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력할 수 있다.

한편 난청 학습 콘텐츠는 난청 환자가 보청기를 구입하기 이전에, 다양한 보청기를 체험해 볼 수 있도록 하는 보청기 시뮬레이션 학습 콘텐츠일 수 있다. 이러한 보청기 시뮬레이션 학습 콘텐츠의 경우 시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함할 수 있다. 사용자 단말(100)은 상술한 보청기 선택 콘텐츠에 대응한 사용자의 피드백(가령 특정 보청기를 선택하는 사용자의 입력)에 기초하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하여 음향 출력 장치(200)에 전송할 수 있다. 이때 음향 출력 장치(200)는 사용자 단말(100)이 결정한 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력할 수 있다.

선택적 실시예에서, 사용자 단말(100)은 사용자의 피드백에 기초하여 청각 콘텐츠를 변조하고, 음향 출력 장치(200)가 변조된 청각 콘텐츠를 출력하도록 제어할 수도 있다. 바꾸어 말하면, 변조의 주체는 사용자 단말(100)일 수도 있고, 음향 출력 장치(200)일 수도 있다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득하고, 사용자가 선택한 난청 학습 콘텐츠를 음향 출력 장치(200) 및 디스플레이 장치(300)에 제공할 수 있다. 바꾸어 말하면, 사용자는 복수의 난청 학습 콘텐츠 중에서 자신이 학습하고자 하는 콘텐츠를 선택할 수 있다.

사용자 단말(100)은 상술한 과정에 따라 조절된 적어도 하나의 속성값을 표시하는 영상을 디스플레이 장치(300)로 출력할 수 있다. 이때 속성값을 표시하는 영상은 난청 학습 콘텐츠 상에 표시될 수도 있고, 난청 학습 콘텐츠에 갈음하여 표시될 수도 있다.

한편 전술한 난청 학습 콘텐츠는 복수로, 다양한 환경에 대한 청각 콘텐츠 및 시각 콘텐츠를 포함할 수 있다. 가령 난청 학습 콘텐츠는 길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나의 환경에 대한 콘텐츠 일 수 있다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 난청 학습 콘텐츠를 통해 난청 환자가 아닌 사람에게는 난청 환자를 이해하는 계기를 마련할 수 있으며, 난청 환자에게는 적합한 보청기를 찾을 수 있도록 할 수 있다.

본 발명의 일 실시예에 따른 음향 출력 장치(200)은 사용자가 주변의 음향을 더욱 잘 들을 수 있도록, 획득된 주변 음향을 적절하게 처리하고 이를 사용자의 청신경계로 제공하는 다양한 장치를 의미할 수 있다. 가령 음향 출력 장치(200)는 청력이 저하 또는 손실된 상태의 사용자에게 주변 음향을 증폭시켜 전달하는 장치를 의미할 수 있다. 이러한 경우 음향 출력 장치(200)는 복수개의 속성값(또는 속성 파라미터)에 의해 음향 출력 특성이 달라질 수 있다. 이때 속성값은 사용자 단말(100)이 사용자의 피드백에 기초하여 결정한 것 일 수 있다. 바꾸어 말하면 본 발명의 일 실시예에 따른 음향 출력 장치(200)는 사용자의 피드백에 기초하여 사용자에게 보다 적합한 형태로 청각 콘텐츠를 변조하여 출력할 수 있다.

한편 본 발명의 일 실시예에 따른 음향 출력 장치(200)는 사용자 단말(100)로부터 청각 콘텐츠를 수신하고, 이를 사용자의 청신경계로 전달하는 장치를 의미할 수도 있다. 바꾸어 말하면, 음향 출력 장치(200)는 사용자 단말(100)의 제어에 따라 난청 학습 콘텐츠의 소리를 재생하는 장치일 수 있다. 이를 위하여 음향 출력 장치(200)는 사용자 단말(100)을 비롯한 외부 장치로부터 청각 콘텐츠를 수신하기 위한 통신 모듈을 포함할 수 있다. 이러한 경우 사용자의 피드백에 기반한 청각 콘텐츠의 변조는 사용자 단말(100)에서 이루어 질 수 있으며, 음향 출력 장치(200)는 사용자 단말(100)로부터 변조된 청각 콘텐츠를 수신하여 재생할 수 있다.

이때 적어도 하나의 속성값은 난청 보상 정도에 관한 속성값, 피드백 음향 포함 정도에 관한 속성값, 잡음 포함 정도에 관한 속성값, 빔-포밍에 방향에 관한 속성값 및 음성 강조 정도에 관한 속성값 중 적어도 하나일 수 있다.

본 발명의 일 실시예에 따른 음향 출력 장치(200)는 좌측 음향과 우측 음향 각각을 출력하기 위한 두 개의 유닛으로 구성될 수 있다. 또한 음향 출력 장치(200)는 도 1에 도시된 바와 같이 사용자의 신체에 부착되어 사용될 수도 있고, 사용자의 신체와 이격되어 사용될 수도 있다.

본 발명에 일 실시예에 따른 디스플레이 장치(300)는 전술한 음향 출력 장치(200)에 의해 출력되는 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 표시하는 다양한 장치를 의미할 수 있다. 가령 디스플레이 장치(300)는 도 1에 도시된 바와 같이 사용자가 머리에 쓰고 영상 시청할 수 있도록 하는 HMD(Head mounted Display)일 수 있다. 물론 디스플레이 장치(300)는 전술한 HMD 외에, TV, 모니터 및 빔-프로젝터 등 다양한 표시수단을 의미할 수 있다.

한편 본 발명에서 '청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠'는 청각 콘텐츠에 의해 묘사되는 상황과 시각 콘텐츠에 의해 묘사되는 상황이 서로 상관관계가 있는 것을 의미할 수 있다. 가령 시각 콘텐츠가 운행중인 자동차의 내부에 관한 것일 경우, 청각 콘텐츠는 자동차의 구동 소음에 관한 것일 수 있다. 또한 시각 콘텐츠가 사람이 많은 카페 내부에 관한 것일 경우, 청각 콘텐츠는 다수의 화자에 의한 대화 소리에 관한 것일 수 있다.

종래기술에 따르면 청각의 교육에 있어서 단순히 청각 콘텐츠만을 활용하여 교육을 수행하였다. 이와 같은 종래기술들은 사용자가 청각을 인식함에 있어서는 청각 외에 시각 등 다양한 감각을 사용함에도 불구하고, 단순히 청각적인 자극만을 제공하여 실제 현실의 상황과 동떨어진 상황에서 교육을 수행한다는 점에서 문제점이 있었다.

본 발명은 청각 콘텐츠 뿐만 아니라 시각 콘텐츠까지 포함하는 학습 콘텐츠를 사용하여 교육을 수행함으로써, 보다 실제 상황에 가까운 교육이 이루어 지도록 할 수 있다. 특히 난청 시뮬레이션 교육의 경우, 난청 환자가 아닌 사람들이 난청 환자가 어떠한 상황에 처해 있는지를 보다 잘 이해할 수 있도록 할 수 있고, 보청기 시뮬레이션 교육의 경우, 난청 환자가 자신에게 보다 잘 맞는 보청기를 선택할 수 있도록 할 수 있다.

본 발명에 일 실시예에 따른 입력 장치(400)는 사용자의 학습 콘텐츠 선택에 관한 입력이나 사용자의 학습 콘텐츠에 대한 피드백을 수용할 수 있다.

바꾸어 말하면, 입력 장치(400)는 사용자가 다중 감각에 기초하여 인지한 결과에 기초한 사용자의 반응을 입력 받을 수 있다. 이와 같은 입력 장치(400)는 예를 들어 키보드, 마우스, 버튼 및 터치패드 등의 장치를 포함할 수 있다.

도면에는 도시되지 않았지만, 본 발명의 일 실시예에 따른 청각 교육 시스템은 사용자의 시선을 인식하는 시선 인식 장치(미도시)를 더 포함할 수 있다. 시선 인식 장치(미도시)는 디스플레이 장치(300)에 표시되는 시각 콘텐츠 상에서 사용자의 시선이 현재 어디에 머무르는지를 확인하여 이를 사용자 단말(100)에 제공할 수 있다. 또한 시선 인식 장치(미도시) 사용자의 머리 회전에 따라 사용자의 시선이 변경된 경우, 변경된 시선을 확인하여 이를 사용자 단말(100)에 제공할 수 있다.

이때 사용자 단말(100)은 시선 인식 장치(미도시)로부터 시선에 대한 정보를 수신하고, 사용자의 시선에 대응되도록 시각 콘텐츠의 출력 위치를 이동시켜 디스플레이 장치(300)로 출력할 수 있다. 또한 사용자 단말(100)은 음향 출력 장치(200)가 사용자의 시선에 대응되도록 청각 콘텐츠를 변조하여 출력하도록 음향 출력 장치(200)를 제어할 수 있다.

가령 대화상대방이 정면에 있는 환경을 가정한 난청 학습 콘텐츠에서 사용자가 자신의 고개를 우측으로 회전한 경우, 시선 인식 장치(미도시)는 사용자의 시선이 우측으로 이동하였음을 감지하고 이에 대응되는 정보를 사용자 단말(100)에 전송할 수 있다. 사용자 단말(100)은 이러한 시선 정보에 기초하여 사용자의 종래 시선의 우측 부분이 사용자의 정면에 오도록 시각 콘텐츠의 출력 위치를 이동시켜 디스플레이 장치(300)로 출력할 수 있다. 또한 사용자 단말(100)은 전술한 시선 정보에 기초하여 사용자의 좌측 보청기 유닛에서 대화상대방의 목소리가 더 크게 출력되도록 음향 출력 장치(200)를 제어할 수 있다. 다만 이는 예시적인 것으로 본 발명의 사상이 이에 한정되는 것은 아니다.

이하에서는 도 2내지 도 4를 통하여 다양한 상황에서의 청각 교육 시스템의 각 구성의 동작을 설명한다.

도 2는 사용자의 학습 콘텐츠 선택에 관한 입력을 획득하기 위한 화면(510)의 예시이다.

전술한 바와 같이 사용자 단말(100)은 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득하고, 사용자가 선택한 난청 학습 콘텐츠를 음향 출력 장치(200) 및 디스플레이 장치(300)에 제공할 수 있다.

바꾸어 말하면, 사용자는 화면(510)을 통하여 선택 가능한 난청 학습 콘텐츠(511 내지 513)를 확인하고, 자신이 학습하고자 하는 난청 학습 콘텐츠를 선택할 수 있다.

가령 사용자는 난청 시뮬레이션 학습 콘텐츠(511)를 선택하여, 난청 환자가 주변 환경을 어떻게 감지하고 느끼는지 체험해볼 수도 있고, 보청기 시뮬레이션 학습 콘텐츠(512)를 선택하여, 자신에게 적합한 보청기가 무엇인지 확인해볼 수도 있다. 다만 도 2에 도시된 세 가지 콘텐츠는 예시적인 것으로 본 발명의 사상이 이에 한정되는 것은 아니다.

도 3은 난청 학습 콘텐츠가 '이동수단의 내부 환경인 경우'에 대한 것으로, 난청 학습 콘텐츠와 함께 다양한 항목의 설정을 위한 설정 콘텐츠(521)가 표시된 화면(520)의 예시이다.

전술한 바와 같이 난청 학습 콘텐츠는 난청 환자가 아닌 사람이 난청 환자가 어떻게 소리를 감지하는지를 체험할 수 있도록 하는 난청 시뮬레이션 학습 콘텐츠 일 수 있다.

이러한 난청 시뮬레이션 학습 콘텐츠의 경우 시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠(521)를 포함할 수 있다.

사용자 단말(100)은 상술한 설정 콘텐츠(521)에 대응한 사용자의 피드백(가령 난청의 정도나 난청의 유형 등을 조절하는 사용자의 입력)에 기초하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하고, 이를 음향 출력 장치(200)에 전송할 수 있다. 이때 음향 출력 장치(200)는 사용자 단말(100)이 결정한 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력할 수 있다.

가령 사용자는 난청 정도를 조절하거나, 난청의 종류를 조절함으로써 해당 정도 또는 해당 종류의 난청을 가진 환자가 주변 환경을 어떻게 느끼는지 체험해볼 수 있다.

이로써 본 발명은 다양한 환경에서, 다양한 정도 및 종류의 난청 환자가 느끼는 환경을 보다 실제의 환경과 유사하게 제공할 수 있다.

도 4는 난청 학습 콘텐츠가 '화자(531)가 소정의 위치에 고정된 환경인 경우'에 대한 것으로, 난청 학습 콘텐츠와 함께 체험해보고자 하는 보청기의 선택을 위한 보청기 시뮬레이션 학습 콘텐츠(532)가 표시된 화면(530)의 예시이다.

전술한 바와 같이 난청 학습 콘텐츠는 난청 환자가 보청기를 구입하기 이전에, 다양한 보청기를 체험해 볼 수 있도록 하는 보청기 시뮬레이션 학습 콘텐츠일 수 있다.

이러한 보청기 시뮬레이션 학습 콘텐츠의 경우 시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠(532)를 포함할 수 있다.

사용자 단말(100)은 상술한 보청기 선택 콘텐츠(532)에 대응한 사용자의 피드백(가령 특정 'CCCCC' 보청기를 선택하는 사용자의 입력)에 기초하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하여 음향 출력 장치(200)에 전송할 수 있다. 이때 음향 출력 장치(200)는 사용자 단말(100)이 결정한 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력할 수 있다.

선택적 실시예에서, 사용자 단말(100)은 사용자의 피드백에 기초하여 청각 콘텐츠를 변조하고, 음향 출력 장치(200)가 변조된 청각 콘텐츠를 출력하도록 제어할 수도 있다. 즉, 변조의 주체는 사용자 단말(100)일 수도 있고, 음향 출력 장치(200)일 수도 있다.

이로써 본 발명은 난청 환자가 자신의 난청 정도에 보다 부합하는 보청기를 다양한 환경에서 찾을 수 있도록 할 수 있다.

도 5는 본 발명의 일 실시예에 따른 사용자 단말(100)에 의해 수행되는 청각 교육 방법을 설명하기 위한 흐름도이다. 이하에서는 도 1 내지 도 4에서 설명한 내용과 중복하는 설명은 생략하되, 도 1 내지 도 4를 함께 참조하여 설명한다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득할 수 있다.(S51)

다시 도 2를 참조하여 사용자 단말(100)이 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득하는 과정을 설명한다.

사용자는 도 2에 도시된 바와 같은 화면(510)을 통하여 선택 가능한 난청 학습 콘텐츠(511 내지 513)를 확인하고, 자신이 학습하고자 하는 난청 학습 콘텐츠를 선택할 수 있다. 가령 사용자는 난청 시뮬레이션 학습 콘텐츠(511)를 선택하여, 난청 환자가 주변 환경을 어떻게 감지하고 느끼는지 체험해볼 수도 있고, 보청기 시뮬레이션 학습 콘텐츠(512)를 선택하여, 자신에게 적합한 보청기가 무엇인지 확인해볼 수도 있다.

바꾸어 말하면, 사용자 단말(100)은 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득하고, 사용자가 선택한 난청 학습 콘텐츠를 음향 출력 장치(200) 및 디스플레이 장치(300)에 제공할 수 있다.

이어서 본 발명의 일 실시예에 따른 사용자 단말(100)은 단계 S51에서 선택된 난청 학습 콘텐츠에 포함되는 시각 콘텐츠를 표시하도록 디스플레이 장치를 제어하고, 선택된 난청 학습 콘텐츠에 포함되는 청각 콘텐츠를 출력하도록 음향 출력 장치를 제어할 수 있다.(S52)

이때 음향 출력 장치(200)는 사용자가 주변의 음향을 더욱 잘 들을 수 있도록, 획득된 주변 음향을 적절하게 처리하고 이를 사용자의 청신경계로 제공하는 다양한 장치를 의미할 수 있다. 가령 음향 출력 장치(200)는 청력이 저하 또는 손실된 상태의 사용자에게 주변 음향을 증폭시켜 전달하는 장치를 의미할 수 있다. 이러한 경우 음향 출력 장치(200)는 복수개의 속성값(또는 속성 파라미터)에 의해 음향 출력 특성이 달라질 수 있다. 이때 속성값은 사용자 단말(100)이 사용자의 피드백에 기초하여 결정한 것 일 수 있다. 바꾸어 말하면 본 발명의 일 실시예에 따른 음향 출력 장치(200)는 사용자의 피드백에 기초하여 사용자에게 보다 적합한 형태로 청각 콘텐츠를 변조하여 출력할 수 있다.

또한 음향 출력 장치(200)는 사용자 단말(100)로부터 청각 콘텐츠를 수신하고, 이를 사용자의 청신경계로 전달하는 장치를 의미할 수도 있다. 바꾸어 말하면, 음향 출력 장치(200)는 사용자 단말(100)의 제어에 따라 난청 학습 콘텐츠의 소리를 재생하는 장치일 수 있다. 이를 위하여 음향 출력 장치(200)는 사용자 단말(100)을 비롯한 외부 장치로부터 청각 콘텐츠를 수신하기 위한 통신 모듈을 포함할 수 있다. 이러한 경우 사용자의 피드백에 기반한 청각 콘텐츠의 변조는 사용자 단말(100)에서 이루어 질 수 있으며, 음향 출력 장치(200)는 사용자 단말(100)로부터 변조된 청각 콘텐츠를 수신하여 재생할 수 있다.

본 발명의 일 실시예에 따른 음향 출력 장치(200)는 좌측 음향과 우측 음향 각각을 출력하기 위한 두 개의 유닛으로 구성될 수 있다. 또한 음향 출력 장치(200)는 도 1에 도시된 바와 같이 사용자의 신체에 부착되어 사용될 수도 있고, 사용자의 신체와 이격 되어 사용될 수도 있다.

한편 디스플레이 장치(300)는 전술한 음향 출력 장치(200)에 의해 출력되는 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 표시하는 다양한 장치를 의미할 수 있다. 가령 디스플레이 장치(300)는 도 1에 도시된 바와 같이 사용자가 머리에 쓰고 영상 시청할 수 있도록 하는 HMD(Head mounted Display)일 수 있다. 물론 디스플레이 장치(300)는 전술한 HMD 외에, TV, 모니터 및 빔-프로젝터 등 다양한 표시수단을 의미할 수 있다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 단계 S52에서 출력된 난청 학습 콘텐츠에 대한 사용자의 피드백을 수용할 수 있다.(S53)

가령 단계 S51에서 사용자에 의해 선택된 난청 학습 콘텐츠가 난청 환자가 아닌 사람이 난청 환자가 어떻게 소리를 감지하는지를 체험할 수 있도록 하는 난청 시뮬레이션 학습 콘텐츠로, 시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함하는 것으로 가정해 보자. 이러한 경우 사용자 단말(100)은 가령 난청의 정도나 난청의 유형 등을 조절하는 사용자의 입력을 사용자의 피드백으로써 수용할 수 있다.

또한 단계 S51에서 사용자에 의해 선택된 난청 학습 콘텐츠가 난청 환자가 보청기를 구입하기 이전에, 다양한 보청기를 체험해 볼 수 있도록 하는 보청기 시뮬레이션 학습 콘텐츠로, 시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함하는 것으로 가정해 보자. 이러한 경우 사용자 단말(100)은 가령 특정 보청기를 선택하는 사용자의 입력을 사용자의 피드백으로써 수용할 수 있다.

한편 사용자의 입력은 전술한 바와 같이 입력 장치(400)에 의해 수용될 수 있다. 이때 입력 장치(400)는 사용자가 다중 감각에 기초하여 인지한 결과에 기초한 사용자의 반응을 입력 받을 수 있다. 이와 같은 입력 장치(400)는 예를 들어 키보드, 마우스, 버튼 및 터치패드 등의 장치를 포함할 수 있다.

본 발명의 일 실시예에 따른 사용자 단말(100)은 단계 S53에서 획득한 사용자의 피드백에 기초하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하여 음향 출력 장치(200)에 전송할 수 있다.(S54) 또한 본 발명의 일 실시예에 따른 사용자 단말(100)은 음향 출력 장치(200)가 단계 S54에서 결정된 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력하도록 음향 출력 장치(200)를 제어할 수 있다.(S55)

가령 단계 S51에서 사용자에 의해 선택된 난청 학습 콘텐츠가 난청 환자가 아닌 사람이 난청 환자가 어떻게 소리를 감지하는지를 체험할 수 있도록 하는 난청 시뮬레이션 학습 콘텐츠로, 시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함하는 것으로 가정해 보자. 또한 단계 S53에서 사용자 단말(100)이 난청의 정도나 난청의 유형 등을 조절하는 사용자의 입력을 사용자의 피드백으로써 수용하였다고 가정해 보자.

이러한 경우 사용자 단말(100)은 사용자가 설정한 난청 정도, 난청 유형 등에 기초하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하고, 이를 음향 출력 장치(200)에 전송할 수 있다. 이때 음향 출력 장치(200)는 사용자 단말(100)이 결정한 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력할 수 있다.

한편 단계 S51에서 사용자에 의해 선택된 난청 학습 콘텐츠가 난청 환자가 보청기를 구입하기 이전에, 다양한 보청기를 체험해 볼 수 있도록 하는 보청기 시뮬레이션 학습 콘텐츠로, 시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함하는 것으로 가정해 보자. 또한 단계 S53에서 사용자 단말(100)이 특정 보청기를 선택하는 사용자의 입력을 사용자의 피드백으로써 수용하였다고 가정해 보자.

이러한 경우 사용자 단말(100)은 사용자가 선택한 보청기의 식별 정보를 참조하여 음향 출력 장치(200)의 적어도 하나의 속성값을 결정하고, 이를 음향 출력 장치(200)에 전송할 수 있다. 이때 음향 출력 장치(200)는 사용자 단말(100)이 결정한 적어도 하나의 속성값에 기초하여 청각 콘텐츠를 변조하여 출력할 수 있다.

이로써 본 발명은 난청 환자가 아닌 사람에게 다양한 정도 및 종류의 난청 환자가 느끼는 환경을 보다 실제의 환경과 유사하게 제공할 수 있으며, 난청 환자가 자신의 난청 정도에 보다 부합하는 보청기를 다양한 환경에서 찾을 수 있도록 할 수 있다.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

100: 사용자 단말
101, 102: 사용자 단말
200: 음향 출력 장치
300: 디스플레이 장치
400: 입력 장치

Claims

청각 콘텐츠 및 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠를 사용자에게 제공하는 청각 교육 시스템에 있어서,
상기 시각 콘텐츠가 디스플레이 장치에 표시되도록 제어하고, 상기 청각 콘텐츠가 음향 출력 장치에 출력되도록 상기 디스플레이 장치 및 상기 음향 출력 장치를 제어하는 사용자 단말;
상기 사용자 단말의 제어에 따라 상기 청각 콘텐츠를 출력하는 음향 출력 장치;
상기 사용자 단말의 제어에 따라 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 표시하는 디스플레이 장치; 및
상기 사용자의 학습 콘텐츠 선택에 관한 입력 및 상기 사용자의 상기 학습 콘텐츠에 대한 피드백을 수용하는 입력 장치;를 포함하고,
상기 사용자 단말은
상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고,
상기 음향 출력 장치는
상기 사용자 단말이 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하는, 청각 교육 시스템.
제1 항에 있어서
상기 입력 장치가
난청 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우,
상기 사용자 단말은
상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하고,
상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어하는, 청각 교육 시스템.
제2 항에 있어서
상기 난청 시뮬레이션 학습 콘텐츠는
시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함하고,
상기 사용자 단말은
상기 설정 콘텐츠에 대응한 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고,
상기 음향 출력 장치는
상기 사용자 단말이 상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하는, 청각 교육 시스템.
제2 항에 있어서
상기 난청 시뮬레이션 학습 콘텐츠는 복수이고,
상기 복수의 난청 시뮬레이션 학습 콘텐츠는 서로 상이한 환경에 대한 난청 시뮬레이션 청각 콘텐츠 및 난청 시뮬레이션 시각 콘텐츠를 포함하고,
상기 환경은
길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나인, 청각 교육 시스템.
제1 항에 있어서
상기 입력 장치가
보청기 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우,
상기 사용자 단말은
상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하고,
상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어하는, 청각 교육 시스템.
제5 항에 있어서
상기 보청기 시뮬레이션 학습 콘텐츠는
시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함하고,
상기 사용자 단말은
상기 보청기 선택 콘텐츠에 대응한 상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고,
상기 음향 출력 장치는
상기 사용자 단말이 상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하는, 청각 교육 시스템.
제5 항에 있어서
상기 보청기 시뮬레이션 학습 콘텐츠는 복수이고,
상기 복수의 보청기 시뮬레이션 학습 콘텐츠는 서로 상이한 환경에 대한 보청기 시뮬레이션 청각 콘텐츠 및 보청기 시뮬레이션 시각 콘텐츠를 포함하고,
상기 환경은
길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나인, 청각 교육 시스템.
제1 항에 있어서
상기 적어도 하나의 속성값은
난청 보상 정도에 관한 속성값, 피드백 음향 포함 정도에 관한 속성값, 잡음 포함 정도에 관한 속성값, 빔-포밍에 방향에 관한 속성값 및 음성 강조 정도에 관한 속성값 중 적어도 하나인, 청각 교육 시스템.
청각 콘텐츠 및 상기 청각 콘텐츠와 유기적으로 결부된 시각 콘텐츠를 포함하는 다중 감각의 난청 학습 콘텐츠를 사용자에게 제공하는 청각 교육 방법에 있어서,
상기 사용자의 난청 학습 콘텐츠 선택에 관한 입력을 획득하는 학습 콘텐츠 선택 단계;
상기 선택된 난청 학습 콘텐츠에 포함되는 시각 콘텐츠를 표시하도록 디스플레이 장치를 제어하고, 상기 선택된 난청 학습 콘텐츠에 포함되는 청각 콘텐츠를 출력하도록 음향 출력 장치를 제어하는 학습 콘텐츠 출력 단계;
상기 사용자의 상기 난청 학습 콘텐츠에 대한 피드백을 수용하는 피드백 수용 단계;
상기 사용자의 상기 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하는 속성값 결정 단계; 및
상기 음향 출력 장치가 상기 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하도록 상기 음향 출력 장치를 제어하는 음향 출력 장치 제어 단계;를 포함하는, 청각 교육 방법.
제9 항에 있어서
상기 학습 콘텐츠 선택 단계에서
난청 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우,
상기 학습 콘텐츠 출력 단계는
상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하는 단계; 및
상기 난청 시뮬레이션 학습 콘텐츠에 포함된 난청 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어하는 단계;를 포함하는, 청각 교육 방법.
제10 항에 있어서
상기 난청 시뮬레이션 학습 콘텐츠는
시뮬레이션 하고자 하는 난청 정도, 난청 유형 및 난청 원인 중 적어도 하나의 항목의 설정을 위한 설정 콘텐츠를 포함하고,
상기 피드백 수용 단계는
상기 설정 콘텐츠에 대응한 상기 사용자의 피드백을 수용하고,
상기 속성값 결정 단계는
상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고,
상기 음향 출력 장치 제어 단계는
상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하도록 상기 음향 출력 장치를 제어하는, 청각 교육 방법.
제10 항에 있어서
상기 난청 시뮬레이션 학습 콘텐츠는 복수이고,
상기 복수의 난청 시뮬레이션 학습 콘텐츠는 서로 상이한 환경에 대한 난청 시뮬레이션 청각 콘텐츠 및 난청 시뮬레이션 시각 콘텐츠를 포함하고,
상기 환경은
길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나인, 청각 교육 방법.
제9 항에 있어서
상기 학습 콘텐츠 선택 단계에서
보청기 시뮬레이션 학습 콘텐츠를 선택하는 입력을 수용한 경우,
상기 학습 콘텐츠 출력 단계는
상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 시각 콘텐츠가 상기 디스플레이 장치에 표시되도록 제어하는 단계; 및
상기 보청기 시뮬레이션 학습 콘텐츠에 포함된 보청기 시뮬레이션 청각 콘텐츠가 상기 음향 출력 장치에 출력되도록 제어하는 단계;를 포함하는, 청각 교육 방법.
제13 항에 있어서
상기 보청기 시뮬레이션 학습 콘텐츠는
시뮬레이션 하고자 보청기의 선택을 위한 보청기의 식별정보를 포함하는 보청기 선택 콘텐츠를 포함하고,
상기 피드백 수용 단계는
상기 보청기 선택 콘텐츠에 대응한 상기 사용자의 피드백을 수용하고,
상기 속성값 결정 단계는
상기 사용자의 피드백에 기초하여 상기 음향 출력 장치의 적어도 하나의 속성값을 결정하여 상기 음향 출력 장치에 전송하고,
상기 음향 출력 장치 제어 단계는
상기 피드백에 대응되도록 결정한 적어도 하나의 속성값에 기초하여 상기 청각 콘텐츠를 변조하여 출력하도록 상기 음향 출력 장치를 제어하는, 청각 교육 방법.
제13 항에 있어서
상기 보청기 시뮬레이션 학습 콘텐츠는 복수이고,
상기 복수의 보청기 시뮬레이션 학습 콘텐츠는 서로 상이한 환경에 대한 보청기 시뮬레이션 청각 콘텐츠 및 보청기 시뮬레이션 시각 콘텐츠를 포함하고,
상기 환경은
길거리 환경, 화자가 소정의 위치에 고정된 환경, 화자가 이동하는 환경, 카페 환경, 교실 환경, 이동수단 내부 환경 및 콘텐츠 시청 환경 중 어느 하나인, 청각 교육 방법.
제9 항에 있어서
상기 적어도 하나의 속성값은
난청 보상 정도에 관한 속성값, 피드백 음향 포함 정도에 관한 속성값, 잡음 포함 정도에 관한 속성값, 빔-포밍에 방향에 관한 속성값 및 음성 강조 정도에 관한 속성값 중 적어도 하나인, 청각 교육 방법.
컴퓨터를 이용하여 제9 항 내지 제16 항 중 어느 한 항의 방법을 실행하기 위하여 매체에 저장된 컴퓨터 프로그램.