KR20070027892A - 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기 - Google Patents

이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기 Download PDF

Info

Publication number
KR20070027892A
KR20070027892A KR1020050079775A KR20050079775A KR20070027892A KR 20070027892 A KR20070027892 A KR 20070027892A KR 1020050079775 A KR1020050079775 A KR 1020050079775A KR 20050079775 A KR20050079775 A KR 20050079775A KR 20070027892 A KR20070027892 A KR 20070027892A
Authority
KR
South Korea
Prior art keywords
pattern information
standard
sound
acoustic pattern
information
Prior art date
Application number
KR1020050079775A
Other languages
English (en)
Inventor
최의선
윤준현
Original Assignee
노틸러스효성 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 노틸러스효성 주식회사 filed Critical 노틸러스효성 주식회사
Priority to KR1020050079775A priority Critical patent/KR20070027892A/ko
Publication of KR20070027892A publication Critical patent/KR20070027892A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72475User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users
    • H04M1/72478User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users for hearing-impaired users
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/74Details of telephonic subscriber devices with voice recognition means

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및 상기 방법을 채용한 청각 장애인용 이동 통신 단말기에 관한 것으로, 더욱 상세하게는 소정의 외부 음향 신호를 수신하여 상기 외부 음향 신호의 특징들을 추출하고 변환하여 음향 패턴 정보를 생성한 후 표준 음향 패턴 정보와 비교하여 이에 대응하는 음향 메시지 정보를 출력하는 방법 및 상기 방법을 채용한 청각 장애인용 이동 통신 단말기 관한 것이다. 본 발명에 따르면 이동 통신 단말기의 리소스를 이용한 음향 인식 기능을 통해서 청각 장애인들이 외부 음향 신호를 보다 편리하게 인지하고 빠르게 대처할 수 있다.
청각 장애인, 이동 통신 단말기, 음향, 인식, 패턴

Description

이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및 상기 방법을 채용한 청각 장애인용 이동 통신 단말기{METHOD FOR SOUND RECOGNITION USING MOBILE DEVICE AND MOBILE DEVICE FOR A HEARING-IMPAIRED PERSON OF ENABLING THE METHOD}
도 1은 본 발명의 일실시예에 따른 이동 통신 단말기의 내부 구성을 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 표준 음향 데이터베이스(DB) 테이블 구성의 일례를 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 이동 통신 단말기에서 외부 음향 신호에 기초하여 음향 패턴 정보를 생성하는 과정의 일례를 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 사용자로부터 직접 표준 음향 데이터베이스를 구축하는 일례를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 이동 통신 단말기에서 외부 음향 신호를 인식하고 외부 음향 메시지 정보를 출력하는 방법의 과정을 도시한 흐름도이다.
도 6은 본 발명의 일실시예에 따른 외부 음향 메시지 정보를 디스플레이 하는 일례를 도시한 도면이다.
<도면의 주요 부분에 대한 부호의 설명>
101: 음향 수신부 102: 패턴 생성부
103: 표준 음향 데이터베이스(DB) 104: 패턴 추출부
105: 출력부
본 발명은 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및 상기 방법을 채용한 청각 장애인용 이동 통신 단말기에 관한 것으로, 더욱 상세하게는 이동 통신 단말기의 리소스를 활용하여 소정의 외부 음향 신호에 상응하는 메시지 정보를 청각 장애인이 쉽게 인지할 수 있도록 출력하는 방법 및 상기 방법을 채용한 청각 장애인용 이동 통신 단말기 관한 것이다.
일반적으로, 청각 장애인들은 선천적 또는 후천적인 이유로, 청각기관이 손상되어 소리를 들을 수 없게 되었으며, 이러한 청각 장애인들은 수화나 구화법 등을 통해 어느 정도 의사전달을 할 수 있다. 하지만 청각 장애인들은 차량 경적소리나 초인종 소리와 같은 외부 음향신호는 스스로 인식할 수 없고, 더욱 중요한 것은 이러한 상기 외부 음향신호가 대부분 일상 생활에 꼭 필요하다는 것이다.
일례로서, 아기의 울음소리, 초인종 소리, 전화벨 소리, 화재경보 및 사이렌 소리, 물 끓는 소리 등이 있는데 정상인의 경우 상기 중요한 소리가 발생하면 즉시 적절한 대응을 할 수 있으나, 청각 장애인 및 고도 난청자의 경우 상기 중요한 소리를 인지하지 못해 커다란 불편을 겪고, 심지어 위험한 상황에 빠질 수도 있다.
청각 장애인들의 불편함을 해소하기 위하여 종래에 청각 장애인을 위한 음향 인식 방법 및 장치가 몇 가지 개발되었다. 하지만 종래의 청각 장애인을 위한 음향 인식 장치는 휴대용으로 개발되었지만 사용자 입장에서는 휴대하기에 부피도 크고 무게도 무거워서 실용성이 매우 떨어진다. 또한 별도의 음향 인식 장치를 휴대해야 하는 번거로움이 있다. 음향 인식 장치의 생산자 입장에서는 별도의 음향 인식 장치를 생산하기 위해서, 소요되는 부품을 개별적으로 제조 및 조립하여야 하기 때문에 생산단가를 낮추기 힘들다는 단점을 가지고 있다.
또한, 음향 인식에 있어서는 음향 인식의 방법이 사용자를 전혀 고려하지 않아서 인식할 수 있는 범위가 극히 제한적이고 오인식률 또한 높다. 예를 들어, 비교 모델이 되는 표준 음향 데이터베이스를 처음 생산 과정에서 고정적으로 구축하기 때문에, 데이터 양도 많아질 뿐만 아니라 사용자마다 다양한 외부 음향을 정확히 인식하지 못하는 경우가 많이 있다.
한편, 현대 사회에서 이동 통신 단말기는 장소에 구애받지 않고 편리하게 의사 소통할 수 있는 수단으로서 현대인들에게 필수품처럼 널리 이용되고 있다. 하지만, 최근의 이동 통신 단말기는 프로세서의 성능이 향상되고, 메모리의 리소스가 증대됨에 따라 종래의 이동 통신 서비스뿐만 아니라 다방면에서 여러 기능들을 제공하고 있다.
따라서, 청각 장애인도 늘 휴대하고 다니는 이동 통신 단말기를 이용하여 외부 소리정보를 인지할 수 있다면 매우 유용할 것이다. 이에, 본 발명에서는 휴대성이 높은 이동 통신 단말기가 구비한 다양한 리소스를 활용하여 청각 장애인이 간 편하게 음향 인식 장치를 휴대하면서 쉽게 외부 음향과 관련된 정보를 확인하고 이에 대처할 수 있는 새로운 기술을 제안하고자 한다.
본 발명은 상술한 바와 같은 종래기술의 문제점을 해결하기 위해 안출된 것으로서, 이동통신 단말기의 다양한 리소스를 그대로 이용하여 청각 장애인을 위한 음향 인식 장치를 구현함으로써 휴대성과 효율성을 극대화하는 것을 그 목적으로 한다.
또한, 본 발명은 사용자가 직접 개별 사용자 중심의 표준 음향 데이터베이스를 구축할 수 있게 함으로써, 불필요한 메모리의 낭비를 막고, 보다 효율적인 음향 패턴 매칭을 가능하게 하는 것을 그 목적으로 한다.
또한, 본 발명은 고정된 음향 인식 방법의 문제점을 해결하기 위해 사용자에 의한 가변적인 가중치 부여 및 음향 패턴 매칭 방법을 통해 보다 정확한 음향 인식을 가능하게 하는 것을 그 목적으로 한다.
상기의 목적을 달성하고, 상술한 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 청각 장애인을 위한 이동 통신 단말기는, 외부 음향 신호를 수신하는 음향 수신부; 상기 수신된 음향 신호에 기초하여 외부 음향 패턴 정보를 생성하는 음향 패턴 생성부; 복수의 표준 음향 패턴 정보들을 저장하는 표준 음향 데이터베이스; 상기 표준 음향 데이터베이스를 참조하여 상기 외부 음향 패턴 정보에 상응하는 표준 음향 패턴 정보를 추출하는 패턴 추출부; 상기 추출된 표준 음향 패턴 정보에 대응하는 표준 음향 메시지 정보를 출력하는 출력부를 포함하는 것을 특징으로 한다.
본 발명의 또 다른 실시예에 따른 청각 장애인을 위한 이동 통신 단말기에서 외부 음향을 인식하는 방법은, 사용자가 표준 음향 데이터베이스를 구축하는 단계; 외부 음향 신호를 수신하는 단계; 상기 수신된 외부 음향 신호의 패턴 정보를 생성하는 단계; 상기 표준 음향 데이터베이스를 참조하여 상기 외부 음향 패턴 정보에 상응하는 표준 음향 패턴 정보를 추출하는 단계; 상기 추출된 표준 음향 패턴 정보에 상응하는 표준 음향 메시지 정보 결과를 출력하는 단계를 포함하는 것을 특징으로 한다.
참고로, 본 명세서에서 "이동 통신 단말기"라 함은 PDC(Personal Digital Cellular)폰, PCS(Personal Communication Service)폰, PHS(Personal Handyphone System)폰, CDMA-2000(1X, 3X)폰, WCDMA(Wideband CDMA)폰, 듀얼 밴드/듀얼 모드(Dual Band/Dual Mode)폰, GSM(Global Standard for Mobile)폰, MBS(Mobile Broadband System)폰, DMB(Digital Multimedia Broadcasting)폰, 스마트(Smart) 폰, 핸드폰 등과 같은 통신 기능이 포함될 수 있는 휴대용 기기, PDA(Personal Digital Assistant), 핸드 헬드 PC(Hand-Held PC), 노트북 컴퓨터, 랩탑 컴퓨터, 와이브로(WiBro) 단말기, MP3 플레이어, MD 플레이어 등과 같은 휴대 단말기, 그리고 국제 로밍(Roaming) 서비스와 확장된 이동 통신 서비스를 제공하는 IMT-2000(International Mobile Telecommunication-2000) 단말기 등을 포함하는 모든 종류의 핸드 헬드 기반의 무선 통신 장치를 의미하는 휴대용 전기전자장치로서, CDMA(Code Division Multiplexing Access) 모듈, 블루투스(Bluetooth) 모듈, 적외선 통신 모듈(Infrared Data Association), 유무선 랜카드 및 GPS(Global Positioning System)를 통한 위치 추적이 가능하도록 하기 위해 GPS 칩이 탑재된 무선 통신 장치와 같은 소정의 통신 모듈을 구비할 수 있으며, 멀티미디어 재생 기능을 수행할 수 있는 마이크로프로세서를 탑재함으로써 일정한 연산 동작을 수행할 수 있는 단말기를 통칭하는 개념으로 해석된다.
이하 첨부된 도면을 참조하여 본 발명에 따른 이동 통신 단말기를 이용하여 외부 음향 신호를 인식하는 방법 및 상기 방법을 채용한 청각장애인용 이동 통신 단말기에 대하여 상세히 설명한다.
도 1은 본 발명의 일실시예에 따른 이동 통신 단말기의 내부 구성을 도시한 도면이다.
도 1에서 도시한 바와 같이, 청각 장애인용 이동 통신 단말기는 음향 수신부(101), 패턴 생성부(102), 표준 음향 데이터베이스(103), 패턴 추출부(104), 출력부(105)를 포함한다.
음향 수신부(101)는 외부 음향 신호를 수신한다. 즉, 우리 일상 생활에서 발생되는 다양한 소리를 음향 수신부(101)를 통하여 수신하게 된다.
음향 수신부(101)는 이동 통신 단말기의 마이크로폰을 이용하며 소정의 필터를 통해 일정 레벨 이하의 불필요한 신호는 제거하고 원하는 외부 음향만을 수신한다. 또한, 모든 신호를 수신하지 않고 일정 레벨 이상의 신호만을 수신함으로써, 노이즈 등의 불필요한 소리를 제거할 수 있어 사용자에게 필요한 외부 음향만을 수 신한다.
예를 들어, 청각 장애인이 집안에 있는데 누군가가 초인종을 누른다면 청각 장애인용 이동 통신 단말기의 음향 수신부(101)는 초인종 소리가 일정 레벨 이상의 크기를 갖기 때문에 새로운 외부 신호로 간주하고 수신하게 된다. 상기 수신 방법을 통해서 불필요한 외부 신호를 모두 수신함으로써 발생하는 청각 장애인의 혼란을 방지할 수 있다.
패턴 생성부(102)는 음향 수신부(101)에서 수신한 외부 음향 신호에 기초하여 음향 패턴 정보를 생성한다.
본 발명의 일실시예에 따라, 패턴 생성부(102)는 상기 수신된 외부 음향 신호의 크기 및 레벨을 일정 기준으로 조정하고 소정의 기준에 따라 상기 수신된 음향의 특징들을 추출하고 변환하여 분류한다. 상기 소정의 기준은 주파수, 세기, 파형 중에서 적어도 어느 하나 이상을 포함한다.
예를 들어, 초인종 소리가 수신되면 패턴 생성부(102)에서 패턴 매칭을 위해 상기 초인종 소리를 일정 기준으로 조정하고 초인종 소리의 주파수, 세기, 파형 중에서 하나 이상의 특징을 추출하고 상기 특징을 기초하여 초인종 음향 패턴 정보를 생성한다.
표준 음향 데이터베이스(103)는 복수의 표준 음향 패턴 정보 및 상기 각각의 표준 음향 패턴 정보에 대응하는 메시지 정보들을 저장한다. 일례로서, 데이터베이스(103)는 이동 통신 단말기의 메모리에 저장될 수 있다.
본 발명에 따르면, 표준 음향 데이터베이스(103)에 저장되는 표준 음향 패턴 정보는 생산업체가 처음부터 제공하거나 또는 각 사용자에 의해 표준 음향 패턴 정보들을 선택하여 저장할 수 있다. 상기 표준 음향 패턴 정보들은 수신된 외부 음향 신호와 비교하기 위한 표준 모델이 된다.
패턴 추출부(104)는 표준 음향 데이터베이스(103)를 참조하여 상기 음향 패턴 정보에 상응하는 표준 음향 패턴 정보를 추출한다.
즉, 패턴 추출부(104)는 상기 생성된 음향 패턴 정보와 표준 음향 데이터베이스(103)의 표준 음향 패턴 정보들을 비교하여 유사도를 측정하고 수치화하여 표준오차 범위 내의 표준 음향 패턴 정보를 추출해 낸다. 상기 유사도 측정 방법은 상관계수, 확률값, 분산 중 적어도 어느 하나 이상을 포함한다.
또한, 상기 음향 패턴 정보와 상기 표준 음향 패턴 정보들을 비교함에 있어서, 사용자에 의해 음향의 주파수, 세기, 파형 중에서 어느 하나 이상에 가중치를 부여하여 비교할 수 있다.
예를 들어, 사용자가 실내에 있는 경우, 수신된 외부 음향 신호는 잡음이 적고 세기가 일정하므로 상기 음향 패턴 매칭 시에 음향의 세기에 더 많은 가중치를 부여해서 음향의 세기를 중심으로 음향 패턴 매칭을 하는 것이 바람직하다. 반대로, 사용자가 실외에 있는 경우, 수신된 외부 음향 신호는 잡음이 많고 세기가 일정하지 않으므로 음향 패턴 매칭 시에 음향의 세기보다 주파수에 더 많은 가중치를 부여해서 음향의 주파수를 중심으로 음향 패턴 매칭을 하는 것이 더욱 바람직하다. 이와 같이, 상기 가중치를 변화시킴으로써 변화하는 사용자의 환경에 더욱 적합하게 음향 패턴 매칭을 수행할 수 있다.
앞서 설명한 패턴 생성부(102), 패턴 추출부(104)는 이동 통신 단말기의 프로세서를 이용함으로써 용이하게 구현될 수 있을 것이다.
메시지 출력부(105)는 데이터베이스(103)를 참조하여, 상기 추출된 표준 음향 패턴 정보에 대응하는 메시지 정보를 청각 장애인에게 출력한다.
메시지 출력부(105)에서는 외부 음향 신호의 발생을 이동 통신 단말기에 내장된 진동 모터의 진동 모드 기능을 통해 사용자에게 알릴 수 있다. 또 다른 실시예로서, 메시지 출력부(105)는 이동 통신 단말기의 디스플레이부를 통해 외부 음향 신호의 종류를 알리는 메시지를 출력한다. 또 달리, 출력 방법은 사용자의 편의에 따라 진동, 문자, 아이콘 중 어느 하나 이상으로 변경될 수 있다. 만약, 아이콘이 사용되는 경우 함축된 정보를 시각적으로 효과 있게 표현할 수 있을 것이다.
이와 같이 본 발명에 따르면, 도 1의 각 구성 요소는 이동 통신 단말기에 내장된 마이크로폰, 디스플레이, 메모리, 진동 모터, 프로세서 등의 리소스들을 그대로 활용할 수 있으므로, 별도의 부가 장치 없이도 결국 장애인이 늘 휴대하고 다니는 이동 통신 단말기를 통하여 본 발명의 기술적 사상이 그대로 구현될 수 있음을 보여 주고 있다.
도 2는 본 발명의 일실시예에 따른 표준 음향 데이터베이스 테이블 구성의 일례를 도시한 도면이다.
도 2에서 도시한 바와 같이, 표준 음향 데이터베이스(DB) 테이블(200)은 표준 음향 패턴 데이터(201), 음향 정보(202) 및 아이콘(203) 필드를 포함한다. 표준 음향 패턴 데이터(201) 필드는 표준 음향 패턴 정보에 해당하고, 음향 정보 (202) 및 아이콘(203) 필드는 표준 메시지 정보에 해당한다. 표준 음향 패턴 정보에 해당하는 표준 음향 패턴 데이터(201) 필드는 표준 음향 패턴들이 디지털 데이터화되어 기록되어 있으며, 표준 메시지 정보에 해당하는 음향 정보(202) 필드에 대응하여 복수 개로 기록될 수 있다. 예를 들어, 초인종 소리도 여러 종류가 있을 수 있으므로, 상기 초인종 소리에 해당하는 초인종 음향 패턴 데이터가 복수 개로 기록될 수 있다.
표준 음향 데이터베이스 테이블(200)은 사용자가 자신의 환경에 맞게 직접 구축할 수 있다. 예를 들어, 외부 음향 중 초인종 소리의 경우 사용자 환경에 따라 모두 다를 것이다. 하지만 모든 초인종 소리의 음향 패턴 정보를 데이터베이스화하는 것은 비효율적이기 때문에 상기 문제점을 해결하기 위하여 각기 다른 사용자의 환경에 맞게 사용자가 직접 표준 음향 데이터베이스 테이블(200)을 구축할 수 있게 하였다. 즉, 데이터베이스(103)는 표준 음향 패턴 정보 또는 표준 메시지 정보를 사용자로부터 입력받아 저장함으로써, 불필요한 메모리의 낭비를 막고 음향 인식률을 높일 수 있다.
또한, 표준 메시지 정보에 해당하는 음향 정보(202) 필드는 사용자가 원하는 대로 아기의 울음소리, 초인종 소리, 전화벨 소리, 화재경보 및 사이렌 소리, 물 끓는 소리 등과 같은 다양한 복수의 음향 정보를 포함한다.
또 다른 표준 메시지 정보인 아이콘(203) 필드는 하나의 음향 정보(202) 필드에 하나의 아이콘(203)이 대응된다. 아이콘(203) 필드는 사용자의 입력에 따라 생략할 수 있다.
도 3은 외부 음향 신호에 기초하여 음향 패턴 정보를 생성하는 과정의 예시를 도시한 도면이다.
먼저 단계(301)처럼 '띵동' 이라는 외부 음향 신호가 발생하면 단계(302)에서 상기 외부 음향 신호를 수신한다. 그 후 단계(303)에서 상기 수신된 외부 음향 신호에서 필요한 부분을 잘라내고 크기 및 레벨을 일정 기준으로 조정한다. 단계(303)을 거쳐 조정된 외부 신호를 주파수(단계(304)), 세기(단계(305)), 파형 (단계(306))중에서 적어도 어느 하나 이상을 기준으로 특징을 추출하고 상기 기준에 맞게 변환한다. 마지막으로 단계(307)에서 변환된 외부 신호를 디지털 데이터화해서 음향 패턴 정보를 생성한다.
도 4는 사용자로부터 표준 음향 데이터베이스를 구축하는 일례를 도시한 도면이다.
표준 음향 데이터베이스를 구축하는 방법은 사용자가 이동 통신 단말기를 통해서 표준 음향을 입력한 후 소리의 명칭과 아이콘을 설정한 후 상기 표준 음향 데이터베이스에 저장하는 과정을 거친다.
즉, 상기 표준 음향 데이터베이스를 구축하는 방법은, 먼저 이동통신 단말기의 메뉴 중에서 상기 표준 음향 데이터베이스를 구축하는 메뉴를 통해 표준 음향 신호 입력을 준비하고 이동 통신 단말기의 안내에 따라 상기 표준 음향 신호를 입력하고 상기 표준 음향 신호의 명칭 및 아이콘을 설정해주는 간단한 과정을 거친다. 상기 입력하는 표준 음향 신호는 사용자가 자주 접하거나 또는 자신에게 의미 있는 음향을 중심으로 데이터베이스화하는 것이 바람직하다. 사용자로부터 수신된 표준 음향 패턴 정보는 이동 통신 단말기의 음향 수신부(101)와 패턴 생성부(102)를 거쳐서 데이터베이스에 저장될 수 있다.
초기 표준 음향 데이터베이스를 구축하는 과정은 사용자에게 번거로운 일이 될 수도 있지만, 직접 표준 음향 데이터베이스를 구축하는 과정을 통해서 불필요한 메모리의 낭비를 막을 수 있고 더 높은 음향 인식률을 얻을 수 있다.
도 5는 본 발명의 일실시예에 따른 이동 통신 단말기를 이용하여 음향을 인식하고 출력하는 방법의 과정을 도시한 흐름도이다.
먼저, 단계(501)에서 상기 이동 통신 단말기는 표준 음향 패턴 정보를 기록한 표준 음향 데이터베이스를 구축하고 유지한다. 이를 위하여, 표준 음향 패턴 정보 및 상기 표준 음향 패턴 정보에 상응하는 메시지 정보들을 데이터베이스에 저장하고 유지하게 된다.
단계(502)에서 상기 이동 통신 단말기는 외부 음향 신호를 수신한다. 외부 음향 수신을 위하여 노이즈 제거용 필터가 사용될 수 있다.
단계(503)에서 상기 이동 통신 단말기는 상기 수신된 외부 음향 신호의 특징들을 추출하여 외부 음향 패턴 정보를 생성한다. 음향 패턴 정보 생성을 위하여, 주파수, 세기, 파형 중의 적어도 하나 이상의 기준이 적용되어 외부 음향 신호의 크기 및 레벨을 조정할 수 있다.
단계(504)에서 상기 이동 통신 단말기는 상기 생성된 외부 음향 패턴 정보와 상기 표준 음향 데이터베이스에 기록된 표준 음향 패턴 정보를 비교하여 일치하는 표준 음향 패턴 정보를 검색한다. 표준 음향 패턴 정보의 검색을 위하여, 상관계 수, 확률값, 분산 중 적어도 어느 하나 이상을 포함하는 유사도 측정 방법이 사용될 수 있다.
상기 이동 통신 단말기는 상기 일치하는 표준 음향 패턴 정보가 존재하는 경우(단계(505)), 단계(506)에서 상기 이동 통신 단말기는 상기 표준 음향 패턴 정보에 대응하는 메시지 정보를 독출한다. 메시지 정보는 문자 메시지 및 아이콘을 포함할 수 있다.
또한, 상기 일치하는 표준 음향 패턴 정보가 존재하지 않는 경우(단계(505)), 음향 정보 없음 메시지를 독출(단계(507))한다.
단계(508)에서 상기 이동 통신 단말기는 상기 독출된 메시지 정보를 장애인에게 출력한다. 메시지 정보의 일례로서, 진동 정보, 문자, 아이콘 등이 사용될 수 있다. 즉, 이동 통신 단말기에 내장된 디스플레이부를 이용하여 문자 메시지 및 아이콘을 출력하거나 또는 이동 통신 단말기에 내장된 진동 모드 기능을 이용하여 진동 정보를 출력할 수 있다.
지금까지 본 발명에 따른 이동 통신 단말기의 음향 인식 방법의 구성을 설명하였고, 앞서 도 1 내지 도 4의 이동 통신 단말기에서 설명한 기술적 내용들이 방법의 구성에도 그대로 적용될 수 있으므로, 보다 상세한 설명은 이하 생략하기로 한다.
도 6은 본 발명의 일실시예에 따른 외부 음향 정보 메시지를 디스플레이하는 일례를 도시한 도면이다. 도 3의 예시와 같이 수신된 외부 음향 신호의 종류를 이동 통신 단말기의 LCD창에 문자와 함께 아이콘으로 출력함으로써 더욱 쉽고 효율적 으로 상기 외부 음향 메시지 정보를 전달한다. 상기 외부 음향 메시지 정보는 사용자가 더욱 빠르고 편리하게 인지할 수 있도록 이동 통신 단말기의 종류에 따라 주 LCD창과 보조 LCD창 중에서 어느 하나 이상에 출력할 수 있다.
본 발명에 따른 통신 단말기에서 음성을 통하여 문자를 입력하는 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
본 발명에 따르면 청각장애인이 늘 휴대하는 이동 통신 단말기를 이용하여 메시지 정보를 제공함으로써, 어떤 상황에서라도 외부 음향 신호를 쉽게 인지하고 즉각 대처할 수 있다.
또한, 본 발명에 따르면, 음향 인식을 위한 부품들을 새로 구비할 필요 없이 이동통신 단말기의 리소스를 그대로 이용함으로써 생산단가를 낮출 수 있는 장점을 갖는다.
또한, 본 발명에 따르면, 외부 음향 신호의 진동, 주파수, 세기 등 다양한 요소를 반영하여 보다 정확한 음향인식을 통한 메시지 정보를 제공할 수 있다.
또한, 본 발명에 따르면, 사용자 스스로 메시지 정보에 대한 데이터베이스를 구축할 수 있게 함으로써, 음향 인식률을 높이고 사용자의 편의를 극대화할 수 있다.
또한, 본 발명에 따르면, 패턴 매칭 시 사용자의 선택에 의해 가중치를 변경할 수 있게 함으로써, 사용자의 변화하는 환경에 가변적으로 대응할 수 있다.

Claims (13)

  1. 청각 장애인을 위한 이동 통신 단말기에서,
    외부 음향 신호를 수신하는 음향 수신부;
    상기 수신된 외부 음향 신호에 기초하여 음향 패턴 정보를 생성하는 음향 패턴 생성부;
    표준 음향 패턴 정보 및 상기 표준 음향 패턴 정보에 상응하는 메시지 정보들을 저장하는 데이터베이스;
    상기 데이터베이스를 참조하여 상기 음향 패턴 정보에 상응하는 표준 음향 패턴 정보를 추출하는 패턴 추출부;
    상기 데이터베이스를 참조하여 상기 추출된 표준 음향 패턴 정보에 상응하는 메시지 정보를 상기 청각 장애인에게 출력하는 메시지 출력부
    를 포함하는 것을 특징으로 하는 음향인식 기능을 구비한 이동 통신 단말기.
  2. 제1항에 있어서,
    상기 메시지 정보는 문자 메시지 및 아이콘을 포함하고,
    상기 메시지 출력부는 상기 이동 통신 단말기에 내장된 디스플레이부를 이용하여 상기 문자 메시지 및 상기 아이콘을 출력하는 것을 특징으로 하는 이동 통신 단말기.
  3. 제1항에 있어서,
    상기 메시지 정보는 진동 정보이고, 상기 메시지 출력부는 상기 이동 통신 단말기의 진동 모드 기능을 이용하여 상기 진동 정보를 출력하는 것을 특징으로 하는 이동 통신 단말기.
  4. 제1항에 있어서,
    상기 음향 패턴 생성부는 상기 외부 음향 신호의 주파수, 세기, 및 파형 중에서 적어도 어느 하나 이상을 고려하여 상기 음향 패턴 정보를 생성하는 것을 특징으로 하는 이동 통신 단말기.
  5. 제1항에 있어서,
    상기 음향 수신부는 상기 이동 통신 단말기에 내장된 마이크로폰을 이용하여 상기 외부 음향 신호를 수신하는 것을 특징으로 하는 이동 통신 단말기.
  6. 제1항에 있어서,
    상기 데이터베이스는 하나의 메시지 정보에 상응하는 복수의 표준 음향 패턴 정보를 저장하는 것을 특징으로 하는 이동 통신 단말기.
  7. 제1항에 있어서,
    상기 데이터베이스는 상기 표준 음향 패턴 정보 또는 상기 표준 메시지 정보 를 사용자로부터 입력받아 저장하는 것을 특징으로 하는 이동 통신 단말기.
  8. 제1항에 있어서,
    상기 패턴 추출부는 상기 음향 패턴 정보와 상기 표준 음향 패턴 정보의 유사도 측정 결과치에 기초하여 상기 표준 음향 패턴 정보를 추출하는 것을 특징으로 하는 이동 통신 단말기.
  9. 제8항에 있어서,
    상기 유사도 측정 결과치는 상관계수, 확률값, 표준편차, 및 분산 중에서 적어도 어느 하나 이상을 포함하는 것을 특징으로 하는 이동 통신 단말기.
  10. 제1항에 있어서,
    상기 패턴 추출부는 소정의 가중치가 부여된 주파수, 세기, 및 파형 중에서 적어도 하나 이상을 고려하여 상기 표준 음향 패턴 정보를 추출하는 것을 특징으로 하는 이동 통신 단말기.
  11. 제10항에 있어서,
    상기 가중치는 사용자의 선택에 의해 결정될 수 있는 것을 특징으로 하는 이동 통신 단말기.
  12. 청각 장애인을 위한 이동 통신 단말기에서,
    표준 음향 패턴 정보 및 상기 표준 음향 패턴 정보에 상응하는 메시지 정보들을 데이터베이스에 저장하고 유지하는 단계;
    외부 음향 신호를 수신하는 단계;
    상기 수신된 외부 음향 신호에 기초하여 음향 패턴 정보를 생성하는 단계;
    상기 데이터베이스를 참조하여 상기 음향 패턴 정보에 상응하는 표준 음향 패턴 정보를 추출하는 단계; 및
    상기 데이터베이스를 참조하여 상기 추출된 표준 음향 패턴 정보에 상응하는 메시지 정보를 상기 장애인에게 출력하는 단계
    를 포함하는 것을 특징으로 하는 청각 장애인을 위한 이동 통신 단말기의 음향인식 방법.
  13. 제12항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록매체.
KR1020050079775A 2005-08-30 2005-08-30 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기 KR20070027892A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050079775A KR20070027892A (ko) 2005-08-30 2005-08-30 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050079775A KR20070027892A (ko) 2005-08-30 2005-08-30 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기

Publications (1)

Publication Number Publication Date
KR20070027892A true KR20070027892A (ko) 2007-03-12

Family

ID=38100843

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050079775A KR20070027892A (ko) 2005-08-30 2005-08-30 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기

Country Status (1)

Country Link
KR (1) KR20070027892A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009110701A2 (ko) * 2008-03-03 2009-09-11 Han Seung Yong 청각장애인 등을 위한 알림 시스템
KR101229891B1 (ko) * 2011-05-01 2013-02-14 김준규 휴대단말장치를 이용한 청각장애인을 위한 주위환경 상태 인지 방법 및 장치
KR20210033381A (ko) 2019-09-18 2021-03-26 정상윤 장애인을 위한 위험인자 방향 안내 웨어러블 디바이스
KR20230021490A (ko) * 2021-08-05 2023-02-14 경북대학교 산학협력단 시각을 이용한 청각 보조 시스템 및 청각 보조 방법

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009110701A2 (ko) * 2008-03-03 2009-09-11 Han Seung Yong 청각장애인 등을 위한 알림 시스템
WO2009110701A3 (ko) * 2008-03-03 2009-10-29 Han Seung Yong 청각장애인 등을 위한 알림 시스템
KR101229891B1 (ko) * 2011-05-01 2013-02-14 김준규 휴대단말장치를 이용한 청각장애인을 위한 주위환경 상태 인지 방법 및 장치
KR20210033381A (ko) 2019-09-18 2021-03-26 정상윤 장애인을 위한 위험인자 방향 안내 웨어러블 디바이스
KR20230021490A (ko) * 2021-08-05 2023-02-14 경북대학교 산학협력단 시각을 이용한 청각 보조 시스템 및 청각 보조 방법

Similar Documents

Publication Publication Date Title
KR101981878B1 (ko) 스피치의 방향에 기초한 전자 디바이스의 제어
US10516776B2 (en) Volume adjusting method, system, apparatus and computer storage medium
CN106652996B (zh) 一种提示音生成方法和装置、移动终端
CN103095911B (zh) 一种通过语音唤醒寻找手机的方法及系统
CN108538320B (zh) 录音控制方法和装置、可读存储介质、终端
CN103440862B (zh) 一种语音与音乐合成的方法、装置以及设备
JP2008529101A (ja) 移動通信装置の音声語彙を自動的に拡張するための方法及び装置
JP2001352365A (ja) 移動通信端末装置及びそれに用いる着信識別方法
CN104050966A (zh) 终端设备的语音交互方法和使用该方法的终端设备
JP2007501444A (ja) 信号対雑音比による音声認識方法
CN101668061B (zh) 音频信号处理设备,音频信号处理方法和通信终端
CN108521621A (zh) 信号处理方法、装置、终端、耳机及可读存储介质
JP2005503076A (ja) 電子デバイスに非ネイティブ機能を提供する無線コンパニオン・デバイス
CN101099209A (zh) 正常化音频录音的响度
CN107371102B (zh) 音频播放音量的控制方法、装置及存储介质和移动终端
KR20070027892A (ko) 이동 통신 단말기를 이용한 외부 음향 신호 인식 방법 및상기 방법을 채용한 청각 장애인용 이동 통신 단말기
US20070038457A1 (en) Method and apparatus for extending sound input and output
CN108573260A (zh) 信息处理方法和装置、电子设备、计算机可读存储介质
CN114360546A (zh) 电子设备及其唤醒方法
CN104052872B (zh) 具有铃声辨识功能的电子装置及铃声辨识方法
KR101600429B1 (ko) 환경 상황 적응 방식의 청력 보조 기기 및 멀티미디어 장치 연계를 위한 청력 보조 기기의 제어 방법
JP2004032430A (ja) 制御装置及び制御プログラム
CN111739493B (zh) 音频处理方法、装置及存储介质
JP4100088B2 (ja) 通信端末、着信通知方法およびプログラム
KR100634968B1 (ko) 통신 단말기에서 음성을 통하여 문자를 입력하는 방법 및상기 방법을 채용한 통신 단말기

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination