KR19990037776A

KR19990037776A - 음성인식자동번역및통역장치

Info

Publication number: KR19990037776A
Application number: KR1019990001477A
Authority: KR
Inventors: 고정현
Original assignee: 고정현
Priority date: 1999-01-19
Filing date: 1999-01-19
Publication date: 1999-05-25

Abstract

본 발명은 제1언어와 제2언어의 음성을 입력받아 음성인식에 의해 문자로 변환하고, 변환된 문자를 입력자를 구별하여 LCD모니터에 디스플레이 함과 아울러 상대방 언어로 번역하며, 그 번역된 문자를 디스플레이 함과 아울러 음성신호로 변환시켜 상대방측으로 출력하기 위한 음성인식 자동 번역 및 통역장치에 관한 것이다. 이와같은 본 발명은 제1,제2 음성을 입력/출력하는 음성 입/출력수단과, 인식된 음성의 문자 및 번역된 문자를 표시하는 LCD모니터와, 전체 동작을 조작하기 위한 조작부, 그 조작부의 조작신호에 의해 전체동작을 제어하는 주제어부와, 충전밧데리를 구비한 전원부를 포함하여 본체부로 구성하고, 상호 번역이 필요한 제1,제2 언어의 음성인식 및 번역 프로그램을 내장하고 음성-문자 변환과, 번역 제어를 하는 제어부와, 제1,제2 음성-문자 변환부와, 제1,제2 번역부와, 제1, 제2 언어의 표본 데이터를 문자와 연관시켜 데이터베이스로 구축한 제1,제2 언어 음성-문자 데이터 베이스와, 제1,제2 언어의 번역 데이터베이스를 포함하여 음성인식 및 번역 롬팩으로 구성함에 특징이 있다.

Description

음성인식 자동 번역 및 통역장치{Auto translation and interpretation apparatus using awareness of speech}

본 발명은 음성인식 자동 번역 및 통역기에 관한 것으로, 특히 음성을 입력받아 문자로 표시함과 아울러 그 문자를 다른 외국어로 번역하여 표시하고 번역된 외국어를 그 외국어 음성으로 출력하도록 하여 자동 통역을 할 수 있도록 한 음성인식 자동 번역 및 통역 장치에 관한 것이다.

일반적으로, 외국어를 잘 못하는 사람이 외국 여행이나 외국인과의 대화 및 통화시에 의사 소통이 잘되지 않아 불편함과 어려움을 격는 경우가 많다. 그렇지만 외국어를 잘 아는 다른 사람의 도움 없이는 스스로 사전 또는 회화책자 등을 찾아가며 외국인과 의사 소통을 해야하나 이는 실시간 대응이 어렵고 제대로 의사 소통을 하기가 어려웠다.

최근 들어 컴퓨터 기술의 발달로 자동 번역기가 개발되어, 언어 체계가 비슷한 한국어와 일본어인 경우 그 신뢰성이 높아 실용화 되어 있으며, 영어인 경우 한국어와 언어 체계가 달라 일본어의 경우보다는 번역의 신뢰성이 떨어지나 단문이나간단한 복문 등은 실용적으로 이용할 수 있는 정도의 번역기 및 그 번역 프로그램들이 널리 알려져 있다.

한편, 사람의 음성을 기계가 인식하기 위한 음성인식에 대해서 많은 연구 노력을 기울이고 있는 분야이며, 샘플링 기술의 발달과 신경회로망을 이용한 자기 학습기능 등의 발달로 음성의 자동 인식율이 높아지고 일부 분야에서 실용화되고 있다.

또한, 문자를 음성으로 출력하는 기술은 각 문자의 발음 조합이나 기타 단어의 발음 및 문장의 발음 등을 데이터 베이스 화하여 이를 음성으로 출력하는 음성 출력장치도 이미 널리 이용되고 있다.

그렇지만, 외국인과의 대화시 실시간으로 도움을 받기 위해서는 실시간 통역장치가 필요하나 현재 알려져 있지 않다.

따라서, 본 발명은 입력된 음성을 자동 인식하여 문자 표시를 하고, 그 문자를 외국어로 번역하여 문자 표시함과 아울러 외국어 음성으로 출력하는 음성인식 자동 번역 및 통역장치를 제공하기 위한 것이다.

이와 같은 본 발명의 목적은, 제1언어와 제2언어의 음성을 입력받아 음성인식에 의해 문자로 변환하고, 변환된 문자를 입력자를 구별하여 LCD 모니터에 디스플레이 함과 아울러 상대방 언어로 번역하며, 그 번역된 문자를 디스플레이함과 아울러 음성신호로 변환시켜 상대방측으로 출력하도록 구성함으로써, 달성된다.

이와 같은 본 발명은, 제1제2음성을 입력/출력하는 음성 입/출력수단과, 인식된 음성의 문자 및 번역된 문자를 표시하는 LCD모니터와, 전제 동작을 조작하기 위한 조작부, 그 조작부의 조작신호에 의해 전체동작을 제어하는 주제어와, 충전밧데리를 구비한 전원부를 포함하여 본체부로 구성하고, 상호 번역이 필요한 제1,제2 언어의 음성인식 및 번역 프로그램을 내장하고 음성-문자 변환과, 번역 제어를 하는 제어부와, 제1,제2 음성-문자 변환부와, 제1,제2 번역부와, 제1, 제2 언어의 표본 데이터를 문자와 연관시켜 데이터베이스로 구축한 제1,제2 언어 음성-문자 데이터베이스와, 제1,제2언어의 번역 데이터베이스를 포함하여 음성인식 및 번역 롬팩으로 구성함에 특징이 있다.

이와 같은 본 발명은 상기 음성인식 및 번역 롬팩은 제1, 제2언어별로 각각 구성하고, 상기 본체부에 착탈시켜 필요한 제1,제2언어를 선택할 수 있다. 이에따라 본 발명은 제1 언어를 한국어로, 제2언어를 일본어하여 인식 및 번역 롬팩을 구성한 경우, 일측 사용자가 한국어로 말을 하면, 음성 인식에 의해 한글이 디스플레이 되고, 디스플레이된 한글이 일본어로 자동 번역되어 디스플레이 되며, 그 번역된 일본어가 음성신호로 변환되어 타측 헤드폰 출력단으로 출력된다. 그리고, 타측 사용자가 일본어로 말을 하면, 음성인식에 의해 일본어가 인식되어 디스플레이 되고, 다시 일본어가 한국어로 번역되어 한글이 디스플레이 됨과 아울러 번역된 한글이 음성신호로 일측 헤드폰 출력단으로 출력된다.

이와 같이 본 발명은 한국어와 일본어, 한국어와 영어, 한국어와 불어 등등 제1언어와 제2언어의 인식 및 번역을 위한 모듈을 롬팩으로 구비하여 필요에 따라장착하여 사용할 수 있도록 구성한다. 본 발명은 완벽한 음성인식과 번역 및 통역을 달성하기 위한 것은 아니고, 현재 음성인식 기술과, 자동 번역 기술 및 음성 출력 기술을 이용함과 아울러 이를 쉽게 구현하기 위해서 미리 다양한 표본 발음 데이터 베이스와 기본 번역 데이터 베이스를 구축하여 이를 이용하고, 음성과, 단어 및 번역등 등의 정보를 등록 및 학습 기능을 겸하도록 함으로써, 좀더 현실적으로 실용적인 제품으로 적용할 수 있다.

도 1은 본 발명에 의한 음성인식 자동 번역 및 통역장치 블록 구성도.

도 2는 본 발명에 의한 음성인식 자동 번역 및 통역장치의 외형 예시도.

〈도면의 주요 부분에 대한 부호의 설명〉

100 : 본체부

110, 120 : 제1, 제2 음성입력부

130, 140 : 제1, 제2 음성출력부

150 : 주 제어부

160 : 조작부

161 : 키보드 콘넥터

170 : LCD모니터

180 : 충전 밧데리 및 전원부

200 : 롬팩

210 : 음성-문자변환 및 번역 제어부

220, 230 : 제1, 제2 음성-문자 변환부

240, 250 : 제1, 제2 번역부

260 : 제1, 제2 언어 음성-문자 데이터 베이스

270 : 제1, 제2 언어 번역 데이터 베이스

이하, 본 발명의 실시 예를 첨부된 도면을 참조해서 상세히 설명하면 다음과 같다. 도 1은 본 발명에 의한 음성인식 및 자동 통역 시스템 구성도이고, 도 2는 본 발명의 외형 구성을 보인 예시도 이다.

각 마이크를 통해 입력되는 서로 다른 언어의 음성신호를 각기 디지탈 데이타로 변환하여 입력받는 제1, 제2음성입력부(110)(120)와, 번역된 언어의 문자에 따른 음성신호를 아날로그 신호로 변환하여 각기 대응된 상대방측으로 출력하는 제1, 제2음성출력부(130)(140)와, 음성인식 및 자동 번역장치의 전체 동작을 제어하여 음성 입출력 및 디스플레이 제어와 음성인식 및 번역 모드를 제어하는 주 제어부(150)와, 음성인식 및 자동 번역장치의 동작 및 기능 조작을 위한 조작부(160)와, 음성 인식에 따른 문자와 번역된 문자를 디스플레이 하는 LCD모니터(170)와, 충전밧데리를 구비하여 외부 전원을 충전시킴과 아울러 충전전원을 이용하여 각부의 동작전원을 공급하는 충전 밧데리 및 전원부(180)와, 상기 주제어부(150)의 제어를 받아 입력된 음성데이타를 인식하여 해당되는 문자데이타로 변환하는 제1, 제2 음성-문자 변환부(220)(230)와, 문자로 변환된 언어를 대응된 상대방 언어로 번역하는 제1,제2번역부(240)(250)와, 음성인식 및 인식된 음성의 문자변환과 번역된 문자를 음성으로 출력하기 위해 미리 제1, 제2언어의 음성데이타와 문자 데이터를 베이타 베이스로 구축하여 둔 제1, 제2언어 음성-문자 데이터 베이스(260)와, 제1언어와 제2언어의 번역을 위한 각 언어의 사전 및 번역 정보를 데이터베이스로 구축하여 둔 제1, 제2 언어 번역 데이터 베이스(270)와, 상기 주제어부(150)와 정보를 주고받으면서 상기 데이터베이스(260)(270)를 이용한 음성-문자 변환과 번역을 제어하는 음성-문자변환 및 번역 제어부(210)로 구성된다.

그리고, 본 발명은 별도의 키보드를 연결하여 문자 입력을 할 수 있는 콘넥터(161)를 더포함하여 구성할 수 있으며, 조작부(160)는 전원을 온오프 시켜 동작시작 및 초기화 시키는 전원버튼과, 화면에 디스플레이되는 음성 인식 문자나 번역된 문자를 선택하여 수정할 수 있는 선택버튼, 수정버튼과, 음성 입력된 문자를 반역하기 위한 번역, 번역된 문자를 음성출력하기 위한 음성출력버튼을 별도로 구비할 수 있다. 그리고, 음성 입력에 의한 문자표시나 번역 문자표시에서 정확한 음성인식 또는 정확한 번역이 않된 경우, 즉, 내부 음성인식프로그램과 번역프로그램에서 자동처리하지 못하는 에러부분에 대해서는 임의로 현재 인식문자를 표시함과 아울러 이를 블록 음영으로 표시하여 사용자가 선택하고 이를 재입력/수정하도록 수작업을 지원하며, 간략형 키보드를 배치하여 조합키에 의한 문자입력이나 메뉴표시방식으로 문자입력 등을 지원할수 있도록 구성한다.

이와 같이 구성된 본 발명은, 제1, 제2음성입력부(110),(120)에 각각 마이크를 연결하여 대화자들이 음성을 입력하면, 각 음성 입력부는 입력된 음성을 디지탈 데이터로 변환하여 주제어부(150)에 입력하고, 주 제어부(150)는, 입력된 음성데이타를 음성인식 번역모듈의 음성-문자 변환 및 번역 제어부(210)로 임력된 음성데이타를 전달하며, 제1음성 입력부(110)를 통해 입력된 음성데이타는 제1 음성-문자 변환부(220)에서 제1언어 음성-문자 데이터베이스(260)를 참조하여 음성인식에 따른 문자로 변환한다. 마찬가지로 제2음성 입력부(120)에서 입력된 음성 데이터는 제2음성-문자 변환부(230)에서 제2언어 음성-문자 데이터 베이스(260)를 참조하여 제2언어의 문자로 변환한다. 이와같이 제1, 제2 음성-문자 변환부(220)(230)를 각기 구비하는 이유는 음성인식을 위한 신호처리량이 복잡하고 아울러 언어가 서로다른 음성을 인식하여 대응된 문자로 변환해야 하므로 언어별로 각기 음성-문자 데이터 베이스를 구축하여 두고, 각각 음성에 대한 인식처리를 하기 위한 것이다.

한편, 입력 음성을 인식하여 문자로 변환된 문자 정보는 주제어부(150)를 다시 통하여 LCD모니터(170)에 각기 입력자를 구별하여 디스플레이 된다. 이때 그 디스플레이된 음성인식 문자를 보고 정확히 인식되지 않은 문자에 대해서 또는 잘못 인식된 문자에 대해서 선택키로 블록 선택하여 수정버튼을 누르고 다시 해당 단어만을 음성으로 반복 입력하는 방식으로 정확히 입력한다. 그리고, 음성 입력이 완료되면 문자로 변환된 내용을 자동으로 대응된 언어로 번역한다. 즉, 음성-문자 변환 및 번역 제어부(210)는 문자 변환된 정보를 저장하고 있다가 제1,제2번역부(240)(250)를 통하여 각각의 언어를 각기 대응된 언어로 번역 제어한다.

제1,제2번역부(240)(250)는 서로 대응된 언어를 제1,제2 언어 번역 데이터 베이스(270)에 있는 사전과 번역 데이터 베이스를 이용하여 대응 언어로 번역하고, 그 번역된 내용은 다시 주제어부(150)에 전송되어 LCD모니터(170)에 출력된다.

그리고, 번역된 내용은 다시 제1, 제2 음성-문자 변환부(220)(230)에서 각기 해당 언어를 역으로 음성 정보로 변환하고, 그 음성 정보는 주제어부(150)로 전송되어 제1, 제2음성 출력부(130)(140)를 통해 음성신호로서 출력된다. 따라서, 제1, 제2음성 출력부(130)(140)에서는 각기 상대방 언어의 음성이 출력되므로, 자동 통역 기능을 수행하게 된다.

예를 들어 제1언어를 한국어로, 제2언어를 일본어로 사용하여 자동 번역 및 통역하기 위한 경우, 제1언어와 제2언어가 한국어와 일본어로 세팅되어 데이터 베이스 및 해당 언어의 음성 인식 및 번역 프로그램이 내장된 롬팩(200)을 본체(100)에 장착하고, 전원버튼을 온시키고, 각각의 마이크를 통해 해당 언어로 음성을 입력한다.

제1음성 입력부(110)에 한국어 음성이, 제2 음성 입력부(120)에 일본어 음성이 입력되면, 각기 디지탈 음성 데이터로 변환되어 주제어부(150)를 통하여 롬팩의 음성-문자 변환부에 전송되고, 음성-문자 변환 및 번역 제어부(210)의 제어에 의해서 제1언어인 한국어는 제1음성-문자 변환부(220)에서 음성인식에 따른 한글 문자로 변환되어 LCD모니터(170)의 홀수 라인(A:)에 디스플레이 된다. 일본어는 제2 음성-문자 변환부(230)를 통해서 음성인식 및 문자로 변환되어 LCD모니터(170)의 짝수 라인(B:)에 디스플레이 된다.

이어서, 자동 번역을 수행하게 되면, 제1 번역부(240)와 제2번역부(250)는 각각 한글과 일본어를 각기 일본어와 한국어로 서로 대응해서 번역하고, 번역된 내용이 홀수 라인과 짝수 라인에 대응해서 디스플레이 된다.

그리고, 일본어는 제2음성-문자 변환부(230)에서, 한국어는 제1 음성-문자 변환부(220)에서 각각의 음성 데이타로 변환되고, 그 변환된 음성 데이터는 주제어부(150)를 통하여 서로 대응된 제2, 제1음성 출력부(140)(130)를 통하여 음성신호로서 출력된다.

한편, 롬팩(200)은 제1언어와 제2언어에 따라 각각 별도로 구성하므로, 한국어-일본어, 한국어-영어, 한국어-중국어, 한국어-독일어, 한국어-불어 등등 음성인식과 번역에 대한 프로그램과 해당 음성-문자의 데이터 베이스 및 번역 데이터 베이스를 각기 구축하여 각각의 롬팩으로 구성하고, 이를 필요에 따라 교체 장착하여 다양한 언어에 대응할 수 있도록 한다.

물론, 본 발명에 의한 음성인식과 자동번역은 그 한계가 있으므로 단어번역, 단문번역, 간단한 회화번역 등의 용도로 이용할 수 있도록 미리 해당되는 단어나 문장 등에 대한 다양한 표본 음성의 데이터 베이스화 및 번역 데이터 베이스화가 필요하다. 이렇게 데이터 베이스를 구축하면 간단한 회화나 단어 번역과 음성인식 및 음성 출력이 가능해진다.

이상에서 상세히 설명한 바와 같이 본 발명은 음성 인식에 의해 이를 상대방 언어로 자동번역하고, 번역된 언어를 음성으로 출력하게 되므로, 자동 통역기로서 기능을 수행할 수 있다. 간단한 단어와 단문 또는 간단한 회화 등을 자동 번역 및 통역하여 주므로 여행자나 외국어 공부를 하는 사람이 매우 유용하게 활용할 수 있는 효과가 있다.

Claims

각 마이크를 통해 입력되는 서로 다른 언어의 음성신호를 각기 디지탈 데이타로 변환하여 입력받는 제1, 제2음성입력부(110)(120)와, 번역된 언어의 문자에 따른 음성신호를 아날로그 신호로 변환하여 각기 대응된 상대방측으로 출력하는 제1, 제2음성출력부(130)(140)와, 음성인식 및 자동 번역장치의 전체 동작을 제어하여 음성 입출력 및 디스플레이 제어와 음성인식 및 번역 모드를 제어하는 주 제어부(150)와, 음성인식 및 자동 번역장치의 동작 및 기능 조작을 위한 조작부(160)와, 음성 인식에 따른 문자와 번역된 문자를 디스플레이하는 LCD모니터(170)와, 충전밧데리를 구비하여 외부전원을 충전시킴과 아울러 충전전원을 이용하여 각부의 동작전원을 공급하는 충전 밧데리 및 전원부(180)와, 상기 주제어부(150)의 제어를 받아 입력된 음성데이타를 인식하여 해당되는 문자데이타로 변환하는 제1, 제2 음성-문자 변환부(220)(230)와, 문자로 변환된 언어를 대응된 상대방 언어로 번역하는 제1,제2번역부(240)(250)와, 음성인식 및 인식된 음성의 문자변환과 번역된 문자를 음성으로 출력하기 위해 미리 제1, 제2언어의 음성데이타와 문자 데이터를 베이타 베이스로 구축하여 둔 제1, 제2언어 음성-문자 데이터 베이스(260)와, 제1언어와 제2언어의 번역을 위한 각 언어의 사전 및 번역 정보를 데이터베이스로 구축하여 둔 제1, 제2 언어 번역 데이터 베이스(270)와, 상기 주제어부(150)와 정보를 주고받으면서 상기 데이터베이스(260)(270)를 이용한 음성-문자 변환과 번역을 제어하는 음성-문자변환 및 번역 제어부(210)로 구성된 것을 특징으로 하는 음성인식자동 번역 및 통역장치.
제 1 항에 있어서,

상기 제1, 제2음성입력부(110)(120)와, 상기 제1, 제2음성출력부(130)(140)와, 상기 주 제어부(150)와, 상기 조작부(160)와, 상기 LCD모니터(170)와, 상기 충전 밧데리 및 전원부(180)를 포함하여 본체부(100)로 구성하고,

상기 제1, 제2 음성-문자 변환부(220)(230)와, 제1,제2번역부(240)(250)와, 제1, 제2언어 음성-문자 데이터 베이스(260)와, 제1, 제2 언어 번역 데이터 베이스(270)와, 상기 음성-문자변환 및 번역 제어부(210)를 상기 본체부(100)에 착탈 가능하고, 제1언어와 제2언어별로 각기 해당되는 데이터 베이스와 프로그램을 실장한 롬팩(200)으로 구성한 것을 특징으로 하는 음성인식 자동 번역 및 통역장치.