KR19990088216A - 음성신호로부터도출된워드를표시하는방법 - Google Patents

Abstract

텍스트로 된 개별 워드가 음성 텍스트로부터 인식되고 표시되는 딕테이션(dictation) 시스템에 있어서, 다소의 인식된 워드에 에러가 생기면 이들 에러는 표시된 텍스트에 기초하여 조작자에 의해 정정된다. 워드가 정정될 필요가 있는 지를 보다 빠르게 확인하기 위해, 본 발명에 의하면, 워드에 대한 신뢰성 값을 결정함과 함께, 이들 워드를 상기 신뢰성 값에 의존하여 표시하는 것이 제안되고 있다. 이 표시는 예컨대 상이한 그레이 톤, 상이한 색상, 상이한 글꼴, 또는 밑줄 등의 속성을 포함할 수 있다. 상기 신뢰성 값과 문턱값을 비교하여 신뢰성 값이 문턱값 또는 어떤 문턱값 이하에 놓이는 워드만을 나머지 텍스트와는 상이하게 표시하는 것이 실시 될 수 있다.

Description

음성 신호로부터 도출된 워드를 표시하는 방법{Method of displaying words derived from a speech signal}

본 발명은 음성 신호 입력으로부터 도출된 워드를 표시 장치에 표시하기 위한 방법에 관한 것으로, 각 워드에 대해서는 신뢰성 값이 형성되어 있다.

이러한 방법은 음성 신호로부터 도출된 워드를 스크린 상에 표시하는, 소위 딕테이션(dictation) 시스템으로 주지되어 있다. 딕테이션으로부터 도출된 텍스트를 직접 인쇄하는 것은 통상적으로 실시되고 있지 않은데, 그 이유는 기존에 주지되어 있는 시스템에서는 너무 많은 에러가 발생하기 때문이며, 이들 에러는 먼저 스크린 상에 도시된 테스트에 기초하여 정정되지 않으면 안된다.

이것을 달성하기 위해, 조작자는, 어떤 워드가 시스템에서 불완전하게 인식되고 있는 지를 판정하고 그것을 정정하기 위해서, 말(the spoken)에 귀를 기울이는 동안에도, 기록된 테스트, 즉 음성 신호를 표시된 테스트를 통해 조심스럽게 판독해야만 한다. 이것은 꽤 많은 시간을 필요로 하게 되고, 연설문을 표시 문자로 자동 변환하는데 걸리는 시간 게인(gain)을 부분적으로 상쇄하고 있다.

도 1은 본 발명의 의한 표시 시스템의 일예의 상세도.

* 도면의 주요부분에 대한 부호의 설명 *

14: 프로세싱 디바이스 16: 메모리

20: 제어 디바이스 22: 화상관

본 발명의 목적은 표시 워드로 구성된 텍스트의 간단하고 빠른 정정을 가능하게 하는, 상술한 타입의 방법을 제공하는 것이다.

본 발명에 의하면, 이 목적은 워드를 신뢰성 값에 의존하여 상이한 방식으로 표시함으로써 달성된다.

ICASSP 1995(vol. I, pp 297-300)에는, 음성 신호로부터 도출된 각 워드에 신뢰성 값을 정하는 것이 주지되어 있으며, 예컨대 음성 신호로부터 도출된 워드가, 정보 시스템, 특히 대화 방식을 채택하고 있는 시스템에서 허용되는지, 또는 거부되지를 판정하기 위해 다양한 목적으로 사용되고 있다. 사실상, 이 신뢰성 값도, 워드를 어느 정도 확실하게 인식하고 있는 지에 대한 정도의 평가치이다. 즉, 인식된 워드가 상기 시스템에 저장된 음향 모델에 얼마나 잘 대응하는지, 그리고 언어 모델이 사용되는 경우에는, 인식된 워드 시퀀스의 위치에 이 워드가 발생할 가능성에 대한 평가치이다. 본 발명에 의하면, 이 신뢰성 값은 텍스트에서의 음성 워드가 부정확하게 결정될 가능성을 표시하기 위해 사용되고 있다. 정정 절차 동안에, 낮은 신뢰성 값을 갖는 워드를 시각적으로 강조함으로써, 워드가 부정확하게 인식될 가능성이 있다면, 조작자가 그것을 빠르게 확인할 수 있으므로, 이들 워드를 보다 신속하게 정정할 수 있다.

신뢰성 값에 의존하여 워드를 표시하는 방법에는 여러 가지가 있다. 1가지 방법으로서는, 워드를 신뢰성 값에 의존하는 그레이 톤으로 표시하는 것이다. 다른 방법은 표시된 워드의 칼라를 신뢰성 값에 따라 변화시키는 것이다. 또한, 워드는 또한 신뢰성 값에 따라 상이한 백그라운드에 상이한 글꼴이나 밑줄을 치는 것으로 표시할 수 있다. 본 명세서에서 사용되는 "글꼴(letter type)"이란 통상적으로 상이한 글자의 음영, 볼드 타입, 이탤릭체, 또는 어느 다른 변형 글꼴 등을 포함하고 있다. 각각의 방법은 또한 서로를 조합하여 사용하여도 좋다. 예컨대 상이한 그레이 톤 또는 상이한 칼라 뿐만 아니라 밑줄을 치는 것으로, 매우 낮은 신뢰성 값을 갖는 워드를 표시하여도 좋다.

이와같이 표시를 차별화하는 것은 예컨대 신뢰성 값에 비례하도록 하여도 좋다. 그렇지만, 신뢰성에 대해 적어도 1개의 문턱값이 제공될 때, 특히 상이한 글꼴, 또는 밑줄을 치는 것으로 표시하는 것이 실시될 수 있으며, 이 표시는 문턱값 또는 문턱값들중 1개가 문턱값 아래쪽 값을 초과하는 지에 따라 발생하게 된다. 이렇게 함으로써, (최대) 문턱값 이상의, 충분히 높은 신뢰성 값으로 결정된 워드는 정상적으로 표시되며, 문턱값 이하의 신뢰성 값을 갖는 워드만이 상이한 방식으로 표시되므로, 그러한 워드를 매우 빠르게 인식할 수 있어, 이들 워드의 정정이 필요한 경우에, 그것이 보다 쉬어질 것이다.

본 발명은 문턱값 또는 문적값들이 변경가능한 경우에도 유용하다. 그러한 문턱 값의 변경은, 예컨대 정확하게 인식되었으나 불필요하게 많은 워드가 상이한 방식으로 표시되는 것이 글자에서 발견된 경우에, 조작자에 의해 행해질 수 있다. 그러한 변경은 또한, 근소하지만 신뢰성이 값이 작다는 이유로 상이하게 표시되는 많은 워드가 조작자에 의해 정확한 것으로서 나타나는 경우, 상기 시스템에 의해 자동적으로 실행될 수도 있다.

일반적으로, 표시용 텍스트의 정정은, 테스트의 연속 워드에 커서가 자동적으로 놓일 때, 실행되며, 경우에 따라 이들 워드가 도출되는 저장된 음성 신호의 재생과 병행하여 행해진다. 커서는 예컨대, 키를 조작함으로써, 상이하게 표시되는 워드에 특히 놓일 수 있고, 이 워드를 조작자가 부정확한 것으로 인식하게 되면 정정되게 된다. 또한, EP 0 614 172 A2에 주지된 바와같이, 각 구술 워드(spoken word)로부터 워드를 결정함과 함께 그것을 표시할 뿐만 아니라 1개의 워드 또는 완전한 교체 문장을 교체 워드로 제공하는 시스템이 주지되어 있으며, 그러한 시스템에서는, 커서가 정지되어 있는 워드 근방에 교체 워드가 자동적으로 표시될 때 유용하며, 그들의 신뢰값의 정도(order)에 따라 행하면 좋다. 따라서, 정정이 보다 빠르게 행해진다.

본 발명은 또한 음향 음성 신호 입력으로부터 도출된 워드를 표시 장치에 표시하기 위한 디바이스에 관한 것이며, 음향 음성 신호를 수신하고 또한 상기 신호 및 관련 신뢰성 값으로부터 도출된 워드를 표현하는 데이터를 공급하기 위한 프로세싱 디바이스, 및 상기 데이터를 표시 장치용 제어 신호로 변환하기 위한 제어 디바이스를 구비하고 있다.

본 발명의 목적은, 상기와 같은 장치에 있어서, 경우에 따라 표시 장치에 표시된 워드중에서 부정확하게 되어 있는 워드를 보다 빠르게 인식하기 위한 것이며, 본 발명은 또한 신뢰성 값을 표시하는 데이터를 관련 워드에 대해 발생된, 표시장치용 제어 신호를 변경하기 위한 목적으로 제어 디바이스에 공급하는 것을 특징으로 한다.

인식된 워드의 글자를 표현하는 데이터는 통상 8비트 데이터 워드이다. 이들 데이터는 제어 디바이스에 공급되어 예컨대, 화상관용의 제어 신호로 변환되므로, 상기 워드는 읽기 쉬운 텍스트로 표시되게 된다. 이 목적을 위한 제어 디바이스는 추가의 제어 코맨드를 수신하며, 이 제어 코맨드는 예컨대 어떠한 글자 크기(type size), 글꼴, 색상 등으로 텍스트를 표시할 것인지를 나타내고 있다. 다음에, 제어 디바이스에 공급된 신뢰성 값, 또는 그것으로부터 도출된 데이터는, 워드를 어떻게 표시할 것인지를 결정하기 위한 추가 제어 코맨드로서 제어 디바이스에 공급된다.

이하에서는 도면을 참조하여 본 발명의 일예를 상세히 설명한다. 도 1에서, 가청의 음성 신호가 마이크로폰(10)에서 전자 신호로 변환되고, 이어서 상기 전자 신호는 사전 처리(pre-processing) 유닛(12)에 공급되어 상기 음성 신호를 나타내는 일련의 텍스트 신호로 변환되게 된다. 이들 텍스트 신호는 프로세싱 디바이스(14)에 공급되며, 이 프로세싱 디바이스는 각 텍스트 신호와 다수의 기준 신호 간의 비교를 행하기 위해 메모리(16)로부터 기준 신호를 수신한다. 워드는, 어떤 일련의 기준 신호와 일련의 텍스트 신호 간의 유사도로부터 결정되며, 그 결정을 위해 또 다른 메모리(18)로부터 랭귀지 모델 값이 일반적으로 사용되고 있다. 상기 워드는 메모리(16)에서의 일련의 기준 신호에 의해 정의된다.

이들 워드 또는 이들 워드의 글자는 라인(15)을 통해 제어 디바이스(20)에 연속적으로 공급된다. 이 디바이스는, 제어 코맨드에 의해, 라인(15)을 통한 데이터 신호를 바람직하게는 화상관(22) 용의 제어 신호로 변환하도록 조정되며, 도시하지는 않았지만, 상기 제어 코맨드는 사전에 상기 제어 디바이스에 공급되어 있는 것이 바람직하다.

또한, 개별 워드에 대한 신뢰성 값은, 메모리(16)로부터의 기준 신호와 프로세싱 디바이스(14)에서의 테스트 신호를 비교하는 것에 의해 형성되게 되나, 경우에 따라 메모리(18)로부터의 랭귀지 모델 신호를 사용하기도 하며, 상기 신뢰성 값은 또한 라인(17)을 통해 제어 디바이스(20)에 공급된다. 여기서 상기 신뢰성 값은 상술한 제어 코맨드와 유사하게 조작된다. 즉, 상기 신뢰성 값은, 화상관(22)용 제어 신호의 발생에 있어서, 제어 유닛(20)에 영향을 미치기 때문에, 이들 신뢰성 값에 의존하여 워드가 표시되게 된다. 다음에, 상기 신뢰성 값은 예컨대 프로세싱 디바이스(14)에서의 1개 또는 수 개의 문턱값과 비교되고, 관련 워드의 신뢰성 값이 어떤 문턱 전압 이상 또는 이하로 되었는지를 나타내는 신호만이 라인(17)을 통해 전송된다. 코맨드는, 예컨대, 키보드 등의 입력 디바이스(24)를 통해 프로세싱 디바이스(14)에 전송될 수 있으며, 문턱 값을 변경할 수 있다. 또한, 이 입력 디바이스(24)를 통해, 음성 신호로부터 정확하게 도출되지 못한 워드에 대한 정정 값도 입력된다. 또한 이 입력 디바이스(24)를 통해서 제어 코맨드가 전송될 수도 있으며, 상기 입력 디바이스(24)는 소정의 표시 워드에 대한 교체 워드의 표시를 삭제하거나 이들 교체 워드 중 1개를 선택한다.

본 발명은, 낮은 신뢰성 값을 갖는 워드를 시각적으로 강조하는 것에 의해, 워드가 부정확하게 인식될 가능성이 있다면, 조작자가 그것을 빠르게 확인할 수 있도록 한 것이므로, 부정확하게 표시되는 워드를 보다 신속하게 정정할 수 있다는 효과가 있다.

Claims (10)

1. 음성 신호 입력으로부터 도출된 워드를 표시 장치에 표시하기 위한 방법으로서, 각 워드에 대해 신뢰성 값이 형성되는 워드 표시 방법에 있어서, 상기 워드는 각 신뢰성 값에 따라서 상이하게 표시되는 것을 특징으로 하는 워드 표시 방법.
2. 제 1 항에 있어서, 상기 워드는 상기 신뢰성 값에 의존하는 그레이 톤으로 표시되는 것을 특징으로 하는 워드 표시 방법.
3. 제 1 항에 있어서, 상기 워드는 상기 신뢰성 값에 의존하는 칼라로 표시되는 것을 특징으로 하는 워드 표시 방법.
4. 제 1 항에 있어서, 상기 워드는 상기 신뢰성 값에 의존하는 글꼴(letter type)로 표시되는 것을 특징으로 하는 워드 표시 방법.
5. 제 1 항에 있어서, 상기 워드는 상기 신뢰성 값에 따라 밑줄 그어져 표시되는 것을 특징으로 하는 워드 표시 방법.
6. 제 1 항에 있어서, 상기 워드는 상기 신뢰성 값에 의존하는 백그라운드에서 표시되는 것을 특징으로 하는 워드 표시 방법.
7. 제 1 내지 6 항 중 어느 한 항에 있어서, 상기 신뢰성 값에 대해 적어도 1개의 문턱값이 제공되며, 상기 표시는 상기 문턱값 또는 문턱값들 중 1개가 문턱값 아래쪽 값을 초과하는 지에 따라서 발생하는 것을 특징으로 하는 워드 표시 방법.
8. 제 7 항에 있어서, 상기 문턱값(들)은 변경가능하게 되어 있는 것을 특징으로 하는 워드 표시 방법.
9. 제 7 또는 8 항에 있어서, 상기 음성 신호로부터, 신뢰성이 낮은 값의 대안의 워드가 적어도 다소의 워드에 대해 발생되며, 코맨드의 입력시, 신뢰성 값이 적어도 1개의 문턱값 이하인 워드에 대한 적어도 1개의 대안의 워드가 표시되며, 또 다른 코맨드의 입력시, 상기 워드가 원래 표시된 워드를 교체하기 위해 삽입되는 것을 특징으로 하는 워드 표시 방법.
10. 가청의 음성 신호 입력으로부터 도출된 워드를 표시 장치에 표시하기 위한 장치로서, 상기 장치는:

    - 상기 가청의 음성 신호를 수신함과 함께 상기 음성 신호로부터 도출된 워드와 관련 신뢰성 값을 나타내는 데이터를 공급하기 위한 프로세싱 디바이스(12,14,16,18),

    - 상기 데이터를 상기 표시 장치(22)의 제어 신호로 변환하기 위한 제어 디바이스(20)를 구비하는 워드 표시 디바이스에 있어서,

    상기 신뢰성 값을 나타내는 데이터는, 상기 표시 장치(22)의 관련 워드에 대응하는 제어 신호를 변경하기 위해, 상기 제어 디바이스(20)에 공급되는 것을 특징으로 하는 워드 표시 디바이스.