KR101067612B1 - 음성을 이용한 화면의 디스플레이 상태 제어장치 및 그 제어방법 - Google Patents

Abstract

본 발명은 음성을 이용한 화면 디스플레이 상태 제어장치 및 그 제어방법에 관한 것으로, 이러한 본 발명은 영상표시기기 화면의 외부패널에 X-Y 눈금좌표부를 구성하거나, 또는 영상표시기기의 화면내(또는 가장자리부분)에 X-Y 눈금좌표부(또는 눈금안내선)가 디스플레이되도록 구성한 것으로, 이를 통해 사용자가 눈금좌표부를 통해 음성으로 X-Y의 좌표를 지정시 그 지정된 좌표로 포인터의 이동이 실시간 이루어지도록 하는 한편, 또 다른 제어의 음성명령으로부터 포인터의 위치에 링크되는 프로그램 실행이 오류없이 이루어지도록 하면서 사용상의 편의성을 높인 것이다.

영상표시기기, 눈금좌표부, 좌표지정포인터

Description

음성을 이용한 화면의 디스플레이 상태 제어장치 및 그 제어방법{Screen display state control device and the control method that use voice}

본 발명은 음성을 이용하여 화면의 디스플레이 상태를 제어하는 기술에 관한 것으로서, 보다 상세하게는 사용자가 음성으로 x-y의 좌표정보를 입력할 때 그 입력되는 x-y 좌표에 위치하여 링크되는 프로그램이나 커맨드가 선택되어 실행되도록 하는 음성을 이용한 화면의 디스플레이 상태 제어장치 및 그 제어방법에 관한 것이다.

일반적으로, 영상표시기기(예; 모니터, TV 등)는 본체에 유선 또는 무선으로 연결되는 마우스나 키보드의 입력수단을 통해 제어명령을 입력시, 그 입력되는 제어명령에 따라 구동하는 프로그램의 화면을 표시하여 주는 것이다.

이때, 상기 키보드는 ↑키, ↓키, ←키 및 →키 등의 화살표키를 이용하여 포인터(커서)의 위치를 변경하는 것이고, 상기 마우스는 마우스의 움직임에 따라 마우스 포인터가 연동되도록 한 것이다.

또한, 종래에는 입력수단으로서 터치패드가 적용되는 영상표시기기가 제안되고 있으며, 이러한 영상표시기기는 사용자가 손가락이나 도구(예; 터치펜)을 통해 화면을 터치함으로써 프로그램 실행이 이루어지는 것이다.

그러나, 상기 마우스 또는 키보드와 같은 입력수단이 연결되는 영상표시기기는 물론, 터치패드가 적용되는 영상표시기기는 사용자가 반드시 손을 사용해야 하는 바, 입력수단의 조작시간이 많이 걸리는 단점이 있음은 물론, 신체결함이 있는 사용자(예; 장애인)의 경우에는 그 사용이 불가능할 수 밖에 없었다.

이에 종래에는 영상표시기기에 음성모듈을 탑재하여 음성으로 명령을 입력하는 기술이 개발되기에 이르렀다.

일예로, 다수의 웹페이지가 링크되는 사이트의 화면에서 사용자가 음성을 통해 마우스 포인터의 위치를 이동시키고자 하는 경우, 종래에는 사용자가 상,하,좌,우의 방향을 설정하는 음성을 입력하여 마우스 포인터를 이동시키는 것에 한정되어 있었으며, 이에따라 사용자가 원하는 위치로 마우스 포인터를 정확하게 이동시키기 위해서는 여러번에 걸쳐 음성명령을 입력해야 하는 불편함이 있다.

더불어, 종래의 음성입력방식은 마우스 포인터라는 대상이 존재할 경우 이에따른 링크 정보의 열람은 시간이 걸리더라도 가능한 반면, 마우스 포인터가 존재하지 않은 영상표시기기에 있어서는 화면의 디스플레이 상태를 음성 명령의 입력을 통해서는 전혀 구현할 수 없었다.

즉, 차량에 탑재되는 터치 기능의 네비게이션과 같이 마우스 포인터가 존재하지 않을 경우, 이에 음성모듈을 탑재한다 하더라도 이는 화면에 디스플레이되는 메뉴 선택과, 경로설정과 같이 기 설정된 프로그램에 따라 진행할 수 있지만, 화면에 디스플레이되는 지도에서 특정위치에 대한 화면의 확대/축소는 물론, 상세정보 (예; 업체 전화번호 등)의 열람을 하고자 하는 경우 사용자가 직접 손가락이나 도구(예; 터치펜)을 사용하여 특정위치의 화면을 터치할 수 밖에 없는데, 이는 차량이 운행중인 상태에서의 안전운전에 상당한 영향을 미칠 수 밖에 없다.

따라서, 본 발명은 상기와 같은 종래의 문제를 해결하기 위해 안출된 것으로 그 목적은, 영상표시기기 화면의 외부패널에 x-y의 눈금좌표부(또는 눈금안내선)를 구성하거나, 또는 영상표시기기의 화면내(또는 가장자리부분)에 X-Y 눈금좌표부(또는 눈금안내선)가 디스플레이되도록 구성함으로써, 사용자가 눈금좌표부를 통해 음성으로 X-Y의 좌표를 지정시 그 지정된 좌표로 마우스 포인터를 실시간 이동시켜 링크 프로그램이나 커맨드가 선택되어 실행되도록 하는 음성을 이용한 화면 디스플레이 상태 제어장치 및 그 제어방법을 제공하는 것이다.

본 발명의 또 다른 목적으로는, 마우스 포인터가 구현되지 못하는 네비게이션과 같은 영상표시기기의 화면에서도 음성에 의한 x-y 좌표 지정을 통해 링크 프로그램이나 커맨드가 선택되어 실행되도록 하려는 것이다.

상기 목적 달성을 위한 본 발명 음성을 이용한 화면 디스플레이 상태 제어장치는, 링크 프로그램이나 커맨드를 가지는 화면의 디스플레이가 이루어지고, 이동 가능한 좌표지정포인터를 디스플레이시키는 화면표시부; 상기 좌표지정포인터의 x-y 좌표 이동을 위한 음성명령이 가능하도록 하고, 상기 입력되는 음성명령을 디지털신호로 변환하여 출력하는 신호처리부; 상기 신호처리부에 의해 출력되는 디지털의 음성신호로부터 x-y 좌표를 인식하고, 상기 좌표지정포인터를 상기 인식된 x-y 좌표로 이동시켜 링크된 프로그램이나 커맨드의 화면 출력을 제어하는 음성제어부; 를 포함하여 구성하고, 상기 화면표시부에는 상기 좌표지정포인터의 이동을 위한 상기 x-y 좌표값을 음성으로 입력할 수 있도록 하는 x-y의 눈금좌표부를 구성한 것이다.

또한, 상기 x-y 눈금좌표부의 열람으로부터 x-y 좌표가 음성으로 입력될 때 이에 대응하는 상기 화면표시부의 전체 좌표정보는 기 설정되고, 상기 설정된 좌표정보는 메모리부에 저장되도록 구성하였다.

또한, 상기 좌표지정포인터는 마우스 포인터인 것이다.

또한, 상기 좌표지정포인터는 상기 음성제어부에 의해 실행되는 그래픽인 것이다.

또한, 상기 눈금좌표부는 상기 화면표시부를 감싸는 프레임에 인쇄되어 구성된 것이다.

또한, 상기 눈금좌표부는 식별력을 높이도록 표면에 자체 발광이 가능한 물질이 도포된 것이다.

또한, 상기 눈금좌표부는 상기 화면표시부내에서 구동프로그램에 의해 디스플레이되도록 구성된다.

또한, 상기 화면표시부는 컴퓨터 모니터, 이동통신단말기, 네비게이션 단말기, TV에 구성되는 것이다.

그리고, 상기 음성을 이용한 화면 디스플레이 상태 제어방법은, 음성 입력시, 입력되는 음성이 좌표설정 또는 링크프로그램이나 커맨드 명령인가를 판단하는 제 1 단계; 상기 제 1 단계의 판단결과 링크프로그램이나 커맨드 명령이면 화면표 시부에 디스플레이되는 좌표지정포인터의 위치를 분석 및 판단하는 제 2 단계; 상기 제 1 단계의 판단결과 좌표 설정이면 화면표시부에 디스플레이되는 좌표지정포인터를 설정되는 x-y좌표로 이동시키는 제 3 단계; 및, 상기 제 2,3 단계로부터 좌표지정포인터가 링크프로그램이나 커맨드 명령에 위치하면, 상기 링크프로그램이나 커맨드를 실행시켜 화면 출력이 이루어지도록 하는 제 4 단계; 를 포함하여 진행된다.

또한, 상기 제 4 단계에서, 좌표지정포인터가 x-y좌표로 이동하여 링크프로그램이나 커맨드 명령에 위치할 때 그 실행을 위한 음성입력이 있는가를 판단하는 단계; 상기 판단결과 링크프로그램이나 커맨드의 실행 음성명령이면 상기 링크프로그램이나 커맨드의 실행에 해당되는 화면을 출력하고, 상기 판단결과 링크프로그램이나 커맨드의 실행 음성명령이 아니면 청구항 10에 해당되는 제 1 단계로의 리턴이 이루어지도록 하는 단계; 를 더 포함하여 진행하는 것이다.

이 같은 본 발명은 영상표시기기 화면의 외부패널에 X-Y 눈금좌표부를 구성하거나, 또는 영상표시기기의 화면내(또는 가장자리부분)에 X-Y 눈금좌표부(또는 눈금안내선)가 디스플레이되도록 구성한 것으로, 이를 통해 사용자가 눈금좌표부를 통해 음성으로 X-Y의 좌표를 지정시 그 지정된 좌표로 포인터의 이동이 실시간 이루어지도록 하는 한편, 또 다른 제어의 음성명령으로부터 포인터의 위치에 링크되는 프로그램 실행이 오류없이 이루어지도록 하면서 사용상의 편의성을 높이는 효과를 기대할 수 있다.

일예로서, 본 발명을 터치패드가 적용되는 네비게이션 단말기에 적용하여, 운전자가 음성으로 네비게이션 단말기의 화면에 디스플레이되는 맵의 특정위치를 확대하거나 또는 축소 또는 변경하는 명령을 x-y의 음성 좌표값으로부터 가능하도록 한 것인 바, 이에따라 운전자가 전방을 주시해야 하는 방해요소를 일정부분을 해소시키는 효과를 창출할 수 있는 것이다.

이하, 첨부된 도면에 의하여 본 발명의 실시예를 설명하면 다음과 같다.

도 1은 본 발명의 실시예로 음성을 이용한 화면 디스플레이 상태 제어장치의 구성을 보인 개략적인 블럭 구성도이고, 도 2는 본 발명의 실시예로 프레임에 형성된 눈금좌표부와 눈금안내선을 통해 좌표지정포인터를 이동시킨 상태의 화면도를 도시한 것이다.

도 1 및 도 2를 참조하면, 본 발명의 실시예에 따른 음성을 이용한 화면 디스플레이 상태 제어장치는, 화면표시부(10), 신호처리부(20), 음성제어부(30), 그리고 눈금좌표부(40)를 포함한다.

상기 화면표시부(10)는 컴퓨터 모니터, 이동통신 단말기, 네비게이션 단말기, TV 등에 구성되는 것으로, 프레임(60)에 의해 보호된다.

이때, 상기 화면표시부(10)에는 첨부된 도 2에서와 같이 링크 프로그램이나 커맨드를 가지는 화면의 디스플레이가 이루어짐은 물론, 이동 가능한 좌표지정포인터(P)가 디스플레이된 것으로, 상기 좌표지정포인터(P)는 구동프로그램에 의해 상기 화면표시부(10)에 디스플레이되는 것이다.

여기서, 상기 화면표시부(10)가 컴퓨터 모니터에 구성된 것이면, 상기 좌표지정포인터(P)는 상기 컴퓨터의 본체에 연결되는 마우스의 움직임에 따라 연동 디스플레이가 이루어지는 마우스 포인터이고, 상기 화면표시부(10)가 네비게이션 단말기나 TV로서 마우스 연결이 여의치 않을 경우 상기 좌표지정포인터(P)는 상기 음성제어부(30)에 의해 실행되는 그래픽인 것이다.

상기 신호처리부(20)는 상기 좌표지정포인터(P)의 x-y 좌표 이동을 위한 음성명령이 가능하도록 하고, 상기 입력되는 음성명령을 디지털신호로 변환 출력하도록 구성된다.

이때, 상기 음성입력은 마이크(MIC)를 통해 이루어지며, 도면에는 도시하지 않았지만 상기 신호처리부(20)는 통상적으로 상기 마이크(MIC)를 통해 입력되는 음성에서 노이즈를 제거하는 필터부는 물론, 상기 필터부에 의해 노이즈가 제거되는 음성신호를 분석하는 기능, 그리고 상기 아날로그의 음성신호를 디지털신호로 변환하여 출력하는 신호변환부가 구성된다.

상기 음성제어부(30)는 상기 신호처리부(20)에 의해 출력되는 디지털의 음성신호로부터 x-y 좌표를 인식하고, 상기 좌표지정포인터(P)를 상기 인식된 x-y 좌표로 이동시켜 링크 프로그램이나 커맨드의 화면 출력이 이루어지도록 세팅이 이루어진 제어프로그램에 따라 제어동작을 수행하도록 구성된다.

이때, 상기 음성제어부(30)의 내부 또는 외부에는 별도의 메모리부(50)가 구성되며, 상기 메모리부(50)는 상기 화면표시부(10)의 전체 화면에 대한 x-y의 좌표값 전체를 저장하고, 이에따라 상기 음성제어부(30)는 상기 x-y 눈금좌표부(40)의 열람으로부터 x-y 좌표가 음성으로 입력될 때 이에 대응하는 상기 화면표시부(10)의 전체 좌표정보를 탐색하게 되는 것이다.

여기서, 상기 음성입력부(10)와 신호처리부(20) 및 음성제어부(30)는 하나의 모듈로 구성할 수도 있다.

상기 눈금좌표부(40)는 상기 화면표시부(10)의 외곽을 둘러싼 프레임(60)에 인쇄된 것으로, 그 표면에는 식별력을 높이도록 발광이 가능한 물질이 도포되어 있거나, 화면표시부(10)에 x-y 눈금안내선을 인쇄 또는 그래픽 처리의 구동프로그램을 통해 별도로 디스플레이하여, 상기 좌표지정포인터(P)를 상기 화면표시부(10)에서 이동시킬 위치를 지정할 수 있도록 사용자가 음성으로 x-y 좌표값을 입력할 수 있도록 구성된 것이다.

즉, 상기 화면표시부(10)에는 상기 x-y의 눈금좌표부(40)에 대응하는 눈금안내선이 인쇄패턴으로 또는 그래픽 처리기법으로 디스플레이되는 것이다.

여기서, 상기 눈금좌표부(40)와 눈금안내선은 각각 별도 구성하여 사용하거나, 또는 동시에 구성하여 사용할 수도 있는 것이다.

따라서, 상기 본 발명의 실시예에 따른 음성을 이용한 화면 디스플레이 상태를 제어하는 것에 있어서의 동작을 첨부된 도 1 및 도 2와 도 4를 참조하여 설명하면 다음과 같다.

우선, 사용자가 화면표시부(10)를 감싸는 프레임(60)에 인쇄되는 눈금좌표부(40)나 화면표시부(10)에 나타난 x-y의 눈금안내선을 통해 상기 화면표시부(10)에 디스플레이되는 좌표지정포인터(P)의 이동위치를 파악한다.

다음으로, 사용자가 마이크(MIC)를 통해 상기 좌표지정포인터(P)가 이동할 x-y좌표값을 음성으로 신호처리부(20)에 입력한다.

그러면, 상기 신호처리부(20)에 입력되는 음성의 x-y 좌표값은 전기적신호로 변환된 후 다시 디지털신호로 변환되어 음성제어부(30)에 출력된다.

다음으로, 상기 음성제어부(30)는 첨부된 도 2에서와 같이 x-y 좌표의 이동을 위한 상기 디지털신호에 따라 현재 화면표시부(10)에 디스플레이되는 좌표지정포인터(P)의 현재 위치에 대한 x-y 좌표를 산출하는 한편, 상기 산출된 x-y 좌표에 위치하는 상기 좌표지정포인터(P)를 음성입력에 따른 x-y 좌표(P')로 실시간 이동(P→P')시키게 되는 것이다.

이때, 상기 화면표시부(10)에서 좌표지정포인터(P→P')의 이동이 이루어질 때, 상기 이동된 좌표지정포인터(P')의 x-y 좌표에 링크 프로그램이나 커맨드가 존재하지 않을 경우, 상기 음성제어부(30)는 상기 화면표시부(10)에 상기 x-y 좌표를 재지정하라는 오류메세지를 출력하도록 하였다.

그리고, 상기 이동된 좌표지정포인터(P')의 x-y 좌표에 링크 프로그램이나 커맨드가 존재하는 경우에 있어서는, 상기 음성제어부(30)는 상기 좌표지정포인터(P')가 위치하는 링크 프로그램이나 커맨드를 상기 화면표시부(10)를 통해 화면 출력시키는 제어동작을 수행하게 됨으로써, 사용자는 전혀 손이나 도구를 사용하지 않고 상기 화면표시부(10)의 화면 디스플레이 상태를 음성명령만으로 원하는 디스플레이 상태로 변경시킬 수 있게 되는 것이다.

한편, 도 3은 상기 화면표시부(10)내에 그래픽 처리기법으로 눈금안내선과 눈금좌표부(40')을 디스플레이시킨 것으로, 이하 본 발명의 실시예에서와 그 작용은 동일하므로 중복되는 설명은 생략하기로 한다.

여기서, 본 발명의 실시예에 따른 화면 디스플레이 제어방법에 있어서, 사용자가 입력하는 음성이 좌표설정이 아니라 링크프로그램이나 커맨드 명령인 경우, 상기 음성제어부(30)는 화면표시부(10)에 디스플레이되는 좌표지정포인터(P')의 위치를 분석 및 판단하게 되며, 상기 판단결과 좌표지정포인터(P')가 원하는 위치 즉, 링크프로그램이나 커맨드 실행을 위한 위치에 존재하는 경우 사용자는 재차 마이크(MIC)를 통해 실행의 명령을 입력시킨다.

그러면, 상기 실행의 명령으로부터 상기 음성제어부(30)는 좌표지정포인터(P')에 위치하는 링크프로그램이나 커맨드를 실행시키고, 이에따라 화면출력부(10)에서는 상기 링크프로그램이나 커맨드에 해당하는 화면 출력이 이루어질 수 있는 것이다.

이하, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와같은 변경은 청구범위 기재의 범위내에 있게 된다.

도 1은 본 발명의 실시예로 음성을 이용한 화면 디스플레이 상태 제어장치의 구성을 보인 개략적인 블럭 구성도.

도 2는 본 발명의 실시예로 프레임에 형성된 눈금좌표부와 눈금안내선을 통해 좌표지정포인터를 이동시킨 상태의 화면도.

도 3은 본 발명의 실시예로 화면표시부에 그래픽 처리된 눈금좌표부와 눈금안내선을 통해 좌표지정포인터를 이동시킨 상태의 화면도.

도 4는 본 발명의 실시예로 음성을 이용한 화면 디스플레이 상태 제어방법을 보인 흐름도.

*도면의 주요부분에 대한 부호의 설명*

10; 화면표시부 20; 신호처리부

30; 음성제어부 40,40'; 눈금좌표부

50; 메모리부 60; 프레임

P,P'; 좌표지정포인터

Claims (11)

1. 마우스 포인터가 존재하지 않는 영상표시기기인 네비게이션 단말기를 구성함에 있어서,

   상기 네비게이션 단말기에는, 링크 프로그램이나 커맨드를 가지는 화면 디스플레이가 이루어지고, 이동 가능한 좌표지정포인터가 디스플레이되는 화면표시부; 상기 좌표지정포인터의 x-y 좌표 이동을 위한 음성명령이 가능하도록 하고, 상기 입력되는 음성명령을 디지털신호로 변환하여 출력하는 신호처리부; 상기 신호처리부에 의해 출력되는 디지털의 음성신호로부터 x-y 좌표를 인식하고, 상기 좌표지정포인터를 상기 인식된 x-y 좌표로 이동시켜 링크 프로그램이나 커맨드의 화면 출력을 제어하는 음성제어부; 를 포함하여 구성하고,

   상기 화면표시부에는 상기 좌표지정포인터의 이동을 위한 상기 x-y 좌표값을 음성으로 입력할 수 있도록 하는 x-y의 눈금좌표부를 구성하되, 상기 x-y의 눈금좌표부는 상기 화면표시부를 감싸는 프레임에 인쇄하여 구성하고, 상기 눈금좌표부는 식별력을 높이도록 표면에 자체 발광이 가능한 물질을 도포하여 구성하며,

   상기 좌표지정포인터는 상기 음성제어부에 의해 실행되는 그래픽인 것을 특징으로 하는 음성을 이용한 화면 디스플레이 상태 제어장치.
2. 삭제
3. 제 1 항에 있어서, 상기 화면표시부에는 상기 x-y의 눈금좌표부에 대응하는 눈금안내선을 인쇄시켜 구성하는 것을 특징으로 하는 음성을 이용한 화면 디스플레이 상태 제어장치.
4. 삭제
5. 삭제
6. 제 1 항에 있어서, 상기 화면표시부에는,

   그래픽 처리의 구동프로그램으로 상기 x-y의 눈금좌표부에 대응하는 눈금안내선이 디스플레이되도록 구성하는 것을 특징으로 하는 음성을 이용한 화면 디스플레이 상태 제어장치.
7. 제 1 항에 있어서, 상기 x-y 눈금좌표부의 열람으로부터 x-y 좌표가 음성으로 입력될 때 이에 대응하는 상기 화면표시부의 전체 좌표정보는 기 설정되고, 상기 설정된 좌표정보는 메모리부에 저장되도록 구성하는 것을 특징으로 하는 음성을 이용한 화면 디스플레이 상태 제어장치.
8. 삭제
9. 삭제
10. 삭제
11. 삭제

Images