KR20000014620A - 음성마우스의제어방법 - Google Patents

Abstract

본 발명은 개인용 컴퓨터(PC)에서 보조 입력장치로 많이 사용하고 있는 볼마우스(Ball Mouse)를 대신하여, 음성을 인식하여 마우스 기능을 수행하도록 하는 장치(음성마우스)에 대한 것으로써, 음성인식기술을 이용하여 마우스를 제어할 수 있는 방법을 제공한다. 즉 약 60여 개의 문자, 숫자, 부호단어를 인식대상으로 하여 음성을 판별하여 디지탈(Digital)신호로 컴퓨터 제어부에 유선 또는 무선으로 입력되도록 하는 것이다. 종래의 볼마우스 및 펜마우스(Pen Mouse) 등은 반드시 패드(Pad)가 있어야만 사용할 수 있으며 또 키보드(Key Board)와 마우스를 번갈아 사용할 때 사용자가 번거로웠던 점을 감안, 음성마우스는 우선 패드(Pad)를 놓을 공간이 필요 없고, 정밀한 작업도 가능하게 하며, 작업자는 두 손으로 다른 작업을 수행하면서 말로써 컴퓨터를 사용할 수있게 하여 준다. 이로써 컴퓨터 사용자는 보다 능률적으로 작업할 수 있게 될 것이다.

Description

음성마우스의 제어 방법

본 발명은 개인용 컴퓨터(PC)에서 보조 입력장치로 많이 사용하고 있는 볼마우스(Ball Mouse)를 대신하여, 음성을 인식하여 마우스 기능을 수행하도록 하는 장치(음성마우스)에 관한 것이다. 나날이 발달하는 컴퓨터 기술에 의하여, 과거에는 꿈에 불과했던 음성인식이 오늘에 이르러 다양한 기술들이 개발됨으로써 제한적이나마 인간의 음성을 인식하는 것이 가능하게 되었다. 이에 따라 음성인식기술을 이용한 마우스를 채용하는 것이 가능해 졌으며, 본 발명은 음성마우스를 채용하기 위하여 꼭 필요한, 인간과 음성인식기와의 약속된 명령어 체계에 대한 것으로 현재의 기술이 제공 가능한 수준에서의 제한된 음성인식 범위에서 효율적으로 마우스를 제어할 수 있는 방법을 제공한다. 즉 약 60여개의 문자, 숫자, 부호단어를 인식대상으로 하여, 음성을 판별하여 디지탈(Digital)신호로 컴퓨더(PC)의 마우스 연결 포트(Port)에 유선 또는 무선(무선의 경우는 별도의 무선송수신부가 필요해짐)으로 입력되도록 하는 것이다.

종래의 컴퓨터용 마우스 즉 볼마우스 및 펜마우스(Pen Mouse) 등은 반드시 패드(Pad)가 있어야만 사용할 수 있었으며, 패드 상에서 마우스인 인식부(주로 볼)의 구동을 좌표상의 거리로 인식하여 컴퓨터에 디지탈 신호로 입력해 주는 방식이었다

현재의 마우스는 사용 시에 반드시 패드가 있어야 만이 사용 가능하며, 그에 따라 사용자가 패드를 사용하기 어려운 때 즉 흔들리는 자동차, 기차, 선박 등에서 사용하는 데는 어려움이 있었다. 또 키보드(Key Board)와 마우스를 번갈아 사용할 때 사용자는 번거로움을 느끼게 되었다. 그리고 도면작업 등 보다 정밀한 작업을 수행하려면 보통의 마우스 대신 특별한 전용 마우스를 사용해야만 하였던 것이다. 이러한 점을 동시에 해결하는 방법으로 연구된 것이 음성마우스 이다.

음성마우스는 우선 패드(Pad)를 놓을 공간이 필요없고, 작업자는 두 손으로 다른 작업을 수행하면서 말로써 컴퓨터를 사용할 수 있게 하여 준다. 이로써 컴퓨터 사용자는 보다 능률적으로 작업할 수 있게 될 것이다. 또 음성으로 좌표를 지정하여 주는 방식으로하여 사용자는 정밀한 마우스 작업을 수행할 수 있을 것이며, 사용자가 컴퓨터로부터 상당한 거리를 떨어져서 어떤 작업을 할 경우도 지금까지는 보조자의 지원을 받아 처리했었지만 특히 무선 음성마우스를 사용하면 보조의 필요가 없어지게 된다.

또한 검색을 주로 사용하는 경우 즉 인터넷 컴퓨터(또는 인터넷 텔레비젼), 양방향 텔레비젼 등에서도 음성마우스를 내장형으로 설치하거나, 리모콘(Remocon)에 병합하여 키보드(Key-Board) 없이 사용할 수 있게 될 것이다.

제1도는 본 발명이 적용되는 장치의 연결도.

제2도는 본 발명이 적용되는 장치의 블록 다이아그램.

제3도는 본 발명이 적용도는 장치의 세부 작동 흐름도.

제4도는 본 발명이 적용되어 이용되는 사례 예시도.

이하 첨부된 도면에 의하여 상세히 설명하면 다음과 같다.

제 1도는 본 발명이 적용되는 장치의 연결도 인바, 기존의 개인용 컴퓨터와 동일한 것이며, 단지 마우스만이 볼마우스가 아닌 마이크타입으로 되어 있을 뿐이다. 즉 본 발명이 마우스에 국한된 것임을 알 수 있게 한다.

제 2도는 본 발명이 적용되는 장치의 블록 다이아그램으로 음성인식기술을 이용한 기기들에서 통상적으로 볼 수 있으며, 음성마우스도 여기에서 예외가 아니고, 본 발명은 이 음성마우스에 적용되는 음성제어명령 및 인식대상 단어에 관한 것이다.

제 3도는 본 발명이 적용되는 장치의 세부 작동 흐름도로써 최초에 컴퓨터에 전원이 공급되고 운영체제(OS : Windows 등)가 정상적으로 가동되면, 마우스 프로그램도 정상 가동된다. 이 때 음성마우스의 전원이 켜지고 사용자의 음성명령이 입력되면 음성은 입력부를 거쳐 필터부에서 샘플링이 되고, 아날로그/디지탈 변환부를 거쳐 디지탈 신호가 된후, 해석부에서 판별이 되고, 하나의 유의어로 정의된 후 생성부에서 하나의 디지탈 신호로 생성되어 송신부를 통해 컴퓨터로 입력되는 것이다.

제 4도는 본 발명이 적용되어 이용되는 사례 예시도 인데, 사용자가 컴퓨터의 전원을 켜고, 웹브라우져를 가동시켜, 특허청의 홈페이지에 접속하는 과정을 예시해 보는 것이다. 여기에서 사용되는 명령어는 제1표에서 보이는 것을 제2표에 나열된 인식대상 단어로 보여주게 된다. 사용자는 맨 처음 마우스인 전원을 켜고, 마우스를 언(ON)시킨다(100). 다음 현재 커서의 좌표를 화면에 표시한다(101). 그리고 커서(Cursor)의 위치를 화면의 웹브라우져로 옮긴다(102). 다음 마우스의 1번 버튼을 선택한다(103). 더블클릭(Double Click)하여 웹브라우져가 가동되어 화면에 전시된다(104). 사용자는 북마크(Book-Mark)로 커서의 위치를 이동한다(105). 버튼 1번을 클릭하면 북마크(Book-Mark)내용이 전시된다(106). 북마크에서 특허청의 위치로 이동한다(107). 버튼1번을 클릭하면 특허청의 서버(Server)에 접속을 시도한다(108). 얼마 후 특허청의 홈페이지가 전시된다(109).

본 발명의 중요한 부분은 자연어 중 60여 단어만을 인식하여, 저렴한 음성마우스를 제작 사용할 수 있게 한다는 점이다. (인식 대상의 단어가 많아 질수록 가격은 비싸질 것이다.) 그렇게 하기 위하여 먼저 제1표에서 보이는 바와 같이 마우스에서 필요한 기능을 분석 나열하고 그것에 대응하는 명령어를 부여하였으며, 제2표에서 보이는 바와 같이 명령어를 인식하는 데 필요한 인식대상 음절과 단어를 규정하였다. 이렇게 명령어와 인식 대상어를 나누어 2단계로 인식과정을 거치게 함으로써 음성인식 처리에 대한 부담을 최소화 하였고, 또한 키보드가 없더라도 음성마우스 만으로 컴퓨터 입력기능을 수행할 수 있게 하였다. 다량의 데이타 입력을 주로 수행하는 사용자는 음성마우스만으로는 사실 사용하기가 불편하여, 꼭 키보드를 사용하여야 할 것이나, 주로 검색을 사용하는 일반 사용자 들에게는 키보드와 음성마우스를 병용하거나, 음성마우스만으로도 원하는 작업을 신속하고 효율적으로 수행할 수 있도록 충분히 고려하게 된 것이다.

제 1 표를 보면 기능구분 칸이 있으며, 음성마우스의 작동 여부를 제어하는 명령어가 두개 있음을 알 수 있다. 즉 사용자는 "엠오"는 음성으로 음성마우스의 귀를 열게 되며, "엠에프"라는 음성으로 음성마우스의 귀를 닫을 수 있다. 통상 컴퓨터는 운영체제의 부팅 (Booting)과 함께 마우스 드라이버(Mouse Driver) 프로그램도 가동시켜 주며, 이 때 마우스드라이버는 "엠오"라는 음성명령을 기다리고 있게 된다. 여기에서 온-오프(On-Off) 두개의 명령어를 사용하는 것을 토글스위치(Toggle Switch) 방식으로 하나의 명령어로 사용하며, 처음엔 언(On), 다음엔 오프(Off)로 처리하는 방법도 가능하다.

그 다음 줄엔 커서좌표를 화면에 보여주는 기능인데, 이 기능은 사용자에게 좌표를 보여줌으로써 좌표감각을 익히고, 숙지 되도록 도와주기 위한 것이다.

그 다음 줄엔 마우스 버튼 선택 기능인데, 이 기능은 사용자가 클릭할 버튼을 결정하는 기능이다. 현재 많이 사용되는 마우스는 버튼이 2개 혹은 3개 있는 것으로 여기에서는 3개의 버튼이 있는 것으로 명령어를 설정하였다. 한번 설정된 버튼은 새로운 버튼 선택명령이 입력되기 전까지 유효하게 된다.

그 다음 줄은 버튼의 동작선택 기능인데. 한번 클릭(Click), 두번 클릭(Double Click), 드래그앤드드롭(Drag and Drop) 세가지를 설정하였다.

그 다음 줄은 커서이동에 관한 기능으로 세가지 방법에 의하여 커서를 이동할 수 있게 하였다. 첫번째 좌표이동 방식은 음성으로 이동해 갈 목표지점의 좌표를 입력하는 방식이며, 화면의 좌표에 익숙해 짐에 따라 가장 많이 사용될 방식이라 생각되며, 둘째로 거리이동 방식은 이동해가야 할 거리를 음성 입력하여 상하좌우로 이동해가는 것이며, 세째로 지향 운전식은 이동해 갈 방향을 시계(Clock)의 기판에 보이는 숫자를 방향으로 입력하여 움직여 가게하고, 방향을 바꿔가며, 이동을 진행시키거나, 정지시켜 가는 방식이다. 여기에서는 이동속도를 정해주는 명령어를 두어 사용자가 적절히 구사할 수 있게 하였다. 그 다음은 화면 키보드 기능인데, 화면에 키보드(자판)을 보여주고 화면키보드에서 입력하거나 음성으로 입력할 수 있게 하였다. 여기에서는 키보드기능이 시작되거나 끝낼수 있는 명령어와 함께, 글자판 동시 누름을 허용하였다.

그 다음은 저장 기능인데 자주 사용되는 복수개의 명령어 군을 하나의 펑션(Function)에 기억하여, 수행시킬 수 있도록 하였고, 여기에는 저장기능과 수행시키는 명령어가 준비되어 있다.

그 다음은 기타사항으로 커서의 움직임 단위를 가상의 화면눈금으로 하여 크기를 정해주도록 하였고, 또 바로 전의 명령을 취소하는 기능과 동작불능 시의 상황을 에러(Error)음으로 표시할 수 있게 하였다. 이렇게 32개인 명령어가 있으며, 대다수인 사용자는 십오륙(15-16)개의 명령어를 구사하여 작업을 수행시킬 수 있는 것이다.

제 2 표는 음성인식 대상이 되는 알파벳과 숫자, 문자를 한국어로 사용할 경우와 영어로 사용할 경우로 나누어 정리하였다. 사용빈도수가 많은 것 중에서 누락 된 것이 있다면, 추가하면 될 것이다. 국제화 시대를 맞아 한국인도 영어권과 같은 명령어를 사용하게 되면 향후 소프트웨어(Software) 개발에서나 하드웨어(Hardware) 사용에 있어서도 보다 유리할 것으로 생각하여, 영어위주로 편성하였다.

본 발명에 의한 음성마우스를 사용하는 데는 약 30분 정도의 숙지 시간이 필요하고, 두 세시간 정도를 사용하다 보면, 벌써 사용하는데 무리가 없을 정도로 사용자가 쉽게 접근할 수 있는 시스템 이라 할 것이다.

제 1 표 본 발명의 적용시 필요한 기능 명세 및 명령어 일람표.

제2표 본 발명의 적용 시에 필요한 음성인식대상 단어 일람표.

상기와 같은 본 발명은 아래와 같은 효과가 있다.

첫째, 마우스를 사용하는 공간을 줄여주며, 마우스패드(Mouse Pad)를 사용할 수 없는 환경에서도 마우스를 쓸 수 있다.

둘째, 마우스의 제어기능이 확대되어, 사람과 컴퓨터사이에 다양한 방식의 인터페이스가 가능해지며 따라서 게임소프트웨어에도 게임진행 방식 등이 다채로워질 수 있다. 즉 향후의 소프트웨어 기술발전을 촉진하게 되는 것이다.

셋째, 점점 컴퓨터화 되어가는 가전기기, 산업기기 등 에도 적용할 수 있으며, 전화를 연결하면 공간을 뛰어넘어 다양한 기능을 구현할 수 있다.

Claims (7)

1. 음성마우스를 장착한 컴퓨터의 사용에 있어서 음성마우스가 갖추어야 할 기능 명세와 이것을 명령어들과 인식대상 음절, 단어 등의 2단계로 분리하여 제어할 수 있게 한 방법 즉 음성마우스가 동작하기 위하여 필요한 기능과 이에 대응하는 명령어와 인식대상 음절, 단어를 정하여, 2단계 절차로 만든 음성마우스의 제어방법.
2. 제1 항의 음성마우스의 기능 중에서 커서 이동방식을 좌표지정방식으로 할 수 있게 한 제어 방법.
3. 제 1 항의 음성마우스의 기능 중에서 커서 이동방식을 거리이동방식으로 할 수 있게 한 제어 방법.
4. 제 1 항의 음성마우스의 기능 중에서 커서 이동방식을 지향운전방식으로 할 수 있게 한 제어 방법.
5. 제 3 항의 지향운전방식에서 시계판의 12가지 방향으로 운전방향을 지정할 수 있게 하고, 이동속도를 사용자가 지정할 수 있게 한 제어 방법.
6. 제 1 항의 음성마우스의 기능 중에서 저장기능 및 화면의 눈금크기를 지정하여 정밀작업에도 사용이 용이하게 한 제어 방법.
7. 제 1 항의 인식대상 단어 음절을 최소한으로 하여 사용할 수 있게 하고, 국제화를 대비 영어를 기준으로 사용할 수 있게 한 제어 방법.