KR102378503B1 - 무형 마우스를 통한 정보의 입출력 방법 및 비일시성의 컴퓨터 판독 가능 기록 매체 - Google Patents

Abstract

본 발명은 터치 입력 장치를 통해 감지된 사용자 손의 터치에 대한 센싱 결과로부터 사용자의 손꿈치 및 손가락 위치를 검출하는 단계와; 상기 위치 검출 결과를 근거로 가상의 기준원을 설정하는 단계와; 상기 기준원의 중심을 마우스 포인터의 위치로 설정하여 디스플레이하는 단계; 및 상기 손가락 및 손꿈치의 위치 변화에 대한 센싱 결과를 근거로 상기 마우스 포인터의 위치를 이동시키는 단계;를 포함하는, 무형 마우스를 통한 정보의 입출력 방법 및 이를 실행하기 위한 프로그램 코드가 기록된 비일시성의 컴퓨터 판독 가능 기록 매체에 관한 것이다.

Description

무형 마우스를 통한 정보의 입출력 방법 및 비일시성의 컴퓨터 판독 가능 기록 매체 {Method and non-transitory computer-readable recording medium for inputting and outputting information using virtual mouse}

본 발명은 사용자가 유형의 마우스 장치를 손에 쥐지 않고 가상의 무형 마우스를 통해 정보를 입출력하기 위한 방법 및 비일시성의 컴퓨터 판독 가능 기록 매체에 관한 것이다.

컴퓨터와 같은 시스템에 정보를 입력하기 위해 마우스 등과 같은 사용자 입력 장치들이 수십년간 이용되어 왔다. 마우스 장치는 화면 상의 포인터를 이동시키거나 특정 명령을 입력하기 위하여 유선 또는 무선 연결을 통해 컴퓨터로 입력 신호를 제공한다. 사용자가 평면 위에서 마우스를 움직임에 따라 화면 상의 포인터는 그에 대응되게 움직이게 된다. 아울러, 화면상에 표시된 아이템(item)상으로 포인터를 이동시키고 마우스에 설치된 하나 또는 그 이상의 스위치를 동작(클릭)시킴으로써 그 표시된 아이템을 선택하거나 실행 명령을 입력할 수 있다.

최근 노트북 컴퓨터와 같은 모바일 기기의 사용이 활성화됨에 따라 마우스를 이용한 입력 대신에 터치 패드, 터치 스크린과 같이 입력 장치들이 모바일 기기에 장착되고 있는데, 이와 같은 입력 장치의 경우 전통적인 마우스 장치를 통한 입력 방식과 상이하고 복잡한 작업을 수행하기 어려워 사용에 불편함을 호소하는 사용자들이 많이 있다. 또한, 기존의 마우스를 사용할 경우 오랫동안 사용하였을 때 손목에 무리를 주는 단점이 존재한다.

등록특허공보 제10-1169583호 (2012.07.31.)

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 사용자가 유형의 마우스 장치를 손에 쥐지 않고 가상의 무형 마우스를 통해 마우스 포인터의 이동 등 각종 정보를 입력하고 그에 대응되는 정보를 출력하는 방법을 제공하는 것을 기술적 과제로 한다.

본 발명이 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

본 발명의 일 실시예에 따르면, 터치 입력 장치를 통해 감지된 사용자 손의 터치에 대한 센싱 결과로부터 사용자의 손꿈치 및 손가락 위치를 검출하는 단계와; 상기 위치 검출 결과를 근거로 가상의 기준원을 설정하는 단계와; 상기 기준원의 중심을 마우스 포인터의 위치로 설정하여 디스플레이하는 단계; 및 상기 손가락 및 손꿈치의 위치 변화에 대한 센싱 결과를 근거로 상기 마우스 포인터의 위치를 이동시키는 단계;를 포함하는, 무형 마우스를 통한 정보의 입출력 방법이 개시된다.

또한, 상기 기준원은 사용자의 손꿈치의 중심과 중지 사이의 거리를 직경으로 가질 수 있다.

또한, 상기 기준원은 사용자의 손꿈치의 접촉 부위가 이루는 호의 곡률을 곡률 반경으로 가질 수 있다.

또한, 상기 마우스 포인터의 위치를 이동시키는 단계는, 사용자 손의 중지 및 손꿈치 중 적어도 하나의 위치 변화를 검출하는 단계와; 상기 중지 및 손꿈치의 변화된 위치 사이의 거리를 직경으로 하는 가상의 가변원을 설정하는 단계; 및 상기 마우스 포인터의 위치를 상기 가변원의 중심으로 설정하는 단계;를 포함할 수 있다.

또한, 상기 손꿈치의 접촉이 유지된 상태에서 상기 중지의 접촉 해제가 감지된 경우, 접촉 중인 다른 손가락 중 어느 하나의 위치 변화를 근거로 상기 마우스 포인터의 위치를 이동시킬 수 있다.

또한, 상기 손꿈치의 접촉 해제가 감지된 경우, 상기 기준원의 설정을 해제하고 접촉 해제 전 마우스 포인터의 위치를 정지 위치로 설정하는 단계;를 추가로 수행할 수 있다.

또한, 상기 손꿈치 및 손가락의 재접촉이 감지된 경우, 재접촉된 손꿈치 및 손가락의 위치를 근거로 기준원을 재설정하고 상기 기준원의 중심 위치를 상기 정지 위치로 설정하는 단계;를 추가로 수행할 수 있다.

이 외에도, 본 발명의 방법을 실행하기 위한 프로그램 코드가 기록된 비일시성의 컴퓨터 판독 가능 기록 매체가 더 제공된다.

이상과 같은 본 발명에 따르면, 사용자가 유형의 마우스 장치를 손에 쥐지 않고 가상의 무형 마우스를 통해 마우스 포인터의 이동 등 각종 정보를 입력하고 그에 대응되는 정보를 출력하는 방법을 제공하는 효과가 있다.

또한, 본 발명에 따르면 사용자의 손꿈치를 지지점으로 하여 유형의 마우스를 움직여 마우스 포인터를 입력하는 실제 마우스 입력 방식을 무형 마우스 입력 방식에 적용하여, 무형 마우스를 통한 입력시 사용자가 실제 유형 마우스를 손에 쥐고 입력하는 것과 최대한 가깝게 느낄 수 있도록 하는 입출력 방법을 제공하는 이점이 있다.

도 1은 본 발명의 일실시예에 따른 무형 마우스를 통한 정보 입력 방식을 도식적으로 나타낸 도면.
도 2는 본 발명의 일 실시예에 따른 무형 마우스를 통한 정보의 입출력 방법을 순차적으로 나타낸 순서도.
도 3은 도 2의 기준원을 설정하는 방법의 일 예를 나타낸 도면.
도 4는 도 2의 기준원을 설정하는 방법의 다른 예를 나타낸 도면.
도 5는 도 2의 마우스 포인터 이동 방법으로서 우측 수평 이동을 예시한 도면.
도 6은 도 2의 마우스 포인터 이동 방법으로서 상측 수직 이동을 예시한 도면.
도 7은 도 2의 마우스 포인터 이동 방법으로서 상측 대각선 이동을 예시한 도면.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.

본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

이하, 본 발명에 의한 무형 마우스를 통한 정보의 입출력 방법에 대하여 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

도 1은 본 발명의 일실시예에 따른 무형 마우스를 통한 정보 입력 방식을 도식적으로 나타낸 도면이고, 도 2는 본 발명의 일 실시예에 따른 무형 마우스를 통한 정보의 입출력 방법을 순차적으로 나타낸 순서도이다.

도 1과 같이, 무형 마우스를 통한 정보의 입력을 위해 사용자의 손의 터치를 감지할 수 있는 터치 입력 장치(10)가 사용된다. 터치 입력 장치는 마우스 도 1에 도시된 것처럼 마우스 패드와 유사한 형태를 가질 수 있으며, 휴대성을 위하여 폴딩 가능한 형태를 가질 수 있다. 터치 입력 장치(10)에는 터치 감지를 위한 센싱 수단(11)과, 사용자의 컴퓨터(데스크탑, 랩탑, 노트북 등), 모바일 기기(스마트폰, 태블릿 등) 등과 무선 또는 유선으로 연결 가능한 연결 수단이 구비된다. 또한, 터치 입력 장치(10)에는 전원 공급을 위한 전원 공급 수단(배터리 등)이 설치될 수 있다.

사용자는 터치 입력 장치(10) 위에 손을 접촉한 상태로 기존의 유형 마우스를 손에 쥔 것처럼 제스처를 취하거나 클릭을 함으로써, 마우스 포인터의 이동, 아이템의 선택 및 실행 등의 정보를 입력할 수 있다.

도 2를 참조하여 무형 마우스를 통한 정보의 입출력 방법을 설명하면, 사용자가 마우스를 손에 쥐듯이 손의 손꿈치와 손가락을 터치 입력 장치(10)에 접촉하면, 터치 입력 장치(10)는 사용자의 손 터치를 감지한다(S11). 터치 입력 장치(10)는 손가락, 손꿈치 등의 접촉 위치, 접촉 면적 등의 정보가 포함된 터치 신호를 발생시키고, 해당 신호를 사용자의 컴퓨터 또는 모바일 기기로 전송한다.

컴퓨터 또는 모바일 기기의 컨트롤러는 터치 입력 장치(10)로부터 전송된 터치 신호를 근거로 사용자의 손꿈치 위치 및 손가락 위치를 검출한다(S12). 접촉 부위의 면적 및 형상으로부터 손꿈치와 손가락의 구분이 가능하며, 복수개의 손가락의 상대적인 위치로부터 엄지, 검지, 중지, 양지, 소지 등을 구분할 수 있다. 이를 위해 터치 입력 장치(10)의 초기 세팅시 오른손 사용자 설정과 왼손 사용자 설정을 선택하여 미리 설정할 수 있다.

이와 같은 손꿈치 및 손가락의 위치 검출 결과를 근거로, 컨트롤러는 가상의 기준원(A, 도 3 및 4 참조)을 설정한다(S13).

도 3과 같이, 사용자의 손꿈치의 중심(X)과 중지의 위치(Y) 사이의 거리를 직경으로 하는 원을 기준원(A)으로 설정할 수 있다. 또한, 다른 방법으로 도 4와 같이 사용자의 손꿈치의 접촉 부위가 이루는 호(L)의 곡률을 곡률 반경으로 갖는 원을 기준원(A)으로 설정 가능하다.

다음 단계로서, 컨트롤러는 기준원(A)의 중심(O)을 마우스 포인터의 위치로 설정하여 컴퓨터 또는 모바일 기기의 화면에 마우스 포인터가 디스플레이되도록 한다(S14). 마우스 포인터의 화면 상의 초기 위치는 기설정된 위치(예를 들어, 화면 중심)로 설정될 수 있다.

다음으로, 터치 입력 장치(10)를 통해 손가락 및 손꿈치의 위치 변화가 감지되면(S15), 컨트롤러는 센싱 결과를 근거로 마우스 포인터의 위치를 이동시킨다.

마우스 포인터를 이동시키는 과정에 대하여 구체적으로 살펴보면, 중지 및 손꿈치 중 적어도 하나의 위치 변화를 검출하고, 중지 및 손꿈치의 변화된 위치 사이의 거리를 직경으로 하는 가상의 가변원(B)을 설정한다(S16).

마우스 포인터 우측 수평 이동을 예시한 도 5를 참조하여 보다 상세히 설명하면, 도 5의 경우 사용자가 기존의 유형 마우스를 사용하는 방식과 유사한 방식으로 손꿈치를 지지점으로 하여 접촉한 상태에서 손가락 부위만을 터치 입력 장치(10) 상에서 우측으로 이동시켜 마우스 포인터를 우측 수평 이동시키는 것을 보이고 있다. 이 경우 손꿈치의 위치(X)는 고정된 상태에서 중지의 위치만이 새로운 위치(Y')로 우측 이동하게 되고, 컨트롤러는 손꿈치의 위치(X)와 중지의 변화된 위치(Y') 사이의 거리를 직경으로 하는 가변원(B)을 설정한다. 여기서 가변원(B)은 중지의 위치 변화에 따라 계속적으로 변화되게 된다.

컨트롤러는 마우스 포인터의 위치를 가변원(B)의 중심(O')으로 설정함으로써 마우스 포인터의 위치를 해당 위치로 이동시킬 수 있다(S17). 도 5와 같은 수평 이동의 경우 이동 거리가 증가할수록 가변원(B)의 크기가 커지면서 기준원(A)에 대하여 순꿈치의 위치(X)를 중심으로 회전하여 마우스 포인터의 평행 이동이 이루어지게 된다.

도 6 및 7 또한 손꿈치를 지지점으로서 고정한 상태에서 손가락 부위를 이동시켜 마우스 포인터를 상측 수직 이동시키는 경우 및 상측 대각선 이동시키는 경우를 각각 예시하고 있다. 도 6의 경우 중지의 위치만이 상측으로 이동하여 가변원(B)의 크기가 증가함으로써 마우스 포인터의 위치가 수직 이동하게 되며, 도 7의 경우 도 5의 경우와 도 6의 경우가 함께 이루어져 마우스 포인터의 상측 대각선 이동이 이루어지게 된다.

한편, 사용자가 손꿈치와 손가락을 동시에 이동시키는 경우도 가능한데, 이러한 경우에도 손꿈치의 변화된 위치와 손가락의 변화된 위치 사이의 거리를 직경으로 하는 가변원(B)을 설정하여 마우스 포인터의 위치를 가변원(B)의 중심으로 설정함으로써 마우스 포인터의 이동이 가능하다 할 것이다.

또한, 사용자가 터치 입력 장치(10)를 통해 클릭, 더블 클릭, 왼쪽 클릭(예를 들어, 검지의 클릭), 오른쪽 클릭(예를 들어, 두 손가락의 클릭)에 해당하는 터치 입력을 수행함에 따라, 컨트롤러는 터치 입력 장치(10)에서 발생한 터치 신호로부터 해당 동작을 검출하여 해당 동작에 상응하는 명령이 실행되도록 한다.

손꿈치의 접촉이 유지된 상태에서 중지의 접촉 해제가 감지된 경우, 예를 들어, 중지의 접촉 해제가 기설정된 시간 이상으로 유지되는 경우, 컨트롤러는 접촉 중인 다른 손가락 중 어느 하나의 위치 변화를 근거로 마우스 포인터의 위치를 이동시킬 수 있다. 예를 들어, 중지가 터치 입력 장치(10)로부터 떨어진 경우, 약지의 이동을 근거로 마우스 포인터를 이동시킬 수 있고, 이 경우 중지가 떨어지기 전 가변원(B)의 크기를 유지된 상태로 약지의 이동 위치 및 이동량만큼 가변원(B)을 이동시키는 방식으로 대체된다. 만약 약지가 떨어지는 경우, 기설정된 순서에 따라 마우스 포인터의 이동의 기준이 되는 손가락(약지→소지→검지→엄지)을 변경시킬 수 있다. 모든 손가락의 접촉이 해제되면, 마우스 포인터의 이동을 정지한다.

다시 도 2를 참조하면, 손꿈치의 접촉 해제가 감지된 경우(S18), 기준원(A)의 설정을 해제하고(S19), 접촉 해제 전 마우스 포인터의 위치를 정지 위치로 설정한다(S20). 이 경우, 사용자가 마우스로부터 손을 땐 경우로 인식하여 마우스 포인터의 이동을 정지시키게 된다. 기준원(A)은 사용자가 터치 입력 장치(10)에 손을 접촉하여 설정된 이후부터 손을 떼기 전까지 유지되며, 사용자가 손을 떼면 그 설정이 해제되게 된다.

만약, 손꿈치 및 손가락의 재접촉이 감지된 경우, 재접촉된 손꿈치 및 중지의 위치를 근거로 기준원(A)을 재설정하고, 기준원(A)의 중심 위치를 정지 위치(즉, 손을 떼기 전 화면 상 포인터의 마지막 위치)로 설정한다.

이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 코드의 형태로 구현되어 비일시성의 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 코드, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 코드는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 코드를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 코드의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 적어도 하나의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.

상기에서는 본 발명의 특정의 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

10: 터치 입력 장치 11: 센싱 수단
A: 기준원 B: 가변원
X: 손꿈치의 중심 위치 Y: 중지의 위치
Y': 중지의 변화된 위치 O: 기준원의 중심
O': 가변원의 중심

Claims (8)

1. 터치 입력 장치를 통해 감지된 사용자 손의 터치에 대한 센싱 결과로부터 사용자의 손꿈치 및 손가락 위치를 검출하는 단계;
   상기 위치 검출 결과를 근거로 가상의 기준원을 설정하는 단계;
   상기 기준원의 중심을 마우스 포인터의 위치로 설정하여 디스플레이하는 단계; 및
   상기 손가락 및 손꿈치의 위치 변화에 대한 센싱 결과를 근거로 상기 마우스 포인터의 위치를 이동시키는 단계;를 포함하고,
   상기 기준원은 사용자의 손꿈치의 중심과 중지 사이의 거리를 직경으로 갖거나, 사용자의 손꿈치의 접촉 부위가 이루는 호의 곡률을 곡률 반경으로 가지도록 설정되며,
   상기 마우스 포인터의 위치를 이동시키는 단계는,
   사용자 손의 중지 및 손꿈치 중 적어도 하나의 위치 변화를 검출하는 단계;
   상기 중지 및 손꿈치의 변화된 위치 사이의 거리를 직경으로 하는 가상의 가변원을 설정하는 단계; 및
   상기 마우스 포인터의 위치를 상기 가변원의 중심으로 설정하는 단계;를 포함하는 것을 특징으로 하는, 무형 마우스를 통한 정보의 입출력 방법.
   
2. 삭제
3. 삭제
4. 삭제
5. 제1항에 있어서,
   상기 손꿈치의 접촉이 유지된 상태에서 상기 중지의 접촉 해제가 감지된 경우, 접촉 중인 다른 손가락 중 어느 하나의 위치 변화를 근거로 상기 마우스 포인터의 위치를 이동시키는 것을 특징으로 하는, 무형 마우스를 통한 정보의 입출력 방법.
   
6. 제1항에 있어서,
   상기 손꿈치의 접촉 해제가 감지된 경우, 상기 기준원의 설정을 해제하고 접촉 해제 전 마우스 포인터의 위치를 정지 위치로 설정하는 단계;를 더 포함하는 것을 특징으로 하는, 무형 마우스를 통한 정보의 입출력 방법.
   
7. 제6항에 있어서,
   상기 손꿈치 및 손가락의 재접촉이 감지된 경우, 재접촉된 손꿈치 및 손가락의 위치를 근거로 기준원을 재설정하고 상기 기준원의 중심 위치를 상기 정지 위치로 설정하는 단계;를 더 포함하는 것을 특징으로 하는, 무형 마우스를 통한 정보의 입출력 방법.
   
8. 제1항에 따른 방법을 실행하기 위한 프로그램 코드가 기록된 비일시성의 컴퓨터 판독 가능 기록 매체.
   
   

Images