KR20100054698A - 움직임 감지를 통한 사용자 명령 입력 방법 및 디바이스 - Google Patents

Abstract

본 발명은 3차원 공간 상에서의 디바이스의 움직임에 기초하여 보다 자연스럽고 정확하게 사용자 명령을 입력하게 하는 장치에 관한 것이다.

3차원 공간 상에서 동작하는 사용자 명령 입력 디바이스는, 적어도 하나의 축을 중심으로 한 상기 디바이스의 각속도를 감지하는 제1 센서와, 적어도 하나의 방향에 대한 상기 디바이스의 가속도를 감지하는 제2 센서와, 및 상기 제1 센서의 출력 값을 상기 디바이스의 자세로부터 독립적인 좌표계에서의 제1 회전각을 연산하고, 상기 제2 센서의 출력 값을 상기 좌표계에서의 제2 회전각을 연산하며, 상기 제1 회전각과 상기 제2 회전각을 조합하여 최종 자세각을 구하는 처리 유닛으로 이루어진다

각속도 센서, 가속도 센서, 움직임 추정 함수, 매핑 함수

Description

움직임 감지를 통한 사용자 명령 입력 방법 및 디바이스{Method and Device for inputing user's commands based on motion sensing}

본 발명은 움직임 센서를 구비한 사용자 명령 입력 디바이스에 관한 것으로서, 더욱 상세하게는 3차원 공간 상에서의 디바이스의 움직임에 기초하여 보다 자연스럽고 정확하게 사용자 명령을 입력하게 하는 장치에 관한 것이다.

컴퓨터 과학 분야가 발달함에 따라, 사용자들이 컴퓨터 디바이스에 정보를 입력할 수 있게 해주는 다양한 디바이스들이 개발되었다. 상기 디바이스들 중 한 그룹은 사용자 명령 입력 디바이스라고 불리운다. 사용자가 이러한 디바이스의 컴포넌트들을 조작함에 따라, 사용자 명령 입력 디바이스의 이동에 대응하는 위치 데이터가 생성된다. 그리고, 이러한 위치 데이터는 디스플레이 상에 나타나는 포인터 이미지의 움직임으로 변환된다. 따라서, 사용자 명령 입력 디바이스를 움직임으로써, 사용자는 그 포인터 이미지를 디스플레이 상에 표시되는 오브젝트들과 연관시킬 수 있다. 상기 오브젝트란 메뉴, 버튼, 이미지 등 선택되었을 때 특정 동작이 수행되도록 하는 사용자 인터페이스를 의미한다. 그 후 사용자는 사용자 명령 입력 디바이스의 특정 버튼을 누르는 것과 같은 선택 동작을 통하여 해당 오브젝트와 관 련된 특정 명령을 수행할 수 있게 된다.

일반적인 개인용 컴퓨터의 사용자들은 자신의 컴퓨터를 구동하기 위한 운영체제(OS: Operating System)로서 마이크로소프트 사의 윈도우(Windows)를 사용하고 있다. 이는 기존의 DOS(Disk Operating System) 체제에서 지원하지 못하는 편리한 마우스 기능 및 다양한 그래픽 기능에 기인하는데, 사용자들은 윈도우를 통해 특정 명령을 입력할 시, 일일이 키보드로 입력하지 않고도 마우스의 드래그나 스크롤, 클릭 등을 통해 간편하게 명령을 입력할 수 있다.

한편, 이와는 대조적으로 디지털 TV, 셋톱박스, 게임기 등과 같이 개인용 컴퓨터에서 사용되는 키보드나 마우스를 사용할 수 없는 영상 표시 장치에서는, 리모콘이라는 원격 제어 장치 상에 구비된 키패드를 이용하여 다양한 명령을 입력하고 있는 실정에 있다. 이렇게 키패드 누름 입력 방식이 주로 사용되었던 이유는, 이러한 장치들은 개인용 컴퓨터와 달리 사용자가 상기 장치의 조작을 위하여 특정한 위치에 고정되어 있는 것도 아니고, 거실과 같은 개방된 공간에서 조작이 필요하기 때문에 키보드나 마우스와 같이 주로 평면에 고정되어 사용되는 입력 수단을 이용하기가 어렵기 때문이다.

이러한 문제점을 고려하여, 최근에는 자이로스코프, 가속도계 등의 움직임 센서를 탑재한 3차원 사용자 명령 입력 디바이스들이 개발되고 있다. 사용자는 3차원 사용자 명령 입력 디바이스를 움직임으로써 이에 대응되는 디스플레이상의 포인터 이미지를 원하는 방향과 속도로 움직일 수 있고, 상기 사용자 명령 입력 디바이스 상에 구비된 특정 버튼을 누름으로써 원하는 오브젝트를 선택하고 실행할 수 있 게 된다.

그러나, 기존의 마우스 등과 같이 고정된 2차원 평면에서의 동작을 통하여 사용자 명령을 입력하는 기술과는 달리, 3차원 공간상에서 임의의 동작을 통하여 디스플레이 상의 포인터나 특정한 오브젝트(예: 게임의 유닛)를 움직이게 하는 사용자 명령 입력 디바이스에 있어서 자연스럽고 정확한 움직임을 전달하는 것은 그리 쉽지가 않다. 그것은 사용자가 상기 디바이스를 파지하고 있는 자세(pose)나 상기 디바이스가 디스플레이 장치를 향하고 있는 방향(orientation)이나 거리 등에 따라 사용자가 의도하지 않는 움직임이 전달될 수 있기 때문이다.

사실, 가속도계, 각속도계 혹은 가속도계와 각속도계를 이용하여 3차원 공간상의 움직임을 측정하고, 그렇게 얻어진 정보를 활용한 입력장치에 관한 발명은 1980년대부터 계속해서 이어져 왔다. 본 발명의 출발점은 단순히 가속도계 및 각속도계를 이용하여 입력장치를 구현하는 데에 있는 것이 아니라, 간결한 시스템(즉, 적은 연산량을 소모하는 시스템)을 가지고도, 사용자의 의도에 자연스럽게 부합할 수 있는 입력장치를 구현하는 데에 있다.

본 발명이 이루고자 하는 기술적 과제는, 3차원 공간상에서 임의의 동작을 통하여 사용자 명령 입력하는 디바이스에 있어서, 보다 자연스럽고 정확한 사용자 명령의 입력이 가능하도록 하게 하는 것이다.

본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.

상기 기술적 과제를 달성하기 위하여, 본 발명의 일 실시예에 따른, 3차원 공간 상에서 동작하는 사용자 명령 입력 디바이스는, 적어도 하나의 축을 중심으로 한 상기 디바이스의 각속도를 감지하는 제1 센서; 적어도 하나의 방향에 대한 상기 디바이스의 가속도를 감지하는 제2 센서; 및 상기 제1 센서의 출력 값을 상기 디바이스의 자세로부터 독립적인 좌표계에서의 제1 회전각을 연산하고, 상기 제2 센서의 출력 값을 상기 좌표계에서의 제2 회전각을 연산하며, 상기 제1 회전각과 상기 제2 회전각을 조합하여 최종 자세각을 구하는 처리 유닛을 포함한다.

상기 기술적 과제를 달성하기 위하여, 본 발명의 일 실시예에 따른, 3차원 공간 상에서 동작하는 사용자 명령 입력 디바이스를 이용하여 사용자 명령을 입력하는 방법은, 적어도 하나의 축을 중심으로 한 상기 디바이스의 각속도를 감지하는 단계; 적어도 하나의 방향에 대한 상기 디바이스의 가속도를 감지하는 단계; 상기 제1 센서의 출력 값을 상기 디바이스의 자세로부터 독립적인 좌표계에서의 제1 회전각으로 연산하는 단계; 상기 제2 센서의 출력 값을 상기 좌표계에서의 제2 회전각으로 연산하는 단계; 상기 제1 회전각과 상기 제2 회전각과의 조합하여 최종 자세각을 구하는 단계; 및 상기 구한 최종 자세각의 변화량에 대응되는 위치 변위를 출력하는 단계를 포함한다.

본 발명에 따른 포인팅 디바이스를 이용한 사용자 명령 입력 시스템 및 방법에 의하면, 3차원 공간상에서 사용자 명령을 입력하는 디바이스에 있어서, 사용자의 직관적인 감각과 부합하도록 디스플레이 장치 상의 오브젝트를 제어할 수 있게 된다.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.

이하 첨부된 도면들을 참조하여 본 발명의 일 실시예를 상세히 설명한다.

본 발명에 있어서, 사용자 명령 입력 디바이스는 사용자의 움직임을 입력 받 아 직관적으로 다양한 컨텐츠들을 이용할 수 있도록 하는 인터페이스 장치를 의미한다. 상기 디바이스는 사용자의 움직임을 통해 얻어진 정보를 다양한 정보기기 혹은 여러 서비스에 맞춰 필요한 정보로 대응시켜 준다. 예를 들어, 3차원 공간마우스, IPTV(internet protocol TV) 리모컨, 게임 입력 장치 등이 이에 포함될 수 있다.

다음의 도 1은 특정 프레임(좌표계)에서 정의되는 3축 회전 방향을 도시한 것이다. x, y, z 축으로 이루어진 특정 프레임에서 피치(θ)는 y축 방향에 대한 회전을, 롤(φ)은 x축 방향에 대한 회전을, 그리고 요(ψ)는 z축 방향에 대한 회전을 각각 의미한다. 이들 회전에 대해 양(+) 및 음(-)를 결정하는 기준은 오른손 좌표계(right-handed coordinate)를 따른다. 본 발명에서는 항법 프레임(navigation frame) 및 몸체 프레임(body frame)을 포함한 두 개의 프레임을 언급한다. 상기 항법 프레임은 공간상에서 고정되어 있으며 서로 수직인 3축 X_N, Y_N, Z_N 으로 구성된 기준 좌표계를 의미한다. 즉, 항법 프레임은 장치의 자세로부터 독립적이라고 볼 수 있다. 또한 몸체 프레임은 3차원 공간에 놓여진 물체 상에 존재하는 서로 수직인 3축 X_B, Y_B, Z_B 으로 구성된 상대 좌표계를 의미한다. 도 1에서 X방향은 사용자 명령 입력 디바이스가 향하는 기준 방향을 의미한다. 즉 상기 기준 방향을 향한 축을 기준으로 회전하면 롤 회전이 되는 것이다.

도 2는 본 발명의 일 실시예에 따른 사용자 명령 입력 디바이스(100)를 도시하는 블록도이다. 사용자 명령 입력 디바이스(100)는 적어도 하나 이상의 디스플레 이 장치(미도시됨) 상의 오브젝트를 제어할 수 있다. 상기 오브젝트는 디스플레이 상의 포인터일 수도 있고, 게임 중의 물체일 수도 있다. 또한, 상기 디스플레이 장치는 별도의 고정된 위치에 설치될 수도 있지만 휴대가 가능하도록 상기 사용자 명령 입력 디바이스(100)와 일체로 구비될 수도 있다(예: 휴대용 게임기).

사용자 명령 입력 디바이스(100)는 보다 구체적인 예로서, 각속도 센서(110), 가속도 센서(120), 필터부(130), 처리 유닛(processing unit; 190) 및 출력부(180)를 포함하여 구성될 수 있다. 또한, 처리 유닛(190)은 제1 연산부(140), 제2 연산부(150), 자세각 측정부(160) 및 변위 매핑부(170)를 포함하여 구성될 수 있다.

각속도 센서(110)는 디바이스(100)가 몸체 프레임상에서 회전하는 각속도를 감지하여 샘플링된 출력 값(디지털 값)을 제공한다. 각속도 센서(110)로는 자이로스코프가 사용될 수 있는데, 상기 자이로스코프로는 기계식, 유체식, 광학식, 압전식 등 다양한 유형이 사용될 수 있다. 구체적으로 각속도 센서(110)는 서로 직교하는 두 개의 축(몸체 프레임 상의 축)에 대한 회전 각속도, 예를 들어, 몸체 프레임의 X, Y축 및 Z축 상의 회전 각속도(ω_x, ω_y, ω_z)를 구할 수 있다.

가속도 센서(120)는 디바이스(100)가 몸체 프레임상에서의 가속도를 감지하여 샘플링된 출력 값(디지털 값)을 제공한다. 가속도 센서(120)로는 압전형(piezodlectric type), 동전형(moving coil type)을 불문하고 사용될 수 있다. 구체적으로 가속도 센서(120)는 서로 직교하는 세 개의 축(몸체 프레임 상의 축)에 대한 직선 가속도(f_x, f_y, f_z)를 구한다.

필터부(130)는 디바이스(100)의 용도에 따라 저역 통과 필터(low pass filter), 고역 통과 필터(high pass filter), 오프셋 필터, 또는 스케일링 필터 등으로 이루어질 수 있으며, 상기 각속도 센서(110)의 출력 및 가속도 센서(120)의 출력을 수신하여 오차보상을 수행한다. 필터부(130)는 오차보상된 회전 각속도(ω_x, ω_y, ω_z)는 제1 연산부(140)에 제공하고, 오차보상된 직선 가속도(f_x, f_y, f_z)는 제2 연산부(150)에 제공한다.

제2 연산부(150)는 필터부(130)로부터 제공되는 직선 가속도(f_x, f_y, f_z) 값을 이용하여, 항법 프레임에서의 롤, 피치 및 요(φ_XL, θ_XL, ψ_XL)(제2 회전각)를 계산한다. 그 구체적인 계산 예는 다음의 수학식 1에서와 같다.

일반적으로 가속도만으로 롤 및 피치(φ_XL, θ_XL)는 간단히 구할 수가 있지 만, 요를 구하는 것은 쉽지 않다. 본 발명에서 가속도로부터 계산되는 요(ψ_XL)는 의사 요(pseudo yaw)로서, 다음의 도 3 및 4를 참조하여 설명될 수 있다.

도 3은 본 발명의 일 실시예에 따라 가속도계를 이용하여 롤 값을 측정하는 방법을 나타낸다. Y축 방향 가속도를 f_y라 할 때, 이미 피치가 발생한 것을 전제로 하면, 도 1의 (b)에서 중력 가속도의 연직 성분은 g·cosθ가 된다. 따라서, 롤(Φ)은 다음의 수학식 2와 같다.

Φ = arcsin(f_y/(g×cosθ))

가속도계를 이용하여 롤 값을 측정하는 방법은 실시예에 따라 다양한 방법으로 계산될 수 있다.

도 4는 본 발명의 일 실시예에 따른 요각 측정 방법에서 피치 및 롤 값을 이용하여 요 값을 계산하는 방법을 나타내는 도면이다. 도 4의 (a)는 피치가 발생한 것을 전제로 롤 및 요 각속도의 벡터 방향을 나타낸다. 도 4의 (a)에서 ω_y는 롤 각속도 벡터를 나타내고 ω_z는 요 각속도 벡터를 나타낸다. 요 각속도 벡터는 실제 요 벡터가 아닌 실제 요 벡터에 대한 프로젝트 된 벡터이다.

도 4의 (b)는 도 2의 (a)를 측면에서 나타낸 것이다. 도 4의 (b)로부터 시간 t에 대하여 롤 각속도 벡터 ω_y, 요 각속도 벡터 ω_z 및 피치(θ) 간에는 다음의 수학식 3과 같은 관계가 성립한다.

sinθ(t) = ω_y(t) / ω_z(t)

위의 수학식 3으로부터, 요(Ψ) 는 다음의 수학식 4와 같이 근사적으로 계산될 수 있다.

단, 이 수학식 4은 피치 θ가 0도나 90도에 가까워지면 적용할 수 없으므로 0도나 90도에 가까운 각도에서는 일정한 제한을 부여하여야 한다. 상기 수학식 4를 사용하여 각 조건에서 실제 측정된 요 값은 다음과 같다.

피치(θ)	(-)피치일 때 측정된 요(Ψ)		(+)피치일 때 측정된 요(Ψ)
	롤 Φ = -80	롤 Φ = +80	롤 Φ = -80	롤 Φ = +80
10	이상동작	이상동작	-414	383
20	-222	243.5	-221	241.5
40	-120	125	-122	127
60	-89	91.5	-92	94.5
80	-72.5	77	-83	84.5

상기 표와 같이 피치 값을 변화 시키면서 롤을 -80에서 +80까지 변화시키면 측정된 요 값의 범위가 상이하므로 이러한 편차를 줄이기 위하여 스케일 인자를 사용하여 보정할 수 있다. 결과적으로, 피치 값이 존재하고 롤 값이 변함과 동시에 요 값이 변하는 상황에서 요에 대한 근사값을 계산하는 것이 가능하다.

제1 연산부(140)는 필터부(130)로부터 제공되는 각속도(ω_x, ω_y, ω_z) 값을 이용하여, 항법 프레임에서의 세 축의 회전각(φ_G, θ_G, ψ_G)(제1 회전각)을 계산한 다. 오일러 각(Euler angle)을 이용한 구체적인 계산식은 다음의 수학식 5에서와 같다. 수학식 5는 결국 항법 프레임에서의 회전각(φ_G, θ_G, ψ_G)에 대한 미분방정식의 형태를 갖는다.

일반적으로 3개의 각속도로 항법 프레임에서의 자세각을 구할 수도 있다. 그런데 본 발명의 바람직한 실시예에 있어서는 두 개의 각속도(ω_y, ω_z)만으로 항법 프레임에서의 세 축의 각속도를 계산하는데, 이 경우 수학식 5의 ω_x가 문제된다.

사람의 일반적인 손 및 팔 동작의 움직임은 보통 3축 좌표계에서 단일 축으로 움직이는 경우가 많다. 예를 들어, Z축 기준으로 회전 또는 Y축 방향으로 회전 등이 그러하다. 또한 동시에 2축 이상의 복합적인 움직임이 일어난다 하더라도 몸체 프레임의 X축 방향 회전과 Y축 방향 회전, 몸체 프레임의 X축 방향 회전과 Z축 방향 회전이 함께 동작하는 경우에는 X축 방향 움직임이 상대적으로 Y축, Z축 방향의 움직임보다 그 크기가 작은 경향이 있다.

따라서 수학식 (5)에서 몸체 프레임의 Y축 방향 각속도 ω_y와 Z축 방향 각속 도 ω_z보다 몸체 프레임의 X축 방향 각속도 ω_x가 상대적으로 작게 된다. 이로 인해 ω_x를 무시할 수는 있으나, 그에 따라 자세각 계산이 정확히 이루어지지 않는다. 그러나 가속도계로 구한 롤(φ_XL) 정보를 적절하게 사용하면 ω_x축의 각속도계를 사용한 경우와 비슷한 성능을 확보할 수 있게 된다.

도 5 내지 7은 수학식 5에 있어서 ω_x를 이용한 경우(점선)와 이용하지 않은 경우(실선)를 비교한 결과이다. X축은 단위 샘플 수를, Y축은 각도(degree)를 의미한다. 또한 각 도면의 우측 그래프는 좌측 그래프에서 원으로 표시한 일정 구간을 확대한 모습이다. ω_x를 제거한 경우는 그렇지 않은 경우보다 2°~ 4°정도의 각도 차이와 함께 2~10 샘플 정도의 지연이 발생한다. 하지만 계산 주기가 100Hz이상 되면, 사용자가 분간하기 어려운 정도의 각도 차와 지연이 발생하기 때문에, 몸체 프레임의 X축 각속도계 없이도 2축에 대한 각속도계(몸체 프레임의 Y축 각속도계, Z축 각속도계)만을 사용하여도 3축에 대한 각속도계를 사용한 결과와 별 차이가 없음을 확인할 수 있다.

이와 같은 실험 결과를 바탕으로 수학식 5는 다음의 수학식 6과 같이 변형될 수 있다.

한편, 사람이 입력장치를 잡고 움직일 때의 패턴을 미리 파악하였다가 활용한다면, ω_x를 제거한 수학식 6에서 한발짝 더 나아가서 ω_y도 제거가 가능하다. 이 경우, 수학식 1에서와 같이, 가속도계의 출력을 이용하여 구한 (φ_XL, θ_XL, ψ_XL)를 이용하여 ω_y, ω_z를 사용하지 않음으로써 발생하는 오차를 극복할 수 있다.

수학식 5 및 6은 오일러 각을 기초로 하여, 각속도(ω_y, ω_z) 값으로부터 항법 프레임에서의 세 축의 회전각(φ_G, θ_G, ψ_G)을 계산하는 것을 예시하였으나, 오일러 각 대신 다소 계산이 복잡한 quaternion 각을 기초로 하여 상기 계산을 수행할 수도 있다.

다시 도 2를 참조하면, 자세각 측정부(160)는 제2 연산부(150)에서 얻은 항법 프레임 상의 세 개의 회전각(φ_XL, θ_XL, ψ_XL)과, 제1 연산부(140)에서 얻은 항법 프레임 상의 세 개의 회전각(φ_G, θ_G, ψ_G)을 가중 평균하여, 항법 프레임에서의 자세각(φ, θ, ψ)을 구한다. 구체적인 가중 평균은 다음의 수학식 7에 따라 계산될 수 있다.

여기서, α₁, α₂ 및 α₃은 각각 φ, θ, ψ에 대한 가중치로서 0에서 1사이의 값을 갖는다. 이상의 과정으로 통하여 항법 프레임에서의 자세각(φ, θ, ψ)을 구하는 것은 일 실시예에 불과하고, 다양한 변형이 가능하다. 예를 들어, 수학식 1에서 사용된 ψ_XL은 직접 자기 센서(magnetic sensor) 또는 이미지 센서(image sensor) 등을 이용하여 구할 수도 있다. 상기 자기 센서나 이미지 센서에 의하면, 항법 프레임에서의 요각을 직접 구할 수 있기 때문에, 가속도 센서에서 사용된 수학식 1과 같은 변환 과정은 필요하지 않다.

수학식 1의 3번째 식으로부터 ψ_XL이 계산되지 않는 경우, 즉 θ_XL=0인 경우에는, α₃를 1로 둠으로써 ψ_XL을 이용하지 않고 오직 ψ_G에 의하여 ψ를 계산할 수도 있다.

그런데, 보다 정확히 최종 자세각(φ, θ, ψ)을 구하기 위해서는, α₁, α₂ 및 α₃를 임의로 결정하기 보다는 상태 변화에 맞게 적응적으로 결정할 필요가 있다. 이를 위하여 자세각 측정부(160)는 움직임 추정 함수를 사용할 수 있다.

움직임 추정 함수는 각속도 센서 및 가속도 센서 출력을 이용한 데이터들을 바탕으로 움직임을 0 내지 1 사이로 정규화시킴으로써 세분화된 움직임을 검출해 내는 함수를 의미한다. 일 예로써, 만약 검출된 디바이스(100)의 움직임이 거의 없는 경우에는 가속도 센서(120)의 값을 보다 신뢰할 수 있으므로 α_n=1이 되도록 매핑하고, 상기 움직임이 최대일 경우에는 각속도 센서(110)의 값을 보다 신뢰할 수 있으므로 α_n=0가 되도록 매핑하며, 그 사이의 값을 가질 경우에는 정지와 최대 움직임 사이의 적절한 값으로 매핑하는 것이 필요하다.

도 8은 움직임 추정 함수를 이용하여 디바이스(100)의 움직임을 추정하는 흐름도이다. 이러한 움직임 추정 함수로는 종 형상 곡선(bell shape curve) 또는 지수 함수(exponential function) 등을 이용할 수 있다. 종 형상 곡선은 도 9와 같은 형태의 곡선으로서 세부적으로는 가우스 함수(Gaussian function), 올려진 코사인 함수(Raised cosine function) 등으로 표현할 수 있다. 그리고, 지수 함수는 도 10과 같은 형태를 갖는, 예를 들어,

와 같은 함수이다. 도 9 및 10에서 x축은 디바이스(100)의 움직임의 크기를 나타내고, y축은 수학식 7에서의 가중치 즉, α_n을 의미한다. 도 9 및 10의 함수는 공통적으로 중앙에서 피크치를 갖고 좌우로 갈수록 0에 근접하는 형태를 갖는다.

이와 같은 움직임 추정 함수를 이용하면, 단순히 디바이스(100)가 정지하였는지를 판단하는 것을 넘어서, 정지, 미세 움직임, 느린 움직임, 빠른 움직임 등의 세분화된 움직임을 검출할 수 있게 된다. 또한, 이와 같이 움직임을 측정함으로 인해 사용자의 의도하지 않은 움직임(예로서, 손 떨림 등에 의한 커서의 움직임)이 제거할 수 있는 기초가 제공될 수 있다. 또한, 움직임의 크기에 따라 후술할 매핑 함수의 스케일 조절도 가능해진다.

다시 도 2를 참조하면, 변위 매핑부(170)는 자세각 측정부(160)에서 얻어진 자세각(φ, θ, ψ) 자체가 디스플레이 장치의 오브젝트를 제어하는 데에 사용될 수 있다. 예를 들어, 비행 시뮬레이션 게임상의 비행체는 상기 자세각에 의하여 각각의 축방향 회전이 제어될 수 있는 것이다. 한편, 디스플레이 장치의 2차원 화면 상에 존재하는 포인터의 경우에는 이러한 항법 좌표계에서의 자세각(φ, θ, ψ)의 변화량(변위)와 매핑될 필요가 있다. 일 예로서, 포인터 제어 디바이스의 자연스러운 움직임을 표현하기 위해서는 디스플레이 화면상의 횡방향 움직임(Δx)은 요의 변화량(Δψ)과 대응되고, 종방향 움직임(Δy)은 피치의 변화량(Δθ)과 대응되도록 한다.

이러한 관계는 다음의 수학식 8과 같이 표현될 수 있다.

여기서, k는 특정 샘플링 시점을 나타내는 인덱스이다.

상기와 같은 대응 관계를 정의하기 위하여 본 발명에서는 매핑 함수를 도입 한다. 도 12 및 12은 다양한 매핑 함수의 예를 도시하는 도면으로서 횡방향 움직임(Δx)과 요의 변화량(Δψ)과의 대응 관계를 보여준다. 이는 종방향 움직임(Δy)과 피치의 변화량(Δθ)과의 대응 관계에서도 마찬가지이다.

도 11a 및 도 11b는 가장 간단한 형태의 매핑 함수의 예를 보여준다. 이 중에서 도 11a는

형태를 갖는 플로어(floor) 함수를 나타내고, 도 11b는

형태를 갖는 실링(ceiling) 함수를 나타낸다. 이러한 매핑 함수는 간단한 관계에 의하여 요 또는 피치의 변화량을 디스플레이상의 횡방향 또는 종방향 움직임으로 대응시킬 수 있다. 이 때, 상기 k 값의 변화에 따라 함수의 입력값은 축소되거나 제거될 수 있으며 일정 이상의 입력값은 비례되는 출력값으로 변환될 수도 있다. 그러나, 도 11a 및 11b와 같은 매핑 함수는 특정값 이상의 과도한 입력값에 대하여 출력값을 적절하게 제한할 수 없다는 단점이 있다. 즉, 도 11a 및 11b의 매핑 함수는 후술하는 도 12의 매핑 함수에 포함되는 저하 영역, 스케일링 영역 및 한정 영역의 기능 중에서, 한정 영역의 기능이 결여되어 있다.

도 12의 매핑 함수는 도 11a 및 11b보다는 다소 복잡한 3개의 영역으로 나뉘어진다. 첫 번째 영역(part 1)은 함수의 입력 값을 축소시켜 출력하는 매핑하는 저하 영역(depression area)이다. 또한, 두 번째 영역(part 2)은 입력 값을 대략 비례되는 출력값으로 매핑하는 스케일링 영역(scaling area)이다. 마지막으로, 세 번째 영역은 일정 값 이상의 입력에 대해 그 출력값을 제한시키는 한정 영역(limitation area)이다.

도 12의 매핑 함수로는 일 예로

와 같은 시그모이드 함수가 사용될 수 있다. 여기서, 움직임의 방향은 양과 음이 모두 존재하기 때문에, 상기 시그모이드 함수는 좌표의 원점을 중심으로 대칭된다. 즉, 도 12의 매핑 함수는 동일한 두 개의 시그모이드 함수의 결합으로 이루어져 있다. 이러한 매핑을 통하여 얻어지는 위치 변위(Δx, Δy)는 HID(Human Interface Device) 마우스의 표준으로 정해진 값을 사용하는 것이 바람직하다.

도 12의 세 가지 영역의 의미에 대하여 보다 자세히 살펴보면 다음과 같다. 첫번째 영역인 저하 영역은 사용자의 포인팅 움직임이 미세한 영역이다. 이 영역에서는 자세각의 변위를 위치 변위와 1:1로 매핑시키는 것이 아니라, 위치 변위를 줄여서 매핑한다. 이는 사용자의 손 떨림 등과 같은 의도하지 않은 움직임을 제거하는 기능을 제공한다. 그러나 작은 움직임까지도 미세하게 구현할 필요가 있는 어플리케이션에서는, 저하 영역을 적절히 상승시켜 그 움직임이 표현되도록 할 수도 있다.

두번째 영역인 스케일링 영역은 실제적인 사용자 움직임을 디스플레이 장치 상에서의 위치 정보로 대략 비례적으로 매핑시켜주는 영역으로써, HID 마우스 기준에 맞추어 ±128의 정수 값으로 매핑될 수 있다.

세번째 영역인 한정 영역은 사용자의 움직임이 상대적으로 크더라도 위치 변위(Δx, Δy)가 그다지 크지 않도록 제한하기 위한 영역이다. 도 12에서 매핑 함수는 원점에 대해 대칭인 형태를 갖고 있기 때문에 사용자의 움직임에 대해 양과 음 의 방향으로 대칭적 출력을 유도할 수 있다.

한편, 이러한 매핑 함수는 사용자의 움직임 패턴에 맞추어 다양하게 스케일링될 수 있는데 이하에서는 이에 관하여 설명한다.

피치(θ) 방향에 대해 사용자가 가장 편안히 디바이스(100)를 잡은 상태는 도 13과 같이 약 5°~ 10°정도의 피치 각을 갖도록 디바이스(100)가 들려 있는 상태이다. 그런데 디바이스(100)의 피치 각이 더 들린 상태, 즉 피치 각이 약 30°~ 50°이상인 경우가 되면, 사용자 손목의 움직임 한계로 인해 Y축 양의 방향으로 향하는 포인터(10)의 제어가, 상대적으로 Y축의 음의 방향으로 향하는 포인터(10)의 제어에 비해 어렵게 된다. 이와 같이 위치정보 구현에 있어 손목의 움직임 한계로 인한 어려움을 이하 손목 재밍(wrist jamming)이라고 한다. 이는 요(ψ) 각 방향에 대해서도 마찬가지로 존재할 수 있다. 이와 동일한 wrist jamming이 존재한다.)

도 14에서는 이러한 손목 재밍의 예를 볼 수 있는데, 디바이스(100)가 약 40°이상 들려진 상태지만 디스플레이 화면 상의 포인터(10)의 위치는 디스플레이 장치의 아래 쪽 부근에 놓여있다. 이와 같은 경우, 사용자는 손목의 움직임 한계로 인해 더 이상 디스플레이 장치의 위쪽 방향 움직임이 어렵게 된다.

따라서, 본 발명의 일 실시예에 따른 디바이스(100)에 있어서는, 자세각 정보 중 하나인 피치(θ) 각을 이용하여 그것이 일정 각도를 넘게 되면 도 15에서와 같이 양의 피치 각 방향으로 올리는 움직임에 대해서는 스케일을 증가시키고, 음의 피치 각 방향으로 내리는 움직임에 대해서는 그 스케일을 감소시킨다. 이로 인해 사용자는 사용자가 가장 편안히 느끼는 상태 즉, 약 5°~ 10° 정도 피치 각을 든 상태로 계속해서 포인팅을 할 수 있게 유도한다.

디바이스(100)의 변위 매핑부(170)는 단순히 매핑 함수 전체에 적용되는 매핑 스케일(mapping scale)을 조절함으로서 간단히 이와 같은 동작을 수행할 수 있다. 상기 매핑 스케일의 조절은 피치 각 정보에 따라 더 세분화 하여 다양하게 적용할 수 있을 뿐만 아니라 디바이스(100)의 피치 각이 음의 방향으로 내려진 상태에 대해서도 마찬가지로 적용할 수 있다.

요(ψ) 각에 대해서도 피치(θ) 각과 마찬가지의 기법을 적용할 수 있다. 사용자가 디바이스(100)를 조작할 경우에는, 도 16과 같이 보통 요 회전 방향으로 약 ±45°이내에서 움직이게 된다. 그런데 만약 디바이스(100)의 요 각이 이 범위를 벗어나게 되면 사용자는 손목의 움직임 한계로 인해 포인팅의 어려움을 느끼게 된다.

따라서, 본 발명의 일 실시예에 따른 디바이스(100)에 있어서는, 요 각이 양의 방향으로 일정 각도를 넘었을 경우에는, 도 17과 같이 양의 요 각 방향으로 회전하는 움직임에 대해서는 스케일을 증가시키고, 음의 요 각 방향으로 회전하는 움직임에 대해서는 그 스케일을 감소시킨다. 디바이스(100)의 요 각이 음의 방향으로 일정 각도를 넘는 상태에 대해서도 마찬가지로 적용할 수 있다. 이로 인해 사용자는 사용자가 가장 편안히 느끼는 약 ±45°의 요 각 내에서 포인팅을 계속할 수 있게 된다. 디바이스(100)의 변위 매핑부(170)는 단순히 매핑 함수 전체에 적용되는 매핑 스케일(mapping scale)을 조절함으로서 간단히 이와 같은 동작을 수행할 수 있다.

한편, 디바이스(100)가 피치 방향으로 90° 들렸을 경우에는 디스플레이 화면 상에서의 위치 변위(Δx, Δy)가 제한되도록 할 수 있다. 예를 들어, 변위 매핑부(170)는 θ가 90° 부근에서는 Δψ 및 Δθ을 0으로 설정하여 매핑되는 위치 변위(Δx, Δy)가 발생되지 않도록 할 수 있다. 왜냐하면, 피치 각이 90°가 되면 수학식 6의 세번째 식(ψ에 관한 식)에서 특이 점(singular point)이 발생되어 사용자가 의도하지 않은 포인터의 움직임이 발생할 수 있기 때문이다.

이에 대해 수학식 6에서 오일러 각이 아닌 quaternion 각을 이용하여 계산하게 되면 이러한 문제를 해결할 수는 있지만 연산량이 증가하게 되는 문제가 발생하므로 일장일단이 있다. 그러나, 실질적으로 사용자가 디바이스(100)를 수직으로 든 채 포인터를 조작하는 경우는 거의 없다고 보아도 무방하며, 설령 그러한 경우에도 상기와 같이 위치 변위를 제한하는 방식으로도 충분히 해소가 가능하다.

다시 도 2를 참조하면, 출력부(180)는 어플리케이션의 종류에 따라 자세각 측정부(160)로부터 제공되는 자세각(φ, θ, Ψ) 또는 변위 매핑부(170)로부터 제공되는 위치 변위(Δx, Δy)를 디스플레이 장치에 무선으로 전송한다. 물론, 디스플레이 장치가 디바이스(100)와 일체로 구현된 경우에는 메인 프로세서에 상기 데이터를 전달하면 될 것이다. 상기 무선 전송은 블루투스, 적외선 통신, IEEE 802.11 무선랜 표준, IEEE 802.15.3 무선팬 표준 기타의 무선 통신 규약을 통하여 이루어질 수 있다.

지금까지 도 2의 각 블록들은 메모리 상의 소정 영역에서 수행되는 태스크, 클래스, 서브 루틴, 프로세스, 오브젝트, 실행 쓰레드, 프로그램과 같은 소프트웨 어(software)나, FPGA(field-programmable gate array)나 ASIC(application-specific integrated circuit)과 같은 하드웨어(hardware)로 구현될 수 있으며, 또한 상기 소프트웨어 및 하드웨어의 조합으로 이루어질 수도 있다. 또한, 각 블록들은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 예들에서는 상기 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능하다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.

이상과 같은, 본 발명의 일 실시예에 따른 사용자 명령 입력 디바이스(100)는 다음과 같은 몇가지 실질적인 잇점을 제공할 수 있다.

1. 간결화된 시스템

사용자 명령 입력 디바이스(100)는 몸체 프레임의 정보를 항법 프레임으로 변환하는 과정에서 양 좌표계(프레임) 사이에서 회전 정보에 대한 변환만 이용한다. 즉, 몸체 프레임의 원점과 항법 프레임의 원점은, 다음의 도 18과 같이 동일한 상태로 유지된다. 이와 같이하면 좌표계 변환시, 양 좌표계 사이의 원점의 변화(도 19의 O₂-O₁)가 생략되기 때문에 연산량이 감소될 수 있다.

또한, 수학식 7과 같이, 가중평균의 개념과 움직임 추정 함수, 매핑 함수를 사용함으로써, 모델 기반의 필터링, 예를 들면, 선형 필터링(linear filtering), 칼만 필터링(Kalman filtering), 칼만 스무딩(Kalman smoothing), 확장 칼만 필터링(extended Kalman filtering), 상태-공간 추정(state-space estimation), 기대값 최대화(Expectation-Maximization) 등에 필요한 데이터의 샘플링을 위한 복잡한 연산과 그에 따른 초기화에 소요되는 시간이 요구되지 않는다.

그와 함께 움직임 추정 함수 및 매핑 함수는 FFT(Fast Fourier Transform)와 같이 많은 리소스를 차지하는 매트릭스 연산과는 다르게 입력과 출력이 1:1로 대응되는 단순화된 함수의 형태를 취하고 있다. 따라서, 이러한 단순화된 함수를 이용함에 따라 연산시간과 리소스가 현저히 줄어들게 된다.

2. 항법 프레임의 자세각 (attitude angle in navigation frame)

사용자 명령 입력 디바이스(100)는 몸체 프레임의 회전 및 가속도를 측정하여 항법 프레임의 자세 정보를 구한다. 이렇게 구해진 항법 프레임의 자세정보를 통해 위치정보(예: 포인터의 움직임)을 제어하기 때문에 몸체 프레임의 기울어짐에 상관없이 상기 위치정보가 구현될 수 있다. 또한 이러한 항법 프레임에서의 롤, 피치, 요 정보(자세각 정보)를 이용하여 전술한 바와 같이 사용자 패턴에 맞춘 움직임 구현, 직관적인 움직임 구현, 디스플레이 장치의 상태 제어 등의 다양한 응용이 가능하다. 그리고 제품 디자인에 있어서도 몸체 프레임의 회전방향에 대한 제한이 없기 때문에 사용자 명령 입력 디바이스(100)의 외관에 관한 다양한 디자인이 가능하게 된다.

3. 움직임 검출(Movement measure)

기존 기술에서는 단순 정지만을 판단하는 데에 비하여, 사용자 명령 입력 디 바이스(100)에서는 움직임 측정 함수를 통하여 정지, 미세 움직임, 느린 움직임, 빠른 움직임 등의 다양한 움직임 검출이 가능하고, 이러한 다양한 형태의 움직임 검출을 통해 더욱 개선된 움직임을 구현할 수 있는 기초를 제공한다. 그리고 움직임 검출에 사용되는 움직임 추정 함수는 입력과 출력이 1:1로 대응하여 많은 리소스를 차지하지 않는다.

4. 매핑(Mapping )

저하 영역, 스케일링 영역 및 한정 영역으로 구성된 매핑 함수는 사용자로 하여금 더욱 세밀하고 직관적인 움직임을 제공한다. 저하 영역을 통해 손 떨림과 같은 움직임이 제거되고, 스케일링 영역을 통해 미세 움직임이 구현될 수 있으며, 한정 영역을 통해 과도한 움직임의 제한이 가능하게 된다. 이러한 매핑 기능은 필요에 따라 원하는 영역의 값만을 취하는 것도 가능하다.

또한 매핑 함수는 부동 소수점(float) 값을 정규화된 디지털 값으로 변환시켜줄 수도 있는데, 이러한 디지털화를 통해 잡음의 감소, 통신상의 전송 데이터 용량 감소 등의 디지털 신호가 갖는 장점들을 제공할 수 있다. 그리고 이때 사용되는 매핑 함수는 모델 기반의 필터링처럼 별도의 초기화 시간과 데이터의 샘플링이 요구하지 않고, 입력과 출력이 1:1로 대응되는 단순화된 함수이다.

5. 가중평균을 통한 안정되고 정확한 움직임 구현(Stable and correct movement using weighted average)

사용자 명령 입력 디바이스(100)에서는, 각속도계 출력과 가속도계 출력으로 구현한 각 정보를 바탕으로 가중평균을 구하기 때문에, 보다 안정되고 정확한 움직 임의 구현이 가능하다. 각속도계만을 이용할 경우, 각속도를 적분하여 각도를 구현하는 과정에서 바이어스 변화에 의한 누적 오차가 발생하게 되고 이는 결국 각도의 발산을 일으키게 되는데, 이러한 문제를 해결하기 위한 다양한 종래의 기술들이 알려져 있다. 그러나, 이러한 종래의 기술들로는, 칼만 필터를 통해 바이어스를 추정하는 방법, 주파수 분석을 통해 디지털 필터를 사용하는 방법, 주어진 시간 및 임계값 등을 분석하여 바이어스를 추정하는 방법 등이 있다. 그러나, 이러한 종래의 기술들은 모두 시스템의 리소스를 과도하게 소모하고 많은 연산량을 요구하는 단점이 있다.

이에 비하여, 사용자 명령 입력 디바이스(100)의 경우, 각속도계와 함께 가속도계를 이용해 가중평균의 개념을 적용하기 때문에 가속도계에 의해 각도의 발산을 간단히 제한할 수 있다. 이로 인해 각속도계의 바이어스 추정 시에 사용되는 모델 또는 필터를 단순하게 구성할 수 있게 되고, 자세각 측정의 정확성을 향상시킬 수 있다. 이렇게 구해진 자세각을 통하여 보다 안정되고 정확한 움직임이 구현될 수 있는 것이다.

또한, 사용자 명령 입력 디바이스(100)에서는, 움직임 추정 함수에 의해 움직임이 검출되면, 검출된 움직임에 따라 각각의 가중치(수학식 7의 α₁, α₂, α₃)를 변경함으로써 사용자가 의도하는 다양한 움직임을 표현할 수 있다. 즉, 상황에 적합한 움직임 구현이 가능해진다는 의미이다.

6. 시스템의 초기화 시간 단축(Reducing system initial time)

사용자 명령 입력 디바이스(100)의 단순화된 시스템에 따르면, 디바이스의 초기화 시간을 단축시킬 수 있다. 그 대표적인 예로 전술한 가중평균의 개념을 들 수 있다. 각속도계만으로 각도를 구현할 경우, 누적오차를 최소화 하기 위해 칼만 필터링과 같은 별도의 필터링 기법이 요구된다. 상기 칼만 필터링의 경우 초기 바이어스 추정, 혹은 바이어스 세팅을 위한 초기화 단계가 필수적으로 요구된다.

이에 반하여, 사용자 명령 입력 디바이스(100)는 각속도계와 함께 가속도계 출력을 가지고 가중평균을 이용하여 각 정보를 구현함으로써, 이러한 초기화 단계 없이 정확한 각도를 구할 수 있게 된다. 즉, 시스템의 단순화를 추구하면서도 자세각 측정의 정확도를 향상시킬 수 있다.

또한, 매핑 함수도 모델 기반 필터링과 다르게 1:1 대응을 위주로 하기 때문에 이러한 초기화 시간 단축에 일정 부분 기여를 하게 된다.

7. 시스템의 전력소비 감소(Reducing power consumption)

사용자 명령 입력 디바이스(100)의 단순화된 시스템에 따르면, 초기화 시간을 단축 및 연산량 감소를 기초로 하여, 소비전력의 감소를 추구할 수 있다. 시스템의 초기화 시간이 단축됨으로써, 크게는 동작모드, 저전력모드(power down mode), 꺼짐모드(power off mode) 등의 단순화된 작동모드를 가질 수 있다.

종래의 기술들에서는 동작모드 진입을 위해 시스템을 안정화시키는 대기 모드(standby-mode)와 같은 임시 단계가 필요하였다. 하지만, 사용자 명령 입력 디바이스(100)에서는 대기 모드와 같은 임시 단계가 필요하지 않기 때문에, 디바이스가 사용되지 않을 때에는 선택적으로 특정 구성요소에 제공되는 전원을 오프(off)시킬 수 있다. 따라서, 디바이스 전원의 온-오프가 용이하게 되면 소비전력을 더욱 감소시킬 수 있게 되는 것이다.

이상 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야 한다.

도 1은 특정 프레임에서 정의되는 3축 회전 방향을 도시한 도면.

도 2는 본 발명의 일 실시예에 따른 사용자 명령 입력 디바이스를 도시하는 블록도.

도 3은 본 발명의 일 실시예에 따라 가속도계를 이용하여 롤 값을 측정하는 방법을 나타내는 도면.

도 4는 본 발명의 일 실시예에 따른 요각 측정 방법에서 피치 및 롤 값을 이용하여 요 값을 계산하는 방법을 나타내는 도면.

도 5 내지 7은 수학식 5에 있어서 ω_x를 이용한 경우와 이용하지 않은 경우를 비교한 도면들.

도 8은 움직임 추정 함수를 이용하여 디바이스의 움직임을 추정하는 흐름도.

도 9는 움직임 추정 함수의 예로서 사용된 종 형상 곡선을 보여주는 도면.

도 10은 움직임 추정 함수의 예로서 사용된 지수 함수를 보여주는 도면.

도 11a, 11b 및 12는 본 발명의 일 실시예에 따른 매핑 함수를 보여주는 도면.

도 13 내지 14는 피치 방향 회전에 관하여 매핑 스케일을 적용하는 예를 보여주는 도면들.

도 16 및 17은 요 방향 회전에 관하여 매핑 스케일을 적용하는 예를 보여주는 도면들.

도 18은 본 발명의 일 실시예에 따른 몸체 프레임과 항법 프레임 간의 원점이 일치됨을 보여주는 도면.

도 19는 종래 기술에 따른 몸체 프레임과 항법 프레임 간의 원점이 불일치됨을 보여주는 도면.

(도면의 주요부분에 대한 부호 설명)

100: 사용자 명령 입력 디바이스 110: 각속도 센서

120: 가속도 센서 130: 필터부

140: 제1 연산부 150: 제2 연산부

160: 자세각 측정부 170: 변위 매핑부

180: 출력부 190: 처리 유닛

Claims (12)

1. 3차원 공간 상에서 동작하는 사용자 명령 입력 디바이스로서,

   적어도 하나의 축을 중심으로 한 상기 디바이스의 각속도를 감지하는 제1 센서;

   적어도 하나의 방향에 대한 상기 디바이스의 가속도를 감지하는 제2 센서; 및

   상기 제1 센서의 출력 값을 상기 디바이스의 자세로부터 독립적인 좌표계에서의 제1 회전각을 연산하고, 상기 제2 센서의 출력 값을 상기 좌표계에서의 제2 회전각을 연산하며, 상기 제1 회전각과 상기 제2 회전각을 조합하여 최종 자세각을 구하는 처리 유닛을 포함하는 사용자 명령 입력 디바이스.
2. 제1항에 있어서, 상기 제1 센서는

   제1 축을 중심으로 한 상기 디바이스의 회전 및 상기 제1 축과 수직인 제2 축을 중심으로 한 상기 디바이스의 회전을 감지하는 각속도 센서인, 사용자 명령 입력 디바이스.
3. 제1항에 있어서, 상기 연산된 제1 회전각과 상기 제2 회전각은

   가중 평균에 의하여 조합되는, 사용자 명령 입력 디바이스.
4. 제3항에 있어서, 상기 가중 평균에 사용되는 가중치는

   소정의 움직임 추정 함수에 의하여 추정되는데, 상기 움직임 추정 함수는 상기 디바이스의 움직임이 없는 경우에는 상기 최종 자세각에 제2 회전각만이 반영되도록 상기 가중치를 설정하고, 상기 디바이스의 움직임이 최대인 경우에는 상기 최종 자세각에 제1 회전각만이 반영되도록 상기 가중치를 설정하며, 상기 디바이스의 움직임이 그 사이인 경우에는 정지와 최대 움직임 사이의 값으로 상기 가중치를 설정하는, 사용자 명령 입력 디바이스.
5. 제1항에 있어서, 상기 제1 회전각은

   상기 제1 센서의 출력 값 및 상기 제1 회전각이 조합된 미분방정식으로부터 연산되는, 사용자 명령 입력 디바이스.
6. 제1항에 있어서,

   상기 제2 회전각 중에서 요(yaw)는, 상기 제2 회전각 중에서 롤(roll) 및 피치(pitch)의 조합으로부터 연산되는, 사용자 명령 입력 디바이스.
7. 제1항에 있어서, 상기 최종 자세각은

   각각 적어도 요(yaw) 및 피치(pitch)를 포함하는, 사용자 명령 입력 디바이스.
8. 제7항에 있어서,

   상기 요의 변화량은 디스플레이 상의 포인터의 횡방향 변위에 대응하고, 상기 피치의 변화량은 디스플레이 상의 포인터의 종방향 변위에 대응하는, 사용자 명령 입력 디바이스.
9. 제8항에 있어서,

   상기 요의 변화량과 횡방향 변위와의 관계, 및 상기 피치의 변화량과 y축 변위와의 관계는 소정의 매핑 함수에 의하여 매핑되는, 사용자 명령 입력 디바이스.
10. 제9항에 있어서,

    상기 매핑 함수는, 함수의 입력 값을 축소 또는 제거 하여 출력하는 매핑하는 저하 영역과, 함수의 입력 값을 대략 비례되는 출력값으로 매핑하는 스케일링 영역과, 일정 값 이상의 입력 값에 대해 그 출력값을 제한하는 한정 영역 중에서 적어도 2개의 영역을 포함하여 이루어지는, 사용자 명령 입력 디바이스.
11. 3차원 공간 상에서 동작하는 사용자 명령 입력 디바이스를 이용하여 사용자 명령을 입력하는 방법으로서,

    적어도 하나의 축을 중심으로 한 상기 디바이스의 각속도를 감지하는 단계;

    적어도 하나의 방향에 대한 상기 디바이스의 가속도를 감지하는 단계;

    상기 제1 센서의 출력 값을 상기 디바이스의 자세로부터 독립적인 좌표계에 서의 제1 회전각으로 연산하는 단계;

    상기 제2 센서의 출력 값을 상기 좌표계에서의 제2 회전각으로 연산하는 단계;

    상기 제1 회전각과 상기 제2 회전각과의 조합하여 최종 자세각을 구하는 단계; 및

    상기 구한 최종 자세각의 변화량에 대응되는 위치 변위를 출력하는 사용자 명령 입력 방법.
12. 3차원 공간 상에서 동작하는 사용자 명령 입력 디바이스로서,

    적어도 하나의 축을 중심으로 한 상기 디바이스의 각속도를 감지하는 제1 센서;

    상기 디바이스의 회전각을 감지하는 제2 센서; 및

    상기 제1 센서의 출력 값을 상기 디바이스의 자세로부터 독립적인 좌표계에서의 회전각을 연산하고, 감지된 회전각과 상기 연산된 회전각을 조합하여 최종 자세각을 구하는 처리 유닛을 포함하는 사용자 명령 입력 디바이스.

Images