KR101725483B1 - 웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법 - Google Patents

웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법 Download PDF

Info

Publication number
KR101725483B1
KR101725483B1 KR1020150144125A KR20150144125A KR101725483B1 KR 101725483 B1 KR101725483 B1 KR 101725483B1 KR 1020150144125 A KR1020150144125 A KR 1020150144125A KR 20150144125 A KR20150144125 A KR 20150144125A KR 101725483 B1 KR101725483 B1 KR 101725483B1
Authority
KR
South Korea
Prior art keywords
wearable device
rotation angle
image
user
unit
Prior art date
Application number
KR1020150144125A
Other languages
English (en)
Inventor
조광수
남춘성
박용배
구본승
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Priority to KR1020150144125A priority Critical patent/KR101725483B1/ko
Application granted granted Critical
Publication of KR101725483B1 publication Critical patent/KR101725483B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]

Abstract

본 발명은 사용자가 착용하여 사용하는 웨어러블 기기에서 화면을 표시하는 장치와 그 방법에 관한 것이다.
본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는, 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는 센서 정보 입력부, 상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출하는 웨어러블 기기 회전각 산출부, 및 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환하는 영상 변환부를 포함할 수 있다.

Description

웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법{Apparatus and Method for Display in User Viewpoint on Wearable Device}
본 발명은 사용자가 착용하여 사용하는 웨어러블 기기에서 화면을 표시하는 장치와 그 방법에 관한 것이다.
스마트 폰과 같은 모바일 기기와 함께 스마트 워치와 같은 웨어러블 기기가 출시되어 사용되고 있다. 특히 웨어러블 기기 중 스마트 워치는 기존에 사람들이 사용하였던 시계를 더욱 개선하여, 시간 정보를 제공할 뿐만이 아니라 표시 화면에서 사용자에게 다양한 정보를 제공하도록 개발되었고, 스마트 폰과 연동하여 전화 또는 메시지 확인 기능까지도 제공하고 있다.
스마트 워치와 같은 웨어러블 기기를 사용할 경우, 사용자는 기존에 전화를 받거나 메시지를 확인하기 위하여 스마트 폰을 손으로 들어서 확인하였던 것을, 손목에 착용하는 기기를 이용하여 간편하고 빠르게 해당 서비스를 이용할 수 있다는 장점이 있다. 즉 스마트 워치는 사용자에게 두 손이 자유로운 상태에서 전화 또는 메시지를 확인할 수 있는 장점을 가지고 있다.
하지만 사용자들이 스마트 워치와 같은 웨어러블 기기를 착용하고 다양한 활동을 수행하면서 다양한 신체 자세를 취할 수 있는데, 이 경우 웨어러블 기기의 화면에서 정보를 제공하는 방향과 사용자의 시선 방향이 불일치하여, 사용자가 정보를 확인하는데 어려움이 있다는 문제점이 있다. 예를 들면 사용자가 자동차를 운전할 때, 자전거를 탈 때, 물건을 들고 있을 때와 같이 팔을 움직일 수 있는 다양한 상황에서 스마트 워치의 화면에서 출력되고 있는 정보가 사용자의 시선 방향에 맞춰지지 않아, 내용을 확인하는데 인지적, 물리적 어려움이 발생하고 있다.
그러나 기존의 스마트 워치의 화면 표시 방법들은 고정된 방향으로 정보를 표시하거나 또는 사용자가 화면을 바라보는 경우를 인식하여 화면을 표시하는 등의 기술만을 제공하고 있을 뿐, 위와 같이 사용자의 시선과 정보 제공 방향의 불일치 문제를 해결하기 위한 기술을 제공하고 있지 아니하다.
(특허문헌 0001) 공개특허공보 제10-2015-0069856호 (2015.06.24.)
본 발명이 해결하고자 하는 과제는 사용자의 시선 방향과 일치하도록 웨어러블 기기의 화면에 정보를 표시함으로써 사용자가 보다 직관적으로 웨어러블 기기에서 제공하는 정보를 인지할 수 있도록 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치와 그에 관한 방법을 제공하는 것이다.
상기 과제를 해결하기 위해, 본 발명의 일 유형에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는, 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는 센서 정보 입력부, 상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출하는 웨어러블 기기 회전각 산출부, 및 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환하는 영상 변환부를 포함할 수 있다.
여기서 상기 장치는 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력부를 더 포함할 수 있다.
여기서 상기 센서는 자이로스코프 센서 또는 가속도계 센서 중 어느 하나 이상을 포함하는 것을 특징으로 할 수 있다.
여기서 상기 시선 방향은 상기 웨어러블 기기를 착용한 사용자의 신체에 대하여 미리 정의된 방향이고, 상기 기준 방향은 상기 시선 방향을 기준으로 미리 설정된 방향인 것을 특징으로 할 수 있다.
여기서 상기 웨어러블 기기 회전각 산출부는 상기 기준 방향을 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축에 대하여 정의하고, 상기 웨어러블 기기의 회전각을 산출하는 것을 특징으로 할 수 있다.
여기서 상기 웨어러블 기기 회전각 산출부는 상기 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서 상기 웨어러블 기기의 초기 회전 각도를 설정하는 초기화부를 포함할 수 있다.
여기서 상기 웨어러블 기기 회전각 산출부는 상기 웨어러블 기기가 위치 또는 자세가 변화함에 따라, 상기 설정한 초기 회전 각도를 기준으로 상기 웨어러블 기기가 회전한 상기 회전각을 산출하여 획득하는 회전각 획득부를 더 포함할 수 있다.
여기서 상기 회전각 획득부는 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축을 기준으로, 상기 제1 축 방향으로 상기 웨어러블 기기가 이동한 거리 또는 상기 제1 축 방향으로의 이동으로 인한 회전 각도와, 상기 제2 축 방향으로 상기 웨어러블 기기가 이동한 거리 또는 상기 제2 축 방향으로의 이동으로 인한 회전 각도를 이용하여, 상기 제1 축 및 제2 축과 직교하는 제3 축을 중심으로 상기 웨어러블 기기가 회전한 상기 회전각을 산출할 수 있다.
여기서 상기 영상 변환부는, 상기 웨어러블 기기의 회전각을 이용하여 상기 영상을 회전시킬 영상 회전각을 산출하는 영상 회전각 산출부, 및 상기 입력받은 영상을 상기 산출한 영상 회전각에 따라 회전 변환하는 영상 회전부를 포함할 수 있다.
여기서 상기 영상 회전각 산출부는 상기 시선 방향과, 상기 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서의 초기 회전 각도와, 상기 웨어러블 기기의 회전각을 이용하여, 상기 영상 회전각을 산출하는 것을 특징으로 할 수 있다.
여기서 상기 영상 회전각 산출부는 상기 기준 방향 또는 상기 초기 회전 각도에 따라 정의되는 상기 웨어러블 기기의 디스플레이 장치의 면과 상기 시선 방향 간의 제1 각도를 산출하고, 상기 회전각에 따라 정의되는 상기 웨어러블 기기의 디스플레이 장치의 면과 상기 시선 방향 간의 제2 각도를 산출하고, 상기 제1 각도와 상기 제2 각도의 차이 각도에 따라 상기 영상 회전각을 산출하는 것을 특징으로 할 수 있다.
여기서 상기 영상 회전각 산출부는 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축과 직교하는 제3 축을 중심으로 상기 웨어러블 기기가 회전한 상기 회전각의 상기 제3 축 성분에 따라 상기 영상 회전각을 산출하는 것을 특징으로 할 수 있다.
여기서 상기 영상 회전각 산출부는 상기 회전각의 상기 제3 축 성분의 음수를 상기 영상 회전각으로 하는 것을 특징으로 할 수 있다.
여기서 상기 영상 변환부는, 상기 웨어러블 기기의 회전각에 따라 상기 영상에 포함된 객체의 위치를 상기 영상 내에서 이동하거나, 또는 상기 객체의 상기 영상 내 크기를 조절하여, 상기 영상을 변환하는 영상 내 객체 변환부를 포함할 수 있다.
여기서 상기 영상 내 객체 변환부는 상기 웨어러블 기기의 회전각을 이용하여 상기 사용자에 대한 상기 웨어러블 기기의 위치를 추정하고, 상기 추정한 위치에 따라 상기 영상에 포함된 객체의 위치 또는 크기를 조절하여 상기 영상을 변환하는 것을 특징으로 할 수 있다.
상기 과제를 해결하기 위해, 본 발명의 일 유형에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는, 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는 센서 정보 입력부, 상기 입력받은 정보를 이용해, 상기 웨어러블 기기의 이동에 따른 상기 웨어러블 기기를 착용한 사용자의 제스쳐를 인식하는 제스쳐 인식부, 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 인식한 제스쳐에 따라 상기 영상을 회전시킬 영상 회전각을 결정하고, 상기 입력받은 영상을 상기 결정한 영상 회전각에 따라 회전 변환하는 영상 변환부, 및 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력부를 포함할 수 있다.
여기서 상기 제스쳐 인식부는 상기 웨어러블 기기가 사용자의 팔에 착용된 상태로, 어깨를 중심으로 회전하여 이동하는 움직임에 따른 상하 움직임 제스쳐 또는 팔꿈치를 중심으로 회전하여 이동하는 움직임에 따른 좌우 움직임 제스쳐를 인식하는 것을 특징으로 할 수 있다.
여기서 상기 영상 변환부는, 상기 인식한 제스쳐가 상하 움직임 제스쳐인 경우, 상기 상하 움직임 제스쳐에 대하여 미리 설정된 상기 영상 회전각에 따라 상기 입력받은 영상을 회전 변환하고, 상기 인식한 제스쳐가 좌우 움직임 제스쳐인 경우, 상기 좌우 움직임 제스쳐에 대하여 미리 설정된 상기 영상 회전각에 따라 상기 입력받은 영상을 회전 변환하는 것을 특징으로 할 수 있다.
상기 과제를 해결하기 위해, 본 발명의 일 유형에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법은, 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는 센서 정보 입력 단계, 상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출하는 웨어러블 기기 회전각 산출 단계, 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환하는 영상 변환 단계, 및 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력 단계를 포함할 수 있다.
상기 과제를 해결하기 위해, 본 발명의 일 유형에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법은, 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는 센서 정보 입력 단계, 상기 입력받은 정보를 이용해, 상기 웨어러블 기기의 이동에 따른 상기 웨어러블 기기를 착용한 사용자의 제스쳐를 인식하는 제스쳐 인식 단계, 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 인식한 제스쳐에 따라 상기 영상을 회전시킬 영상 회전각을 결정하고, 상기 입력받은 영상을 상기 결정한 영상 회전각에 따라 회전 변환하는 영상 변환 단계, 및 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력 단계를 포함할 수 있다.
본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치와 그에 관한 방법에 의하면, 사용자의 시선 방향과 일치하도록 화면의 방향을 변환하거나 또는 사용자가 보다 쉽게 내용을 인식할 수 있도록 화면의 크기를 변환하여 웨어러블 기기의 디스플레이에 표시함으로써, 사용자가 보다 쉽고 빠르게 웨어러블 기기가 제공하는 정보를 인지할 수 있도록 하는 효과가 있다.
도 1 및 도 2는 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치의 블록도이다.
도 3은 시선 방향(VD)과 기준 방향(SD)을 설명하기 위한 참고도이다.
도 4는 웨어러블 기기 회전각 산출부(200)의 세부 블록도이다.
도 5는 영상 변환부(300)의 동작을 설명하기 위한 참고도이다.
도 6은 영상 변환부(300)의 세부 블록도이다.
도 7은 영상 회전각 산출부(310)의 동작을 설명하기 위한 참고도이다.
도 8은 영상 변환부(300)의 또 다른 세부 블록도이다.
도 9는 영상 내 객체 변환부(330)의 동작을 설명하기 위한 참고도이다.
도 10은 영상 내 객체 변환부(330)의 동작을 설명하기 위한 참고도이다.
도 11은 본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치의 블록도이다.
도 12는 제스쳐 인식부(201)와 영상 변환부(301)의 동작을 설명하기 위한 참고도이다.
도 13은 본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법의 흐름도이다.
도 14는 본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법의 흐름도이다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조 부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 바람직한 실시예를 설명할 것이나, 본 발명의 기술적 사상은 이에 한정하거나 제한되지 않고 당업자에 의해 변형되어 다양하게 실시될 수 있음은 물론이다.
스마트 폰과 같은 모바일 기기와 함께 스마트 워치와 같은 웨어러블 기기가 출시되어 사용되고 있다. 사용자들이 스마트 워치와 같은 웨어러블 기기를 착용하고 다양한 활동을 수행하면서 다양한 신체 자세를 취할 수 있는데, 이 경우 웨어러블 기기의 화면에서 정보를 제공하는 방향과 사용자의 시선 방향이 불일치하여, 사용자가 정보를 확인하는데 어려움이 있다. 예를 들면 사용자가 자동차를 운전할 때, 자전거를 탈 때, 물건을 들고 있을 때와 같이 팔을 움직일 수 있는 다양한 상황에서 스마트 워치의 화면에서 출력되고 있는 정보가 사용자의 시선 방향에 맞춰지지 않아, 내용을 확인하는데 인지적, 물리적 어려움이 발생하고 있다.
그러나 기존의 스마트 워치의 화면 표시 방법들은 고정된 방향으로 정보를 표시하거나 또는 사용자가 화면을 바라보는 경우를 인식하여 화면을 표시하는 등의 기술만을 제공하고 있을 뿐, 위와 같이 사용자의 시선과 정보 제공 방향의 불일치 문제를 해결하기 위한 기술을 제공하고 있지 아니하다.
이에 본 발명은 웨어러블 기기의 화면에 영상을 사용자의 시선 방향을 고려하여 표시함으로써, 사용자가 보다 직관적으로 웨어러블 기기에서 제공하는 정보를 인지할 수 있도록 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치와 그에 관한 방법을 제공하고자 한다.
여기서 웨어러블 기기는 사용자의 신체에 착용하여 이용할 수 있는 기기를 의미하며, 예를 들면 사용자의 팔에 착용하는 스마트 워치와 같은 기기가 될 수 있다.
도 1 및 도 2는 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치의 블록도이다.
상기 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 도 1과 같이 센서 정보 입력부(100), 웨어러블 기기 회전각 산출부(200), 영상 변환부(300)를 포함할 수 있다. 여기서 필요에 따라 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 도 4와 같이 영상 출력부(400)를 더 포함할 수도 있다.
여기서 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 각 구성요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 또한 필요에 따라 각 구성요소들은 각각 하나의 독립적인 하드웨어로 구현되거나 각 하드웨어에 포함될 수도 있다. 또한 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 소프트웨어 프로그램으로 구현되어 프로세서 또는 신호 처리 모듈 위에서 동작할 수 있고, 또는 하드웨어의 형태로 구현되어 각종 프로세서, 칩(Chip), 반도체, 소자 등에 포함될 수 도 있다. 또한 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 컴퓨터, 각종 임베디드 시스템 또는 디바이스 상에서 하드웨어 또는 소프트웨어 모듈의 형태로 포함되어 동작할 수 있다. 바람직하게는 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 스마트 워치에 포함될 수 있다.
센서 정보 입력부(100)는 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는다.
여기서 센서(50)는 자이로스코프(gyroscope) 센서 또는 가속도 센서 중 어느 하나 이상을 포함할 수 있다. 또는 필요에 따라 다양한 방식의 기울기 센서, 관성 센서 등을 포함할 수 있다.
여기서 자이로스코프 센서는 자이로스코프를 이용하여 회전 운동에 따른 회전 반발력을 측정하여 이를 전기 신호로 출력하는 센서로써, 3차원 공간 상에서의 각 축에 대한 자세 변동에 관한 정보를 출력한다. 예를 들면 자이로스코프 센서는 센서의 회전에 따른 각 축 방향에서의 각속도 정보를 출력할 수 있다. 여기서 자이로스코프 센서는, 광학식, MEMS 방식, 진동식, 광섬유 방식, 유체식, 가스류식 등 다양한 방식의 자이로 센서가 될 수 있다.
여기서 가속도 센서는 3차원 공간에서의 3축 방향에 대하여 감지한 가속도에 관한 정보를 출력할 수 있다.
웨어러블 기기 회전각 산출부(200)는 상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출한다.
영상 변환부(300)는 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환한다.
영상 출력부(400)는 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력한다.
이하에서는 먼저 웨어러블 기기 회전각 산출부(200)의 동작에 대하여 보다 상세히 설명한다.
웨어러블 기기 회전각 산출부(200)는 상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출한다.
여기서 웨어러블 기기 회전각 산출부(200)는 자이로스코프 센서 또는 가속도 센서로부터 입력받은 정보를 이용하여 웨어러블 기기의 회전각을 산출할 수 있다. 이때 회전각을 산출하는 방식은 기존의 자이로스코프 센서 또는 가속도 센서의 출력값을 이용하는 다양한 방식들을 이용할 수 있다. 예를 들어 자이로스코프 센서를 이용할 경우 입력받은 각속도에 대하여 적분 연산을 수행하여 각 축 방향으로의 회전각을 산출할 수 있다. 이때 필요에 따라 적분 연산시 누적되는 오차를 해소하기 위해 칼만필터 또는 상보필터 등 기존에 적분 누적 오차의 제거를 위하여 사용되는 필터링을 수행할 수도 있다. 예를 들면 'Bourke, Alan K., and Gerald M. Lyons. "A threshold-based fall-detection algorithm using a bi-axial gyroscope sensor." Medical engineering & physics 30.1 (2008): 84-90.', 'Lee, Hyung-Jik, and Seul Jung. "Gyro sensor drift compensation by Kalman filter to control a mobile inverted pendulum robot system." Industrial Technology, 2009. ICIT 2009. IEEE International Conference on. IEEE, 2009.'에서 개시하고 있는 방법을 사용하여 각속도를 산출할 수 있고, 기타 다양한 기존 방법을 사용하여 각속도를 산출할 수 있음은 물론이다.
여기서 웨어러블 기기 회전각 산출부(200)는 필요에 따라 가속도 센서로부터 입력받은 정보를 이용하여 상기 회전각을 산출할 수도 있다. 여기서도 웨어러블 기기 회전각 산출부(200)는 가속도 센서가 기울어짐에 따라 출력되는 정보를 이용하여 회전각을 산출하는 기존의 방법을 이용할 수 있다. 예를 들면 중력 가속도의 방향을 기초로 각 축별 가속도를 분할하여 센서의 기울어진 정도에 따른 회전각을 산출할 수 있다.
여기서 웨어러블 기기 회전각 산출부(200)는 미리 설정된 기준 방향에 대한 웨어러블 기기의 회전각을 산출할 수 있다. 여기서 기준 방향은 상기 회전각을 산출하기 위하여 기준이 되는 방향이 된다.
여기서 기준 방향은 시선 방향을 기준으로 미리 설정된 방향이 될 수 있다.
이때 상기 시선 방향은 상기 웨어러블 기기를 착용한 사용자의 신체에 대하여 미리 정의된 방향이 될 수 있다.
여기서 상기 시선 방향은 사용자의 신체의 정면 방향이 될 수 있다. 여기서 사용자의 정면 방향은 사용자의 머리 또는 신체의 중심에서 사용자가 정면을 바라보는 방향으로 정의될 수 있다.
도 3은 상기 시선 방향(VD)과 상기 기준 방향(SD)을 설명하기 위한 참고도이다.
도 3의 (a)를 참조하면, 시선 방향(VD)는 사용자의 머리(HEAD)나 신체의 정면 방향이 될 수 있다.
또는 사용자가 웨어러블 기기를 착용하는 신체의 위치에 따라 웨어러블 기기를 바라보는 시선의 방향을 고려하기 위하여, 시선 방향은 사용자의 정면 방향에서 소정의 각도만큼 회전한 방향으로 설정될 수 있다. 예를 들어 왼손에 웨어러블 기기를 착용하는 경우를 고려하기 위하여, 시선 방향은 사용자의 정면 방향에서 좌측으로 소정의 각도 만큼 회전한 방향, 예를 들면 10도 내지 30도 회전한 방향으로 정의될 수 있다.
여기서 상기 기준 방향은 상기 시선 방향과 동일한 방향으로 설정되거나 또는 상기 시선 방향과 소정의 각도를 가지는 방향으로 설정될 수 있다. 예를 들면 상기 기준 방향은 시선 방향에 직교하는 방향으로 설정될 수 있다. 도 3의 (a)를 참조하면 상기 기준 방향(SD)가 시선 방향(VD)와 직교되도록 설정되고 있다.
여기서 바람직하게는 상기 시선 방향은 사용자의 정면 방향이나 정면 방향에서 소정의 각도 만큼 회전한 방향으로 정의되고, 상기 기준 방향은 상기 시선 방향과 동일한 방향으로 설정될 수 있다.
여기서 상기 시선 방향과 상기 기준 방향은 웨어러블 기기의 회전각을 연산하기 위한 좌표계의 기준 설정을 위하여 기타 다른 방향으로 미리 정의되어 설정될 수 있음은 물론이다.
여기서 웨어러블 기기 회전각 산출부(200)는 위와 같이 미리 설정된 기준 방향을 기준으로 웨어러블 기기의 회전각을 산출할 수 있다. 도 3의 (b)를 참조하면, 사용자가 팔(ARM)을 (a)와 같은 위치에서 (b)와 같은 위치로 회전시킨 경우, 웨어러블 기기는 기준 방향(SD)을 기준으로 좌측으로 90도 만큼 회전한 것으로 상기 회전각이 90도로 산출될 수 있다. 보다 정확하게는 Z축을 중심으로 시계 방향으로 회전하는 방향으로 -90도의 회전각이 산출될 수 있다.
여기서 회전각은 3차원 공간에서의 웨어러블 기기의 회전을 나타내기 위하여 X, Y, Z 축 방향으로 각각 산출되어 표현될 수 있다. 또한 필요에 따라 상기 회전각은 3축 중 일부의 축에 대하여만 산출될 수도 있다. 예를 들면 회전각은 X, Y 축 방향으로만 산출될 수도 있다.
여기서 웨어러블 기기 회전각 산출부(200)는 상기 기준 방향을 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 제1 축(X 축)과 제2 축(Y 축)에 대하여 정의하고, 상기 웨어러블 기기의 회전각을 산출할 수 있다. 여기서 상기 평면 좌표계는 중력 방향과 직교하는 것이 바람직하다.
예를 들면 상기 기준 방향은 사용자의 신체와의 상대적인 위치 또는 방향에 따라 설정되는 방향으로 초기 설정한 기준 방향을 중심으로 X축과 Y축을 정의할 수도 있다. 또는 상기 기준 방향은 미리 정의된 X축과 Y축에 대하여 일정한 벡터 방향으로 정의될 수도 있다.
도 4는 웨어러블 기기 회전각 산출부(200)의 세부 블록도이다.
웨어러블 기기 회전각 산출부(200)는 초기화부(210), 회전각 산출부(220)를 포함할 수 있다.
여기서 초기화부(210)는 상기 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서 상기 웨어러블 기기의 초기 회전 각도를 설정한다.
여기서 초기화부(210)는 초기화 입력을 수신하여 상기 초기 회전 각도를 설정할 수 있다. 즉 사용자가 웨어러블 기기를 기준 방향으로 정렬시킨 상태에서, 초기화부(210)가 초기화 입력을 수신하여 초기화를 수행할 수 있다.
여기서 웨어러블 기기가 기준 방향으로 정렬된 상태는 사용자가 웨어러블 기기를 바라볼 때 화면의 방향이 회전되거나 화면이 변환될 필요 없이 화면에 표시된 내용을 쉽게 인지할 수 있는 상태이다. 예를 들면 도 3의 (a)와 같이 사용자가 팔(ARM)에 착용한 웨어러블 기기인 스마트 워치(SW)를 시계를 바라보는 일반적인 방법으로 팔이 사용자의 몸통과 평행하게 위치하도록 한 상태를 웨어러블 기기가 기준 방향(SD)으로 정렬된 상태라고 정의할 수 있다. 이와 같이 웨어러블 기기(SW)가 기준 방향(SD)으로 정렬된 상태에서 상기 초기 회전 각도가 설정될 수 있다.
이때 초기화부(210)는 상기 기준 방향으로 정렬된 웨어러블 기기의 회전각을 초기 회전 각도로 설정할 수 있다. 또는 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서 초기 회전 각도를 각 축 방향에 대하여 0도로 설정할 수도 있다. 그리고 이와 같이 초기 회전 각도를 설정한 다음, 이하 설명할 회전각 획득부(220)에서 이를 기준으로 웨어러블 기기의 회전에 따른 회전각을 산출할 수 있다.
예를 들면 여기서 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서 초기 회전 각도가 X축, Y축, Z축 방향으로 각각 (0도, 0도, 0도)로 설정될 수 있다.
다음으로 회전각 획득부(220)는 상기 웨어러블 기기가 위치 또는 자세가 변화함에 따라, 상기 설정한 초기 회전 각도를 기준으로 상기 웨어러블 기기가 회전한 상기 회전각을 산출하여 획득한다.
예를 들면 웨어러블 기기는 3차원 공간 상에서 상기 초기 회전 각도를 기준으로 회전하여 (30도, 90도, 20도)와 같이 회전할 수 있고, 회전각 획득부(220)는 위와 같이 회전한 회전각 (30도, 90도, 20도)를 산출할 수 있다. 이때 회전각 획득부(220)는 상술한 바와 같이 자이로스코프 센서 또는 가속도 센서로부터 입력받은 정보 - 각속도 또는 가속도에 관한 정보 - 를 기초로 기존의 다양한 방식들을 이용하여 웨어러블 기기의 회전각을 산출할 수 있다.
예를 들면 초기화부(210)는 도 3의 (a)와 같이 기준 방향(SD)에 따라 웨어러블 기기(SW)가 정렬되었을 때 초기 회전 각도를 설정하고, 회전각 획득부(220)는 도 3의 (b)와 같이 상기 설정한 초기 회전 각도를 기준으로 웨어러블 기기(SW)가 회전한 회전각을 산출할 수 있다. 여기서 회전각은 상술한 바와 같이 Z축을 중심으로 시계 방향으로 회전하는 방향으로 -90도가 될 수 있다.
여기서 회전각 획득부(220)는 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축(X축)과 제2 축(Y축)을 기준으로 회전각을 산출할 수 있다. 여기서 상기 평면 좌표계는 중력 방향과 직교하는 것이 바람직하다. 이때 회전각 획득부(220)는 제1 축(X축) 및 제2 축(Y축)과 직교하는 제3 축(Z축)을 중심으로 하여 회전하는 방향으로의 회전각을 산출하기 위하여, 제1 축(X축) 및 제2 축(Y축) 방향으로의 상기 웨어러블 기기의 이동 정보를 이용할 수 있다. 여기서 회전각 획득부(220)는 제1 축 방향으로 상기 웨어러블 기기가 이동한 거리 또는 상기 제1 축 방향으로의 이동으로 인한 회전 각도와, 상기 제2 축 방향으로 상기 웨어러블 기기가 이동한 거리 또는 상기 제2 축 방향으로의 이동으로 인한 회전 각도를 이용하여, 제3 축을 중심으로 상기 웨어러블 기기가 회전한 상기 회전각을 산출할 수 있다.
여기서 웨어러블 기기의 회전은 제 3축(Z축)에 수직한 상기 평면 좌표계 상에서 2차원 적으로 파악될 수 있다. 이와 같은 경우 웨어러블 기기의 회전은 제 3축(Z축)을 중심으로 회전한 정도에 따른 회전각(θ)으로 표현될 수 있다.
이때 회전각 획득부(220)는 센서 정보 입력부(100)로부터 입력받은 정보를 이용하여 상술한 바와 같이 상기 초기 회전 각도를 기준으로 웨어러블 기기가 제 3축(Z축)을 중심으로 회전한 정도에 따른 회전각(θ)를 산출하여 획득할 수 있다.
회전각 획득부(220)는 웨어러블 기기가 X축 방향으로 이동한 거리와 Y축 방향으로 이동한 거리를 산출하고, 이를 이용하여 Z축을 중심으로 웨어러블 기기가 회전한 회전각(θ)를 산출할 수 있다. 여기서 회전각 획득부(220)는 자이로 센서 또는 가속도 센서의 출력값을 이용하여 웨어러블 기기가 X축 방향으로 이동한 거리와 Y축 방향으로 이동한 거리를 산출할 수 있다. 여기서 각 축방향으로 이동한 거리를 산출하는 방식도 기존의 자이로 센서 또는 가속도 센서의 출력값을 이용하여 산출하는 방식을 이용할 수 있다.
또한 회전각 획득부(220)는 웨어러블 기기가 X축을 중심으로 회전한 회전각과 Y축을 중심으로 회전한 회전각을 이용하여 Z축을 중심으로 회전한 회전각을 산출할 수 있다. 그리고 다음으로 영상 변환부(300)에서 위 산출한 Z축을 중심으로 회전한 회전각에 따라 영상을 회전시킬 수 있다. 여기서 회전각 획득부(220)는 상술한 바와 같이 자이로 센서 또는 가속도 센서의 출력값을 이용하여 웨어러블 기기가 X축을 중심으로 회전한 회전각과 Y축을 중심으로 회전한 회전각을 획득할 수 있다.
도 7은 회전각 획득부(220)의 동작을 설명하기 위한 참고도이다.
여기서 도 7 (a)를 참조하면 웨어러블 기기가 X축을 중심으로 회전한 값 즉 X축 회전값은 X축과 직교하는 Y축에 따라 회전 또는 이동한 값으로 표현할 수 있고, 웨어러블 기기가 Y축을 중심으로 회전한 값 즉 Y축 회전값은 Y축과 직교하는 X축에 따라 회전 또는 이동한 값으로 표현할 수 있다. 이때 각 축에 따라 이동한 값은 회전각에 따른 회전 거리로 표현될 수 있으며, 소정의 반지름 R을 가정할 때 회전한 호의 길이인 R × 회전각으로 표현될 수 있다.
이때 각 축을 중심으로 하는 회전각이 -90도에서 90도까지 변할 수 있다고 가정할 때, 각 축에 따라 이동한 값 역시 -90도 × R 내지 90도 × R의 값을 가질 수 있다. 즉 예를 들면 웨어러블 기기가 X축을 중심으로 90도 회전한 경우 Y축에 따라 90도 × R 만큼 이동하였다고 표현할 수 있다.
여기서 회전각 획득부(220)는 도 7 (b)와 같이, 웨어러블 기기가 X축에 따라 이동한 이동값 A(= Y축 회전각 × R)과 Y축에 따라 이동한 이동값 B(= X축 회전각 × R)를 이용하여 웨어러블 기기가 Z축을 중심으로 회전한 회전각(θ)를 산출할 수 있다. 여기서 상기 회전각(θ)는 도 7 (d)와 같이 상기 A와 B의 아크 탄젠트 연산값으로 산출할 수 있다. 즉 θ = atan(A/B)와 같이 산출할 수 있다.
다음으로는 영상 변환부(300)의 동작에 대하여 보다 상세히 설명한다.
영상 변환부(300)는 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환한다.
여기서 영상의 정보 표시 방향은 영상을 생성할 때 사용자가 영상을 볼 것을 염두에 두고 정보를 표시한 방향으로, 영상에 대하여 소정의 방향으로 미리 설정될 수 있다. 여기서 사용자가 영상에 표시된 정보를 쉽게 인지할 수 있도록 하기 위하여 영상 정보 표시 방향이 시선 방향에 따르도록 할 필요가 있다. 그런데 웨어러블 기기가 회전하는 경우 화면에 표시된 영상 정보 표시 방향과 시선 방향 간의 차이가 발생하게 된다. 이에 영상 변환부(300)에서는 웨어러블 기기 회전각 산출부(200)에서 산출한 회전각을 이용하여 영상을 회전시킴으로써, 웨어러블 기기가 기준 방향으로부터 벗어나 회전된 경우에도 영상 정보 표시 방향이 시선 방향에 따를 수 있도록 한다.
도 5는 영상 변환부(300)의 동작을 설명하기 위한 참고도이다.
도 5와 같이 영상에 문자가 표시되는 방향은 사용자가 읽을 수 있도록 시선 방향에 따를 필요가 있다. 이에 영상 변환부(300)는 도 5와 같이 웨어러블 기기(SW)에 표시되는 문자(T)를 포함하는 영상(IM)을 시선 방향에 따르도록 회전시킨다.
도 6은 영상 변환부(300)의 세부 블록도이다.
도 6과 같이 영상 변환부(300)는 영상 회전각 산출부(310), 영상 회전부(320)를 포함할 수 있다.
영상 회전각 산출부(310)는 상기 웨어러블 기기의 회전각을 이용하여 상기 영상을 회전시킬 영상 회전각을 산출한다. 여기서 영상 회전각은 상기 웨어러블 기기의 회전각에 따라 산출될 수 있다.
영상 회전부(320)는 상기 입력받은 영상을 상기 산출한 영상 회전각에 따라 회전 변환한다.
여기서 영상 회전각 산출부(310)는 상기 시선 방향과, 상기 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서의 초기 회전 각도와, 상기 웨어러블 기기의 회전각을 이용하여, 상기 영상 회전각을 산출할 수 있다.
이때 영상 회전각 산출부(310)는 상기 기준 방향 또는 상기 초기 회전 각도에 따라 정의되는 상기 웨어러블 기기의 디스플레이 장치의 면과 상기 시선 방향 간의 제1 각도를 산출하고, 상기 회전각에 따라 정의되는 상기 웨어러블 기기의 디스플레이 장치의 면과 상기 시선 방향 간의 제2 각도를 산출하고, 상기 제1 각도와 상기 제2 각도의 차이 각도에 따라 상기 영상 회전각을 산출할 수 있다.
예를 들면 영상 회전각 산출부(310)는 상기 제1 각도와 상기 제2 각도의 차이 각의 음수를 상기 영상 회전각으로 할 수 있다.
여기서 영상 회전각 산출부(310)는 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축과 직교하는 제3 축을 중심으로 상기 웨어러블 기기가 회전한 상기 회전각의 상기 제3 축 성분에 따라 상기 영상 회전각을 산출할 수 있다. 여기서 상기 평면 좌표계는 중력 방향과 직교하는 것이 바람직하다.
이때 영상 회전각 산출부(310)는 상기 회전각의 상기 제3 축 성분의 음수를 상기 영상 회전각으로 할 수 있다.
예를 들어 상기 웨어러블 기기가 제 3축(Z축)을 중심으로 θ만큼 회전한 것으로 웨어러블 기기 회전각 산출부(200)에서 회전각이 산출된 경우, 영상 회전각 산출부(310)는 상기 θ에 따라 영상 회전각을 산출할 수 있다. 예를 들면 영상 회전각 산출부(310)는 도 3의 (b)와 같이 영상 회전각을 -θ로 산출할 수 있다. 도 7의 (c)는 위와 같은 영상 회전각 산출부(310)의 동작을 설명하기 위한 참고도이다.
영상 회전부(320)는 위와 같이 산출한 영상 회전각에 따라 상기 입력받은 영상을 회전 변환할 수 있다. 예를 들면 영상 회전부(320)는 영상의 중심점을 기준으로 영상을 영상 회전각 만큼 회전시킬 수 있다.
도 8은 영상 변환부(300)의 또 다른 세부 블록도이다.
도 6과 같이 영상 변환부(300)는 영상 내 객체 변환부(330)를 포함할 수 있다.
여기서 필요에 따라 영상 변환부(300)는 영상 회전각 산출부(310), 영상 회전부(320), 영상 내 객체 변환부(330)를 모두 포함할 수도 있다.
영상 내 객체 변환부(330)는 상기 웨어러블 기기의 회전각에 따라 상기 영상에 포함된 객체의 위치를 상기 영상 내에서 이동하거나, 또는 상기 객체의 상기 영상 내 크기를 조절하여, 상기 영상을 변환한다.
여기서 영상 내 객체 변환부(330)는 상기 웨어러블 기기의 회전각을 이용하여 상기 사용자에 대한 상기 웨어러블 기기의 위치를 추정하고, 상기 추정한 위치에 따라 상기 영상에 포함된 객체의 위치 또는 크기를 조절하여 상기 영상을 변환할 수 있다.
여기서 웨어러블 기기를 착용한 사용자의 신체 구조에 관한 정보를 토대로 상기 웨어러블 기기의 회전각에 따라 상기 사용자에 대한 웨어러블 기기의 위치가 미리 정의되거나 설정될 수 있다. 즉 예를 들어 회전각 중 측정 축 성분이 일정한 범위 내인 경우, 사용자에 대한 웨어러블 기기의 위치가 특정한 위치인 것으로 미리 정의될 수 있다. 이에 영상 내 객체 변환부(330)는 위와 같이 미리 정의된 정보를 이용하여 웨어러블 기기의 회전각에 따른 사용자에 대한 웨어러블 기기의 위치를 추정할 수 있다.
다음으로 영상 내 객체 변환부(330)는 상기 추정된 사용자에 대한 웨어러블 기기의 위치에 따라 영상에 포함된 객체의 위치 또는 크기를 조절할 수 있다. 이는 웨어러블 기기가 사용자에 대하여 특정 위치에 존재하는 경우 사용자가 화면에서 주로 주목하게 되는 부분이 변하고, 또한 사용자가 웨어러블 기기의 디스플레이 장치의 면을 바라보는 각도가 달라져, 정보를 나타내는 객체를 디스플레이 장치에서 이동시키거나 크기를 변화시켜 표시하는 것이 사용자의 인식에 도움이 되기 때문이다.
도 9는 영상 내 객체 변환부(330)의 동작을 설명하기 위한 참고도이다.
먼저 (a)의 경우처럼 웨어러블 기기가 사용자 정면에 위치하는 경우 영상 내 객체는 기본 위치에 기본 크기로 표시될 수 있다.
다음으로 (b)의 경우처럼 웨어러블 기기가 사용자의 눈높이 위로 올 경우, 사용자는 기기의 아래쪽 면을 보다 많이 볼 수 있고, 따라서 영상 내 객체는 영상의 아래쪽으로 이동하거나 아래쪽에서 크기가 확대되도록 변환되어 표시될 수 있다.
이때 경우에 따라 (b)의 경우처럼 웨어러블 기기가 사용자의 눈높이 위로 위치하면서 X축 방향을 중심으로 아래 방향으로 회전할 수 있고, 이와 같은 경우를 고려하여 영상 내 객체가 영상의 아래쪽으로 이동하거나 아래쪽에서 크기가 확대되도록 변환되어 표시될 수 있다.
다음으로 (c)의 경우처럼 웨어러블 기기가 사용자의 눈높이 아래에 올 경우는 (b)의 경우와 반대로 영상이 변환되어 표시될 수 있다.
이때 경우에 따라 (c)의 경우처럼 웨어러블 기기가 사용자의 눈높이 아래로 위치하면서 X축 방향을 중심으로 위 방향으로 회전할 수 있고, 이와 같은 경우를 고려하여 영상 내 객체가 영상의 위쪽으로 이동하거나 위쪽에서 크기가 확대되도록 변환되어 표시될 수 있다.
다음으로 (d)의 경우처럼 웨어러블 기기가 사용자의 왼쪽으로 치우쳐 있는 경우 영상 내 객체는 영상의 왼쪽으로 이동하거나 왼쪽에서 크기가 확대되도록 변환되어 표시될 수 있고, (e)의 경우처럼 오른쪽으로 치우쳐 있는 경우는 그 반대로 변환되어 표시될 수 있다.
이때 경우에 따라 (d)의 경우처럼 웨어러블 기기가 사용자의 왼쪽으로 위치하면서 Y축 방향을 중심으로 좌측 방향으로 회전할 수 있고, 이와 같은 경우를 고려하여 영상 내 객체가 영상의 왼쪽으로 이동하거나 왼쪽에서 크기가 확대되도록 변환되어 표시될 수 있다. (e)의 경우처럼 반대의 경우도 마찬가지이다.
또한 상기 경우들에 있어서 필요에 따라 상술한 예에 있어서 반대 방향으로 객체의 위치가 이동하도록 영상을 변환할 수도 있음은 물론이다.
도 10은 영상 내 객체 변환부(330)의 동작을 설명하기 위한 참고도이다. 도 10은 도 9와 달리 원형 화면이 아닌 곡면의 직사각형 화면을 구비한 웨어러블 기기의 경우를 나타내며, 이 경우 (b)와 (c)의 경우를 비교하면 곡면의 직사각형 화면의 특성 상 영상 내 객체의 이동 방향이 도 9의 경우와 반대가 될 수 있다.
본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는 사용자의 제스쳐를 인식하고 그에 따라 웨어러블 기기의 디스플레이 장치에 표시될 영상을 회전하는 기능을 제공할 수 있다.
도 11은 상기 본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치의 블록도이다.
상기 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치는, 센서 정보 입력부(100), 제스쳐 인식부(201), 영상 변환부(301), 영상 출력부(400)를 포함할 수 있다.
센서 정보 입력부(100)는 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는다. 여기서 센서 정보 입력부(100) 및 센서의 동작은 도 1 내지 도 10을 참조하면서 설명한 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치와 동일하다.
제스쳐 인식부(201)는 상기 입력받은 정보를 이용해, 상기 웨어러블 기기의 이동에 따른 상기 웨어러블 기기를 착용한 사용자의 제스쳐를 인식한다. 여기서 제스쳐 인식부가 센서로부터 입력받은 정보를 이용하여 제스쳐를 인식하는 것은 기존의 자이로 센서 또는 가속도 센서를 이용한 제스쳐 인식 방법들을 이용할 수 있다. 예를 들면 'Hofer, Andreas, Aristotelis Hadjakos, and Max Mㆌhlhㅴuser. "Gyroscope-based conducting gesture recognition." NIME09 (2009).', 'Kratz, Sven, Michael Rohs, and Georg Essl. "Combining acceleration and gyroscope data for motion gesture recognition using classifiers with dimensionality constraints." Proceedings of the 2013 international conference on Intelligent user interfaces. ACM, 2013.' 등에서 개시하고 있는 방법들을 이용할 수 있고, 기타 다양한 센서 기반 제스쳐 인식 방법을 이용할 수 있음은 물론이다.
여기서 제스쳐 인식부(201)는 상기 웨어러블 기기가 사용자의 팔에 착용된 상태로, 어깨를 중심으로 회전하여 이동하는 움직임에 따른 상하 움직임 제스쳐 또는 팔꿈치를 중심으로 회전하여 이동하는 움직임에 따른 좌우 움직임 제스쳐를 인식할 수 있다.
도 12는 상술한 제스쳐 인식부(201)의 동작을 설명하기 위한 참고도이다.
제스쳐 인식부(201)는 사전에 정의된 도 12의 (a)와 같은 좌우 움직임 제스쳐, 또는 (b)와 같은 상하 움직임 제스쳐를 인식할 수 있다.
영상 변환부(301)는 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 인식한 제스쳐에 따라 상기 영상을 회전시킬 영상 회전각을 결정하고, 상기 입력받은 영상을 상기 결정한 영상 회전각에 따라 회전 변환한다. 여기서 영상 변환부(301)는 상술한 영상 변환부(300)가 영상 회전각에 따라 상기 영상을 회전 변환하는 것과 동일한 방식으로 영상을 회전시킬 수 있다. 다만 본 실시예에서의 영상 변환부(301)는 인식한 제스쳐에 따라 영상 회전각을 결정한다는 점에서 차이점이 있다.
이때 영상 변환부(301)는 상기 인식한 제스쳐가 상하 움직임 제스쳐인 경우, 상기 상하 움직임 제스쳐에 대하여 미리 설정된 상기 영상 회전각에 따라 상기 입력받은 영상을 회전 변환할 수 있다.
예를 들면 상기 상하 움직임 제스쳐에 대하여는 소정의 축 방향 - 예를 들면 Z축 방향 - 으로 90도 또는 -90도의 영상 회전각이 미리 설정될 수 있다.
또한 영상 변환부(301)는 상기 인식한 제스쳐가 좌우 움직임 제스쳐인 경우, 상기 좌우 움직임 제스쳐에 대하여 미리 설정된 상기 영상 회전각에 따라 상기 입력받은 영상을 회전 변환할 수 있다.
예를 들면 상기 좌우 움직임 제스쳐에 대하여도 소정의 축 방향 - 예를 들면 Z축 방향 - 으로 90도 또는 -90도의 영상 회전각이 미리 설정될 수 있다.
다음으로 영상 출력부(400)는 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력한다.
도 13은 본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법의 흐름도이다.
상기 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법은 센서 정보 입력 단계(S100), 웨어러블 기기 회전각 산출 단계(S200), 영상 변환 단계(S300), 영상 출력 단계(S400)를 포함할 수 있다. 여기서 상기 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법은 위에서 도 1 내지 도 10을 참조하면서 설명한 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치가 동작하는 것과 동일한 방식으로 동작할 수 있다. 따라서 중복되는 설명은 생략하고 간략히 서술한다.
센서 정보 입력 단계(S100)는 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받다.
웨어러블 기기 회전각 산출 단계(S200)는 상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출한다.
영상 변환 단계(S300)는 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환한다.
영상 출력 단계(S400)는 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력한다.
도 14는 본 발명의 또 다른 실시예에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법의 흐름도이다.
상기 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법은 센서 정보 입력 단계(S100), 제스쳐 인식 단계(S201), 영상 변환 단계(S301), 영상 출력 단계(S400)를 포함할 수 있다. 여기서 상기 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 방법은 위에서 도 11 내지 도 12를 참조하면서 설명한 본 발명에 따른 웨어러블 기기에서의 사용자 시점 화면 제공 장치가 동작하는 것과 동일한 방식으로 동작할 수 있다. 따라서 중복되는 설명은 생략하고 간략히 서술한다.
센서 정보 입력 단계(S100)는 웨어러블 기기에 구비된 센서로부터 상기 웨어러블 기기의 자세 또는 위치 변화에 관한 정보를 입력받는다.
제스쳐 인식 단계(S201)는 상기 입력받은 정보를 이용해, 상기 웨어러블 기기의 이동에 따른 상기 웨어러블 기기를 착용한 사용자의 제스쳐를 인식한다.
영상 변환 단계(S301)는 상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 인식한 제스쳐에 따라 상기 영상을 회전시킬 영상 회전각을 결정하고, 상기 입력받은 영상을 상기 결정한 영상 회전각에 따라 회전 변환한다.
영상 출력 단계(S400)는 상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력한다.
이상에서 설명한 본 발명의 실시예를 구성하는 모든 구성요소들이 하나로 결합하거나 결합하여 동작하는 것으로 기재되어 있다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다.
또한, 그 모든 구성요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 또한, 이와 같은 컴퓨터 프로그램은 USB 메모리, CD 디스크, 플래쉬 메모리 등과 같은 컴퓨터가 읽을 수 있는 기록매체(Computer Readable Media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시예를 구현할 수 있다. 컴퓨터 프로그램의 기록매체로서는 자기 기록매체, 광 기록매체, 캐리어 웨이브 매체 등이 포함될 수 있다.
또한, 기술적이거나 과학적인 용어를 포함한 모든 용어들은, 상세한 설명에서 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 갖는다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서, 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구 범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.
50 : 센서
100 : 센서 정보 입력부
200 : 웨어러블 기기 회전각 산출부
210 : 초기화부
220 : 회전각 획득부
201 : 제스쳐 인식부
300 : 영상 변환부
310 : 영상 회전각 산출부
320 : 영상 회전부
330 : 영상 내 객체 변환부
400 : 영상 출력부
S100 : 센서 정보 입력 단계
S200 : 웨어러블 기기 회전각 산출 단계
S201 : 제스쳐 인식 단계
S300 : 영상 변환 단계
S400 : 영상 출력

Claims (20)

  1. 웨어러블 기기에 구비된 센서로부터 (i) 상기 웨어러블 기기의 자세 및 (ii) 상기 웨어러블 기기를 착용한 사용자의 신체 구조에 관한 정보에 기반하여 상기 사용자에 대한 상기 웨어러블 기기의 위치 변화에 관한 정보를 입력받는 센서 정보 입력부;
    상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출하는 웨어러블 기기 회전각 산출부; 및
    상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환하는 영상 변환부를 포함하는 것을 특징으로 하는 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  2. 제1항에 있어서,
    상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력부를 더 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  3. 제1항에 있어서,
    상기 센서는 자이로스코프 센서 또는 가속도계 센서 중 어느 하나 이상을 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  4. 제1항에 있어서,
    상기 시선 방향은 상기 웨어러블 기기를 착용한 사용자의 신체에 대하여 미리 정의된 방향이고,
    상기 기준 방향은 상기 시선 방향을 기준으로 미리 설정된 방향인 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  5. 제1항에 있어서,
    상기 웨어러블 기기 회전각 산출부는 상기 기준 방향을 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축에 대하여 정의하고, 상기 웨어러블 기기의 회전각을 산출하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  6. 제1항에 있어서,
    상기 웨어러블 기기 회전각 산출부는 상기 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서 상기 웨어러블 기기의 초기 회전 각도를 설정하는 초기화부를 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  7. 제6항에 있어서,
    상기 웨어러블 기기 회전각 산출부는 상기 웨어러블 기기가 위치 또는 자세가 변화함에 따라, 상기 설정한 초기 회전 각도를 기준으로 상기 웨어러블 기기가 회전한 상기 회전각을 산출하여 획득하는 회전각 획득부를 더 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  8. 제7항에 있어서,
    상기 회전각 획득부는 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축을 기준으로, 상기 제1 축 방향으로 상기 웨어러블 기기가 이동한 거리 또는 상기 제1 축 방향으로의 이동으로 인한 회전 각도와, 상기 제2 축 방향으로 상기 웨어러블 기기가 이동한 거리 또는 상기 제2 축 방향으로의 이동으로 인한 회전 각도를 이용하여, 상기 제1 축 및 제2 축과 직교하는 제3 축을 중심으로 상기 웨어러블 기기가 회전한 상기 회전각을 산출하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  9. 제1항에 있어서, 상기 영상 변환부는,
    상기 웨어러블 기기의 회전각을 이용하여 상기 영상을 회전시킬 영상 회전각을 산출하는 영상 회전각 산출부; 및
    상기 입력받은 영상을 상기 산출한 영상 회전각에 따라 회전 변환하는 영상 회전부를 포함하는 것을 특징으로 하는 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  10. 제9항에 있어서,
    상기 영상 회전각 산출부는 상기 시선 방향과, 상기 웨어러블 기기가 상기 기준 방향으로 정렬된 상태에서의 초기 회전 각도와, 상기 웨어러블 기기의 회전각을 이용하여, 상기 영상 회전각을 산출하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  11. 제10항에 있어서,
    상기 영상 회전각 산출부는 상기 기준 방향 또는 상기 초기 회전 각도에 따라 정의되는 상기 웨어러블 기기의 디스플레이 장치의 면과 상기 시선 방향 간의 제1 각도를 산출하고, 상기 회전각에 따라 정의되는 상기 웨어러블 기기의 디스플레이 장치의 면과 상기 시선 방향 간의 제2 각도를 산출하고, 상기 제1 각도와 상기 제2 각도의 차이 각도에 따라 상기 영상 회전각을 산출하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  12. 제9항에 있어서,
    상기 영상 회전각 산출부는 중력 방향과 소정의 각도를 가지는 평면 좌표계 상에서 서로 직교하는 미리 정의된 제1 축과 제2 축과 직교하는 제3 축을 중심으로 상기 웨어러블 기기가 회전한 상기 회전각의 상기 제3 축 성분에 따라 상기 영상 회전각을 산출하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  13. 제12항에 있어서,
    상기 영상 회전각 산출부는 상기 회전각의 상기 제3 축 성분의 음수를 상기 영상 회전각으로 하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  14. 제1항에 있어서, 상기 영상 변환부는,
    상기 웨어러블 기기의 회전각에 따라 상기 영상에 포함된 객체의 위치를 상기 영상 내에서 이동하거나, 또는 상기 객체의 상기 영상 내 크기를 조절하여, 상기 영상을 변환하는 영상 내 객체 변환부를 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  15. 제14항에 있어서,
    상기 영상 내 객체 변환부는 상기 웨어러블 기기의 회전각을 이용하여 상기 사용자에 대한 상기 웨어러블 기기의 위치를 추정하고, 상기 추정한 위치에 따라 상기 영상에 포함된 객체의 위치 또는 크기를 조절하여 상기 영상을 변환하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  16. 웨어러블 기기에 구비된 센서로부터 (i) 상기 웨어러블 기기의 자세 및 (ii) 상기 웨어러블 기기를 착용한 사용자의 신체 구조에 관한 정보에 기반하여 상기 사용자에 대한 상기 웨어러블 기기의 위치 변화에 관한 정보를 입력받는 센서 정보 입력부;
    상기 입력받은 정보를 이용해, 상기 웨어러블 기기의 이동에 따른 상기 웨어러블 기기를 착용한 사용자의 제스쳐를 인식하는 제스쳐 인식부;
    상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 인식한 제스쳐에 따라 상기 영상을 회전시킬 영상 회전각을 결정하고, 상기 입력받은 영상을 상기 결정한 영상 회전각에 따라 회전 변환하는 영상 변환부; 및
    상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력부를 포함하는 것을 특징으로 하는 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  17. 제16항에 있어서,
    상기 제스쳐 인식부는 상기 웨어러블 기기가 사용자의 팔에 착용된 상태로, 어깨를 중심으로 회전하여 이동하는 움직임에 따른 상하 움직임 제스쳐 또는 팔꿈치를 중심으로 회전하여 이동하는 움직임에 따른 좌우 움직임 제스쳐를 인식하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  18. 제17항에 있어서, 상기 영상 변환부는,
    상기 인식한 제스쳐가 상하 움직임 제스쳐인 경우, 상기 상하 움직임 제스쳐에 대하여 미리 설정된 상기 영상 회전각에 따라 상기 입력받은 영상을 회전 변환하고,
    상기 인식한 제스쳐가 좌우 움직임 제스쳐인 경우, 상기 좌우 움직임 제스쳐에 대하여 미리 설정된 상기 영상 회전각에 따라 상기 입력받은 영상을 회전 변환하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 장치.
  19. 웨어러블 기기에 구비된 센서로부터 (i) 상기 웨어러블 기기의 자세 및 (ii) 상기 웨어러블 기기를 착용한 사용자의 신체 구조에 관한 정보에 기반하여 상기 사용자에 대한 상기 웨어러블 기기의 위치 변화에 관한 정보를 입력받는 센서 정보 입력 단계;
    상기 입력받은 정보를 이용해, 미리 설정된 기준 방향을 기준으로 한 상기 웨어러블 기기의 회전각을 산출하는 웨어러블 기기 회전각 산출 단계;
    상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 기준 방향에 대한 상기 웨어러블 기기의 회전각을 이용하여, 상기 입력받은 영상의 정보 표시 방향이 상기 웨어러블 기기를 착용한 사용자의 시선 방향에 따르도록, 상기 영상을 변환하는 영상 변환 단계; 및
    상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력 단계를 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 방법.
  20. 웨어러블 기기에 구비된 센서로부터 (i) 상기 웨어러블 기기의 자세 및 (ii) 상기 웨어러블 기기를 착용한 사용자의 신체 구조에 관한 정보에 기반하여 상기 사용자에 대한 상기 웨어러블 기기의 위치 변화에 관한 정보를 입력받는 센서 정보 입력 단계;
    상기 입력받은 정보를 이용해, 상기 웨어러블 기기의 이동에 따른 상기 웨어러블 기기를 착용한 사용자의 제스쳐를 인식하는 제스쳐 인식 단계;
    상기 웨어러블 기기의 화면에 표시할 영상을 입력받고, 상기 인식한 제스쳐에 따라 상기 영상을 회전시킬 영상 회전각을 결정하고, 상기 입력받은 영상을 상기 결정한 영상 회전각에 따라 회전 변환하는 영상 변환 단계; 및
    상기 변환한 영상을 웨어러블 기기에 구비된 디스플레이 장치로 출력하는 영상 출력 단계를 포함하는 것을 특징으로 하는, 웨어러블 기기에서의 사용자 시점 화면 제공 방법.
KR1020150144125A 2015-10-15 2015-10-15 웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법 KR101725483B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150144125A KR101725483B1 (ko) 2015-10-15 2015-10-15 웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150144125A KR101725483B1 (ko) 2015-10-15 2015-10-15 웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR101725483B1 true KR101725483B1 (ko) 2017-04-10

Family

ID=58581157

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150144125A KR101725483B1 (ko) 2015-10-15 2015-10-15 웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR101725483B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110442295A (zh) * 2019-07-09 2019-11-12 努比亚技术有限公司 可穿戴设备控制方法、可穿戴设备及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009150668A (ja) * 2007-12-19 2009-07-09 Casio Comput Co Ltd 時計
JP2015022712A (ja) * 2013-07-23 2015-02-02 カシオ計算機株式会社 携帯機器およびその制御プログラム
KR20150029453A (ko) * 2013-09-10 2015-03-18 엘지전자 주식회사 웨어러블 디바이스 및 이의 제어 방법
JP2015069856A (ja) 2013-09-30 2015-04-13 Toto株式会社 固体酸化物型燃料電池

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009150668A (ja) * 2007-12-19 2009-07-09 Casio Comput Co Ltd 時計
JP2015022712A (ja) * 2013-07-23 2015-02-02 カシオ計算機株式会社 携帯機器およびその制御プログラム
KR20150029453A (ko) * 2013-09-10 2015-03-18 엘지전자 주식회사 웨어러블 디바이스 및 이의 제어 방법
JP2015069856A (ja) 2013-09-30 2015-04-13 Toto株式会社 固体酸化物型燃料電池

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110442295A (zh) * 2019-07-09 2019-11-12 努比亚技术有限公司 可穿戴设备控制方法、可穿戴设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
US11093036B2 (en) Tracking arm movements to generate inputs for computer systems
US10565725B2 (en) Method and device for displaying virtual object
US9401050B2 (en) Recalibration of a flexible mixed reality device
EP3504608B1 (en) Manipulating virtual objects with six degree-of-freedom controllers in an augmented and/or virtual reality environment
EP3314371B1 (en) System for tracking a handheld device in an augmented and/or virtual reality environment
US10540006B2 (en) Tracking torso orientation to generate inputs for computer systems
EP3458934B1 (en) Object tracking in a head mounted reference frame for an augmented or virtual reality environment
US9965030B2 (en) Wearable glasses and method of displaying image via the wearable glasses
US20180210544A1 (en) Head Tracking Based Gesture Control Techniques For Head Mounted Displays
CN105388994B (zh) 可穿戴手表及其操作方法
US20100103104A1 (en) Apparatus for user interface based on wearable computing environment and method thereof
TW201911133A (zh) 用於多個自由度之控制器追蹤
US11009964B2 (en) Length calibration for computer models of users to generate inputs for computer systems
US11531392B2 (en) Tracking upper arm movements using sensor modules attached to the hand and forearm
EP1462926A2 (en) Magnetic sensor- based handheld input system and a handwriting trajectory recovery method therefor
US11797112B1 (en) Electronic device for controlling host device by using motion signal and mouse signal
US20240143066A1 (en) Head-mounted information processing apparatus and its controlling method
CN105116544A (zh) 头操作的电子眼镜
EP3254121B1 (en) Center of gravity shifting force device
KR101725483B1 (ko) 웨어러블 기기에서의 사용자 시점 화면 제공 장치 및 그 방법
CN112328099A (zh) 低功率指向方法以及实现该指向方法的电子设备
Lee et al. Orientation estimation in mobile virtual environments with inertial sensors
Konishi et al. Projection stabilizing method for palm-top display with wearable projector
Oh A study on MTL device design and motion tracking in virtual reality environments
JP2022187199A (ja) 画像表示システム及び画像表示方法

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant