KR102140811B1 - 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스 - Google Patents

디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스 Download PDF

Info

Publication number
KR102140811B1
KR102140811B1 KR1020130086996A KR20130086996A KR102140811B1 KR 102140811 B1 KR102140811 B1 KR 102140811B1 KR 1020130086996 A KR1020130086996 A KR 1020130086996A KR 20130086996 A KR20130086996 A KR 20130086996A KR 102140811 B1 KR102140811 B1 KR 102140811B1
Authority
KR
South Korea
Prior art keywords
value
movement
sensor
touch screen
displayed
Prior art date
Application number
KR1020130086996A
Other languages
English (en)
Other versions
KR20150011885A (ko
Inventor
조치현
어길수
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130086996A priority Critical patent/KR102140811B1/ko
Priority to US14/285,134 priority patent/US9904444B2/en
Publication of KR20150011885A publication Critical patent/KR20150011885A/ko
Application granted granted Critical
Publication of KR102140811B1 publication Critical patent/KR102140811B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Abstract

사용자가 표시된 객체를 보다 용이하게 선택할 수 있는 사용자 인터페이스를 제공하는 디바이스 및 그 사용자 인터페이스 제공 방법이 제공된다. 디바이스는 디바이스의 움직임을 감지하는 적어도 하나의 센서와, 센서에서 감지된 값의 크기와 기 설정된 임계값을 비교하고, 비교 결과에 기초하여 센서에서 감지된 값에 대응하는 객체의 이동값을 결정하는 프로세서 및 객체의 이동값에 따라서 터치 스크린에 표시되는 객체의 위치를 이동시키는 입출력부를 포함한다.

Description

디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스{User Interface Providing Method for Device and Device Thereof}
본 발명은 디바이스가 사용자 인터페이스를 제공하는 방법 및 그 장치에 관한 것이다. 보다 상세하게는, 본 발명은 이동 가능한 디바이스가 움직이더라도 사용자가 보다 정확하게 디바이스에 대한 입력을 할 수 있는 사용자 인터페이스를 제공하기 위한 방법 및 디바이스에 관한 것이다.
기술의 발전에 따라 다양한 기기들이 보급되었다. 특히, 기기의 소형화 및 경량화에 따른 휴대형 전자기기들이 다양하게 보급되었다. 예를 들어, 휴대 전화기, PDA(Personal Digital Assistants), 태블릿 PC, 스마트폰(smart phone) 및 노트북 컴퓨터 등의 기기들이 널리 보급되었다.
휴대형 전자기기에는 다양한 입출력 장치가 적용될 수 있다. 예를 들어, 사용자와 장치의 접촉을 감지하는 터치 패널(touch panel)이 다양한 장치에서 입력 장치로 이용되고 있다.
특히, 휴대형 전자기기에서, 사용자가 기기를 이용할 때 기기가 움직일 수 있다. 예를 들어, 사용자가 달리는 자동차에서 스마트폰을 조작하고자 하는 경우, 자동차의 움직임에 따라 사용자가 손에 들고 있는 스마트폰이 흔들리게 되어 사용자가 원하는 아이콘을 정확하기 터치하기 어려울 수 있다. 즉, 기기가 움직임에 따라서 사용자의 의도와는 다르게 사용자가 기기에 잘못된 입력을 할 수 있다.
본 발명의 일 실시예는 다양한 원인으로 인하여 디바이스가 움직이는 상황에서도 사용자의 잘못된 입력을 방지하기 위한 사용자 인터페이스를 제공하는 방법 및 장치를 제공한다.
상술한 기술적 과제들 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따라 사용자의 터치 입력에 따라서 기 설정된 동작을 실행하기 위한 객체를 표시하는 디바이스는, 상기 디바이스의 움직임을 감지하는 적어도 하나의 센서와, 센서에 의해 감지된 움직임 값의 크기와 기 설정된 임계값을 비교하고, 비교 결과에 기초하여 객체의 이동값을 결정하는 프로세서 및 객체의 이동값에 따라서 표시된 객체의 위치를 이동시켜 표시하는 터치스크린을 구비할 수 있다.
또한, 본 발명의 다른 실시예에 따르면, 터치스크린은 터치스크린으로부터 기 설정된 거리 이내에 신체의 접근을 감지하고, 프로세서는 터치스크린으로부터 기 설정된 거리 이내에 신체의 접근이 감지된 경우, 객체의 이동값을 결정할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 좌표 이동 값은 센서에서 감지된 움직임으로부터 반대 방향으로 객체를 이동시키기 위한 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 프로세서는 센서에서 감지된 값 중, 터치스크린을 포함하는 평면으로부터 수직인 방향의 값을 제외하고 객체의 이동값을 결정하는 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 프로세서는 센서에서 감지된 값으로부터 움직임 벡터를 결정하고, 움직임 벡터에 대한 역(reverse)의 값을 객체의 이동값으로 결정할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 객체는 프로그램을 실행시키기 위한 아이콘, 텍스트 입력을 위한 텍스트 버튼, 필기 입력을 하기 위한 프레임, 애플리케이션 실행 화면, 메뉴 선택 버튼, 위젯(widget) 및 프로그램을 제어하기 위한 입력 버튼 중 적어도 하나를 포함할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 프로세서는 객체의 이동값에 기초하여 객체가 표시되는 위치가 터치스크린 상에서 벗어나는 경우, 객체의 이동값에 기초하여 객체가 표시되는 면적 및 입력 영역의 면적을 변경할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 프로세서는 센서에서 감지된 값의 크기가 임계값 이상인 경우, 객체의 이동값을 결정할 수 있다.
본 발명의 일 실시예에 따라 디바이스가 사용자 인터페이스를 제공하는 방법은, 디바이스의 기 설정된 동작을 실행하기 위한 객체를 디바이스에 구비된 터치스크린 상에 표시하는 단계와, 디바이스에 구비된 센서가 디바이스의 움직임을 감지하는 단계와, 감지된 디바이스의 움직임에 기초하여 표시된 객체의 위치를 이동시켜 표시하는 단계를 포함할 수 있다.
또한, 본 발명의 다른 실시예에 따른 사용자 인터페이스 제공 방법은, 센서에서 감지된 값의 크기와 기 설정된 임계값을 비교하고, 비교 결과에 기초하여 상기 센싱값에 대응하는 객체의 이동값을 결정하는 단계를 더 포함할 수 있고, 객체가 표시되는 위치를 이동시키는 단계는, 객체의 이동값에 기초하여 객체가 표시되는 위치를 이동시키는 것을 특징으로 할 수 있다..
또한, 본 발명의 또 다른 실시예에 따르면, 터치스크린은 터치스크린으로부터 기 설정된 거리 이내에 신체의 접근을 감지하고, 객체의 이동값을 결정하는 단계는, 터치스크린으로부터 기 설정된 거리 이내에 신체의 접근이 감지된 경우, 객체의 이동값을 결정하는 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 좌표 이동 값은 센서에서 감지된 움직임으로부터 반대 방향으로 객체를 이동시키기 위한 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 객체의 이동값을 결정하는 단계는 센서에서 감지된 값 중, 터치스크린을 포함하는 평면으로부터 수직인 방향의 값을 제외하고 객체의 이동값을 결정하는 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 객체의 이동값을 결정하는 단계는 센서에서 감지된 값으로부터 움직임 벡터를 결정하고, 움직임 벡터에 대한 역(reverse)의 값을 객체의 이동값으로 결정하는 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 객체의 이동값을 결정하는 단계는 센서에서 감지된 값의 크기가 임계값 이상인 경우, 객체의 이동값을 결정하는 것을 특징으로 할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 객체는 프로그램을 실행시키기 위한 아이콘, 텍스트 입력을 위한 텍스트 버튼, 필기 입력을 하기 위한 프레임, 애플리케이션 실행 화면, 메뉴 선택 버튼, 위젯(widget) 및 프로그램을 제어하기 위한 입력 버튼 중 적어도 하나를 포함할 수 있다.
또한, 본 발명의 또 다른 실시예에 따르면, 객체의 위치를 변경하는 단계는 이동된 객체가 표시되는 위치가 터치스크린 상에서 벗어나는 경우, 디바이스의 움직임에 기초하여 객체가 표시되는 면적 및 입력 영역의 면적을 변경하는 것을 특징으로 할 수 있다.
본 발명의 일 실시예에 따른 컴퓨터로 판독 가능한 기록 매체는, 상기 기술된 방법을 실행하기 위한 프로그램을 기록한 것을 특징으로 할 수 있다.
도 1은 본 발명의 일 실시예에 따른 디바이스가 사용자 인터페이스를 출력하는 예시를 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따라 사용자 인터페이스를 제공하는 프로세스를 도시한 순서도이다.
도 3는 본 발명의 다른 실시예에 따라 사용자 인터페이스를 제공하는 프로세스를 도시한 순서도이다.
도 4는 본 발명의 또 다른 실시예에 따라 사용자 인터페이스를 제공하는 프로세스를 도시한 순서도이다.
도 5는 본 발명의 일 실시예에 따라 신체의 접근을 감지하는 디바이스를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 디바이스를 도시한 도면이다.
도 7은 본 발명의 일 실시에에 따른 디바이스를 보다 상세히 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따라 디바이스가 사용자 인터페이스를 출력하는 도면이다.
도 9는 본 발명의 다른 실시예에 따라 디바이스가 사용자 인터페이스를 출력하는 도면이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
이하 첨부된 도면을 참고하여 본 발명을 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 디바이스가 사용자 인터페이스를 출력하는 예시를 도시한 도면이다.
본 발명의 일 실시예에 따르면, 디바이스(100)는 디스플레이(130)를 구비할 수 있다. 디바이스(100)는 사용자와 상호작용하기 위한 사용자 인터페이스를 디스플레이(130)를 통해 출력할 수 있다.
디스플레이(130)는 액정 디스플레이(Liquid Crystal Display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophretic display), PDP(Plasma Display Panel), OLED(Organic Light Emitting Diod), 플렉시블 디스플레이(flexible display) 또는 투명 디스플레이 등의 다양한 형태로 구현될 수 있다. 다만, 본 발명이 이에 한정되는 것은 아니다.
디스플레이(130)를 통해 출력되는 사용자 인터페이스는 적어도 하나의 객체(110-1, 110-2, 110-3)를 포함할 수 있다. 객체(110-1)는 사용자의 입력을 위하여 상기 디스플레이(130)에 표시되는 형태를 의미한다. 객체(110-1, 110-2, 110-3)가 터치스크린으로 구현된 디스플레이(130)에 표시되고, 사용자의 신체가 입력 영역(120)에 접촉하는 경우, 디바이스(100)는 객체(110-1)에 대해 기 설정된 동작(예를 들어, 애플리케이션의 실행)을 실행할 수 있다. 예를 들어, 스마트폰의 터치 스크린에 애플리케이션 실행 아이콘이 표시되고, 사용자는 애플리케이션 실행 아이콘이 표시된 위치를 손가락으로 눌러 해당 아이콘에 대응하는 애플리케이션을 실행할 수 있다. 사용자 인터페이스에 포함되는 객체(110-1, 110-2, 110-3)는 프로그램을 실행시키기 위한 아이콘, 텍스트 입력을 하기 위한 텍스트 입력 버튼, 필기 입력을 하기 위한 프레임, 애플리케이션 실행 화면, 메뉴 선택 버튼, 위젯(widget) 및 프로그램을 제어하기 위한 입력 버튼 중 적어도 하나를 포함할 수 있다.
본 발명의 일 실시예에 따르면, 디스플레이(130)는 사용자의 터치 입력을 감지하기 위한 터치 패널과 결합된 터치 스크린(touch screen)으로 구현될 수 있다. 이 때, 디바이스(100)는 객체(110-1)에 대한 사용자의 입력을 수신하기 위한 입력 영역(120)을 설정할 수 있다. 즉, 입력 영역(120) 내에 사용자의 신체의 접촉이 감지되는 경우, 디바이스(100)는 객체(110-1)를 선택하는 사용자의 입력이 수신된 것으로 판단할 수 있다.
여기서, 객체(110-1)는 터치 스크린 상에서 입력 영역(120)에 대응하는 영역에 표시될 수 있다. 예를 들어, 객체(110-1)는 입력 영역(120)과 일치하거나 입력 영역(120) 내에 포함되도록 터치 스크린 상에 객체(110-1)가 표시될 수 있다.
도 2는 본 발명의 일 실시예에 따라 사용자 인터페이스를 제공하는 프로세스를 도시한 순서도이다.
먼서, 디바이스(100)는 디바이스(100)의 기 설정된 동작을 실행하기 위한 객체를 디바이스(100)에 포함된 디스플레이를 통해 표시할 수 있다.
이후, 디바이스(100)는 디바이스(100)의 움직임을 감지할 수 있다(S210). 여기서, 디바이스(100)의 움직임은 디바이스(100) 자체가 물리적으로 이동하는 것을 의미한다. 예를 들어, 달리는 차량 안에 탑승한 사용자가 디바이스(100)를 손에 들고 있는 경우, 디바이스(100)는 차량이 흔들림에 따라 발생하는 디바이스(100)의 흔들림을 감지할 수 있다. 즉, 디바이스(100)가 외부의 충격에 의하여 흔들리는 경우, 디바이스(100)는 디바이스(100)에 가해진 충격을 감지할 수 있다.
여기서, 디바이스(100)는 디바이스(100)의 움직임을 감지하기 위한 적어도 하나의 센서를 포함할 수 있다. 예를 들어, 디바이스(100)는 가속도 센서(Accelerometer), 자이로스코프(Gyroscope), 지자기 센서(Terrestrial Magnetism Sensor) 등을 포함할 수 있다. 다만, 본 발명이 이에 한정되는 것은 아니다.
S210 단계에서 감지된 디바이스(100)의 움직임에 기초하여, 객체의 위치 및/또는 입력 영역을 이동시킴으로써, 사용자가 디바이스(100)가 움직이기 이전에 표시되었던 위치에 객체가 그대로 존재하는 것과 같이 느끼도록 할 수 있다(S220). 즉, 디바이스(100)는 객체의 위치를 디바이스(100)의 움직임을 상쇄시키는 방향으로 이동시켜 표시하고, 입력 영역을 함께 이동시킬 수 있다. 따라서, 디바이스(100)가 갑자기 움직이더라도, 사용자가 객체를 정확하게 터치하도록 유도하거나, 사용자의 의도에 상응하도록 입력 영역이 움직이게 되어 사용자의 터치 입력을 인식할 수 있다.
S220단계에서, 디바이스(100)는 디스플레이(130)에 표시되는 배경화면 등의 위치는 유지하고 객체만 이동시킬 수 있다. 또는, 디스플레이(130)에 표시되는 화면 전체를 이동시킬 수 있다. S220 단계는 본 발명의 실시예에 따라 다양하게 구현될 수 있다.
본 발명의 다른 실시예에 따르면, 디바이스(100)는 S220단계에서 객체의 위치가 아닌 객체의 면적 및 입력 영역의 면적을 변경할 수 있다.
도 3는 본 발명의 다른 실시예에 따라 사용자 인터페이스를 제공하는 프로세스를 도시한 순서도이다.
먼저, 디바이스(100)는 디바이스(100)의 움직임을 감지할 수 있다(S310). 디바이스(100)는 디바이스(100)에 구비된 센서의 종류에 따라 각각 다른 방법에 따라서 디바이스(100)의 움직임을 감지할 수 있다.
본 발명의 일 실시예에 따르면, 디바이스(100)는 디바이스(100)의 방향을 감지할 수 있는 방향 센서를 포함할 수 있다. 방향 센서는 지자기 센서를 이용하여 구현될 수 있으나, 이에 한정되는 것은 아니다. 디바이스(100)는 움직임이 검출되기 이전의 방향 좌표를 기본 설정값으로 초기화하여 저장할 수 있다. 이후, 초기화하여 저장된 방향 좌표로부터의 회전 각도를 단위 시간마다 업데이트할 수 있다. 이하에서, X축 회전 각도를 rx라 하고, X축에 대해 수직인 Y축 회전 각도를 ry라 한다. X축에 대한 기본 설정값을 dx라 하고, Y축에 대한 기본 설정값을 dy라 한다. 본 명세서에서, X축 및 Y축은 디스플레이(130)의 표면을 포함하는 평면 상에 포함되는 좌표축으로 언급된다.
또한, 디바이스(100)는 가속도 센서를 포함할 수 있다. 가속도 센서는 디바이스(100)가 움직임에 따라 발생되는 가속도를 감지할 수 있다. X축에 대해 감지된 가속도를 ax라 하고, Y축에 대해 감지된 가속도를 ay라 한다.
또한, 디바이스(100)는 자이로스코프 센서를 포함할 수 있다. 자이로스코프 센서는 디바이스(100)가 움직임에 따라 발생되는 각속도를 감지할 수 있다. X축에 대해 감지된 각속도를 rx/s라 하고, Y축에 대해 감지된 각속도를 ry/s라 한다.
본 발명의 일 실시예에 따르면, 디스플레이(130)의 표면을 포함하는 평면에서 수직인 Z축에 대하여 센서에서 감지된 값은 무시될 수 있다.
이후, 디바이스(100)는 센서에서 감지된 값의 크기와 기 설정된 임계값을 비교할 수 있다. 비교 결과에 기초하여, 디바이스(100)는 객체를 이동시킬 것인지 판단할 수 있다. 예를 들어, 디바이스(100)는 센서에서 감지된 값이 임계값 이상인 경우, 객체의 위치를 이동시키기 위한 프로세스를 처리할 수 있다(S320). 즉, ax가 소정의 값 a 이상인 경우, 디바이스(100)는 객체의 위치를 이동시키기 위한 프로세스인 S330 내지 S280을 처리할 수 있다. S320 단계는 디바이스(100)에 표시되는 객체의 위치를 이동시킬 필요가 있는지 여부를 판단하기 위해 수행될 수 있다.
다만, 본 발명의 일 실시예에 따라서, 기 설정된 임계값과 센서에서 감지된 값의 비교 방법은 달라질 수 있다. 다른 예를 들면, ax 가 소정의 범위인 ?a 이상이고, a 이하이며(단, a>0), ay가 소정의 범위인 ?b 이상이고, b 이하인 경우(단, b>0), 디바이스(100)는 디바이스(100)에 충격이 가해진 것으로 판단하고, 객체의 위치를 이동시키기 위한 프로세스를 처리할 수 있다. 다만, 본 발명이 이에 한정되는 것은 아니다.
이후, 디바이스(100)는 센서에서 감지된 값에 기초하여 움직임 벡터를 결정할 수 있다(S330). 본 발명의 일 실시예에 따르면, 디바이스(100)가 방향 센서를 구비하는 경우, 움직임 벡터의 크기는 {(ax/a*n), (ay/b*m)}으로 결정될 수 있다. 또한, 움직임 벡터의 방향은 {(rx-dx), (ry-dy)}로 결정될 수 있다. 여기서, n은, 기 설정된 디바이스의 X축 최대 이동거리를 의미한다. m은, 기 설정된 Y축 최대 이동 거리를 의미한다. 다만, 본 발명이 이에 한정되는 것은 아니다.
본 발명의 다른 실시예에 따르면, 디바이스(100)가 자이로스코프 센서를 구비하는 경우, 움직임 벡터의 크기는 {(ax/a*n), (ay/b*m)}로 결정될 수 있다. 또한, 움직임 벡터의 방향은 {(rx/s*ds), (ry/s*ds)}로 결정될 수 있다. 여기서, n은, 기 설정된 디바이스의 X축 최대 이동거리를 의미한다. m은, 기 설정된 Y축 최대 이동 거리를 의미한다. ds는 단위 시간을 의미한다. 다만, 본 발명이 이에 한정되는 것은 아니다.
이후, 디바이스(100)는 결정된 움직임 벡터에 기초하여 객체의 이동값을 결정할 수 있다(S340). 객체의 이동값은 객체가 이동될 방향 및 크기를 나타내는 좌표값을 의미한다.
본 발명의 일 실시예에 따르면, 디바이스(100)가 방향 센서를 구비하는 경우, 객체의 이동값의 크기는 {(-1)*(ax/a*n), (-1)*(ay/b*m)}으로 결정될 수 있다. 또한, 좌표 이동 방향은 {(rx-dx), (ry-dy)}로 결정될 수 있다. 여기서, n은, 기 설정된 디바이스의 X축 최대 이동거리를 의미한다. m은, 기 설정된 Y축 최대 이동 거리를 의미한다. 다만, 본 발명이 이에 한정되는 것은 아니다.
본 발명의 다른 실시예에 따르면, 디바이스(100)가 자이로스코프 센서를 구비하는 경우, 객체의 이동값의 크기는 {(-1)*(ax/a*n), (-1)*(ay/b*m)}로 결정될 수 있다. 또한, 좌표 이동 방향은 {(-1)*(rx/s*ds), (-1)*(ry/s*ds)}로 결정될 수 있다. 여기서, n은, 기 설정된 디바이스의 X축 최대 이동거리를 의미한다. m은, 기 설정된 Y축 최대 이동 거리를 의미한다. ds는 단위 시간을 의미한다. 다만, 본 발명이 이에 한정되는 것은 아니다.
본 발명의 일 실시예에 따르면, S330 단계에서 결정된 객체의 이동값은, 센서에서 감지된 움직임으로부터 반대 방향으로 객체를 이동시키기 위한 것일 수 있다. 디바이스(100)는, 객체를 디바이스(100)의 움직임과 반대 방향으로 이동시킴으로써, 사용자에게 있어 상대적으로 객체의 위치가 움직이지 않거나, 또는 디바이스(100)의 움직임보다 적게 움직이도록 할 수 있다.
이후, 객체가 표시되는 기본 위치로부터 객체의 이동값에 따라 이동된 위치가 디스플레이(130)를 구성하는 스크린에 포함되는 경우(S350), 디바이스(100)는 객체가 표시되는 위치 및 객체에 대응되는 입력 영역을 이동할 수 있다(S360).
또한, 객체가 표시되는 기본 위치로부터 객체의 이동값에 따라 이동된 위치가 디스플레이(130)를 구성하는 스크린을 벗어나는 경우(S350), 디바이스(100)는 객체가 표시되는 면적을 변경하기 위한 계수를 결정할 수 있다(S370). 본 발명의 일 실시예에 따르면, 객체가 표시되는 면적을 변경하기 위한 계수는 센서에서 감지된 값에 비례할 수 있다. 디바이스(100)는 S370단계에서 결정된 계수에 기초하여 객체가 표시되는 면적 및 입력 영역의 면적을 변경할 수 있다(S380). 디바이스(100)는 객체가 표시되는 면적을 보다 크게 함으로써, 사용자가 보다 정확하게 객체를 선택할 수 있도록 할 수 있다. 즉, 객체는 디스플레이(130)를 벗어나서 표시될 수 없으므로, 객체의 위치 대신 객체가 표시되는 면적을 변경시킴으로써 사용자가 보다 정확하게 객체를 선택하도록 유도할 수 있다.
도 4는 본 발명의 또 다른 실시예에 따라 사용자 인터페이스를 제공하는 프로세스를 도시한 순서도이다.
먼저, 디바이스(100)는 디바이스(100) 또는 디스플레이(130)로부터 기 설정된 거리 이내에 사용자의 신체가 접근하였는지 여부를 판단할 수 있다(S410).
여기서, 도 5를 참조하여 설명하면, 디바이스(100)는 사용자의 신체(520)가 디바이스(100)로부터 기 설정된 거리(510)이내에 접근하였는지 판단할 수 있다. 여기서, 기 설정된 거리(510)는 본 발명의 실시예에 따라 달라질 수 있으나, 바람직하게는, 기 설정된 거리(510)는 3 cm 이하의 근거리로 설정될 수 있다.
본 발명의 일 실시예에 따르면, 디스플레이(130)가 전자유도 방식의 터치스크린을 포함하는 경우, 디스플레이(130)는 근접터치기술(이하 ‘핑거 호버링(Finger Hovering)’이라 한다)을 이용하여 디스플레이(130)로부터 기 설정된 거리 이내에 사용자의 신체가 접근하였는지 여부를 판단할 수 있다. 핑거 호버링(Finger Hovering)은 사용자의 신체, 예를 들면 사용자의 손가락이, 터치스크린에 직접 접촉하지 않고 근접하는 경우, 근접한 사용자의 손가락에 의한 영향으로 터치스크린 패널에 흐르는 전류가 변화하는 것을 감지하는 기술을 의미한다.
본 발명의 다른 실시예에 따르면, 디바이스(100)는 근접센서, 적외선 센서 등을 이용하여 사용자의 신체(520)가 근접하였는지 판단할 수 있다. 다만, 본 발명이 이에 한정되는 것은 아니며, 디바이스(100)는 다양한 방법을 이용하여 사용자의 신체(520)가 접근하였는지 판단할 수 있다.
이후, 디바이스(100)는 디바이스(100)에 구비된 센서를 이용하여 디바이스의 움직임을 감지할 수 있다(S420). 이후, 디바이스(100)는 센서를 이용하여 감지된 디바이스(100)의 움직임에 기초하여 객체의 이동값을 결정할 수 있다(S430). 객체의 이동값을 결정한 디바이스(100)는 결정된 이동값에 따라서 디스플레이(130)에 표시되는 객체의 위치 및/또는 객체에 대응되는 입력 영역을 이동시킬 수 있다(S440). 여기서, 본 발명의 일 실시예에 따르면, 디바이스(100)는 사용자의 신체(520)가 접근해 있는 디스플레이(130) 상의 위치에 표시되는 객체 및 객체에 대응되는 입력 영역을 이동시킬 수 있다. 예를 들어, 사용자가 스마트폰을 이용하여 동영상을 재생하던 중, 사용자가 동영상 재생을 중지하기 위하여 손가락을 스마트폰의 터치 스크린 상에 표시되는 중지 버튼에 가까이 가져갈 수 있다. 사용자가 중지 버튼에 손가락을 접촉하고자 할 때, 사용자가 다른 사람과 부딪혀 스마트폰이 흔들릴 수 있다. 이 때, 스마트폰은 손가락과 근접하여 표시된 중지 버튼을 스마트폰의 움직임을 상쇄시키는 위치에 표시함으로써, 사용자가 중지 버튼에 손가락을 접촉하도록 할 수 있다.
도 6 및 도 7은 본 발명의 일 실시예에 따른 디바이스를 구성을 설명하기 위한 블록도이다.
본 발명의 일 실시예에 따른 디바이스(100)는 디바이스(100)의 움직임을 감지하기 위한 적어도 하나의 센서(610), 센서에서 감지된 값을 이용하여 객체의 이동값을 결정하는 프로세서(600) 및 객체를 표시하고, 객체에 대한 사용자의 입력을 인식하기 위한 입출력부(620)를 포함할 수 있다. 다만, 도시된 구성요소 모두가 필수구성요소이거나, 도시된 구성요소만으로 디바이스(100)가 구성되어야 하는 것은 아니다. 도시된 구성요소보다 많은 구성요소에 의해 디바이스(100)가 구현되거나, 또는 도시된 구성요소 중 일부가 제외될 수 있다.
예를 들어, 본 발명의 일 실시예에 따른 디바이스(100)는 통신부, 메모리를 더 포함할 수 있으며, 도 7에 도시된 센서 중 일부가 제외될 수도 있다.
이하 상기 구성요소들에 대하여 차례로 살펴본다.
센서(610)는 디바이스(100)의 움직임을 감지하고, 감지된 정보를 프로세서(600)로 전달할 수 있다.
본 발명의 일 실시예에 따르면, 센서(610)는 가속도 센서(701), 자이로스코프(702) 및 방향 센서(703) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. 가속도 센서(701)는 디바이스(100)의 움직임에 따라 감지되는 가속도에 대한 정보를 획득할 수 있다. 자이로스코프(702)는 디바이스(100)의 움직임에 따라 감지되는 각속도에 대한 정보를 획득할 수 있다. 방향 센서(703)는 디바이스(100)의 움직임에 따라 디바이스(100)의 방향의 변화를 감지할 수 있다. 방향 센서(703)는 지자기 센서와 같이 디바이스(100)의 방향을 감지할 수 있는 센서를 의미한다.
프로세서(600)는 통상적으로 디바이스(100)의 전반적인 동작을 제어할 수 있다. 즉, 프로세서(600)는 메모리(미도시)에 로드된 프로그램을 실행함으로써, 센서 및 입출력부(620) 등을 전반적으로 제어할 수 있다.
프로세서(600)는 움직임 판단 모듈(711) 및 입출력 제어 모듈(712)을 포함할 수 있다.
본 발명의 일 실시예에 따른 움직임 판단 모듈(711)은 센서(610)로부터 센서(610)를 이용하여 감지된 정보를 획득할 수 있다.
센서(610)로부터 정보를 수신한 움직임 판단 모듈(711)은, 센서(610)에서 감지된 값이 기 설정된 범위 내에 포함되는지 여부를 판단할 수 있다. 또한, 움직임 판단 모듈(711)은 판단 결과에 기초하여 센서(610)에서 감지된 값에 대응하는 객체의 이동값을 결정할 수 있다. 예를 들어, 가속도 센서(701)에서 감지된 가속도의 크기와 기 설정된 임계값을 비교하고, 가속도의 크기가 기 설정된 임계값 이상인지 판단할 수 있다. 가속도의 크기가 기 설정된 임계값 이상인 경우, 움직임 판단 모듈(711)은 센서(610)에서 감지된 값에 대응하는 객체의 이동값을 결정할 수 있다.
또한, 본 발명의 다른 실시예에 따르면, 터치 패널(721)은 디바이스(100) 또는 디스플레이(722)에 사용자의 신체가 근접했는지 감지할 수 있다. 이 때, 움직임 판단 모듈(711)은 터치 패널(721)에 사용자의 신체가 근접한 것을 감지한 경우, 객체의 이동값을 결정할 수 있다.
또한, 본 발명의 다른 실시예에 따르면, 움직임 판단 모듈(711)은 센서(610)에서 감지된 값 중 디스플레이(722)의 표면을 포함하는 평면으로부터 수직인 좌표축에 해당하는 값을 제외하고 객체의 이동값을 결정할 수 있다.
또한, 본 발명의 다른 실시예에 따르면, 움직임 판단 모듈(711)은 움직임 벡터를 결정하고, 움직임 벡터에 대한 역(reverse)의 값을 좌표 값으로 결정할 수 있다. 예를 들어, 움직임 벡터의 크기는 {(ax/a*n), (ay/b*m)}으로 결정될 수 있다. 또한, 움직임 벡터의 방향은 {(rx-dx), (ry-dy)}로 결정될 수 있다. 여기서, ax 및 ay는 가속도 센서(701)에서 감지된 x축에 대한 가속도 및 y축에 대한 가속도를 의미한다. rx 및 ry는 방향 센서(703)에서 감지된 x축 회전 각도 및 y축 회전 각도를 의미한다. dx 및 dy는 x축 및 y축에 설정된 기본 설정값을 의미한다. n은, 기 설정된 디바이스의 X축 최대 이동거리를 의미한다. m은, 기 설정된 Y축 최대 이동 거리를 의미한다. 여기서, 움직임 판단 모듈(711)은 이동값의 크기는 {(-1)*(ax/a*n), (-1)*(ay/b*m)}이고, 좌표 이동 방향은 {(rx-dx), (ry-dy)}인 이동값을 결정할 수 있다.
다른 예를 들면, 움직임 벡터의 크기는 {(ax/a*n), (ay/b*m)}로 결정될 수 있다. 또한, 움직임 벡터의 방향은 {(rx/s*ds), (ry/s*ds)}로 결정될 수 있다. 여기서, ax 및 ay는 가속도 센서(701)에서 감지된 x축에 대한 가속도 및 y축에 대한 가속도를 의미한다. rx/s 및 ry/s는 자이로스코프(702)에서 감지된 x축 및 y축에 대한 회전 각속도를 의미한다. n은, 기 설정된 디바이스의 X축 최대 이동거리를 의미한다. m은, 기 설정된 Y축 최대 이동 거리를 의미한다. ds는 단위 시간을 의미한다. 다만, 본 발명이 본 예시에 한정되는 것은 아니다.
본 발명의 일 실시예에 따르면, 좌표 이동 값은 센서(610)에서 감지된 디바이스(100)의 움직임으로부터 반대 방향으로 객체를 이동시키기 위한 것일 수 있다. 디바이스(100)의 움직임과 반대 방향으로 객체를 이동시킴으로써, 예상하지 못한 디바이스(100)의 움직임이 있더라도 사용자는 원하는 객체를 보다 정확하게 선택할 수 있다.
입출력 제어 모듈(712)은 객체를 포함하는 사용자 인터페이스를 표시하도록 디스플레이(722)를 포함하는 입출력부(620)를 제어할 수 있다. 움직임 판단 모듈(711)에서 객체의 이동값이 결정된 경우, 입출력 제어 모듈(722)은 객체의 이동값에 기초하여 디스플레이(722)에 표시되는 객체의 위치를 재설정하고, 재설정된 위치에 객체가 표시되도록 디스플레이(722)를 제어할 수 있다. 객체가 표시되는 위치를 이동시키는 일 실시예는 도 8에 도시된다.
본 발명의 일 실시예에 따르면, 디바이스(100)는 객체의 이동값에 기초하여 재설정된 객체의 위치가 디스플레이(722)에서 표시 가능한 영역을 벗어나는 경우, 객체의 이동값에 기초하여 객체가 표시되는 면적 및 입력 영역의 면적을 변경할 수 있다. 객체가 표시되는 면적 및 입력 영역의 면적을 변경하는 일 실시예는 도 9에 도시된다.
입출력부(620)는 객체를 표시하고, 객체에 대한 사용자의 입력을 수신할 수 있다. 예를 들어, 입출력부(620)는 디스플레이와 터치 패널이 레이어 구조를 이루는 터치스크린(touch screen)으로 구현되며, 사용자 인터페이스를 출력하고, 표시된 사용자 인터페이스에 대한 사용자의 터치 입력을 수신할 수 있다.
디스플레이(721)는 디바이스(100)에서 처리된 비디오 신호를 출력할 수 있다. 본 발명의 일 실시예에 따르면, 디스플레이(721)는 적어도 하나의 객체를 포함하는 사용자 인터페이스 내지 영상을 출력할 수 있다.
터치 패널(721)은 사용자의 접촉을 감지하고, 사용자의 접촉이 감지된 좌표를 프로세서(600)로 전송할 수 있다.
본 발명의 실시예에 따라서, 입출력부(620)는 터치 패널(721) 및 디스플레이(722)가 아닌 다른 입출력 장치를 구비할 수 있다. 예를 들어, 입출력부(620)는 사용자의 제스처를 인식하기 위한 수단 또는 사용자의 신체 위치를 감지하기 위한 수단을 포함할 수 있다.
본 발명의 일 실시예에 따르면, 터치 패널(721)과 디스플레이(722)는 레이어 구조를 이루어 터치 스크린으로 구성될 수 있다. 디스플레이(722)는 액정 디스플레이(Liquid Crystal Display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophretic display), PDP(Plasma Display Panel), OLED(Organic Light Emitting Diod), 플렉시블 디스플레이(flexible display) 또는 투명 디스플레이 등의 다양한 형태로 구현될 수 있다. 또한, 디바이스(100)의 구현 형태에 따라 입출력부(620)는 2개 이상의 디스플레이(722)를 포함할 수 있다.
본 발명의 다른 실시예에 따르면, 입출력부(620)는 사용자의 신체가 디바이스(100) 또는 디스플레이(722)에 접근하였는지 판단할 수 있다. 여기서, 핑거 호버링(Finger Hovering)이 이용될 수 있다. 움직임 판단 모듈(711)은, 사용자의 신체가 디스플레이(722)에 접근한 경우에 한해서 객체의 이동값을 결정할 수 있다. 즉, 사용자가 터치 입력을 하고자 하는 순간에 한해서 디바이스(100)가 객체가 표시되는 위치를 변경할 수 있다.
도 8은 본 발명의 일 실시예에 따라 디바이스가 사용자 인터페이스를 출력하는 도면이다.
먼저, 디바이스(100)는 객체(110)를 표시할 수 있다(810). 여기서, 사용자가 입력 영역(120)에 신체를 접촉하면, 디바이스(100)는 객체(110)에 대해 기 설정된 동작을 실행할 수 있다.
디바이스(100)에 객체(110)가 표시된 상태(810)에서, 다양한 원인으로 인하여 디바이스(100)가 움직일 수 있다(820). 이 경우, 디바이스(100)는 디바이스(100)의 움직임을 감지하고, 객체가 표시될 위치를 변경하고 변경된 위치에 객체(110-4)를 표시할 수 있다(830). 사용자는 변경된 위치에 대응하는 입력 영역(120-1)을 선택함으로써 객체(110)에 대하여 기 설정된 디바이스(100)의 동작을 실행시킬 수 있다.
본 발명의 일 실시예에 따르면, 디바이스(100)는 디스플레이에 표시되는 영상을 모두 이동시킴으로써, 객체가 표시되는 위치를 이동시킬 수 있다. 또한, 본 발명의 다른 실시예에 따르면, 디바이스(100)는 디스플레이에 접근된 사용자의 신체가 감지되는 경우, 감지된 사용자의 신체에서 가까운 지점에 표시된 객체가 표시되는 위치만 이동시킬 수 있다. 예를 들어, 사용자가 스마트폰을 이용하여 동영상을 재생하던 중, 사용자가 동영상 재생을 중지하기 위하여 손가락을 스마트폰의 터치 스크린 상에 표시되는 중지 버튼에 가까이 가져갈 수 있다. 사용자가 중지 버튼에 손가락을 접촉하고자 할 때, 사용자가 다른 사람과 부딪혀 스마트폰이 흔들릴 수 있다. 이 때, 스마트폰은 손가락과 근접하여 표시된 중지 버튼을 스마트폰의 움직임을 상쇄시키는 위치에 표시함으로써, 사용자가 중지 버튼에 손가락을 접촉하도록 할 수 있다. 여기서, 중지 버튼 이외에 터치스크린에 표시되는 다른 영상의 위치는 이동하지 않을 수 있다. 다만, 본 발명이 이에 한정되는 것은 아니다.
도 9는 본 발명의 다른 실시예에 따라 디바이스가 사용자 인터페이스를 출력하는 도면이다.
먼저, 디바이스(100)는 객체(110)를 표시할 수 있다(910). 여기서, 사용자가 입력 영역(120)에 신체를 접촉하면, 디바이스(100)는 객체(110)에 대해 기 설정된 동작을 실행할 수 있다.
디바이스(100)에 객체(110)가 표시된 상태(810)에서, 디바이스(100)에 충격이 가해짐에 따라서 디바이스(100)가 움직일 수 있다(920). 이 때, 도 8에서와 같이 객체의 위치를 이동하는 경우, 객체가 표시되어야 할 위치가 디바이스(100)에 구비된 디스플레이를 벗어날 수 있다. 따라서, 본 발명의 일 실시예에 따르면 디바이스(100)는 객체(110)가 표시되는 면적을 변경할 수 있다. 보다 확대된 객체(110-5)를 표시함으로써, 디바이스(100)는 사용자가 보다 용이하게 객체(110)를 선택할 수 있는 사용자 인터페이스를 제공할 수 있다(930). 이 때, 객체(110-5)에 대응되는 입력 영역(120-2)도 확대된 객체의 면적에 대응하여 확대될 수 있다.
본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다. 컴퓨터 판독 가능 매체는 하드 디스크, CD, DVD, 블루레이 및 플래시 메모리 등으로 구성될 수 있다. 본 발명의 일 실시예에 따른 기록 매체에 디바이스(100)가 기 설정된 동작을 실행하기 위한 객체를 디바이스(100)에 포함된 디스플레이를 통해 표시하고, 디바이스(100)에 구비된 센서를 이용하여 디바이스(100)의 움직임을 감지하며, 감지된 움직임에 기초하여 객체의 위치 및/또는 입력 영역을 이동하기 위한 프로그램이 기록될 수 있다. 또한, 본 발명의 다른 실시예에 따르면 기록 매체에 객체 및/또는 입력 영역의 위치 대신 객체 및/또는 입력 영역의 면적을 변경하기 위한 프로그램이 기록될 수 있다. 또한, 본 발명의 또 다른 실시예에 따르면, 기록매체에 사용자의 신체의 접근을 감지하고, 사용자의 신체의 접근이 감지된 경우에 한해 객체 및/또는 입력 영역의 위치를 변경하는 프로그램이 기록될 수 있다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (18)

  1. 사용자의 터치 입력에 따라서 기 설정된 동작을 실행하기 위한 객체를 표시하는 디바이스에 있어서,
    상기 디바이스의 움직임을 감지하는 적어도 하나의 센서;
    상기 센서에 의해 감지된 움직임 값의 크기와 기 설정된 임계값을 비교하고, 상기 비교 결과에 기초하여 상기 객체의 이동값을 결정하는 프로세서; 및
    상기 객체의 이동값에 따라서 표시된 객체의 위치를 이동시켜 표시하는 터치스크린을 구비하며,
    상기 프로세서는,
    상기 객체의 이동값에 기초하여 상기 객체가 표시되는 위치가 상기 터치스크린 상에서 표시 가능한 영역에서 벗어나는 경우, 상기 객체의 이동값에 기초하여 상기 객체가 표시되는 면적을 변경하는 것을 특징으로 하는, 디바이스.
  2. 제 1 항에 있어서,
    상기 터치스크린은,
    상기 터치스크린으로부터 기 설정된 거리 이내에 신체의 접근을 감지하고,
    상기 프로세서는,
    상기 터치스크린으로부터 상기 기 설정된 거리 이내에 신체의 접근이 감지된 경우, 상기 객체의 이동값을 결정하는, 디바이스.
  3. 제 1 항에 있어서,
    상기 객체의 이동 값은,
    상기 센서에서 감지된 움직임으로부터 반대 방향으로 상기 객체를 이동시키기 위한 것인, 디바이스
  4. 제 1 항에 있어서,
    상기 프로세서는,
    상기 센서에서 감지된 값 중, 상기 터치스크린을 포함하는 평면으로부터 수직인 방향의 값을 제외하고 상기 객체의 이동값을 결정하는 것을 특징으로 하는, 디바이스.
  5. 제 1 항에 있어서,
    상기 프로세서는,
    상기 센서에서 감지된 값으로부터 움직임 벡터를 결정하고, 상기 움직임 벡터에 대한 역(reverse)의 값을 상기 객체의 이동값으로 결정하는, 디바이스.
  6. 제 1 항에 있어서,
    상기 객체는,
    프로그램을 실행시키기 위한 아이콘, 텍스트 입력을 위한 텍스트 버튼, 필기 입력을 하기 위한 프레임, 애플리케이션 실행 화면, 메뉴 선택 버튼, 위젯(widget) 및 프로그램을 제어하기 위한 입력 버튼 중 적어도 하나를 포함하는, 디바이스.
  7. 삭제
  8. 제 1 항에 있어서,
    상기 프로세서는,
    상기 센서에서 감지된 값의 크기가 상기 임계값 이상인 경우, 상기 객체의 이동값을 결정하는, 디바이스.
  9. 디바이스가 사용자 인터페이스를 제공하는 방법에 있어서,
    상기 디바이스의 기 설정된 동작을 실행하기 위한 객체를 상기 디바이스에 구비된 터치스크린 상에 표시하는 단계;
    상기 디바이스에 구비된 센서가 상기 디바이스의 움직임을 감지하는 단계;
    상기 감지된 디바이스의 움직임에 기초하여 상기 표시된 객체의 위치를 이동시켜 표시하는 단계를 포함하며,
    상기 객체의 위치를 이동시켜 표시하는 단계는,
    상기 센서에서 감지된 움직임 값의 크기와 기 설정된 임계값을 비교하고, 상기 비교 결과에 기초하여 상기 움직임 값에 대응하는 객체의 이동값을 결정하는 단계; 및
    상기 객체의 이동값에 기초하여 상기 객체가 표시되는 위치를 이동시키는 단계;
    상기 객체의 이동값에 기초하여 상기 객체가 표시되는 위치가 상기 터치스크린 상에서 벗어나는 경우, 상기 디바이스의 움직임에 기초하여 상기 객체가 표시되는 면적을 변경하는 단계를 포함하는 것을 특징으로 하는, 사용자 인터페이스 제공 방법.
  10. 삭제
  11. 제 9 항에 있어서,
    상기 터치스크린은,
    상기 터치스크린으로부터 기 설정된 거리 이내에 신체의 접근을 감지하고,
    상기 객체의 이동값을 결정하는 단계는,
    상기 터치스크린으로부터 상기 기 설정된 거리 이내에 신체의 접근이 감지된 경우, 상기 객체의 이동값을 결정하는 것을 특징으로 하는, 사용자 인터페이스 제공 방법.
  12. 제 9 항에 있어서,
    상기 객체의 이동 값은,
    상기 센서에서 감지된 움직임으로부터 반대 방향으로 상기 객체를 이동시키기 위한 것인, 사용자 인터페이스 제공 방법.
  13. 제 9 항에 있어서,
    상기 객체의 이동값을 결정하는 단계는,
    상기 센서에서 감지된 값 중, 상기 터치스크린을 포함하는 평면으로부터 수직인 방향의 값을 제외하고 상기 객체의 이동값을 결정하는, 사용자 인터페이스 제공 방법.
  14. 제 9 항에 있어서,
    상기 객체의 이동값을 결정하는 단계는,
    상기 센서에서 감지된 값으로부터 움직임 벡터를 결정하고, 상기 움직임 벡터에 대한 역(reverse)의 값을 상기 객체의 이동값으로 결정하는, 사용자 인터페이스 제공 방법.
  15. 제 9 항에 있어서,
    상기 객체의 이동값을 결정하는 단계는,
    상기 센서에서 감지된 값의 크기가 상기 임계값 이상인 경우, 상기 객체의 이동값을 결정하는, 사용자 인터페이스 제공 방법.
  16. 제 9 항에 있어서,
    상기 객체는,
    프로그램을 실행시키기 위한 아이콘, 텍스트 입력을 위한 텍스트 버튼, 필기 입력을 하기 위한 프레임, 애플리케이션 실행 화면, 메뉴 선택 버튼, 위젯(widget) 및 프로그램을 제어하기 위한 입력 버튼 중 적어도 하나를 포함하는, 사용자 인터페이스 제공 방법.
  17. 삭제
  18. 제 9 항의 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 비 일시적 기록매체.
KR1020130086996A 2013-07-23 2013-07-23 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스 KR102140811B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130086996A KR102140811B1 (ko) 2013-07-23 2013-07-23 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스
US14/285,134 US9904444B2 (en) 2013-07-23 2014-05-22 Method of providing user interface of device and device including the user interface

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130086996A KR102140811B1 (ko) 2013-07-23 2013-07-23 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스

Publications (2)

Publication Number Publication Date
KR20150011885A KR20150011885A (ko) 2015-02-03
KR102140811B1 true KR102140811B1 (ko) 2020-08-03

Family

ID=52391585

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130086996A KR102140811B1 (ko) 2013-07-23 2013-07-23 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스

Country Status (2)

Country Link
US (1) US9904444B2 (ko)
KR (1) KR102140811B1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102140811B1 (ko) * 2013-07-23 2020-08-03 삼성전자주식회사 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스
US9619940B1 (en) * 2014-06-10 2017-04-11 Ripple Inc Spatial filtering trace location
US9646418B1 (en) * 2014-06-10 2017-05-09 Ripple Inc Biasing a rendering location of an augmented reality object
US10930038B2 (en) 2014-06-10 2021-02-23 Lab Of Misfits Ar, Inc. Dynamic location based digital element
US10026226B1 (en) 2014-06-10 2018-07-17 Ripple Inc Rendering an augmented reality object
US11409366B2 (en) * 2019-10-03 2022-08-09 Charles Isgar Gesture-based device activation system

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3528451B2 (ja) * 1996-07-26 2004-05-17 ソニー株式会社 電子番組ガイド表示制御装置及びその方法
US7750891B2 (en) * 2003-04-09 2010-07-06 Tegic Communications, Inc. Selective input system based on tracking of motion parameters of an input device
US7821503B2 (en) * 2003-04-09 2010-10-26 Tegic Communications, Inc. Touch screen and graphical user interface
US7401300B2 (en) * 2004-01-09 2008-07-15 Nokia Corporation Adaptive user interface input device
US7519468B2 (en) * 2005-02-28 2009-04-14 Research In Motion Limited System and method for navigating a mobile device user interface with a directional sensing device
US9046962B2 (en) * 2005-10-31 2015-06-02 Extreme Reality Ltd. Methods, systems, apparatuses, circuits and associated computer executable code for detecting motion, position and/or orientation of objects within a defined spatial region
KR20080060981A (ko) 2006-12-27 2008-07-02 주식회사 포스코 표면품질이 우수한 아연도금용 강판 및 그 제조방법
US8462109B2 (en) * 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
JP4966764B2 (ja) 2007-06-27 2012-07-04 パイオニア株式会社 タッチパネル表示装置およびタッチパネル制御方法
KR100891263B1 (ko) * 2007-11-15 2009-03-30 에스케이 텔레콤주식회사 단말기 움직임으로 단말기에 미디어를 재생하는 방법,시스템 및 서버
US9582049B2 (en) * 2008-04-17 2017-02-28 Lg Electronics Inc. Method and device for controlling user interface based on user's gesture
US20100146444A1 (en) * 2008-12-05 2010-06-10 Microsoft Corporation Motion Adaptive User Interface Service
US8890898B2 (en) * 2009-01-28 2014-11-18 Apple Inc. Systems and methods for navigating a scene using deterministic movement of an electronic device
US20100201615A1 (en) * 2009-02-12 2010-08-12 David John Tupman Touch and Bump Input Control
US8970475B2 (en) * 2009-06-19 2015-03-03 Apple Inc. Motion sensitive input control
WO2011025239A2 (ko) * 2009-08-24 2011-03-03 삼성전자 주식회사 모션을 이용한 ｕｉ 제공방법 및 이를 적용한 디바이스
KR101119896B1 (ko) * 2009-10-13 2012-02-22 에스케이플래닛 주식회사 휴대단말 및 그의 거리 및 시선 인지를 이용한 객체 표시 방법
KR101768540B1 (ko) * 2009-10-30 2017-08-18 삼성전자주식회사 모바일 기기 및 이에 적용되는 ｕｉ 제공방법
US9176542B2 (en) * 2009-11-06 2015-11-03 Sony Corporation Accelerometer-based touchscreen user interface
US8539385B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for precise positioning of objects
GB2477959A (en) * 2010-02-19 2011-08-24 Sony Europ Navigation and display of an array of selectable items
US9977472B2 (en) * 2010-03-19 2018-05-22 Nokia Technologies Oy Method and apparatus for displaying relative motion of objects on graphical user interface
US8878656B2 (en) * 2010-06-22 2014-11-04 Microsoft Corporation Providing directional force feedback in free space
US20120030566A1 (en) * 2010-07-28 2012-02-02 Victor B Michael System with touch-based selection of data items
US9043732B2 (en) * 2010-10-21 2015-05-26 Nokia Corporation Apparatus and method for user input for controlling displayed information
US8791911B2 (en) * 2011-02-09 2014-07-29 Robotzone, Llc Multichannel controller
JP5927872B2 (ja) * 2011-12-01 2016-06-01 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9557781B2 (en) * 2012-01-05 2017-01-31 Sony Corporation Adjusting coordinates of touch input
US9262064B2 (en) * 2013-07-09 2016-02-16 EZ as a Drink Productions, Inc. Handheld computing platform with integrated pressure sensor and associated methods of use
KR102140811B1 (ko) * 2013-07-23 2020-08-03 삼성전자주식회사 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스

Also Published As

Publication number Publication date
US20150033159A1 (en) 2015-01-29
US9904444B2 (en) 2018-02-27
KR20150011885A (ko) 2015-02-03

Similar Documents

Publication Publication Date Title
US10585490B2 (en) Controlling inadvertent inputs to a mobile device
KR102140811B1 (ko) 디바이스의 사용자 인터페이스 제공 방법 및 그 디바이스
US9798443B1 (en) Approaches for seamlessly launching applications
US10031586B2 (en) Motion-based gestures for a computing device
KR102348947B1 (ko) 전자장치의 화면 표시 제어 방법 및 장치
US9633412B2 (en) Method of adjusting screen magnification of electronic device, machine-readable storage medium, and electronic device
US10775869B2 (en) Mobile terminal including display and method of operating the same
US9268407B1 (en) Interface elements for managing gesture control
US9075514B1 (en) Interface selection element display
US9632655B2 (en) No-touch cursor for item selection
US20150169180A1 (en) Rearranging icons on a display by shaking
US9110541B1 (en) Interface selection approaches for multi-dimensional input
US20160110057A1 (en) Remote controller apparatus and control method thereof
US20150242100A1 (en) Detecting intentional rotation of a mobile device
KR20150025214A (ko) 동영상에 비주얼 객체를 중첩 표시하는 방법, 저장 매체 및 전자 장치
CN103135887A (zh) 信息处理装置、信息处理方法和程序
CN105138247A (zh) 检测到第二设备接近第一设备而在第一设备呈现用户界面
US10019148B2 (en) Method and apparatus for controlling virtual screen
US20190041978A1 (en) User defined head gestures methods and apparatus
US10719147B2 (en) Display apparatus and control method thereof
US9235338B1 (en) Pan and zoom gesture detection in a multiple touch display
JP2012137993A (ja) 情報処理装置、情報処理方法及びプログラム
US9507429B1 (en) Obscure cameras as input
US9109921B1 (en) Contextual based navigation element
EP3433713B1 (en) Selecting first digital input behavior based on presence of a second, concurrent, input

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant