KR20140013547A - 사용자 단말 장치 및 그의 제어 방법 - Google Patents

사용자 단말 장치 및 그의 제어 방법 Download PDF

Info

Publication number
KR20140013547A
KR20140013547A KR1020120080998A KR20120080998A KR20140013547A KR 20140013547 A KR20140013547 A KR 20140013547A KR 1020120080998 A KR1020120080998 A KR 1020120080998A KR 20120080998 A KR20120080998 A KR 20120080998A KR 20140013547 A KR20140013547 A KR 20140013547A
Authority
KR
South Korea
Prior art keywords
graphic object
menu
displayed
input
user input
Prior art date
Application number
KR1020120080998A
Other languages
English (en)
Other versions
KR102073601B1 (ko
Inventor
최선
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120080998A priority Critical patent/KR102073601B1/ko
Priority to US13/646,284 priority patent/US9182900B2/en
Priority to TW102126037A priority patent/TWI598803B/zh
Priority to EP13177845.8A priority patent/EP2690544B1/en
Priority to PCT/KR2013/006661 priority patent/WO2014017841A1/en
Priority to JP2013154484A priority patent/JP6265642B2/ja
Priority to CN201310316976.5A priority patent/CN103577050B/zh
Publication of KR20140013547A publication Critical patent/KR20140013547A/ko
Priority to US14/887,494 priority patent/US20160041709A1/en
Application granted granted Critical
Publication of KR102073601B1 publication Critical patent/KR102073601B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]

Abstract

사용자 단말 장치의 제어 방법이 개시된다. 본 제어 방법은, 사용자 단말 장치의 터치 디스플레이 스크린에 표시된 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력을 터치 디스플레이 스크린을 통해 수신하는 단계, 제1 사용자 입력에 따라 선택된 그래픽 오브젝트를 구성하는 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계, 표시된 그래픽 오브젝트 근처에 그래픽 오브젝트에 관련된 메뉴를 표시하는 단계 및 표시된 메뉴를 선택하기 위한 제2 사용자 입력을 터치 디스플레이 스크린을 통해 수신하는 단계를 포함한다.

Description

사용자 단말 장치 및 그의 제어 방법{USER TERMINAL APPARATUS AND CONTROL METHOD THEREOF}
본 발명은 사용자 단말 장치 및 그의 제어 방법에 관한 것으로, 보다 상세하게는 사용자 단말 장치에서 회전 GUI(Graphical User Interface)를 이용하여 다양한 기능을 수행하는 사용자 단말 장치 및 그의 제어 방법에 관한 것이다.
전자 기술의 발달에 힘입어 다양한 종류의 전자기기가 개발 및 보급되고 있다. 특히, 우수한 IT 기술을 바탕으로 한 최첨단 스마트폰과 같은 사용자 단말 장치도 보급되고 있다.
최근에는 최첨단 사용자 단말 장치의 가격 인하 및 성능 향상 등으로 인하여, 최첨단 사용자 단말 장치에 대한 수요가 증가하고 있다. 이에 따라, 최첨단 사용자 단말 장치에 부합하는 다양하고 편리한 사용 방법의 개발에 대한 노력도 가속화되고 있다.
이에 따라 최근에는 사용자 단말 장치의 사용 편의성을 향상시키는 다양한 GUI(Graphical User Interface)에 대한 필요성이 대두되고 있다.
본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 본 발명의 목적은 사용자 단말 장치에서 회전 GUI(Graphical User Interface)를 이용하여 다양한 기능을 수행함으로써, 사용자 편의성을 도모하는 사용자 단말 장치 및 그의 제어 방법을 제공함에 있다.
또한 본 발명의 다른 목적은 사용자 단말 장치에 설치된 어플리케이션이 사용자 단말 장치와 연동된 외부기기에 설치되어있는지 여부에 따라, 외부 기기의 동작을 제어함으로써, 사용자 편의성을 도모하는 사용자 단말 장치 및 그의 제어 방법을 제공함에 있다.
상술한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 사용자 단말 장치의 제어 방법은, 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력을 수신하는 단계, 상기 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계, 상기 표시된 그래픽 오브젝트 근처에 상기 그래픽 오브젝트에 관련된 메뉴를 표시하는 단계 및 상기 표시된 메뉴를 선택하기 위한 제2 사용자 입력을 수신하는 단계를 포함한다.
그리고, 상기 선택된 그래픽 오브젝트에 관련된 메뉴는, 상기 선택된 그래픽 오브젝트에서 제공하는 특정 기능에 관한 기능 메뉴, 상기 선택된 그래픽 오브젝트의 옵션을 설정하기 위한 설정 메뉴 중 적어도 하나를 포함할 수 있다.
또한, 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계는, 상기 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경하여 표시하는 것일 수 있다.
그리고, 상기 제1 사용자 입력에 따라 그래픽 오브젝트가 선택되면, 상기 선택된 그래픽 오브젝트의 근처에 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)를 표시하는 단계를 더 포함할 수 있다.
또한, 상기 변경하여 표시된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 단계를 더 포함할 수 있다.
그리고, 상기 제2 사용자 입력은, 상기 표시된 그래픽 오브젝트를 제1 방향 또는 제2 방향으로 회전시키는 회전 입력이며, 상기 표시된 메뉴는, 상기 회전 입력에 따라 선택될 수 있다.
또한, 상기 표시된 메뉴는, 상기 회전 입력에 따라 회전되는 상기 표시된 그래픽 오브젝트의 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택될 수 있다.
그리고, 상기 제2 사용자 입력은, 상기 표시된 메뉴를 터치하는 터치 입력이며, 상기 표시된 메뉴는, 상기 터치 입력에 따라 선택될 수 있다.
또한, 상기 제2 사용자 입력은, 상기 표시된 그래픽 오브젝트의 회전 방향에 대응되는 GUI에 대한 터치 입력이며, 상기 표시된 메뉴는, 상기 터치 입력에 따라 선택될 수 있다.
그리고, 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트가 선택되기 전 상태로 돌아가기 위한 제3 사용자 입력을 수신하는 단계를 더 포함할 수 있다.
또한, 상기 표시된 그래픽 오브젝트의 회전에 따라 상기 선택되는 메뉴가 변경되었음을 인식시키는 피드백을 제공하는 단계를 더 포함할 수 있다.
그리고, 표시된 그래픽 오브젝트에 대응하는 어플리케이션을 상기 사용자 단말 장치와 연동되는 외부 기기에 적용하기 위한 메뉴를 상기 제2 사용자 입력에 따라 선택받는 단계, 상기 외부 기기에 상기 표시된 그래픽 오브젝트에 대응하는 어플리케이션이 기 설치되어 있는 경우, 기 설치된 어플리케이션을 실행하고, 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 상기 외부 기기를 제어하는 단계를 더 포함할 수 있다.
한편, 상술한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 사용자 단말 장치는, 복수의 그래픽 오브젝트를 표시하는 디스플레이부, 사용자 입력을 수신하는 입력부, 상기 표시된 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력이 상기 입력부를 통하여 수신되면, 상기 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하고, 상기 표시된 그래픽 오브젝트 근처에 상기 그래픽 오브젝트에 관련된 메뉴를 표시하도록 상기 디스플레이부를 제어하고, 제2 사용자 입력이 상기 입력부를 통하여 수신되면, 상기 표시된 메뉴를 선택하는 제어부를 포함한다.
그리고, 상기 선택된 그래픽 오브젝트에 관련된 메뉴는, 상기 선택된 그래픽 오브젝트에서 제공하는 특정 기능에 관한 기능 메뉴, 상기 선택된 그래픽 오브젝트의 옵션을 설정하기 위한 설정 메뉴 중 적어도 하나를 포함할 수 있다.
또한, 상기 제어부는, 상기 그래픽 요소에 대응하는 상기 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경하여 표시할 수 있다.
그리고, 상기 제어부는, 상기 제1 사용자 입력에 따라 그래픽 오브젝트가 선택되면, 상기 선택된 그래픽 오브젝트의 근처에 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)를 표시하도록 상기 디스플레이부를 제어할 수 있다.
또한, 상기 제어부는, 상기 변경하여 표시된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다.
그리고, 상기 제2 사용자 입력은, 상기 표시된 그래픽 오브젝트를 제1 방향 또는 제2 방향으로 회전시키는 회전 입력이며, 상기 표시된 메뉴는, 상기 회전 입력에 따라 선택될 수 있다.
또한, 상기 표시된 메뉴는, 상기 회전 입력에 따라 회전되는 상기 표시된 그래픽 오브젝트의 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택될 수 있다.
그리고, 상기 제2 사용자 입력은, 상기 표시된 메뉴를 터치하는 터치 입력이며, 상기 표시된 메뉴는, 상기 터치 입력에 따라 선택될 수 있다.
또한, 상기 제2 사용자 입력이, 상기 표시된 그래픽 오브젝트의 회전 방향에 대응되는 화살표 GUI의 터치 입력인 경우, 상기 표시된 메뉴는, 상기 터치 입력에 따라 선택될 수 있다.
그리고, 상기 제어부는, 상기 제3 사용자 입력이 상기 입력부를 통하여 수신되면, 상기 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트가 선택되기 전 상태로 돌아가도록 상기 디스플레이부를 제어할 수 있다.
또한, 상기 제어부는, 상기 선택된 그래픽 오브젝트의 회전에 따라 상기 선택되는 메뉴가 변경되었음을 인식시키는 피드백을 제공할 수 있다.
그리고, 상기 사용자 단말 장치를 외부 기기와 연결하는 통신 인터페이스부를 더 포함하며, 표시된 그래픽 오브젝트에 대응하는 어플리케이션을 상기 사용자 단말 장치와 연동되는 외부 기기에 적용하기 위한 메뉴가 상기 제2 사용자 입력에 기초하여 선택되면, 상기 제어부는, 상기 외부 기기에 상기 표시된 그래픽 오브젝트에 대응하는 어플리케이션이 기 설치되어 있는 경우, 기 설치된 어플리케이션을 실행하고, 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 하기 위한 제어 신호를 상기 통신 인터페이스부를 통하여 상기 외부 기기에 전송하여 상기 외부 기기를 제어할 수 있다.
한편, 상술한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 사용자 단말 장치의 제어 방법을 실행하기 위한 프로그램 코드가 기록된 기록 매체에 있어서, 상기 제어 방법은, 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력을 수신하는 단계, 상기 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계, 상기 표시된 그래픽 오브젝트 근처에 상기 그래픽 오브젝트에 관련된 메뉴를 표시하는 단계 및 상기 표시된 메뉴를 선택하기 위한 제2 사용자 입력을 수신하는 단계를 포함한다.
도 1은 본 발명의 일 실시 예에 따른 사용자 단말 장치를 나타내는 블록도,
도 2는 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 것을 나타내는 도면,
도 3은 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 것을 나타내는 도면,
도 4는 선택된 그래픽 오브젝트에 관련된 메뉴를 표시하는 방법을 나타내는 도면,
도 5 내지 8은 표시된 메뉴를 선택하는 방법을 나타내는 도면,
도 9는 사용자 단말 장치에 설치된 어플리케이션이 사용자 단말 장치와 연동된 외부기기에 설치되어있는지 여부에 따라, 외부 기기의 동작을 제어하는 방법을 나타내는 도면,
도 10은 본 발명의 일 실시 예에 따른 사용자 단말 장치의 제어 방법을 나타내는 흐름도,
도 11 내지 13은 본 발명의 다른 실시 예에 따른 사용자 단말 장치의 제어 방법을 나타내는 도면이다.
이하, 첨부된 도면을 참조하여 구체적으로 설명하기로 한다.
도 1은 본 발명의 일 실시 예에 따른 사용자 단말 장치를 나타내는 블록도 이다. 도 1을 참조하면 사용자 단말 장치(100)는 디스플레이부(110), 입력부(120), 통신 인터페이스부(130), 제어부(140)의 전부 또는 일부를 포함한다.
여기서 사용자 단말 장치(100)는 휴대폰, 스마트 폰, 태블릿 컴퓨터, 노트북 컴퓨터, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, 디지털 TV 등 다양한 장치로 구현될 수 있다.
디스플레이부(110)는 화면을 표시하는 기능을 한다. 특히 디스플레이부(110)는 복수의 그래픽 오브젝트를 포함하는 화면을 표시할 수 있다. 그래픽 오브젝트는 어플리케이션 아이콘, 적어도 하나의 어플리케이션 아이콘을 포함하는 폴더, 음원 파일의 썸네일 이미지, 동영상 파일의 썸네일 이미지 등과 같은 이미지, 텍스트 또는 GUI(Graphical User Interface)등과 같은 사용자가 선택할 수 있는 모든 그래픽 오브젝트일 수 있다.
여기서, 디스플레이부(110)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉서블 디스플레이(flexible display), 3차원 디스플레이(3D display), 투명 디스플레이 중에서 적어도 하나로 구현될 수 있다.
입력부(120)는 사용자 단말 장치(100)에 대한 사용자 입력을 수신한다.
여기서 입력부(120)는 터치 센서로 구현될 수 있다. 터치 센서는 정전식 또는 감압식으로 구현될 수 있다. 정전식은 디스플레이부(110)의 표면에 코팅된 유전체를 이용하여, 사용자의 신체 일부가 디스플레이부(110) 표면에 터치되었을 때 사용자의 인체로 여기되는 미세 전기를 감지하여 터치 좌표를 산출하는 방식이다. 감압식은 두 개의 전극 판을 포함하여, 사용자가 화면을 터치하였을 경우, 터치된 지점의 상하 판이 접촉되어 전류가 흐르게 되는 것을 감지하여 터치 좌표를 산출하는 방식이다. 이상과 같이 터치 센서는 다양한 형태로 구현될 수 있다. 이에 따라 입력부(120)는 사용자의 터치 입력이 수신되면, 터치된 지점에 대응하는 전기 신호를 제어부(140)로 전달하고, 제어부(140)는 전기 신호가 전달된 좌표를 이용하여, 터치 지점을 인식할 수 있다. 한편, 도 1을 설명함에 있어서, 디스플레이부(110), 입력부(120)는 별개의 구성으로 설명하였으나, 입력부(120)가 터치 센서로 구현되는 경우, 디스플레이부(110), 입력부(120)를 결합하여 터치 디스플레이 스크린으로 구현될 수 있다.
또한 입력부(120)는 근접 센서로 구현될 수 있다. 근접 센서는 디스플레이부(110) 표면에 직접 접촉되지 않고 접근하는 모션을 감지하기 위한 센서이다. 근접 센서는 고주파 자계를 형성하여, 물체 접근 시에 변화되는 자계특성에 의해 유도되는 전류를 감지하는 고주파 발진 형, 자석을 이용하는 자기 형, 대상체의 접근으로 인해 변화되는 정전 용량을 감지하는 정전 용량 형과 같은 다양한 형태의 센서로 구현될 수 있다. 이에 따라 입력부(120)는 접근하는 모션에 따른 사용자 입력이 수신되면, 사용자 입력에 대응하는 전기 신호를 제어부(140)로 전달하고, 제어부(140)는 전달된 전기 신호를 이용하여 근접 모션에 따른 사용자 입력을 인식할 수 있다.
또한 입력부(120)는 마이크로폰으로 구현될 수 있다. 마이크로폰은 사용자가 발화(utterance)한 음성을 입력받는다. 음성 입력 인식부(112)는 입력된 음성 신호를 전기 신호로 변환하여 제어부(140)로 전달한다. 이 경우 제어부(140)는 전달된 전기 신호를 이용하여 음성 입력에 따른 사용자 입력을 인식할 수 있다.
구체적으로 제어부(140)는 입력된 음성 신호 내에서 사용자가 발화한 음성의 시작과 끝을 검출하여 음성 구간을 판단할 수 있다. 제어부(140)는 입력된 음성 신호의 에너지를 계산하고, 계산된 에너지에 따라 음성 신호의 에너지 레벨을 분류하여, 동적 프로그래밍을 통해 음성 구간을 검출할 수 있다. 제어부(140)은 검출된 음성 구간 내의 음성 신호에서 음향 모델(Acoustic Model)을 기초로 음성의 최소 단위인 음소를 검출하여 음소 데이터를 생성할 수 있다. 제어부(140)은 생성된 음소 데이터에 HMM(Hidden Markov Model) 확률 모델을 적용하여 텍스트 정보를 생성할 수 있다. 이에 따라, 제어부(140)는 전달된 전기 신호를 이용하여 음성 입력에 따른 사용자 입력을 인식할 수 있다.
또한 입력부(120)는 모션 센서로 구현될 수 있다. 여기서 모션 센서는 가속도 센서, 지자기 센서 및 자이로 센서 중 적어도 하나를 포함하여 구현될 수 있다. 이에 따라 입력부(120)는 사용자 단말 장치(100)를 3축 방향으로 회전시키는 또는 기울이는 사용자 입력 등이 수신되면, 사용자 조작에 대응하는 전기 신호를 제어부(140)로 전달하고, 제어부(140)는 전달된 전기 신호를 이용하여 근접 모션에 따른 사용자 입력을 인식할 수 있다.
또한 입력부(120)는 압력 센서로 구현될 수 있다. 여기서 압력 센서는 압력의 크기에 대응되는 전기 신호를 출력하는 압전 필름(piezo film)을 포함할 수 있다. 이에 따라 입력부(120)는 사용자의 터치 입력이 수신되면, 터치된 지점에 가해지는 압력의 크기를 감지하여 압력의 크기에 대응하는 전기 신호를 제어부(140)로 전달하고, 제어부(140)는 전기 신호를 이용하여 압력의 크기를 인식할 수 있다.
만약, 터치 센서가 감압식 터치 센서로 구현된 경우, 그 감압식 터치 센서가 압력 센서의 역할도 함께 할 수도 있다.
또한 입력부(120)는 마우스, 키보드, 리모컨 등과 같은 입력 장치를 디스플레이부(110)와 같은 표시장치와 결합하여 구현될 수도 있다. 이 경우 제어부(140)는 입력 장치를 통하여 수신된 사용자 입력을 이용하여 이에 대응하는 기능을 수행할 수 있다.
또한 입력부(120)는 사용자의 동공의 움직임에 따른 사용자 입력, 사용자의 뇌파에 따른 사용자 입력 등을 입력받을 수 있다.
여기서 입력부(120)는 사용자 입력을 수신하는 상술한 구성 중 적어도 하나를 포함하여 구성될 수 있다.
통신 인터페이스부(130)는 사용자 단말 장치(100)를 외부 기기와 연결하는 기능을 수행한다. 특히 통신 인터페이스부(130)는 표시된 그래픽 오브젝트에 대응하는 어플리케이션을 사용자 단말 장치(100)와 연동되는 외부 기기에 적용하기 위한 메뉴가 입력부(110)를 통하여 선택되면, 외부 기기를 제어하기 위한 제어 신호를 외부 기기에 전송할 수 있다.
여기서 외부 기기는 사용자 단말 장치(100)과 연동되는 디지털 TV, 노트북 컴퓨터, 태블릿 컴퓨터, 데스크탑 컴퓨터, 휴대폰, 스마트 폰 등과 같은 다양한 장치로 구현될 수 있다.
통신 인터페이스부(130)는 사용자 단말 장치(100)를 외부 기기와 연결하기 위하여 형성되며, 근거리 통신망(LAN : Local Area Network) 및 인터넷망을 통해 무선 또는 유선방식으로 접속되는 형태, USB(Universal Serial Bus)포트를 통하여 접속되는 형태, 3G, 4G와 같은 이동 통신망을 통해 접속되는 형태, Blue Tooth, NFC(Near Field Communication, RFID(Radio Frequency Identification), Zigbee등과 같은 근거리 무선 통신방식을 통해 접속되는 형태가 가능하다.
제어부(140)는 사용자 단말 장치(100)의 전반적인 동작을 제어한다. 구체적으로 제어부(140)는 디스플레이부(110), 입력부(120), 통신 인터페이스부(130)의 전부 또는 일부를 제어할 수 있다.
특히 제어부(140)는 표시된 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력이 입력부(120)를 통하여 수신되면, 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하도록 디스플레이부(110)를 제어할 수 있다.
여기서 제1 사용자 입력은 선택할 그래픽 오브젝트를 터치하고 유지하는 사용자의 터치 앤드 홀드(touch and hold) 입력일 수 있다.
또한 제1 사용자 입력은 선택할 그래픽 오브젝트에 대응하는 명칭을 발화하는 사용자의 음성 입력일 수 있다. 예를 들어, 선택할 그래픽 오브젝트에 대응하는 어플리케이션의 이름이 "전화"인 경우, 음성 입력은 사용자가 발화한 "전화 빠른실행" 음성 입력일 수 있다.
또한 제1 사용자 입력은 선택할 그래픽 오브젝트를 두 개의 손가락으로 멀티 터치한 후, 두 개의 손가락을 양쪽으로 벌리는 입력일 수 있다.
또한 제1 사용자 입력은 선택할 그래픽 오브젝트를 터치하면서 사용자 단말 장치(100)를 특정 방향으로 기울이거나, 특정 방향으로 회전시키는 등의 모션 입력일 수 있다.
또한 제1 사용자 입력은 선택할 그래픽 오브젝트를 기 설정된 압력 이상으로 터치하는 입력일 수 있다.
다만 이에 한정되는 것은 아니고, 사용자 단말 장치(100)에 포함된 입력부(120)의 구현 방법에 따라서 사용자의 근접 모션에 따른 입력, 동공의 움직임 따른 입력, 입력 장치를 통항 입력 등 다양한 방식으로 수행될 수 있다.
상술한 제1 사용자 입력이 입력부(120)를 통하여 수신되면, 제어부(140)는 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하도록 디스플레이부(110)를 제어할 수 있다.
여기서 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 것은, 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경하여 표시하는 것일 수 있다.
선택된 그래픽 오브젝트의 크기 변경은 선택된 그래픽 오브젝트의 크기가 커지거나 작아지는 동작일 수 있다.
선택된 그래픽 오브젝트의 위치 변경은 선택된 그래픽 오브젝트의 원래 위치와 관계없이 표시된 화면 기 설정된 위치로 이동하는 동작일 수 있다.
선택된 그래픽 오브젝트의 색깔 변경은 선택된 그래픽 오브젝트의 원래 색깔과 다른 색깔로 변경하는 동작일 수 있다.
한편, 선택된 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경함으로써, 선택된 그래픽 오브젝트가 현재 표시된 위치를 기준으로 떨리도록 표시하거나, 또한, 선택된 그래픽 오브젝트가 디스플레이부(110)의 정면 방향으로 튀어나오거나 디스플레이부(110)의 후면 방향으로 들어가는 효과를 부여하여 입체감을 변경하여 표시할 수 있다.
또한 제어부(140)는 변경하여 표시된 그래픽 오브젝트의 근처에 그래픽 오브젝트에 관련된 메뉴를 표시하도록 디스플레이부(110)를 제어할 수 있다.
선택된 그래픽 오브젝트에 관련된 메뉴는 텍스트 형태, 또는 아이콘의 형태로 제공될 수 있다.
여기서 선택된 그래픽 오브젝트에 관련된 메뉴는 선택된 그래픽 오브젝트에서 제공하는 특정 기능에 관한 기능 메뉴, 선택된 그래픽 오브젝트의 옵션을 설정하기 위한 설정 메뉴 중 적어도 하나를 포함할 수 있다.
만약, 선택된 그래픽 오브젝트가 지도 어플리케이션에 대응하는 그래픽 오브젝트인 경우, 기능 메뉴는 지도 검색 메뉴, 길 찾기 메뉴, 주변 검색 메뉴, 외부 기기와 연동하는 메뉴 등을 포함할 수 있다. 이 경우, 외부 기기와 연동하는 메뉴는 위치 공유 메뉴, 라우팅 정보 공유 메뉴 등을 포함할 수 있다.
만약, 선택된 그래픽 오브젝트가 음악 어플리케이션에 대응하는 그래픽 오브젝트인 경우, 기능 메뉴는 Favorite List 메뉴, Artist 메뉴, Album 메뉴, 외부 기기와 연동하는 메뉴 등을 포함할 수 있다. 이 경우, 외부 기기와 연동하는 메뉴는 메일 또는 SNS 등을 이용한 음악 공유 메뉴, AllShare 메뉴 등을 포함할 수 있다.
만약, 선택된 그래픽 오브젝트가 게임 어플리케이션에 대응하는 그래픽 오브젝트인 경우, 기능 메뉴는 Setep 메뉴, 1인용/2인용 설정 메뉴, New game 메뉴, 외부 기기와 연동하는 메뉴 등을 포함할 수 있다. 이 경우, 외부 기기와 연동하는 메뉴는 게임을 할 대상을 설정하는 메뉴 등을 포함할 수 있다.
또한 여기서, 설정 메뉴는 삭제 메뉴, 그래픽 오브젝트 이동 메뉴, 설치 메뉴, 업데이트 메뉴, 통신 수단 선택 메뉴, 연동 서비스 선택 메뉴 등을 포함할 수 있다. 통신 수단 선택 메뉴는 하위 메뉴로 Wi-Fi, BT , 3G, 4G 등을 포함할 수 있다. 연동 서비스 선택 메뉴는 하위 메뉴로 SNS(Social Network Service), 메일, 클라우드 등을 포함할 수 있다.
상술한 바와 같이 본 발명의 일 실시 예에 따른 사용자 단말 장치(100)는 제1 사용자 입력이 수신되면, 선택된 그래픽 오브젝트에 관련된 메뉴를 표시함으로써, 쉽게 메뉴를 선택할 수 있다. 특히 선택된 그래픽 오브젝트에 관련된 기능 메뉴를 표시함으로써, 선택된 그래픽 오브젝트에 대응하는 어플리케이션에서 제공하는 특정 기능을 즉시 실행할 수 있다.
한편, 기능 메뉴 및 설정 메뉴의 표시는 사용자 단말 장치(100)의 회전 상태 또는 기울기 상태에 따라 달라질 수 있다. 즉 사용자 단말 장치(100)가 가로 모드로 회전 또는 기울어진 경우, 기능 메뉴 및 설정 메뉴는 가로 모드에서 사용자가 보기 쉽게 표시될 수 있다. 또한 사용자 단말 장치(100)가 세로 모드로 회전 또는 기울어진 경우, 기능 메뉴 및 설정 메뉴는 세로 모드에서 사용자가 보기 쉽게 표시될 수 있다.
또한, 기능 메뉴 및 설정 메뉴는 디스플레이부(110)의 특정 영역에 상호 겹쳐지지 않도록 배치될 수 있다. 예를 들어, 기능 메뉴는 선택된 그래픽 오브젝트의 상부, 하부, 좌측 또는 우측에 배치될 수 있으며, 설정 메뉴는 선택된 그래픽 오브젝트의 하부, 상부, 우측 또는 좌측에 배치될 수 있다. 다만, 이에 한정되는 것은 아니고 메뉴의 배치 위치는 사용자 단말 장치(100)의 설정 상태에 따라 변경될 수 있다.
또한 기능 메뉴 및 설정 메뉴는 선택된 그래픽 오브젝트의 특성에 따라 디스플레이부(110)에 표시되는 위치가 변경될 수 있다. 예를 들어, 그래픽 오브젝트가 어플리케이션인지 또는 이미지인지 여부에 따라 기능 메뉴 및 설정 메뉴의 표시 위치가 변경될 수 있다.
한편, 제어부(140)는 제1 사용자 입력에 따라 그래픽 오브젝트가 선택되면, 선택된 그래픽 오브젝트의 근처에 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)를 표시하도록 디스플레이부(110)를 제어할 수 있다.
여기서 선택된 그래픽 오브젝트의 회전 가능한 방향을 나타내는 GUI는 제1 방향을 지시하는 화살표 GUI, 제2 방향을 나타내는 화살표 GUI를 포함할 수 있다. 또한 화살표 GUI는 선택된 그래픽 오브젝트의 주위의 일정 영역에 표시될 수 있다. 여기서 제1 및 제2 방향은 좌측, 우측, 상부, 하부와 같은 선택된 그래픽 오브젝트의 회전 가능한 방향일 수 있다.
상술한 바와 같이 본 발명의 일 실시 예에 따른 사용자 단말 장치(100)는 제1 사용자 입력에 기초하여 선택된 그래픽 오브젝트의 그래픽 요소 중 적어도 하나를 변경하여 표시함으로써, 그래픽 오브젝트가 선택되었음을 쉽게 알 수 있다.
한편, 여기서 선택된 그래픽 오브젝트의 그래픽 요소 중 적어도 하나를 변경하여 표시하는 것은 선택적인 사항으로 사용자 단말 장치(100)의 설정 상태에 따라서는 표시가 변경되지 않을 수 있다. 또한, 선택된 그래픽 오브젝트의 그래픽 요소 중 적어도 하나를 변경하여 표시하는 것은 그래픽 오브젝트와 관련된 메뉴 표시와 동시에, 그래픽 오브젝트과 관련된 메뉴 표시의 전에, 그래픽 오브젝트과 관련된 메뉴 표시 후에 표시될 수 있다.
한편, 제어부(140)는 제1 사용자 입력에 따라 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다.
구체적으로 제어부(140)는 제1 사용자 입력이 그래픽 오브젝트 내의 제1 영역에서 수신되면, 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시한 후, 또는 표시의 변경 없이 즉시 회전 가능한 상태로 설정할 수 있다. 여기서 제1 영역은 바람직하게는 그래픽 오브젝트의 꼭지점 영역일 수 있다. 이에 따라 사용자는 제1 사용자 입력의 위치를 변경하지 않고, 선택된 그래픽 오브젝트의 상단 또는 하단 꼭지점을 회전 방향으로 회전시킴으로써, 선택된 그래픽 오브젝트를 회전시키기 위한 제2 사용자 입력을 즉시 수행할 수 있다. 이 경우, 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소의 변경은, 크기 변경 및 색깔 변경 중 적어도 하나만을 포함할 수 있다. 만약, 선택된 그래픽 오브젝트의 크기의 변경인 경우, 상기 크기 변경은 제1 사용자 입력 위치에서 선택된 그래픽 오브젝트의 꼭지점은 고정된 상태에서의 크기 변경일 수 있다.
또는 제어부(140)는 제1 사용자 입력이 그래픽 오브젝트 내의 제2 영역에서 수신되면, 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시한 후, 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다. 여기서 제2 영역은 바람직하게는 선택된 그래픽 오브젝트의 꼭지점이 아닌 영역일 수 있다. 이 경우, 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소의 변경은, 위치 변경 및 크기 변경, 색깔 변경 중 적어도 하나를 포함할 수 있다.
즉 제1 사용자 입력이 그래픽 오브젝트 내의 제2 영역에서 수신되면, 선택된 그래픽 오브젝트의 꼭지점이 제2 영역으로 이동한 후에, 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다. 예를 들어, 사용자가 특정 그래픽 오브젝트의 가운데 부분을 터치하면, 제어부(140)는 그래픽 오브젝트의 꼭지점이 사용자의 터치 영역으로 이동하도록 제어할 수 있으며, 이 경우, 그래픽 오브젝트의 꼭지점이 사용자의 터치 영역에 위치하면 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다.
또는 제1 사용자 입력이 그래픽 오브젝트 내의 제2 영역에서 수신되면, 선택된 그래픽 오브젝트를 화면의 기 설정된 위치로 이동 및 확대한 후에, 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다.
한편, 여기서 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 것은 선택적인 사항으로 사용자 단말 장치(100)의 설정 상태에 따라서는, 선택된 그래픽 오브젝트가 회전 가능한 상태로 설정되지 않을 수 있다. 또한, 회전 가능한 상태로의 설정은 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소가 변경하여 표시된 후, 또는 표시의 변경 없이 회전 가능한 상태로 설정될 수 있다.
또한 제어부(140)는 표시된 메뉴를 선택하기 위한 제2 사용자 입력이 입력부(120)를 통하여 수신되면, 표시된 메뉴를 선택할 수 있다.
여기서 제2 사용자 입력은, 표시된 메뉴를 선택하기 위한 선택된 그래픽 오브젝트를 제1 방향 또는 제2 방향으로 회전시키는 회전 입력일 수 있다. 이 경우, 선택된 그래픽 오브젝트의 회전 입력은 선택된 그래픽 오브젝트의 상단 또는 하단 꼭지점을 회전 방향으로 드래그(drag)하는 입력 또는 릴리즈(Release)후 드래그하는 입력일 수 있다. 여기서 드래그하는 입력은 제1 사용자 입력이 터치 입력인 경우, 터치 입력에 의하여 선택된 그래픽 오브젝트의 상단 또는 하단 꼭지점을 회전 방향으로 드래그하는 입력일 수 있다. 또한, 릴리즈후 드래그하는 입력은 제1 사용자 입력이 터치 입력인 경우, 터치 입력을 제거한 후에, 선택된 그래픽 오브젝트의 상단 또는 하단 꼭지점을 회전 방향으로 드래그하는 입력일 수 있다.
이에 따라 회전 입력이 입력부(120)를 통하여 수신되면, 제어부(140)는 회전 입력에 따라 표시된 메뉴를 선택할 수 있다.
이하에서는 설명의 편의를 위하여 제1 방향은 좌측 방향이고, 제2 방향은 우측 방향이며, 제1 메뉴는 선택된 그래픽 오브젝트의 좌측 방향에 배치된 메뉴, 제2 메뉴는 선택된 그래픽 오브젝트의 우측 방향에 배치된 메뉴임을 예로 설명하기로 한다. 여기서 제1 메뉴는 기능 메뉴 또는 설정 메뉴일 수 있으며, 제2 메뉴는 설정 메뉴 또는 기능 메뉴일 수 있다. 또한 제1 및 제2 메뉴는 복수 개의 메뉴를 포함할 수 있다.
구체적으로 제1 및 제2 메뉴가 표시된 상태에서, 사용자가 선택된 그래픽 오브젝트의 상단 꼭지점을 좌측 방향으로 회전시키면, 제1 메뉴에서 최상단의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 상단 꼭지점을 좌측 방향으로 회전시키면, 제1 메뉴에서 최상단 밑의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 상단 꼭지점을 우측 방향으로 회전시키면, 제1 메뉴에서 최상단의 메뉴가 선택될 수 있다.
만약 제1 및 제2 메뉴가 표시된 상태에서, 사용자가 선택된 그래픽 오브젝트의 상단 꼭지점을 우측 방향으로 회전시키면, 제2 메뉴에서 최상단의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 상단 꼭지점을 우측 방향으로 회전시키면, 제2 메뉴에서 최상단 밑의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 상단 꼭지점을 좌측 방향으로 회전시키면, 제2 메뉴에서 최상단의 메뉴가 선택될 수 있다.
만약 제1 및 제2 메뉴가 표시된 상태에서, 사용자가 선택된 그래픽 오브젝트의 하단 꼭지점을 우측 방향으로 회전시키면, 제1 메뉴에서 최상단의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 하단 꼭지점을 우측 방향으로 회전시키면, 제1 메뉴에서 최상단 밑의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 어플리케이션 그래픽 오브젝트의 하단 꼭지점을 좌측 방향으로 회전시키면, 제1 메뉴에서 최상단의 메뉴가 선택될 수 있다.
만약 제1 및 제2 메뉴가 표시된 상태에서, 사용자가 선택된 어플리케이션 그래픽 오브젝트의 하단 꼭지점을 좌측 방향으로 회전시키면, 제2 메뉴에서 최상단의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 하단 꼭지점을 좌측 방향으로 회전시키면, 제2 메뉴에서 최상단 밑의 메뉴가 선택될 수 있다. 그 후 사용자가 선택된 그래픽 오브젝트의 하단 꼭지점을 우측 방향으로 회전시키면, 제2 메뉴에서 최상단의 메뉴가 선택될 수 있다.
여기서 상단 꼭지점는 좌측 또는 우측 상단 꼭지점일 수 있으며, 하단 꼭지점는 좌측 또는 우측 하단 꼭지점일 수 있다. 또한 회전된 그래픽 오브젝트은 특정 메뉴가 선택되면 회전 전의 상태로 복구될 수 있다.
즉 상술한 바와 같이, 선택되는 메뉴는 상단 또는 하단 꼭지점의 회전 방향을 기준으로 선택될 수 있다. 다만, 이에 한정되는 것은 아니고, 사용자 단말 장치(100)의 설정에 따라서는, 하단 꼭지점의 회전은 그 회전 방향에 따라 제1 또는 제2 메뉴의 최하단의 메뉴부터 선택되도록 설정할 수 있다.
또한 표시된 메뉴는 상술한 바와 같이, 불연속적으로 선택될 수 있고, 사용자 단말 장치(100)의 설정에 따라서는, 표시된 메뉴는 연속적으로 선택될 수 있다. 예를 들어, 사용자가 선택된 그래픽 오브젝트의 좌측 상단 기 설정된 회전 정도 이상으로 회전하는 상태를 유지하는 경우, 제1 메뉴의 최상단의 메뉴부터 최하단의 메뉴까지 하이라이트가 이동하면서, 연속적으로 선택될 수 있다. 또한 사용자가 선택된 그래픽 오브젝트의 우측 상단 기 설정된 회전 정도 이상으로 회전하는 상태를 유지하는 경우, 제2 메뉴의 최상단의 메뉴부터 최하단의 메뉴까지 하이라이트가 이동하면서, 연속적으로 선택될 수 있다.
또한 상술한 바에 따르면, 상단 또는 하단 꼭지점을 회전시킴으로써, 메뉴를 선택하는 것에 대해서 설명하였으나, 이에 한정되는 것은 아니고, 메뉴는 선택된 그래픽 오브젝트의 주위에 배치된 화살표 GUI의 터치 입력에 따라 선택된 그래픽 오브젝트를 회전시킴으로써 선택될 수 있다. 구체적으로 화살표 GUI는 좌측 방향으로의 회전을 나타내는 화살표 GUI 및 우측 방향으로의 회전을 나타내는 화살표 GUI를 포함할 수 있고, 이 경우, 선택된 그래픽 오브젝트의 회전 방향에 대응되는 화살표 GUI를 선택함으로써, 메뉴를 선택할 수 있다.
또한 제1 및 제2 메뉴는 선택된 그래픽 오브젝트에서 회전된 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택될 수 있다.
구체적으로 제1 및 제2 메뉴가 표시된 상태에서, 사용자가 선택된 그래픽 오브젝트의 좌측 상단 꼭지점을 좌측 방향으로 회전시키면, 제1 메뉴에서 좌측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴가 선택될 수 있다.
만약 사용자가 선택된 그래픽 오브젝트의 우측 상단 꼭지점을 우측 방향으로 회전시키면, 제2 메뉴에서 우측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴가 선택될 수 있다.
여기서 메뉴 선택의 기준이 되는 꼭지점는 사용자가 최초 선택한 꼭지점이 될 수 있다. 예를 들어, 사용자가 그래픽 오브젝트를 회전시키기 위하여 처음에 좌측 상단 꼭지점을 회전시키는 경우, 좌측 상단 꼭지점이 메뉴 선택의 기준이 되는 지칭 방향의 꼭지점이 될 수 있다. 다만, 이에 한정되는 것은 아니고 설정 상태에 따라 기준이 되는 꼭지점는 변경될 수 있다.
또한 상술한 바에 따르면, 상단 또는 하단 꼭지점을 회전시킴으로써, 메뉴를 선택하는 것에 대해서 설명하였으나, 이에 한정되는 것은 아니고, 메뉴는 선택된 그래픽 오브젝트의 주위에 배치된 GUI의 터치 입력에 따라 선택된 그래픽 오브젝트를 회전시킴으로써 선택될 수 있다. 구체적으로 화살표 GUI는 좌측 방향으로의 회전을 나타내는 화살표 GUI 및 우측 방향으로의 회전을 나타내는 화살표 GUI를 포함할 수 있고, 선택된 그래픽 오브젝트의 회전 방향에 대응되는 화살표 GUI의 터치를 유지하면 선택된 그래픽 오브젝트의 상단 또는 하단 꼭지점는 좌측 또는 우측 방향으로 회전을 유지할 수 있다. 이 경우, 메뉴는 선택된 그래픽 오브젝트에서 회전된 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택될 수 있다.
또한 선택된 메뉴에는 하이라이트가 표시될 수 있다. 또한 상술한 회전 입력에 따라 메뉴가 선택된 상태에서 회전 입력을 풀면(release)(즉 손가락의 터치 상태를 없애면) 선택된 메뉴는 실행될 수 있다.
상술한 바와 같이 본 발명의 일 실시 예에 따른 사용자 단말 장치(100)는 회전 입력을 통하여 메뉴를 쉽게 선택할 수 있다.
또는 제2 사용자 입력은, 표시된 메뉴를 선택하기 위한 표시된 메뉴를 터치하는 터치 입력일 수 있다. 이 경우 터치 입력에 의하여 선택된 메뉴는 터치와 동시에 실행될 수 있다.
또는 제2 사용자 입력은, 표시된 메뉴를 선택하기 위한 사용자 단말 장치(100)와 연동되는 입력 장치를 통한 입력일 수 있다. 여기서 입력 장치는 마우스, 키보드, 리모컨 등일 수 있다. 이 경우 입력 장치를 통해 선택된 메뉴는 기 설정된 실행 버튼이 선택되는 경우 실행될 수 있다.
설명의 편의를 위하여, 사용자 단말 장치(100)가 디지털 TV이고, 입력장치가 리모컨인 경우를 예로 설명하기로 한다.
여기서 리모컨은 blue tooth, IR 방식등 다양한 방식으로 디지털 TV와 연동되어 있을 수 있다. 이에 따라 사용자는 리모컨에 배치된 방향 키를 이용하여 디지털 TV에 표시되어 있는 그래픽 오브젝트 중에서 특정 그래픽 오브젝트를 선택할 수 있다. 또는 사용자는 리모컨을 마우스와 같이 움직일 수 있다. 이 경우 디지털 TV는 리모컨의 위치에 대응하는 포인터를 화면상에 표시할 수 있다. 이에 따라 사용자는 디지털 TV에 표시되어 있는 포인터를 선택하려는 그래픽 오브젝트에 위치시킨 후, 리모컨에 배치된 선택키를 입력함으로써, 그래픽 오브젝트를 선택할 수 있다. 상술한 바와 같이, 그래픽 오브젝트가 선택되는 경우, 선택된 그래픽 오브젝트의 주위에는 메뉴가 표시될 수 있다.
사용자는 표시된 메뉴를 선택하기 위하여 리모컨에 배치된 상,하,좌,우의 방향키를 이용하여 표시된 메뉴 중 특정 메뉴를 선택할 수 있다.
또한 사용자는 표시된 메뉴를 선택하기 위하여 표시된 메뉴 중 선택하기 위한 메뉴에 포인터를 위치시킨 후, 리모컨에 배치된 선택키를 입력함으로써, 메뉴를 선택할 수 있다.
다만, 이에 한정되는 것은 아니고, 사용자 단말 장치(100)에 포함된 입력부(120)의 구현 방법에 따라서 제2 사용자 입력은 근접 모션에 따른 사용자 입력, 음성 입력에 따른 사용자 입력 등 다양한 방식을 사용하여 수행될 수 있다.
한편, 사용자 단말 장치(100)의 설정 상태에 따라서, 표시된 메뉴의 선택을 위한 제2 사용자 입력은 상술한 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소가 변경하여 표시된 후 및 상술한 선택된 그래픽 오브젝트가 회전 가능한 상태로 설정된 후 중 적어도 하나의 단계가 수행된 이후에 수행될 수 있다.
또한 제어부(140)는 제3 사용자 입력이 입력부(120)를 통하여 수신되면, 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트가 선택되기 전 상태로 돌아가도록 디스플레이부(110)를 제어할 수 있다.
여기서 제3 사용자 입력은 선택된 그래픽 오브젝트가 표시된 화면 영역 외의 영역을 터치하는 사용자 입력일 수 있다.
또한 제3 사용자 입력은 선택된 그래픽 오브젝트에 대응하는 명칭을 발화하는 사용자의 음성 입력일 수 있다. 예를 들어, 종료할 그래픽 오브젝트에 대응하는 어플리케이션의 이름이 "전화"인 경우, 음성 입력은 사용자가 발화한 "전화 종료" 음성 입력일 수 있다.
또한 제3 사용자 입력은 선택된 그래픽 오브젝트를 두 개의 손가락으로 멀티 터치한 후, 두 개의 손가락을 오므리는 입력일 수 있다.
또한 제3 사용자 입력은 선택된 그래픽 오브젝트를 터치하면서 사용자 단말 장치(100)를 특정 방향으로 기울이거나, 특정 방향으로 회전시키는 등의 모션 입력일 수 있다.
또한 제3 사용자 입력은 선택된 그래픽 오브젝트를 기 설정된 압력 이상으로 터치하는 입력일 수 있다.
다만 이에 한정되는 것은 아니고, 사용자 단말 장치(100)에 포함된 입력부(120)의 구현 방법에 따라서 사용자의 근접 모션에 따른 입력, 동공의 움직임 따른 입력 등 다양한 방식으로 수행될 수 있다.
이 경우 제어부(140)는 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트가 선택되기 전 상태로 돌아가도록 디스플레이부(110)를 제어할 수 있다. 예를 들어, 선택되기 전 상태인 홈 화면으로 돌아가도록 디스플레이부(110)를 제어할 수 있다.
다만, 이에 한정되는 것은 아니고, 사용자 단말 장치(100)의 설정 상태에 따라서는, 제3 사용자 입력이 입력되면, 그래픽 오브젝트가 선택된 상태 또는 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소가 변경하여 표시된 상태 또는 선택된 그래픽 오브젝트가 회전 가능한 상태로 설정된 상태로 돌아갈 수 있다.
또한 제어부(140)는 선택된 그래픽 오브젝트의 회전에 따라 선택되는 메뉴가 변경되었음을 인식시키는 피드백을 제공할 수 있다.
여기서 피드백은 사운드로 제공될 수 있다. 이 경우, 제어부(140)는 선택된 그래픽 오브젝트를 회전시킬 때, 조그 버튼을 돌리는 것과 같은 사운드를 제공할 수 있고, 또한 선택된 그래픽 오브젝트의 회전에 따라 선택되는 메뉴가 변경되면, 특정 사운드를 제공할 수 있다.
또한 피드백은 진동으로 제공될 수 있다. 이 경우, 제어부(140)는 선택된 그래픽 오브젝트의 회전에 따라 선택되는 메뉴가 변경되면, 진동을 제공할 수 있다.
또한 피드백은 GUI 로 제공될 수 있다. 이 경우, 제어부(140)는 선택된 그래픽 오브젝트에 하이라이트를 표시하거나, 구별되는 색상 등을 표시할 수 있다. 또한 제어부(140)는 선택된 그래픽 오브젝트의 회전에 따라 선택되는 메뉴가 변경되면, 하이라이트, 구별되는 색상들을 변경된 메뉴에 표시할 수 있다.
이에 따라 사용자는 회전에 따라 선택되는 메뉴가 변경되었음을 쉽게 알 수 있다.
또한 제어부(140)는 입력부(120)를 통하여 선택된 그래픽 오브젝트에 대응하는 어플리케이션을 사용자 단말 장치(100)와 연동되는 외부 기기에 적용하기 위한 메뉴가 선택되면, 외부 기기를 제어할 수 있다. 구체적으로 제어부(140)는 사용자 단말 장치(100)에서 선택된 그래픽 오브젝트에 대응하는 어플리케이션이 외부 기기에 기 설치되어 있는 경우, 외부 기기가 기 설치된 어플리케이션을 실행하도록 하기 위한 제어 신호를 생성할 수 있다. 또한 제어부(140)는 사용자 단말 장치에서 선택된 그래픽 오브젝트에 대응하는 어플리케이션이 외부 기기에 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 하기 위한 제어 신호를 생성할 수 있다. 여기서 생성된 제어 신호를 통신 인터페이스부(130)를 통하여 외부 기기에 전송될 수 있다. 이 경우, 외부 기기는 전달된 제어 신호에 따라 기 설치된 어플리케이션을 실행하거나, 또는 어플리케이션을 자동으로 설치할 수 있다.
상술한 본 발명의 일 실시 예에 따른 외부 기기 제어 방법에 따르면, 사용자 단말 장치에 설치된 어플리케이션이 사용자 단말 장치와 연동된 외부기기에 설치되어있는지 여부에 따라, 외부 기기의 동작을 제어함으로써, 사용자 편의성을 도모하할 수 있다.
도 2는 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 것을 나타내는 도면이다. 도 2(a)와 같이, 복수 개의 그래픽 오브젝트를 표시한 상태에서 적어도 하나의 그래픽 오브젝트가 제1 사용자 입력에 기초하여 선택되면, 도 2(b)와 같이 선택된 그래픽 오브젝트의 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)가 표시될 수 있다. 또는 도 2(c)와 같이, 선택된 그래픽 오브젝트의 흔들림이 표시될 수 있다. 또는 도 2(d)와 같이, 선택된 그래픽 오브젝트의 크기가 커져서 표시될 수 있다. 또는 도 2(e)와 같이, 선택된 그래픽 오브젝트의 입체감이 변화되어 표시될 수 있다.
도 3은 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 것을 나타내는 도면이다. 도 3(a)와 같이, 그래픽 오브젝트가 선택된 상태에서 선택된 그래픽 오브젝트의 가운데 영역이 터치되면, 도 3(b)와 같이 선택된 그래픽 오브젝트의 꼭지점이 터치된 영역으로 이동할 수 있다. 즉 사용자가 특정 그래픽 오브젝트의 가운데 부분을 터치하면, 제어부(140)는 그래픽 오브젝트의 꼭지점이 사용자의 터치 영역으로 이동하도록 제어할 수 있으며, 이 경우, 그래픽 오브젝트의 꼭지점이 사용자의 터치 영역에 위치하면 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정할 수 있다. 또는 도 3(c)와 같이 선택된 그래픽 오브젝트가 화면의 기 설정된 위치로 이동 및 확대될 수 있다.
이 경우, 선택된 그래픽 오브젝트를 회전 가능한 상태로 설정될 수 있다. 이에 따라 사용자가 선택된 그래픽 오브젝트를 회전 시키는 동작을 수행할 경우, 선택된 그래픽 오브젝트은 회전 동작에 대응되는 방향으로 회전할 수 있다.
도 4는 선택된 그래픽 오브젝트에 관련된 메뉴를 표시하는 방법을 나타내는 도면이다. 도 4(a)와 같이, 복수 개의 그래픽 오브젝트를 표시한 상태에서 적어도 하나의 그래픽 오브젝트가 제1 사용자 입력에 기초하여 선택되면, 도 4(b)와 같이, 선택된 그래픽 오브젝트가 가운데 영역으로 이동 및 확대되면서, 제1 및 제2 메뉴(401,402)가 표시될 수 있다.
또는 도 4(c)와 같이, 선택된 그래픽 오브젝트가 가운데 영역으로 이동 및 확대되고, 회전 가능한 방향을 나타내는 회전 GUI를 주위에 표시하면서, 제1 및 제2 메뉴(401,402)가 표시될 수 있다.
또는 도 4(d)와 같이, 별도의 과정없이 선택된 그래픽 오브젝트의 그래픽 오브젝트의 상단 또는 하단에 제1 및 제2 메뉴(401,402)가 표시될 수 있다.
또는 도 4(e)와 같이, 선택된 그래픽 오브젝트의 주위에 회전 가능한 방향을 나타내는 회전 GUI를 표시하면서, 선택된 그래픽 오브젝트의 상단 또는 하단에 제1 및 제2 메뉴(401, 402)가 표시될 수 있다.
여기서 표시되는 메뉴(401,402)의 위치는 설정에 따라 상술한 도면과 다르게 위치할 수 있다. 예를 들어 UI 창은 디스플레이부(110)의 표시가능한 영역 어디에도 위치할 수 있다. 또한 표시된 메뉴(401,402)은 적어도 하나의 메뉴를 포함할 수 있다. 또한 표시된 메뉴(401,402)는 상술한 바와 같이 두 개가 표시될 수 있으나, 그 개수에 한정되는 것은 아니다.
도 5 내지 8은 표시된 메뉴를 선택하는 방법을 나타내는 도면이다.
도 5(a)와 같이, 좌측 및 우측 메뉴(501,502)가 표시된 상태에서, 사용자가 이동 및 확대된 그래픽 오브젝트의 상단 꼭지점을 좌측 방향으로 회전시키면, 도 5(b)와 같이 좌측 메뉴(501)에서 메뉴 1이 선택될 수 있다. 이 상태에서 사용자가 도 5(b)와 같이 이동 및 확대된 그래픽 오브젝트의 상단 꼭지점을 좌측 방향으로 회전시키면, 도 5(c)와 같이 좌측 메뉴(501)에서 메뉴 2가 선택될 수 있다. 이 상태에서 사용자가 도 5(c)와 같이 이동 및 확대 그래픽 오브젝트의 상단 꼭지점을 우측 방향으로 회전시키면, 도 5(d)와 같이 좌측메뉴(501)에서 메뉴 1이 선택될 수 있다.
또한 경우에 따라서는 도 6과 같이 회전 가능한 방향을 나타내는 회전 GUI를 선택함으로써, 메뉴를 선택할 수 있다.
즉 도 6(a)와 같이, 회전 가능한 방향을 나타내는 회전 GUI, 좌측 및 우측 메뉴(601,602)가 표시된 상태에서, 우측 방향으로 회전을 나타내는 회전 GUI를 선택하면, 이동 및 확대된 그래픽 오브젝트가 우측 방향으로 회전되면서, 도 6(b)와 같이 우측 메뉴(602)에서 메뉴 4가 선택될 수 있다. 이 상태에서 사용자가 도 6(b)와 같이 우측 방향으로 회전을 나타내는 회전 GUI를 선택하면, 이동 및 확대된 그래픽 오브젝트가 우측 방향으로 회전되면서, 도 6(c)와 같이 우측 메뉴(602)에서 메뉴 5가 선택될 수 있다. 이 상태에서 사용자가 도 6(c)와 같이 좌측 방향으로 회전을 나타내는 회전 GUI를 선택하면, 이동 및 확대된 그래픽 오브젝트가 좌측 방향으로 회전되면서, 도 6(d)와 같이 우측 메뉴(602)에서 메뉴 4가 선택될 수 있다.
또한 경우에 따라서는 도 7과 같이 이동 및 확대된 그래픽 오브젝트에서 회전된 상단 꼭지점이 지칭하는 방향에 표시된 메뉴가 선택될 수 있다.
즉 도 7(a)와 같이, 좌측 및 우측 메뉴(701,702)가 표시된 상태에서, 사용자가 이동 및 확대된 그래픽 오브젝트의 상단 꼭지점을 우측 방향으로 회전시키면, 도 7(b)와 같이 우측 메뉴(702)에서 우측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴 4가 선택될 수 있다. 이 상태에서 사용자가 도 7(b)와 같이 이동 및 확대된 그래픽 오브젝트의 상단 꼭지점을 도 7(a)보다 더 우측 방향으로 회전시키면, 도 7(c)와 같이 우측 메뉴(702)에서 우측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴 5가 선택될 수 있다. 이 상태에서 사용자가 도 7(c)와 같이 이동 및 확대된 그래픽 오브젝트의 상단 꼭지점을 도 7(b)보다 더 우측 방향으로 회전시키면, 도 7(d)와 같이 우측 메뉴(702)에서 우측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴 6이 선택될 수 있다.
또한 경우에 따라서는 도 8과 같이 회전 가능한 방향을 나타내는 회전 GUI를 이용함으로써, 이동 및 확대된 그래픽 오브젝트에서 회전된 상단 꼭지점이 지칭하는 방향에 메뉴가 선택될 수 있다.
즉 도 8(a)와 같이, 회전 가능한 방향을 나타내는 회전 GUI, 좌측 및 우측 메뉴(801,802)가 표시된 상태에서, 사용자가 좌측 방향으로 회전을 나타내는 회전 GUI를 선택하면, 이동 및 확대된 그래픽 오브젝트가 좌측 방향으로 회전되면서, 도 8(b)와 같이 좌측 메뉴(801)에서 이동 및 확대된 그래픽 오브젝트의 좌측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴 1이 선택될 수 있다. 이 상태에서 도 8(b)와 같이, 사용자가 좌측 방향으로 회전을 나타내는 회전 GUI가 선택된 상태를 유지하면, 이동 및 확대된 그래픽 오브젝트가 도 8(b)보다 더 좌측 방향으로 회전되면서, 도 8(c)와 같이 좌측 메뉴(801)에서 이동 및 확대된 그래픽 오브젝트의 좌측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴 2가 선택될 수 있다. 이 상태에서 도 8(c)와 같이, 사용자가 좌측 방향으로 회전을 나타내는 회전 GUI가 선택된 상태를 유지하면, 이동 및 확대된 그래픽 오브젝트가 도 8(c)보다 더 좌측 방향으로 회전되면서, 도 8(d)와 같이 좌측 메뉴(801)에서 이동 및 확대된 그래픽 오브젝트의 좌측 상단 꼭지점이 지칭하는 방향에 표시된 메뉴 3이 선택될 수 있다.
여기서 메뉴 선택의 기준이 되는 꼭지점는 사용자가 최초 선택한 꼭지점이 될 수 있다.
도 9는 사용자 단말 장치에 설치된 어플리케이션이 사용자 단말 장치와 연동된 외부기기에 설치되어있는지 여부에 따라, 외부 기기의 동작을 제어하는 방법을 나타내는 도면이다
도 9(a)와 같이, 메뉴에서 선택된 그래픽 오브젝트에 대응하는 어플리케이션을 사용자 단말 장치와 연동되는 외부 기기에 적용하기 위한 명령(Apply To TV)(901)을 입력받을 수 있다.
이 경우 제어부(140)는 입력된 명령에 따라, 외부 기기를 제어할 수 있다. 구체적으로 제어부(140)는 사용자 단말 장치에서 선택된 적어도 하나의 그래픽 오브젝트에 대응하는 어플리케이션이 외부 기기에 기 설치되어 있는 경우, 외부 기기가 기 설치된 어플리케이션을 실행하도록 하기 위한 제어 신호를 생성할 수 있다. 또한 제어부(140)는 사용자 단말 장치에서 선택된 적어도 하나의 그래픽 오브젝트에 대응하는 어플리케이션이 외부 기기에 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 하기 위한 제어 신호를 생성할 수 있다. 여기서 생성된 제어 신호를 통신 인터페이스부(130)를 통하여 외부 기기에 전송될 수 있다. 이 경우, 외부 기기는 도 9(b)와 같이 전달된 제어 신호에 따라 기 설치된 어플리케이션을 실행하거나, 또는 어플리케이션(902)을 자동으로 설치할 수 있다.
여기서 어플리케이션을 자동으로 설치하기 위하여 사용자 단말 장치(100)는 설치하기 위한 어플리케이션에 대한 APK(Application PacKage)파일을 포함하는 제어 신호를 생성할 수 있다. 그리고 생성된 제어 신호를 통신 인터페이스부(130)를 통하여 전송할 수 있다.
이 경우 외부 기기는 제어 신호에 포함된 APK(Application PacKage)파일을 이용하여 어플리케이션을 자동으로 설치할 수 있다. 다만, 외부 기기는 수신된 APK 파일이 해상도 등의 문제로 외부 기기에 적용될 수 없는 파일인 경우, 어플리케이션 서버로부터 수신된 APK 파일에 대응하는 어플리케이션 중 외부 기기에 적용될 수 있는 어플리케이션을 자동으로 다운받아 설치할 수 있다.
또는 어플리케이션을 자동으로 설치하기 위하여 사용자 단말 장치(100)는 설치하기 위한 어플리케이션에 대한 정보를 포함하는 제어 신호를 생성할 수 있다. 그리고 생성된 제어 신호를 통신 인터페이스부(130)를 통하여 전송할 수 있다. 여기서 어플리케이션에 대한 정보는 외부기기에 적용될 어플리케이션이 무슨 어플리케이션인지에 대한 정보일 수 있다.
이 경우 외부 기기는 어플리케이션 서버로부터 수신된 어플리케이션에 대한 정보에 대응하는 어플리케이션을 자동으로 다운받아 설치할 수 있다.
또한 제어부(140)는 상술한 동작에 의하여 외부 기기에서 어플리케이션이 실행되는 경우, 사용자 단말 장치(100)의 동작을 제어할 수 있다. 예를 들어, 외부 기기에서 동영상 어플리케이션이 실행되어 동영상이 재생되는 경우, 제어부(140)는 동영상 재생을 조작하기 위한 리모컨 UI를 표시하도록 디스플레이부(130)를 제어할 수 있다. 또한, 외부 기기에서 게임 어플리케이션이 실행되어 게임이 실행되는 경우, 제어부(140)는 게임을 컨트롤 하기 위한 UI를 표시하도록 디스플레이부(130)를 제어할 수 있다.
도 10은 본 발명의 일 실시 예에 따른 사용자 단말 장치의 제어 방법을 나타내는 흐름도이다. 도 10을 참조하면, 먼저 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력을 수신한다(S1001).
그리고 제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시한다(S1002). 여기서 그래픽 요소의 변경은 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경하는 것일 수 있다.
그리고, 표시된 그래픽 오브젝트 근처에 그래픽 오브젝트에 관련된 메뉴를 표시한다(S1003). 여기서 선택된 그래픽 오브젝트에 관련된 메뉴는 선택된 그래픽 오브젝트에서 제공하는 특정 기능에 관한 기능 메뉴, 선택된 그래픽 오브젝트의 옵션을 설정하기 위한 설정 메뉴 중 적어도 하나를 포함할 수 있다.
그리고, 표시된 메뉴를 선택하기 위한 제2 사용자 입력을 수신한다(S1004).
여기서 제2 사용자 입력은 선택된 그래픽 오브젝트를 제1 방향 또는 제2 방향으로 회전시키는 회전 입력이며, 이 경우, 표시된 메뉴는, 상기 회전 입력에 따라 선택될 수 있다. 또한 표시된 메뉴는 상기 회전 입력에 따라, 회전되는 선택된 그래픽 오브젝트의 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택될 수 있다.
또한 제2 사용자 입력은 표시된 메뉴를 터치하는 터치 입력일 수 있다. 이 경우, 표시된 메뉴는, 상기 터치 입력에 따라 선택될 수 있다.
한편, 상술한 사용자 단말 장치의 제어 방법은, 제1 사용자 입력에 따라 그래픽 오브젝트가 선택되면, 선택된 그래픽 오브젝트의 근처에 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)를 표시하는 단계를 더 포함할 수 있다.
만약, 제2 사용자 입력이, 표시된 그래픽 오브젝트의 회전 방향에 대응되는 GUI에 대한 터치 입력인 경우, 표시된 메뉴는, 터치 입력에 따라 선택될 수 있다.
또한 상술한 사용자 단말 장치의 제어 방법은, 변경하여 표시된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 단계를 더 포함할 수 있다.
또한 상술한 사용자 단말 장치의 제어 방법은, 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 전 상태로 돌아가기 위한 제3 사용자 입력을 수신하는 단계를 더 포함할 수 있다.
또한 상술한 사용자 단말 장치의 제어 방법은, 선택된 그래픽 오브젝트의 회전에 따라 선택되는 메뉴가 변경되었음을 인식시키는 피드백을 제공하는 단계를 더 포함할 수 있다.
또한 상술한 사용자 단말 장치의 제어 방법은, 선택된 그래픽 오브젝트에 대응하는 어플리케이션을 사용자 단말 장치와 연동되는 외부 기기에 적용하기 위한 메뉴를 제2 사용자 입력에 따라 선택받는 단계 및 외부 기기에 선택된 그래픽 오브젝트에 대응하는 어플리케이션이 기 설치되어 있는 경우, 기 설치된 어플리케이션을 실행하고, 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 외부 기기를 제어하는 단계를 더 포함할 수 있다.
도 11 내지 13은 본 발명의 다른 실시 예에 따른 사용자 단말 장치의 제어 방법을 나타내는 도면이다.
도 11(a)와 같이, 복수 개의 그래픽 오브젝트를 표시한 상태에서 적어도 하나의 그래픽 오브젝트가 제1 사용자 입력에 기초하여 선택되면, 도 11(b)와 같이 선택된 그래픽 오브젝트가 가운데로 이동 및 확대되어 회전 가능한 상태가 될 수 있다. 이 경우 사용자가 좌측 방향으로 선택된 그래픽 오브젝트를 회전시키면, 도 11(c)와 같이 선택된 그래픽 오브젝트의 좌측 방향에 제1 메뉴(1101)가 표시될 수 있다. 또한 이 상태에서 도 11(c)와 같이 사용자가 우측 방향으로 선택된 그래픽 오브젝트를 회전시키면, 도 11(d)와 같이 선택된 그래픽 오브젝트의 우측 방향에 제2 메뉴(1102)가 표시될 수 있다.
또한 경우에 따라서는 도 12와 같이 회전 가능한 방향을 나타내는 회전 GUI를 선택함으로써, 선택된 어플리케이션 그래픽 오브젝트를 회전시킬 수 있다. 즉 도 12(a)와 같이, 복수 개의 그래픽 오브젝트를 표시한 상태에서 적어도 하나의 그래픽 오브젝트가 선택되면, 도 12(b)와 같이 선택된 그래픽 오브젝트가 가운데로 이동 및 확대되어 회전 가능한 상태가 될 수 있다. 이 경우 회전 가능한 상태가 된 그래픽 오브젝트의 주위에는 회전 가능한 방향을 나타내는 회전 GUI가 표시될 수 있다. 이에 따라사 사용자가 도 12(b)와 같이 좌측 방향으로 회전을 나타내는 회전 GUI를 선택하면, 도 12(c)와 같이 선택된 그래픽 오브젝트의 좌측 방향에 제1 메뉴(1201)가 표시될 수 있다. 또한 이 상태에서 도 12(c)와 같이 사용자가 우측 방향으로 회전을 나타내는 회전 GUI를 선택하면, 도 12(d)와 같이 선택된 그래픽 오브젝트의 우측 방향에 제2 메뉴(1202)가 표시될 수 있다.
또한 경우에 따라서는 도 13과 같이 선택된 어플리케이션 그래픽 오브젝트의 이동 및 확대 없이 선택된 그래픽 오브젝트를 회전시킴으로서 메뉴를 표시할 수 있다. 즉 도 13(a)와 같이, 복수 개의 그래픽 오브젝트를 표시한 상태에서 적어도 하나의 그래픽 오브젝트가 선택되고 좌측 방향으로 회전되면, 도 13(b)와 같이 선택된 그래픽 오브젝트의 상단에 제1 메뉴(1301)가 표시될 수 있다. 또한 이 상태에서 도 13(b)와 같이 사용자가 선택된 그래픽 오브젝트를 우측 방향으로 회전시키면, 도 13(c)와 같이 선택된 그래픽 오브젝트의 하단에 제2 메뉴(1302)가 표시될 수 있다.
또한 경우에 따라서는 복수 개의 그래픽 오브젝트를 표시한 상태에서 적어도 하나의 그래픽 오브젝트가 선택되면 도 13(d)와 같이, 회전 가능한 방향을 나타내는 회전 GUI를 선택된 적어도 하나의 그래픽 오브젝트의 주위에 표시할 수 있다. 이 경우 좌측 방향으로 회전을 나타내는 회전 GUI가 선택되면, 도 13(e)와 같이, 선택된 그래픽 오브젝트의 상단에 제1 메뉴(1301)가 표시될 수 있다. 또한 이 상태에서 도 13(e)와 같이 우측 방향으로 회전을 나타내는 회전 GUI가 선택되면, 도 13(f)와 같이, 선택된 그래픽 오브젝트의 하단에 제2 메뉴(1302)가 표시될 수 있다.
한편, 도 11 내지 13에 의하여 메뉴가 표시되면, 표시된 메뉴는 수신된 제2 사용자 입력에 따라 선택될 수 있다. 이에 대해서는 상술하였는 바, 구체적인 설명을 생략하기로 한다.
한편, 상술한 본 발명의 다양한 실시 예들에 따른 사용자 단말 장치의 제어 방법은 프로그램 코드로 구현되어 다양한 비일시적 판독 가능 매체(non-transitory computer readable medium)에 저장된 상태로 각 서버 또는 기기들에 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 사용자 단말 장치 110 : 디스플레이부
120 : 입력부 130 : 통신 인터페이스부
140 : 제어부

Claims (25)

  1. 사용자 단말 장치의 제어 방법에 있어서,
    상기 사용자 단말 장치의 터치 디스플레이 스크린에 표시된 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력을 상기 터치 디스플레이 스크린을 통해 수신하는 단계;
    상기 제1 사용자 입력에 따라 선택된 그래픽 오브젝트를 구성하는 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계;
    상기 표시된 그래픽 오브젝트 근처에 상기 그래픽 오브젝트에 관련된 메뉴를 표시하는 단계; 및
    상기 표시된 메뉴를 선택하기 위한 제2 사용자 입력을 상기 터치 디스플레이 스크린을 통해 수신하는 단계;를 포함하는 것을 특징으로 하는 제어 방법.
  2. 제1항에 있어서,
    상기 선택된 그래픽 오브젝트에 관련된 메뉴는,
    상기 선택된 그래픽 오브젝트에서 제공하는 특정 기능에 관한 기능 메뉴, 상기 선택된 그래픽 오브젝트의 옵션을 설정하기 위한 설정 메뉴 중 적어도 하나를 포함하는 것을 특징으로 하는 제어 방법.
  3. 제1항에 있어서,
    제1 사용자 입력에 따라 선택된 그래픽 오브젝트의 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계는,
    상기 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경하여 표시하는 것을 특징으로 하는 제어 방법.
  4. 제1항에 있어서,
    상기 제1 사용자 입력에 따라 그래픽 오브젝트가 선택되면, 상기 선택된 그래픽 오브젝트의 근처에 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  5. 제1항에 있어서,
    상기 변경하여 표시된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  6. 제1항에 있어서,
    상기 제2 사용자 입력은, 상기 표시된 그래픽 오브젝트를 제1 방향 또는 제2 방향으로 회전시키는 회전 입력이며,
    상기 표시된 메뉴는, 상기 회전 입력에 따라 선택되는 것을 특징으로 하는 제어 방법.
  7. 제6항에 있어서,
    상기 표시된 메뉴는, 상기 회전 입력에 따라 회전되는 상기 표시된 그래픽 오브젝트의 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택되는 것을 특징으로 하는 제어 방법.
  8. 제1항에 있어서,
    상기 제2 사용자 입력은, 상기 표시된 메뉴를 터치하는 터치 입력이며,
    상기 표시된 메뉴는, 상기 터치 입력에 따라 선택되는 것을 특징으로 하는 제어 방법.
  9. 제4항에 있어서,
    상기 제2 사용자 입력은, 상기 표시된 그래픽 오브젝트의 회전 방향에 대응되는 GUI에 대한 터치 입력이며,
    상기 표시된 메뉴는, 상기 터치 입력에 따라 선택되는 것을 특징으로 하는 제어 방법.
  10. 제1항에 있어서,
    복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트가 선택되기 전 상태로 돌아가기 위한 제3 사용자 입력을 수신하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  11. 제6항에 있어서,
    상기 표시된 그래픽 오브젝트의 회전에 따라 상기 선택되는 메뉴가 변경되었음을 인식시키는 피드백을 제공하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  12. 제1항에 있어서,
    표시된 그래픽 오브젝트에 대응하는 어플리케이션을 상기 사용자 단말 장치와 연동되는 외부 기기에 적용하기 위한 메뉴를 상기 제2 사용자 입력에 따라 선택받는 단계;
    상기 외부 기기에 상기 표시된 그래픽 오브젝트에 대응하는 어플리케이션이 기 설치되어 있는 경우, 기 설치된 어플리케이션을 실행하고, 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 상기 외부 기기를 제어하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  13. 사용자 단말 장치에 있어서,
    복수의 그래픽 오브젝트를 표시하는 사용자 입력을 수신하는 터치 디스플레이 스크린; 및
    상기 표시된 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력이 상기 터치 디스플레이 스크린을 통하여 수신되면, 상기 제1 사용자 입력에 따라 선택된 그래픽 오브젝트를 구성하는 적어도 하나의 그래픽 요소를 변경하여 표시하고, 상기 표시된 그래픽 오브젝트 근처에 상기 그래픽 오브젝트에 관련된 메뉴를 표시하도록 상기 터치 디스플레이 스크린을 제어하고, 제2 사용자 입력이 상기 터치 디스플레이 스크린을 통하여 수신되면, 상기 표시된 메뉴를 선택하는 제어부;를 포함하는 사용자 단말 장치.
  14. 제13항에 있어서,
    상기 선택된 그래픽 오브젝트에 관련된 메뉴는,
    상기 선택된 그래픽 오브젝트에서 제공하는 특정 기능에 관한 기능 메뉴, 상기 선택된 그래픽 오브젝트의 옵션을 설정하기 위한 설정 메뉴 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 단말 장치.
  15. 제13항에 있어서,
    상기 제어부는, 상기 그래픽 요소에 대응하는 상기 그래픽 오브젝트의 크기, 위치, 색깔 중 적어도 하나를 변경하여 표시하는 것을 특징으로 하는 사용자 단말 장치.
  16. 제13항에 있어서,
    상기 제어부는,
    상기 제1 사용자 입력에 따라 그래픽 오브젝트가 선택되면, 상기 선택된 그래픽 오브젝트의 근처에 회전 가능한 방향을 나타내는 GUI(Graphical User Interface)를 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 사용자 단말 장치.
  17. 제13항에 있어서,
    상기 제어부는,
    상기 변경하여 표시된 그래픽 오브젝트를 회전 가능한 상태로 설정하는 것을 특징으로 하는 사용자 단말 장치.
  18. 제13항에 있어서,
    상기 제2 사용자 입력은, 상기 표시된 그래픽 오브젝트를 제1 방향 또는 제2 방향으로 회전시키는 회전 입력이며,
    상기 표시된 메뉴는, 상기 회전 입력에 따라 선택되는 것을 특징으로 하는 사용자 단말 장치.
  19. 제18항에 있어서,
    상기 표시된 메뉴는, 상기 회전 입력에 따라 회전되는 상기 표시된 그래픽 오브젝트의 상단 또는 하단 꼭지점이 지칭하는 방향에 따라 선택되는 것을 특징으로 하는 사용자 단말 장치.
  20. 제13항에 있어서,
    상기 제2 사용자 입력은, 상기 표시된 메뉴를 터치하는 터치 입력이며,
    상기 표시된 메뉴는, 상기 터치 입력에 따라 선택되는 것을 특징으로 하는 사용자 단말 장치.
  21. 제16항에 있어서,
    상기 제2 사용자 입력이, 상기 표시된 그래픽 오브젝트의 회전 방향에 대응되는 화살표 GUI의 터치 입력인 경우,
    상기 표시된 메뉴는, 상기 터치 입력에 따라 선택되는 것을 특징으로 하는 사용자 단말 장치.
  22. 제13항에 있어서,
    상기 제어부는,
    상기 제3 사용자 입력이 상기 터치 디스플레이 스크린을 통하여 수신되면, 상기 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트가 선택되기 전 상태로 돌아가도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 사용자 단말 장치.
  23. 제18항에 있어서,
    상기 제어부는,
    상기 선택된 그래픽 오브젝트의 회전에 따라 상기 선택되는 메뉴가 변경되었음을 인식시키는 피드백을 제공하는 것을 특징으로 하는 사용자 단말 장치.
  24. 제13항에 있어서,
    상기 사용자 단말 장치를 외부 기기와 연결하는 통신 인터페이스부;를 더 포함하며,
    표시된 그래픽 오브젝트에 대응하는 어플리케이션을 상기 사용자 단말 장치와 연동되는 외부 기기에 적용하기 위한 메뉴가 상기 제2 사용자 입력에 기초하여 선택되면,
    상기 제어부는,
    상기 외부 기기에 상기 표시된 그래픽 오브젝트에 대응하는 어플리케이션이 기 설치되어 있는 경우, 기 설치된 어플리케이션을 실행하고, 설치되어 있지 않은 경우, 어플리케이션을 자동으로 설치하도록 하기 위한 제어 신호를 상기 통신 인터페이스부를 통하여 상기 외부 기기에 전송하여 상기 외부 기기를 제어하는 것을 특징으로 하는 사용자 단말 장치.
  25. 사용자 단말 장치의 제어 방법을 실행하기 위한 프로그램 코드가 기록된 기록 매체에 있어서,
    상기 제어 방법은,
    상기 사용자 단말 장치의 터치 디스플레이 스크린에 표시된 복수의 그래픽 오브젝트 중 적어도 하나의 그래픽 오브젝트를 선택하기 위한 제1 사용자 입력 상기 터치 디스플레이 스크린을 통해 수신하는 단계;
    상기 제1 사용자 입력에 따라 선택된 그래픽 오브젝트를 구성하는 적어도 하나의 그래픽 요소를 변경하여 표시하는 단계;
    상기 표시된 그래픽 오브젝트 근처에 상기 그래픽 오브젝트에 관련된 메뉴를 표시하는 단계; 및
    상기 표시된 메뉴를 선택하기 위한 제2 사용자 입력을 상기 터치 디스플레이 스크린을 통해 수신하는 단계;를 포함하는 것을 특징으로 하는 기록 매체.
KR1020120080998A 2012-07-25 2012-07-25 사용자 단말 장치 및 그의 제어 방법 KR102073601B1 (ko)

Priority Applications (8)

Application Number Priority Date Filing Date Title
KR1020120080998A KR102073601B1 (ko) 2012-07-25 2012-07-25 사용자 단말 장치 및 그의 제어 방법
US13/646,284 US9182900B2 (en) 2012-07-25 2012-10-05 User terminal apparatus and control method thereof
TW102126037A TWI598803B (zh) 2012-07-25 2013-07-22 使用者終端裝置及其控制方法
EP13177845.8A EP2690544B1 (en) 2012-07-25 2013-07-24 User terminal apparatus and control method thereof
PCT/KR2013/006661 WO2014017841A1 (en) 2012-07-25 2013-07-25 User terminal apparatus and control method thereof cross-reference to related applications
JP2013154484A JP6265642B2 (ja) 2012-07-25 2013-07-25 ユーザ端末装置及びその制御方法
CN201310316976.5A CN103577050B (zh) 2012-07-25 2013-07-25 用户终端装置及其控制方法
US14/887,494 US20160041709A1 (en) 2012-07-25 2015-10-20 User terminal apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120080998A KR102073601B1 (ko) 2012-07-25 2012-07-25 사용자 단말 장치 및 그의 제어 방법

Publications (2)

Publication Number Publication Date
KR20140013547A true KR20140013547A (ko) 2014-02-05
KR102073601B1 KR102073601B1 (ko) 2020-02-06

Family

ID=48874859

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120080998A KR102073601B1 (ko) 2012-07-25 2012-07-25 사용자 단말 장치 및 그의 제어 방법

Country Status (7)

Country Link
US (2) US9182900B2 (ko)
EP (1) EP2690544B1 (ko)
JP (1) JP6265642B2 (ko)
KR (1) KR102073601B1 (ko)
CN (1) CN103577050B (ko)
TW (1) TWI598803B (ko)
WO (1) WO2014017841A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150095538A (ko) * 2014-02-13 2015-08-21 삼성전자주식회사 사용자 단말 장치 및 이의 디스플레이 방법
US10712918B2 (en) 2014-02-13 2020-07-14 Samsung Electronics Co., Ltd. User terminal device and displaying method thereof
US10747416B2 (en) 2014-02-13 2020-08-18 Samsung Electronics Co., Ltd. User terminal device and method for displaying thereof
US10866714B2 (en) 2014-02-13 2020-12-15 Samsung Electronics Co., Ltd. User terminal device and method for displaying thereof

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
US9202297B1 (en) * 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US10001898B1 (en) 2011-07-12 2018-06-19 Domo, Inc. Automated provisioning of relational information for a summary data visualization
TW201520877A (zh) * 2013-11-29 2015-06-01 Acer Inc 手勢操作方法及游標的呼叫方法
US20150253974A1 (en) * 2014-03-07 2015-09-10 Sony Corporation Control of large screen display using wireless portable computer interfacing with display controller
KR102329124B1 (ko) * 2015-01-05 2021-11-19 삼성전자주식회사 영상 표시 장치 및 영상 표시 방법
US20160239191A1 (en) * 2015-02-13 2016-08-18 Microsoft Technology Licensing, Llc Manipulation of content items
GB2535734B (en) * 2015-02-25 2020-04-22 Lone Worker Solutions Ltd Virtual perimeter system and method
KR102254699B1 (ko) * 2015-12-29 2021-05-24 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
JP6903935B2 (ja) * 2017-02-17 2021-07-14 ソニーグループ株式会社 情報処理システム、情報処理方法、およびプログラム
KR102086578B1 (ko) * 2019-04-09 2020-05-29 김효준 명령 메뉴 출력 방법
CN114594886B (zh) * 2022-04-24 2023-03-21 深圳传音控股股份有限公司 操作方法、智能终端及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070119945A (ko) * 2006-06-16 2007-12-21 삼성전자주식회사 사용자 인터페이스를 위한 장치 및 방법
KR20100059698A (ko) * 2008-11-25 2010-06-04 삼성전자주식회사 유저인터페이스 제공 장치, 제공방법, 및 이를 기록한 컴퓨터 판독 가능한 기록매체
KR20100133243A (ko) * 2009-06-11 2010-12-21 엘지전자 주식회사 휴대 단말기 및 그 동작방법

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11126132A (ja) * 1997-10-22 1999-05-11 Ricoh Co Ltd 入力装置
GB9920327D0 (en) * 1999-08-28 1999-11-03 Koninkl Philips Electronics Nv Menu display for a graphical user interface
US7036091B1 (en) * 2001-09-24 2006-04-25 Digeo, Inc. Concentric curvilinear menus for a graphical user interface
JP4226307B2 (ja) * 2002-11-22 2009-02-18 カシオソフト株式会社 情報入力装置及びプログラム
US7895536B2 (en) * 2003-01-08 2011-02-22 Autodesk, Inc. Layer editor system for a pen-based computer
JP4360496B2 (ja) * 2004-12-28 2009-11-11 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 表示方法、携帯端末装置及び表示プログラム
KR100742730B1 (ko) * 2005-12-29 2007-07-25 엘지전자 주식회사 이동 통신 단말기의 메뉴 실행 방법 및 그 이동 통신단말기
US7676763B2 (en) * 2006-02-21 2010-03-09 Sap Ag Method and system for providing an outwardly expandable radial menu
KR100827230B1 (ko) * 2006-06-09 2008-05-07 삼성전자주식회사 메뉴 아이콘을 제공하는 휴대용 장치 및 그 방법
KR100774927B1 (ko) 2006-09-27 2007-11-09 엘지전자 주식회사 이동통신 단말기, 메뉴 및 아이템 선택방법
US8619038B2 (en) * 2007-09-04 2013-12-31 Apple Inc. Editing interface
KR100929236B1 (ko) * 2007-09-18 2009-12-01 엘지전자 주식회사 터치스크린을 구비하는 휴대 단말기 및 그 동작 제어방법
US20090101415A1 (en) * 2007-10-19 2009-04-23 Nokia Corporation Apparatus, method, computer program and user interface for enabling user input
US8525802B2 (en) * 2008-03-31 2013-09-03 Lg Electronics Inc. Portable terminal capable of sensing proximity touch and method for providing graphic user interface using the same
JP2009276833A (ja) * 2008-05-12 2009-11-26 Kenwood Corp 表示装置および表示方法
WO2010014853A1 (en) 2008-07-30 2010-02-04 Michael Zimmerman Data-oriented user interface for mobile device
KR101592296B1 (ko) 2008-09-03 2016-02-05 엘지전자 주식회사 이동 단말기 및 그의 객체 선택과 실행 방법
US8191011B2 (en) * 2008-09-18 2012-05-29 Microsoft Corporation Motion activated content control for media system
US8466879B2 (en) 2008-10-26 2013-06-18 Microsoft Corporation Multi-touch manipulation of application objects
EP2237140B1 (en) * 2009-03-31 2018-12-26 Lg Electronics Inc. Mobile terminal and controlling method thereof
KR101597553B1 (ko) 2009-05-25 2016-02-25 엘지전자 주식회사 기능 실행 방법 및 그 장치
JP2011028560A (ja) * 2009-07-27 2011-02-10 Sony Corp 情報処理装置、表示方法及び表示プログラム
KR101615984B1 (ko) * 2009-12-10 2016-05-12 엘지전자 주식회사 이동 단말기 및 그 제어방법
EP2431870B1 (en) * 2010-09-17 2019-11-27 LG Electronics Inc. Mobile terminal and control method thereof
CN102829792B (zh) * 2011-06-16 2016-09-28 环达电脑(上海)有限公司 导航装置及其控制方法
US20130201215A1 (en) * 2012-02-03 2013-08-08 John A. MARTELLARO Accessing applications in a mobile augmented reality environment

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070119945A (ko) * 2006-06-16 2007-12-21 삼성전자주식회사 사용자 인터페이스를 위한 장치 및 방법
KR20100059698A (ko) * 2008-11-25 2010-06-04 삼성전자주식회사 유저인터페이스 제공 장치, 제공방법, 및 이를 기록한 컴퓨터 판독 가능한 기록매체
KR20100133243A (ko) * 2009-06-11 2010-12-21 엘지전자 주식회사 휴대 단말기 및 그 동작방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150095538A (ko) * 2014-02-13 2015-08-21 삼성전자주식회사 사용자 단말 장치 및 이의 디스플레이 방법
US10712918B2 (en) 2014-02-13 2020-07-14 Samsung Electronics Co., Ltd. User terminal device and displaying method thereof
US10747416B2 (en) 2014-02-13 2020-08-18 Samsung Electronics Co., Ltd. User terminal device and method for displaying thereof
US10866714B2 (en) 2014-02-13 2020-12-15 Samsung Electronics Co., Ltd. User terminal device and method for displaying thereof

Also Published As

Publication number Publication date
EP2690544B1 (en) 2020-02-12
WO2014017841A1 (en) 2014-01-30
CN103577050B (zh) 2019-01-11
KR102073601B1 (ko) 2020-02-06
EP2690544A2 (en) 2014-01-29
TWI598803B (zh) 2017-09-11
TW201407457A (zh) 2014-02-16
US20140033127A1 (en) 2014-01-30
CN103577050A (zh) 2014-02-12
US20160041709A1 (en) 2016-02-11
JP2014026654A (ja) 2014-02-06
US9182900B2 (en) 2015-11-10
JP6265642B2 (ja) 2018-01-24
EP2690544A3 (en) 2017-10-18

Similar Documents

Publication Publication Date Title
KR102073601B1 (ko) 사용자 단말 장치 및 그의 제어 방법
US11635869B2 (en) Display device and method of controlling the same
US10401964B2 (en) Mobile terminal and method for controlling haptic feedback
CN108139778B (zh) 便携式设备和便携式设备的屏幕显示方法
US9804766B2 (en) Electronic device and method of displaying playlist thereof
US10083617B2 (en) Portable apparatus and screen displaying method thereof
KR102378570B1 (ko) 휴대 장치 및 휴대 장치의 화면 변경방법
US20140210740A1 (en) Portable apparatus having plurality of touch screens and sound output method thereof
US20110231796A1 (en) Methods for navigating a touch screen device in conjunction with gestures
KR20160028338A (ko) 벤디드 디스플레이를 구비한 휴대 단말기의 제어 방법 및 장치
EP3540586A1 (en) Method and apparatus for providing a changed shortcut icon corresponding to a status thereof
KR102143584B1 (ko) 디스플레이 장치 및 그 제어 방법
KR102004858B1 (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
JP2012194842A (ja) 情報処理装置、情報処理方法およびプログラム
KR101559091B1 (ko) 벤디드 디스플레이를 구비한 휴대 단말기의 제어 방법 및 장치
KR20150012396A (ko) 입력 처리 방법 및 그 전자 장치
EP2566142A1 (en) Terminal capable of controlling attribute of application based on motion and method thereof

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right