KR20140010596A - 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말 - Google Patents

터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말 Download PDF

Info

Publication number
KR20140010596A
KR20140010596A KR1020120077021A KR20120077021A KR20140010596A KR 20140010596 A KR20140010596 A KR 20140010596A KR 1020120077021 A KR1020120077021 A KR 1020120077021A KR 20120077021 A KR20120077021 A KR 20120077021A KR 20140010596 A KR20140010596 A KR 20140010596A
Authority
KR
South Korea
Prior art keywords
switching
touch input
terminal
input
folder
Prior art date
Application number
KR1020120077021A
Other languages
English (en)
Other versions
KR101984154B1 (ko
Inventor
김진용
전진영
강지영
김대성
이보영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120077021A priority Critical patent/KR101984154B1/ko
Priority to US13/905,663 priority patent/US20140019910A1/en
Priority to AU2013206192A priority patent/AU2013206192B2/en
Priority to CA2818248A priority patent/CA2818248A1/en
Priority to TW102121397A priority patent/TWI594178B/zh
Priority to RU2013129862/08A priority patent/RU2013129862A/ru
Priority to BR102013016792-4A priority patent/BR102013016792B1/pt
Priority to CN201310297975.0A priority patent/CN103543943B/zh
Priority to JP2013147767A priority patent/JP6230836B2/ja
Priority to EP13176737.8A priority patent/EP2687971A3/en
Publication of KR20140010596A publication Critical patent/KR20140010596A/ko
Priority to US15/868,366 priority patent/US20180136812A1/en
Application granted granted Critical
Publication of KR101984154B1 publication Critical patent/KR101984154B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Abstract

본 발명은 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말에 관한 것으로, 특히 터치 입력이 유지되는 상태에서 제스처 입력이 발생하면 임의의 객체에 대한 스위칭 동작을 수행하도록 하는 단말의 제어 방법 및 그 단말에 관한 것이다.
이에 따른 본 발명은, 터치 입력을 감지하는 단계, 상기 터치 입력에 대응하는 적어도 하나의 객체를 선택하는 단계, 제스처 입력을 감지하는 단계 및 상기 객체를 상기 터치 입력에 대응하여 고정(hold)한 상태에서 스위칭을 수행하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법 및 그 단말에 관한 것이다.

Description

터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말{CONTROL METHOD FOR TERMINAL USING TOUCH AND GESTURE INPUT AND TERMINAL THEREOF}
본 발명은 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말에 관한 것으로, 특히 터치 입력이 유지되는 상태에서 제스처 입력이 발생하면 임의의 객체에 대한 스위칭 동작을 수행하도록 하는 단말의 제어 방법 및 그 단말에 관한 것이다.
스마트 전자 기기가 발전함에 따라, 사용자가 어느 상황에서나 단말을 편리하게 제어할 수 있도록 터치 스크린을 비롯하여 다양한 입력 수단이 개발되었다. 이에 따라, 단말이 터치, 모션, 제스처 입력 등을 정확하게 인식할 수 있도록 하는 연구가 수행되고 있으며, 이러한 기술은 주로 센서를 기반으로 발달해 왔다.
단말이 다양한 방법에 의한 입력을 인지하는 것이 가능해짐에 따라, 더욱 간편한 조작으로 단말을 제어하고자 하는 사용자의 욕구는 증가하고 있다.
그러나, 현재의 단말은 다양한 입력을 감지할 수 있으면서도, 그에 대응하는 단말의 동작 제어가 한정적이어서 입력의 감지 능력을 제대로 활용하지 못하고 있으며, 기기 조작의 편의성을 추구하는 사용자의 욕구를 충분히 만족시키지 못하는 실정이다.
본 발명은 센서를 이용하여 터치 입력 및 제스처 입력을 감지하고, 감지된 입력에 대응하는 동작을 수행하는 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말을 제공한다.
또한, 본 발명은 터치 입력 유지 상태에서 제스처 입력이 발생하면 임의의 객체에 대한 스위칭 동작을 수행하도록 하는 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말을 제공한다.
상기 과제를 해결하기 위한 본 발명에 따른 단말의 제어 방법은, 터치 입력을 감지하는 단계, 상기 터치 입력에 대응하는 적어도 하나의 객체를 선택하는 단계, 제스처 입력을 감지하는 단계, 및 상기 객체를 상기 터치 입력에 대응하여 고정(hold)한 상태에서 스위칭을 수행하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 객체는, 아이콘, 텍스트, 이미지, 파일, 폴더, 웹 브라우저상의 콘텐츠, 웹 주소, 웹 링크 중 적어도 하나를 포함하는 것을 특징으로 한다.
또한, 상기 객체를 선택하는 단계는, 상기 객체를 활성 상태, 확대 또는 축소 상태, 음영 상태 중 적어도 하나의 형태로 표시하는 단계를 더 포함하는 것을 특징으로 한다.
또한, 상기 제스처 입력을 감지하는 단계는, 상기 터치 입력이 유지된 상태에서 상기 제스처 입력을 감지하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 제스처 입력은, 임의의 방향(certain direction)으로 쓸어넘기는(swipe) 제스처 입력인 것을 특징으로 한다.
또한, 상기 스위칭은, 페이지 스위칭, 폴더 스위칭, 탭 스위칭, 애플리케이션 스위칭, 작업 스위칭 중 어느 하나인 것을 특징으로 한다.
또한, 상기 스위칭을 수행하는 단계는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정(hold)하는 단계, 및 적어도 하나의 객체를 포함하는 복수의 페이지로 구성되는 화면 상에서 상기 선택된 객체를 제외한 나머지 객체에 대한 페이지 스위칭을 수행하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 스위칭을 수행하는 단계는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정하는 단계, 및 상기 선택된 객체의 파일 경로를 기초로, 상기 파일 경로의 상위 폴더, 하위 폴더 또는 폴더 목록의 다음 또는 이전 폴더로 이동하는 폴더 스위칭을 수행하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 스위칭을 수행하는 단계는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정하는 단계, 및 복수의 탭으로 구성되는 웹 브라우저의 탭 스위칭을 수행하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 스위칭을 수행하는 단계는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정하는 단계, 및 미리 설정된 목록 또는 현재 구동 중인 목록을 기초로 애플리케이션 또는 작업(task) 스위칭을 수행하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 애플리케이션 또는 작업 스위칭을 수행하는 단계는, 상기 선택된 객체를 상기 애플리케이션 또는 상기 작업에 최적화된 포맷으로 정렬하여 표시하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 터치 입력의 종료(release)를 감지하는 단계, 및 상기 선택된 객체에 대하여, 상기 터치 입력의 종료에 대응하는 동작을 수행하는 단계를 더 포함하는 것을 특징으로 한다.
또한, 상기 터치 입력의 종료에 대응하는 동작은, 상기 객체를 상기 터치 입력에 대응하는 위치에 정렬하는 동작, 상기 선택된 객체의 링크를 웹 브라우저의 탭에서 구동하는 동작, 상기 객체를 애플리케이션 또는 작업 화면상에 붙여넣는 동작 중 어느 하나인 것을 특징으로 한다.
또한 상기 과제를 해결하기 위한 본 발명에 따른 단말은, 터치 입력 및 제스처 입력을 감지하는 입력부, 상기 터치 입력에 대응하는 적어도 하나의 객체를 선택하고, 상기 제스처 입력에 대응하여 상기 객체를 상기 터치 입력에 대응하여 고정(hold)한 상태에서 스위칭을 수행하는 제어부, 및 상기 제어부의 동작에 따른 화면을 표시하는 표시부를 포함하는 것을 특징으로 한다.
또한, 상기 제어부는, 상기 객체를 활성 상태, 확대 또는 축소 상태, 음영 상태 중 적어도 하나의 형태로 표시하도록 상기 표시부를 제어하는 것을 특징으로 한다.
또한, 상기 입력부는, 상기 터치 입력이 유지된 상태에서 상기 제스처 입력을 감지하는 것을 특징으로 한다.
또한, 상기 스위칭은, 페이지 스위칭, 폴더 스위칭, 탭 스위칭, 애플리케이션 스위칭, 작업 스위칭 중 어느 하나인 것을 특징으로 한다.
또한, 상기 제어부는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정(hold)하고, 적어도 하나의 객체를 포함하는 복수의 페이지로 구성되는 화면상에서 상기 선택된 객체를 제외한 나머지 객체에 대한 페이지 스위칭을 수행하는 것을 특징으로 한다.
또한, 상기 제어부는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정하고, 상기 선택된 객체의 파일 경로를 기초로, 상기 파일 경로의 상위 폴더, 하위 폴더 또는 폴더 목록의 다음 또는 이전 폴더로 이동하는 폴더 스위칭을 수행하는 것을 특징으로 한다.
또한, 상기 제어부는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정하고, 복수의 탭으로 구성되는 웹 브라우저의 탭 스위칭을 수행하는 것을 특징으로 한다.
또한, 상기 제어부는, 상기 선택된 객체를 상기 터치 입력에 대응하여 고정하고, 미리 설정된 목록 또는 현재 구동 중인 목록을 기초로 애플리케이션 또는 작업(task) 스위칭을 수행하는 것을 특징으로 한다.
또한, 상기 제어부는, 상기 선택된 객체를 상기 애플리케이션 또는 상기 작업에 최적화된 포맷으로 정렬하여 표시하도록 상기 표시부를 제어하는 것을 특징으로 한다.
또한, 상기 입력부는, 상기 터치 입력의 종료(release)를 감지하고, 상기 제어부는, 상기 선택된 객체에 대하여, 상기 터치 입력의 종료에 대응하는 동작을 수행하는 것을 특징으로 한다.
본 발명에 따른 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말은 터치 입력만으로 처리하기 불편한 동작을 터치 및 제스처 입력이 조합된 새로운 인터페이스를 통해 보다 직관적이고 간편하게 실행할 수 있도록 한다.
도 1은 본 발명에 따른 단말의 제어 방법을 구현하는 단말의 구성을 나타낸 블록도이다.
도 2는 카메라 센서 및 적외선 센서를 구비하는 단말의 일 예를 나타낸 도면이다.
도 3은 본 발명에 따른 단말의 제어 방법을 나타낸 순서도이다.
도 4는 터치 입력의 일 예를 나타낸 도면이다.
도 5는 터치 입력 및 제스처 입력의 일 예를 나타낸 도면이다.
도 6은 페이지 스위칭의 일 예를 나타낸 도면이다.
도 7은 폴더 스위칭의 일 예를 나타낸 도면이다.
도 8은 탭 스위칭의 일 예를 나타낸 도면이다.
도 9는 애플리케이션 또는 작업 스위칭의 일 예를 나타낸 도면이다.
본 발명은 터치 및 제스처 입력을 이용한 단말의 제어를 위해 적용될 수 있다.
또한, 본 발명은 터치 및 제스처 입력을 감지하는 단말로써, 스마트 폰(Smart Phone), 휴대 단말(Portable Terminal), 이동 단말(Mobile Terminal), 개인 정보 단말(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말, 노트북 컴퓨터, 노트 패드(Note Pad), 와이브로(Wibro) 단말, 타블렛 PC(Tablet PC), 스마트 TV, 스마트 냉장고 등의 일반적인 전자 단말뿐만 아니라, 터치 및 제스처 입력을 감지하는 모든 장치를 위하여 적용될 수 있다.
본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명의 사상을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "구성된다." 또는 "포함한다." 등의 용어는 명세서상에 기재된 여러 구성 요소들, 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 한다.
이하, 첨부된 도면을 참조하여 본 발명의 실시 예들을 보다 구체적으로 설명하도록 한다.
도 1은 본 발명에 따른 단말의 제어 방법을 구현하는 단말의 구성을 나타낸 블록도이다.
도 1을 참조하면, 단말(100)은 입력부(110), 제어부(120), 저장부(130) 및 표시부(140)를 포함하여 구성될 수 있다.
입력부(110)는 사용자에 의한 입력에 따라 조작 신호를 생성할 수 있다. 입력부(110)는 터치 센서(111), 근접 센서(112), 전자기 센서(113), 카메라 센서(114) 및 적외선 센서(115)를 포함하여 구성될 수 있다.
터치 센서(111)는 사용자의 터치 입력을 감지할 수 있다. 터치 센서(111)는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다. 터치 센서(111)는 터치 입력을 감지하고, 감지된 터치 신호를 제어부(120)로 전달할 수 있다. 제어부(120)는 터치 신호를 분석하여 터치 신호에 대응하는 동작을 수행할 수 있다. 또한, 감지된 터치 신호에 대응하는 정보가 표시부(140) 상에 표시될 수 있다. 터치 센서(111)는 다양한 입력 수단에 의하여 사용자의 터치 입력에 의한 조작 신호를 입력받을 수 있다. 터치 센서(111)는 사용자의 인체(예를 들어, 손)나 물리적인 도구, 스타일러스 펜(Stylus Pen) 및 스타일러스 펜에 포함될 수 있는 조작 버튼 등에 의하여 조작 신호를 입력받을 수 있다. 구현 방식에 따라 터치 센서(111)는 직접 터치 입력뿐만 아니라, 일정한 거리 내의 근접 입력을 감지할 수도 있다.
근접 센서(112)는 입력부(110)의 검출 면에서 일어나는 물체의 유무, 접근, 움직임, 방향, 속도, 형태 등을 전자계의 힘을 이용하여 기계적 접촉이 없이 검출할 수 있다. 근접 센서(112)는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 중 하나일 수 있다.
전자기 센서(113)는 전자기장의 세기 변화에 따라 터치 또는 근접 입력을 감지할 수 있으며, EMR(Electro Magnetic Resonance) 또는 EMI(Eletro Magnetic Interferenc) 방식의 입력 패드 형태로 구성될 수 있다. 전자기 센서(113)는 자기장을 유도하는 코일을 포함하여 구성될 수 있으며, 전자기 센서(113)에서 발생한 자기장의 에너지 변화를 일으키는 공진 회로가 포함된 물체의 접근을 감지할 수 있다. 전자기 센서(113)는 공진 회로를 포함한 물체로써 스타일러스 펜 등에 의한 입력을 감지할 수 있다. 전자기 센서(113)는 단말(100)에 직접 접촉하는 입력뿐만 아니라 단말(100)에 근접하게 이루어지는 근접 입력 또는 호버링 등을 감지할 수도 있다.
카메라 센서(114)는 CCD(Chage Coupled Devices) 또는 CMOS(complementary metal oxide semiconductor) 소자를 이용하여 렌즈를 통해 들어온 영상(빛)을 인식해 디지털 신호로 바꿀 수 있다. 카메라 센서(114)는 생성된 디지털 신호를 저장부(130)에 임시 또는 영구적으로 저장할 수 있다. 카메라 센서(114)는 인식된 영상 내의 특징점을 검출하고 연속적으로 추적하면서 제스처 입력을 감지할 수 있다. 도 2를 참조하면, 카메라 센서(114)는 단말(100)의 전면 및/또는 후면에 위치하는 렌즈와 겨랍하여 렌즈를 통하여 영상을 인식하고 소자를 통해 영상을 디지털 신호로 변환할 수 있다.
적외선 센서(115)는 IR 센서 또는 LED 센서라고도 하며, 적외선에 해당하는 주파수의 빛을 물체로 발광하는 발광부 및 단말(100)에 근접한 물체(예를 들어 손)로부터 반사된 빛을 수신하는 수광부를 포함하여 구성될 수 있다. 적외선 센서(115)는 발광부에서 발생된 적외선이 물체에 부딪혀 반사된 빛을 수광부에서 수광하여, 반사된 빛의 변화량을 감지함으로써 물체의 움직임 및 물체까지의 거리를 감지할 수 있다. 도 2를 참조하면, 적외선 센서(115)는 단말(100)의 전면 및/또는 후면에 위치하여, 단말(100)의 외부로 적외선을 발광하고, 단말(100)의 근접거리에 위치하는 사용자의 인체(예를 들어 손) 등으로부터 반사된 적외선을 수광할 수 있다.
본 발명의 실시 예에 따르면, 입력부(110)는 센서를 이용하여 터치 입력 및 제스처 입력을 감지할 수 있다. 입력부(110)는 동시 또는 순차적으로 발생하는 터치 입력 및 제스처 입력을 감지할 수 있고, 터치 입력이 유지된 상태에서 제스처 입력을 감지할 수도 있다.
제어부(120)는 단말(100)의 전반적인 동작을 위하여 각 구성 요소를 제어할 수 있다. 예를 들어, 제어부(120)는 입력부(110)를 통해 감지된 입력에 따라 단말(100)의 동작 또는 기능을 제어할 수 있다.
본 발명의 실시 예에 따르면, 제어부(120)는 터치 입력 및 제스처 입력을 기초로 스위칭을 수행할 수 있다. 스위칭은 예를 들어, 페이지 스위칭, 폴더 스위칭, 탭 스위칭, 애플리케이션 스위칭 및 작업 스위칭 중 어느 하나일 수 있다.
제어부(120)의 보다 구체적인 동작은 하기에서 도면을 참조하여 상세히 설명하도록 한다.
저장부(130)는 단말(100)을 위한 프로그램 또는 명령들이 저장될 수 있다. 제어부(120)는 저장부(130)에 저장된 프로그램 또는 명령들을 수행할 수 있다.
저장부(130)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
본 발명의 실시 예에 따르면, 저장부(130)는 적어도 하나의 아이콘, 텍스트, 이미지, 파일, 폴더 또는 이들을 포함하는 콘텐츠, 애플리케이션, 서비스 등을 저장할 수 있다. 또한, 저장부(130)는 웹 브라우저를 구동하기 위한 애플리케이션, 서비스를 저장할 수 있다.
본 발명의 실시 예에 따르면, 저장부(130)는 입력부(110)를 통하여 감지된 입력에 대응하는 동작 정보를 저장할 수 있다. 예를 들어, 저장부(130)는 터치 입력 및 제스처 입력에 대응하는 스위칭 동작에 대한 정보를 저장할 수 있다.
표시부(140)는 단말(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 표시부(150)는 음성 감지, 상황 인지 및 기능 제어에 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시할 수 있다.
표시부(140)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
표시부(140)는 입력부(110)를 구성하는 터치 센서와 상호 레이어 구조를 이루어 터치 스크린으로 동작할 수 있다. 이때, 터치 스크린으로 동작하는 표시부(140)는 입력 장치의 기능을 수행할 수도 있다.
본 발명의 실시 예에 따르면, 표시부(140)는 아이콘, 텍스트, 이미지, 파일 목록, 폴더 목록을 표시할 수 있다. 표시부(140)는 웹 브라우저 및 웹 브라우저에 포함된 콘텐츠, 웹 주소, 웹 링크 중 적어도 하나를 표시할 수 있다.
본 발명의 실시 예에 따르면, 표시부(140)는 제어부(120)의 스위칭 동작에 따라 화면상에 표시된 적어도 하나의 객체를 유동적으로 표시할 수 있다. 예를 들어, 표시부(140)는 페이지 스위칭에 대응하여 화면상에 표시된 적어도 하나의 객체를 임의의 방향(certain direction)으로 움직이는 형태로 표시할 수 있다.
도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 단말(100)이 구현될 수 있다.
도 3은 본 발명에 따른 단말의 제어 방법을 나타낸 순서도이다.
도 3을 참조하면, 본 발명에 따른 단말의 제어 방법은 다음과 같은 순서로 이루어질 수 있다.
먼저, 단말(100)은 터치 입력 감지 여부를 판단할 수 있다(210).
단말(100)은 적어도 하나의 터치 입력을 감지할 수 있다. 단말(100)은 구현하기에 따라 터치 입력을 대신하여 근접 입력, 압력 입력 등을 감지할 수도 있다.
터치 입력이 감지되면, 단말(100)은 객체를 선택할 수 있다(220).
단말(100)은 감지된 터치 입력의 발생 위치를 판단할 수 있다. 예를 들어, 단말(100)은 단말(100) 상에 터치 입력이 발생한 위치에 대한 2차원 또는 3차원 좌표를 추출할 수 있다. 추가로, 단말(100)은 터치 입력에 대한 압력, 지속 시간, 움직임 발생 여부(예를 들어, 드래그, 복수의 터치 입력 간 거리 변화, 임의의 모양 형성 등의 움직임) 등을 판단할 수 있다.
단말(100)은 터치 입력에 대응하는 적어도 하나의 객체를 선택할 수 있다. 단말(100)은 터치 입력이 발생한 위치에 대응하는 적어도 하나의 객체를 선택할 수 있다. 객체는 아이콘, 텍스트, 이미지, 파일, 폴더, 웹 브라우저상의 콘텐츠, 웹 주소, 웹 링크 중 적어도 하나일 수 있다. 단말(100)은 객체를 선택한 뒤, 선택된 객체를 활성 상태, 확대 또는 축소 상태, 음영 상태 중 적어도 하나의 형태로 표시할 수 있다. 이때, 단말(100)은 객체에 대한 터치 입력이 발생한 후, 기 설정된 시간이 경과했는지 여부에 따라, 선택된 객체를 활성 상태, 확대 또는 축소 상태, 음영 상태 중 적어도 하나의 형태로 표시할 수 있다.
예를 들어, 도 4를 참조하면, 단말(100)은 터치 입력이 감지됨에 따라, 터치 입력에 대응하는 대기화면상의 아이콘을 선택할 수 있다. 또한, 단말(100)은 선택된 아이콘을 음영 상태로 표시할 수 있다.
단말(100)은 터치 입력 감지 후 터치 입력의 움직임이 발생한 경우, 선택된 객체를 터치 입력의 움직임에 따라 이동하여 표시할 수 있다. 예를 들어, 단말(100)은 터치 입력 감지 후, 터치 입력이 임의의 방향으로 이동하는 움직임이 발생한 경우, 선택된 객체를 터치 입력에 따라 임의의 방향으로 이동하여 표시할 수 있다. 단말(100)은 선택된 객체가 이동 가능한 상태임을 표시할 수 있다. 예를 들어, 단말(100)은 선택된 객체에 부가적인 인디케이터를 표시하거나 선택된 객체를 진동, 확대 또는 축소, 음영 처리되도록 표시하여, 객체가 이동 가능한 상태임을 표시할 수 있다.
다음으로, 단말(100)은 제스처 입력 감지 여부를 판단할 수 있다(230).
단말(100)은 임의의 방향(certain direction)으로 쓸어넘기는(swipe) 제스처, 임의의 모양을 나타내는 제스처, 임의의 모양을 형성하기 위한 움직임 제스처 등을 감지할 수 있다. 단말(100)은 제스처 입력의 방향, 속도, 모양, 단말(100)로부터의 거리 등을 감지할 수 있다. 구현하기에 따라 단말(100)은 제스처 입력을 대신하여 근접 입력, 압력 입력 등을 감지할 수도 있다.
단말(100)은 터치 입력이 유지된 상태에서 제스처 입력을 감지할 수 있다. 예를 들어, 도 5를 참조하면, 단말(100)은 터치 입력이 감지되고, 감지된 입력이 계속 유지되는 상태에서 제스처 입력의 발생을 감지할 수 있다.
제스처 입력이 감지되면, 단말(100)은 스위칭을 수행할 수 있다(240).
단말(100)은 감지된 제스처 입력에 대응하는 스위칭을 수행할 수 있다. 단말(100)은 먼저, 제스처 입력에 대응하는 스위칭을 검색하고, 대응하는 스위칭이 존재하면, 해당 스위칭을 수행할 수 있다.
스위칭은 페이지 스위칭, 폴더 스위칭, 탭 스위칭, 애플리케이션 스위칭, 작업 스위칭 중 어느 하나일 수 있다.
페이지 스위칭은 선택된 객체를 제외한 나머지 객체에 대하여 페이지를 이동하는 동작으로 구성될 수 있다. 페이지 스위칭은 적어도 하나의 객체를 포함하는 복수의 페이지로 구성되고, 어느 한 페이지에 대하여 표시되었다가 사용자의 요청에 따라 페이지를 넘길 수 있도록 구성되는 표시 화면에 대하여 수행될 수 있다. 예를 들어, 페이지 스위칭은 대기화면, 파일 또는 폴더 목록, 선택 가능한 메뉴 목록, 문서, e-book, 폰북 등의 표시 화면에 대하여 수행될 수 있다.
단말(100)은 선택된 객체를 터치 입력에 대응하여 고정(hold)하고, 표시 화면상에서 선택된 객체를 제외한 나머지 객체에 대한 페이지 스위칭을 수행할 수 있다. 즉, 단말(100)은 선택된 객체가 터치 입력에 대응하는 위치에 고정된 상태에서, 화면상에 표시된 페이지의 나머지 객체(배경 화면을 포함할 수 있다.)를 좌우 또는 상하로 이동하여 다른 페이지를 표시할 수 있다. 이때, 페이지 스위칭의 방향 및 페이지 스위칭 횟수는 제스처 입력의 방향(좌우 또는 상하) 또는 모양(예를 들어, 임의의 개수를 나타내는 손 모양)에 대응하여 결정될 수 있다. 페이지 스위칭에 따라 화면에는 표시되어 있던 객체들이 사라지고 다른 페이지에 포함된 객체들이 표시될 수 있다. 단말(100)은 제스처 입력에 대응하는 다른 페이지가 존재하지 않는 경우, 페이지 스위칭 동작을 수행하지 않거나 페이지가 존재하지 않는다는 내용의 메시지, 아이콘, 이미지 등을 표시할 수 있다.
예를 들어, 도 6을 참조하면, 단말(100)은 터치 입력에 대응하는 대기 화면의 아이콘을 선택할 수 있다. 이때, 단말(100)은 선택된 아이콘을 음영 처리하여 표시할 수 있다. 그리고, 단말(100)은 제스처 입력을 감지할 수 있다. 단말(100)은 터치 입력이 유지되는 상태에서, 제스처 입력을 감지할 수 있다. 제스처 입력은 우측에서 좌측 방향으로 쓸어넘기는 제스처 입력일 수 있다. 단말(100)은 선택된 아이콘을 터치 입력에 대응하는 위치에 고정하고, 페이지 스위칭을 수행할 수 있다. 즉, 단말(100)은 제스처 입력에 대응하는 방향으로 페이지를 이동할 수 있다. 단말(100)은 선택된 객체를 제외하고 화면상에 표시된 나머지 객체를 좌측으로 이동하여, 우측에 존재하는 페이지가 화면상에 표시되도록 할 수 있다.
폴더 스위칭은 선택된 객체의 파일 경로를 기초로, 폴더를 이동하는 동작으로 구성될 수 있다. 폴더 스위칭은 파일 또는 폴더에 대하여 수행될 수 있다. 예를 들어, 폴더 스위칭은 문서, 이미지, 사진, e-book, 음악, 애플리케이션 실행 파일 또는 단축 아이콘, 프로그램 실행 파일 또는 단축 아이콘, 제공 서비스 실행 파일 또는 단축 아이콘 및 이들을 포함하는 폴더에 대하여 수행될 수 있다.
단말(100)은 선택된 객체를 터치 입력에 대응하여 고정(hold)하고, 선택된 객체의 파일 경로를 판단할 수 있다. 단말(100)은 파일 경로를 기초로, 파일 경로에 대한 상위 폴더, 하위 폴더 또는 폴더 목록의 이전 또는 다음 폴더로 폴더를 이동할 수 있다. 이때, 폴더 스위칭의 상위 또는 하위 폴더 여부 또는 동일 계층의 이전 또는 다음 폴더 여부는 제스처 입력의 방향(좌우 또는 상하) 또는 모양(예를 들어, 임의의 개수를 나타내는 손 모양)에 대응하여 결정될 수 있다. 폴더 스위칭에 따라 화면에는 표시되어 있던 객체들이 사라지고 다른 폴더에 포함된 객체들이 표시될 수 있다. 단말(100)은 제스처 입력에 대응하는 다른 폴더가 존재하지 않는 경우, 폴더 스위칭 동작을 수행하지 않거나 폴더가 존재하지 않는다는 내용의 메시지, 아이콘, 이미지 등을 표시할 수 있다.
예를 들어, 도 7을 참조하면, 단말(100)은 터치 입력에 대응하는 Album 1 폴더의 사진을 선택할 수 있다. 이때, 단말(100)은 선택된 사진을 음영 처리하여 표시할 수 있다. 그리고, 단말(100)은 제스처 입력을 감지할 수 있다. 단말(100)은 터치 입력이 유지되는 상태에서, 제스처 입력을 감지할 수 있다. 제스처 입력은 우측에서 좌측 방향으로 쓸어넘기는 제스처 입력일 수 있다. 단말(100)은 선택된 사진을 터치 입력에 대응하는 위치에 고정하고, 폴더 스위칭을 수행할 수 있다. 즉, 단말(100)은 제스처 입력에 대응하는 방향으로 폴더를 이동할 수 있다. 단말(100)은 선택된 객체를 제외하고 화면상에 표시된 나머지 객체를 제거하고, Album 1의 다음 폴더인 Album 2에 존재하는 사진 목록이 화면상에 표시되도록 할 수 있다.
탭 스위칭은 복수의 탭으로 구성되는 애플리케이션 또는 프로그램의 탭을 이동하는 동작으로 구성될 수 있다. 탭 스위칭은 복수의 탭으로 구성되는 웹 브라우저, 메뉴 창, e-book, 문서 뷰어 등의 애플리케이션 또는 프로그램에 대하여 수행될 수 있다.
단말(100)은 선택된 객체를 터치 입력에 대응하여 고정(hold)하고, 탭 스위칭을 수행할 수 있다. 즉, 단말(100)은 선택된 객체가 터치 입력에 대응하는 위치에 고정된 상태에서, 현재 표시된 탭 및 현재 표시된 탭에 포함된 적어도 하나의 객체를 좌우 또는 상하로 이동하여 다른 탭 및 다른 탭에 포함된 적어도 하나의 객체를 표시할 수 있다. 이때, 탭 스위칭의 방향 및 횟수는 제스처 입력의 방향(좌우 또는 상하) 또는 모양(예를 들어, 임의의 개수를 나타내는 손 모양)에 대응하여 결정될 수 있다. 탭 스위칭에 따라 화면에는 표시되어 있던 객체들이 사라지고 다른 탭에 포함된 객체들이 표시될 수 있다. 단말(100)은 제스처 입력에 대응하는 다른 탭이 존재하지 않는 경우, 탭 스위칭 동작을 수행하지 않거나 이동할 탭이 존재하지 않는다는 내용의 메시지, 아이콘, 이미지 등을 표시할 수 있다.
예를 들어, 도 8을 참조하면, 단말(100)은 터치 입력에 대응하여 복수의 탭으로 구성되는 웹 브라우저 중 현재 탭에 표시된 적어도 하나의 객체를 선택할 수 있다. 객체는 웹 페이지 주소, 임의의 웹 페이지에 대한 링크를 포함하는 텍스트, 이미지, 아이콘, 플래시 등일 수 있다. 이때, 단말(100)은 선택된 객체에 대하여 색상, 글자체, 굵기 등의 변경, 크기 조절, 음영 처리 등에 따라 표시할 수 있다. 단말(100)은 터치 입력이 유지되는 상태에서, 제스처 입력을 감지할 수 있다. 제스처 입력은 우측에서 좌측 방향으로 쓸어넘기는 제스처 입력일 수 있다. 단말(100)은 선택된 객체를 터치 입력이 대응하는 위치에 고정하고, 탭 스위칭을 수행할 수 있다. 즉, 단말(100)은 제스처 입력에 대응하는 방향으로 탭을 이동할 수 있다. 단말(100)은 선택된 객체를 제외하고 화면상에 표시된 나머지 객체를 변경하여, 웹 브라우저의 이동된 탭을 구성하는 객체를 표시할 수 있다.
애플리케이션 또는 작업 스위칭은 선택된 객체를 제외한 나머지 객체에 대하여 애플리케이션 또는 작업 간 화면을 전환하는 동작으로 구성될 수 있다. 애플리케이션 또는 작업 스위칭은 사용자 또는 단말의 제조자에 의하여 미리 설정된 애플리케이션 또는 작업 간 스위칭이거나, 현재 구동 중인 애플리케이션 또는 작업 간 스위칭일 수 있다. 단말(100)은 애플리케이션 또는 작업 스위칭 시에 이동할 애플리케이션 또는 작업의 목록을 사용자 또는 단말의 제조자에 의하여 입력받고 이를 저장할 수 있다. 또는 단말(100)은 현재 구동 중인 애플리케이션 또는 작업을 식별하고, 애플리케이션 또는 작업의 선호도, 이용 빈도, 구동된 시간 등을 기초로 스위칭을 수행할 수 있다. 애플리케이션 또는 작업은 메시지, SNS, 메일 작성, 메모 작성, 통화 중 적어도 하나일 수 있다.
단말(100)은 선택된 객체를 터치 입력에 대응하여 고정(hold)하고, 표시 화면상에서 선택된 객체를 제외한 나머지 객체에 대한 애플리케이션 또는 작업 스위칭을 수행할 수 있다. 즉, 단말(100)은 선택된 객체가 터치 입력에 대응하는 위치에 고정된 상태에서, 화면상에 표시된 페이지의 나머지 객체(배경 화면을 포함할 수 있다.)를 좌우 또는 상하로 이동하여 다른 애플리케이션 또는 작업 창을 표시할 수 있다. 이때, 스위칭의 방향 및 스위칭 횟수는 제스처 입력의 방향(좌우 또는 상하) 또는 모양(예를 들어, 임의의 개수를 나타내는 손 모양)에 대응하여 결정될 수 있다. 애플리케이션 또는 작업 스위칭에 따라 화면에는 표시되어 있던 애플리케이션, 작업 및 이들을 구성하는 객체가 화면에서 사라지고, 다른 애플리케이션, 다른 작업 및 이들을 구성하는 객체가 표시될 수 있다. 단말(100)은 제스처 입력에 대응하는 다른 애플리케이션 또는 작업이 존재하지 않는 경우, 스위칭 동작을 수행하지 않거나 애플리케이션 또는 작업이 존재하지 않는다는 내용의 메시지, 아이콘, 이미지 등을 표시할 수 있다.
예를 들어, 도 9를 참조하면, 단말(100)은 터치 입력에 대응하는 이미지를 선택할 수 있다. 이때, 단말(100)은 선택된 이미지를 확대 또는 축소, 음영, 진동 모션 등으로 처리하여 표시할 수 있다. 그리고, 단말(100)은 제스처 입력을 감지할 수 있다. 단말(100)은 터치 입력이 유지되는 상태에서, 제스처 입력을 감지할 수 있다. 제스처 입력은 우측에서 좌측 방향으로 쓸어넘기는 제스처 입력일 수 있다. 단말(100)은 선택된 이미지를 터치 입력에 대응하는 위치에 고정하고, 애플리케이션 또는 작업 스위칭을 수행할 수 있다. 단말(100)은 제스처 입력에 대응하는 방향으로 스위칭을 수행할 수 있다. 단말(100)은 선택된 이미지를 제외하고 화면상에 표시된 나머지 객체를 좌측으로 이동하여, 이전 또는 다음 또는 작업의 화면이 표시되도록 할 수 있다.
단말(100)은 애플리케이션 또는 작업 스위칭에 대응하여 선택된 객체를 애플리케이션 또는 작업에 최적화된 포맷으로 정렬하여 표시할 수 있다. 단말(100)은 선택된 객체를 애플리케이션 또는 작업에 추가(add), 삽입(insert), 붙여넣기(paste), 첨부(attachment)했을 때 최적화된 포맷으로 표시하여, 프리뷰를 제공할 수 있다. 단말(100)은 객체를 확대, 축소, 회전, 확장자 변경, 해상도 변경하여 표시하거나, 객체가 추가, 삽입, 붙여넣기, 첨부되었음을 나타내는 텍스트, 이미지, 아이콘 등을 함께 표시할 수도 있다.
예를 들어, 도 9를 참조하면, 단말(100)은 애플리케이션이 문자 메시지로 스위칭 되었을 때, 선택된 이미지를 메시지 입력창에 첨부된 포맷으로 표시할 수 있다. 이때, 단말(100)은 문자 메시지에 이미지가 첨부되었음을 나타내기 위한 아이콘 등을 함께 표시할 수 있다. 또한, 단말(100)은 애플리케이션이 메일로 스위칭 되었을 때, 선택된 이미지를 메일 입력창에 첨부된 포맷으로 표시할 수 있다. 단말(100)은 메일 작성을 위한 html, xml 등의 코드에 이미지 첨부를 위한 코드를 추가하여, 이미지를 메일에 첨부된 포맷으로 표시할 수 있다. 이때, 단말(100)은 메일에 이미지 파일이 첨부되었음을 나타내기 위한 파일명, 아이콘, 파일 첨부 메뉴 등을 함께 표시할 수 있다.
다음으로, 단말(100)은 터치 입력 종료(release) 여부를 판단할 수 있다(250).
단말(100)은 스위칭 수행 후 또는 제스처 입력이 감지되지 않은 경우, 터치 입력 종료 여부를 판단할 수 있다. 단말(100)은 사용자가 단말(100) 상에서 입력 도구를 떼어냄으로써, 터치 입력이 종료되었는지 여부를 판단할 수 있다.
터치 입력이 종료되지 않으면, 단말(100)은 제스처 입력 감지 여부에 따라 스위칭을 반복적으로 수행할 수 있다.
반대로 터치 입력이 종료되면, 단말(100)은 종료 동작을 수행할 수 있다(260).
종료 동작은 선택된 객체를 터치 입력에 대응하는 위치에 정렬하는 동작, 선택된 객체의 링크를 웹 브라우저의 탭에서 구동하는 동작, 객체를 애플리케이션 또는 작업 화면상에 붙여넣는 동작 중 어느 하나일 수 있다.
예를 들어, 도 6의 실시 예에서, 터치 입력이 종료되면, 단말(100)은 터치 입력이 종료된 위치에 선택된 아이콘을 삽입하여 정렬할 수 있다. 단말(100)은 터치 입력에 대응하는 위치에 아이콘을 삽입하기 위하여 이동된 페이지의 아이콘들을 이동, 재정렬할 수 있다. 단말(100)은 재정렬된 페이지에 대한 정보를 저장할 수도 있다.
또한, 예를 들어, 도 7의 실시 예에서, 터치 입력이 종료되면, 단말(100)은 터치 입력이 종료된 위치에 선택된 이미지를 삽입하여 정렬할 수 있다. 단말(100)은 이미지를 삽입하기 위하여 이동된 폴더의 이미지 목록을 재정렬할 수 있다. 단말(100)은 해당 폴더 또는 해당 경로에 선택된 이미지를 이동하여 저장하고, 폴더 또는 이미지에 대한 정보를 갱신할 수 있다.
예를 들어, 도 8의 실시 예에서, 터치 입력이 종료되면, 단말(100)은 터치 입력이 종료된 웹 브라우저의 탭에서 선택된 객체의 링크를 구동할 수 있다. 단말(100)은 해당 링크에 의하여 구동된 웹 페이지를 표시하고, 웹 페이지를 구성하는 텍스트, 이미지, 플래시 등을 표시할 수 있다.
또한, 예를 들어, 도 9의 실시 예에서, 터치 입력이 종료되면, 단말(100)은 터치 입력이 종료된 애플리케이션 또는 작업 화면상에 선택된 객체를 추가, 삽입, 붙여넣기 또는 첨부할 수 있다. 단말(100)은 선택된 이미지를 문자 메시지에 첨부하고 문자 메시지 작성 창에 삽입할 수 있다. 또한, 단말(100)은 선택된 이미지를 SNS에 게시할 수 있도록, 글 작성 모드를 실행하고 글 작성 창에 선택된 이미지를 첨부할 수 있다.
단말(100)은 상술한 예에 한정되지 않고, 본 발명이 적용되는 범위 내에서 터치 종료 감지에 대응하여 다양한 동작을 수행할 수 있다.
본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 단말 110: 입력부
120: 제어부 130: 저장부
140: 표시부

Claims (20)

  1. 터치 입력을 감지하는 단계;
    상기 터치 입력에 대응하는 적어도 하나의 객체를 선택하는 단계;
    제스처 입력을 감지하는 단계; 및
    상기 객체를 상기 터치 입력에 대응하여 고정(hold)한 상태에서 스위칭을 수행하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  2. 제1항에 있어서, 상기 객체는,
    아이콘, 텍스트, 이미지, 파일, 폴더, 웹 브라우저상의 콘텐츠, 웹 주소, 웹 링크 중 적어도 하나를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  3. 제1항에 있어서, 상기 객체를 선택하는 단계는,
    상기 객체를 활성 상태, 확대 또는 축소 상태, 음영 상태 중 적어도 하나의 형태로 표시하는 단계를 더 포함하는 것을 특징으로 하는 단말의 제어 방법.
  4. 제1항에 있어서, 상기 제스처 입력을 감지하는 단계는,
    상기 터치 입력이 유지된 상태에서 상기 제스처 입력을 감지하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  5. 제1항에 있어서, 상기 스위칭은,
    페이지 스위칭, 폴더 스위칭, 탭 스위칭, 애플리케이션 스위칭, 작업 스위칭 중 어느 하나인 것을 특징으로 하는 단말의 제어 방법.
  6. 제1항에 있어서, 상기 스위칭을 수행하는 단계는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정(hold)하는 단계; 및
    적어도 하나의 객체를 포함하는 복수의 페이지로 구성되는 화면상에서 상기 선택된 객체를 제외한 나머지 객체에 대한 페이지 스위칭을 수행하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  7. 제1항에 있어서, 상기 스위칭을 수행하는 단계는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정하는 단계; 및
    상기 선택된 객체의 파일 경로를 기초로, 상기 파일 경로의 상위 폴더, 하위 폴더 또는 폴더 목록의 다음 또는 이전 폴더로 이동하는 폴더 스위칭을 수행하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  8. 제1항에 있어서, 상기 스위칭을 수행하는 단계는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정하는 단계; 및
    복수의 탭으로 구성되는 웹 브라우저의 탭 스위칭을 수행하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  9. 제1항에 있어서, 상기 스위칭을 수행하는 단계는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정하는 단계; 및
    미리 설정된 목록 또는 현재 구동 중인 목록을 기초로 애플리케이션 또는 작업(task) 스위칭을 수행하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  10. 제9항에 있어서, 상기 애플리케이션 또는 작업 스위칭을 수행하는 단계는,
    상기 선택된 객체를 상기 애플리케이션 또는 상기 작업에 최적화된 포맷으로 정렬하여 표시하는 단계를 포함하는 것을 특징으로 하는 단말의 제어 방법.
  11. 제1항에 있어서,
    상기 터치 입력의 종료(release)를 감지하는 단계; 및
    상기 선택된 객체에 대하여, 상기 터치 입력의 종료에 대응하는 동작을 수행하는 단계를 더 포함하는 것을 특징으로 하는 단말의 제어 방법.
  12. 제11항에 있어서, 상기 터치 입력의 종료에 대응하는 동작은,
    상기 객체를 상기 터치 입력에 대응하는 위치에 정렬하는 동작, 상기 선택된 객체의 링크를 웹 브라우저의 탭에서 구동하는 동작, 상기 객체를 애플리케이션 또는 작업 화면 상에 붙여넣는 동작 중 어느 하나인 것을 특징으로 하는 단말의 제어 방법.
  13. 터치 입력 및 제스처 입력을 감지하는 입력부;
    상기 터치 입력에 대응하는 적어도 하나의 객체를 선택하고, 상기 제스처 입력에 대응하여 상기 객체를 상기 터치 입력에 대응하여 고정(hold)한 상태에서 스위칭을 수행하는 제어부; 및
    상기 제어부의 동작에 따른 화면을 표시하는 표시부를 포함하는 것을 특징으로 하는 단말.
  14. 제13항에 있어서, 상기 스위칭은,
    페이지 스위칭, 폴더 스위칭, 탭 스위칭, 애플리케이션 스위칭, 작업 스위칭 중 어느 하나인 것을 특징으로 하는 단말.
  15. 제13항에 있어서, 상기 제어부는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정(hold)하고, 적어도 하나의 객체를 포함하는 복수의 페이지로 구성되는 화면 상에서 상기 선택된 객체를 제외한 나머지 객체에 대한 페이지 스위칭을 수행하는 것을 특징으로 하는 단말.
  16. 제13항에 있어서, 상기 제어부는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정하고, 상기 선택된 객체의 파일 경로를 기초로, 상기 파일 경로의 상위 폴더, 하위 폴더 또는 폴더 목록의 다음 또는 이전 폴더로 이동하는 폴더 스위칭을 수행하는 것을 특징으로 하는 단말.
  17. 제13항에 있어서, 상기 제어부는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정하고, 복수의 탭으로 구성되는 웹 브라우저의 탭 스위칭을 수행하는 것을 특징으로 하는 단말.
  18. 제13항에 있어서, 상기 제어부는,
    상기 선택된 객체를 상기 터치 입력에 대응하여 고정하고, 미리 설정된 목록 또는 현재 구동 중인 목록을 기초로 애플리케이션 또는 작업(task) 스위칭을 수행하는 것을 특징으로 하는 단말.
  19. 제18항에 있어서, 상기 제어부는,
    상기 선택된 객체를 상기 애플리케이션 또는 상기 작업에 최적화된 포맷으로 정렬하여 표시하도록 상기 표시부를 제어하는 것을 특징으로 하는 단말.
  20. 제14항에 있어서, 상기 입력부는,
    상기 터치 입력의 종료(release)를 감지하고,
    상기 제어부는,
    상기 객체를 상기 터치 입력에 대응하는 위치에 정렬하는 동작, 상기 선택된 객체의 링크를 웹 브라우저의 탭에서 구동하는 동작, 상기 객체를 애플리케이션 또는 작업 화면상에 붙여넣는 동작 중 어느 하나를 수행하는 것을 특징으로 하는 단말.
KR1020120077021A 2012-07-16 2012-07-16 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말 KR101984154B1 (ko)

Priority Applications (11)

Application Number Priority Date Filing Date Title
KR1020120077021A KR101984154B1 (ko) 2012-07-16 2012-07-16 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말
US13/905,663 US20140019910A1 (en) 2012-07-16 2013-05-30 Touch and gesture input-based control method and terminal therefor
AU2013206192A AU2013206192B2 (en) 2012-07-16 2013-06-05 Touch and gesture input-based control method and terminal therefor
CA2818248A CA2818248A1 (en) 2012-07-16 2013-06-07 Touch and gesture input-based control method and terminal therefor
TW102121397A TWI594178B (zh) 2012-07-16 2013-06-17 觸碰與手勢輸入式控制方法以及其終端
RU2013129862/08A RU2013129862A (ru) 2012-07-16 2013-06-28 Способ управления на основе сенсорного и жестового ввода и терминал для него
BR102013016792-4A BR102013016792B1 (pt) 2012-07-16 2013-06-28 Método de controle baseado em entrada de toque e gesto e terminalpara isso
CN201310297975.0A CN103543943B (zh) 2012-07-16 2013-07-16 基于触摸和手势输入的控制方法及其终端
JP2013147767A JP6230836B2 (ja) 2012-07-16 2013-07-16 タッチ及びジェスチャー入力を用いた端末の制御方法及びその端末
EP13176737.8A EP2687971A3 (en) 2012-07-16 2013-07-16 Touch and gesture input-based control method and terminal therefor
US15/868,366 US20180136812A1 (en) 2012-07-16 2018-01-11 Touch and non-contact gesture based screen switching method and terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120077021A KR101984154B1 (ko) 2012-07-16 2012-07-16 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말

Publications (2)

Publication Number Publication Date
KR20140010596A true KR20140010596A (ko) 2014-01-27
KR101984154B1 KR101984154B1 (ko) 2019-05-30

Family

ID=48832759

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120077021A KR101984154B1 (ko) 2012-07-16 2012-07-16 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말

Country Status (10)

Country Link
US (2) US20140019910A1 (ko)
EP (1) EP2687971A3 (ko)
JP (1) JP6230836B2 (ko)
KR (1) KR101984154B1 (ko)
CN (1) CN103543943B (ko)
AU (1) AU2013206192B2 (ko)
BR (1) BR102013016792B1 (ko)
CA (1) CA2818248A1 (ko)
RU (1) RU2013129862A (ko)
TW (1) TWI594178B (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018101585A1 (ko) * 2016-12-01 2018-06-07 주식회사 하이딥 사용자 인터페이스 제공을 위한 터치 입력 방법 및 장치
US11740727B1 (en) 2011-08-05 2023-08-29 P4Tents1 Llc Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
CN105373313A (zh) * 2012-07-18 2016-03-02 华为终端有限公司 一种用户界面的图标管理方法及触控设备
KR102117450B1 (ko) * 2013-03-26 2020-06-01 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10043172B2 (en) * 2013-05-29 2018-08-07 Ebay Inc. Tap and hold
USD731553S1 (en) * 2013-07-31 2015-06-09 Sears Brands, L.L.C. Display screen or portion thereof with an icon
USD731551S1 (en) * 2013-08-01 2015-06-09 Sears Brands, L.L.C. Display screen or portion thereof with an icon
USD734345S1 (en) * 2013-08-01 2015-07-14 Sears Brands, L.L.C. Display screen or portion thereof with an icon
WO2015022498A1 (en) * 2013-08-15 2015-02-19 Elliptic Laboratories As Touchless user interfaces
CN104423789B (zh) * 2013-09-09 2018-07-06 联想(北京)有限公司 一种信息处理方法及电子设备
US9531722B1 (en) 2013-10-31 2016-12-27 Google Inc. Methods for generating an activity stream
US9542457B1 (en) 2013-11-07 2017-01-10 Google Inc. Methods for displaying object history information
US9614880B1 (en) 2013-11-12 2017-04-04 Google Inc. Methods for real-time notifications in an activity stream
US10156976B2 (en) * 2014-01-30 2018-12-18 Samsung Display Co., Ltd. System and method in managing low-latency direct control feedback
US9509772B1 (en) 2014-02-13 2016-11-29 Google Inc. Visualization and control of ongoing ingress actions
CN104914982B (zh) * 2014-03-12 2017-12-26 联想(北京)有限公司 一种电子设备的控制方法和装置
CN103902156B (zh) * 2014-03-17 2017-09-01 联想(北京)有限公司 一种信息处理方法及电子设备
DE102014004177A1 (de) * 2014-03-22 2015-09-24 Audi Ag Verfahren und Vorrichtung zum Bereitstellen einer Auswahlmöglichkeit während eines Aufbaus eines Anzeigeinhalts
CN106030463A (zh) * 2014-04-16 2016-10-12 密克罗奇普技术公司 确定触摸及力感测表面上的触摸位置及对其的力
DE102014208502A1 (de) * 2014-05-07 2015-11-12 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zum Wechseln zwischen Bildschirmansichten einer Anwenderschnittstelle
US9536199B1 (en) 2014-06-09 2017-01-03 Google Inc. Recommendations based on device usage
US9507791B2 (en) 2014-06-12 2016-11-29 Google Inc. Storage system user interface with floating file collection
US10078781B2 (en) 2014-06-13 2018-09-18 Google Llc Automatically organizing images
CN105335043A (zh) * 2014-08-08 2016-02-17 宏碁股份有限公司 窗口切换方法及执行该方法的电子装置
US9787812B2 (en) 2014-08-28 2017-10-10 Honda Motor Co., Ltd. Privacy management
JP6388203B2 (ja) * 2014-09-08 2018-09-12 任天堂株式会社 電子機器
TWI511031B (zh) * 2014-10-23 2015-12-01 Qisda Corp 電子裝置運作方法以及電子裝置
US20160139662A1 (en) * 2014-11-14 2016-05-19 Sachin Dabhade Controlling a visual device based on a proximity between a user and the visual device
US9870420B2 (en) 2015-01-19 2018-01-16 Google Llc Classification and storage of documents
CN104598113B (zh) * 2015-01-23 2018-02-27 联想(北京)有限公司 一种信息处理的方法及电子设备
KR20160099399A (ko) * 2015-02-12 2016-08-22 엘지전자 주식회사 와치 타입 단말기
CN104715026A (zh) * 2015-03-03 2015-06-17 青岛海信移动通信技术股份有限公司 一种文件夹管理方法和智能终端
JP6534292B2 (ja) * 2015-04-24 2019-06-26 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ ヘッドマウントディスプレイ、及び、ヘッドマウントディスプレイの制御方法
USD763898S1 (en) * 2015-07-28 2016-08-16 Microsoft Corporation Display screen with animated graphical user interface
CN105718768B (zh) * 2016-01-12 2019-06-11 Oppo广东移动通信有限公司 一种预防图标误操作的方法和装置
CN107203319A (zh) * 2016-03-17 2017-09-26 南宁富桂精密工业有限公司 界面操作控制方法及应用该方法的系统
TWI609314B (zh) * 2016-03-17 2017-12-21 鴻海精密工業股份有限公司 介面操作控制系統及其方法
US10642484B1 (en) * 2016-03-31 2020-05-05 Kyocera Document Solutions Inc. Display device
JP6946857B2 (ja) * 2017-08-24 2021-10-13 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
KR20190054397A (ko) * 2017-11-13 2019-05-22 삼성전자주식회사 디스플레이장치 및 그 제어방법
CN108446062A (zh) * 2018-02-13 2018-08-24 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质
CN108491139B (zh) * 2018-02-13 2020-12-25 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质
CN109539486A (zh) * 2018-07-16 2019-03-29 珠海磐磊智能科技有限公司 调控系统的控制方法及系统
JP2020052681A (ja) * 2018-09-26 2020-04-02 シュナイダーエレクトリックホールディングス株式会社 操作処理装置
CN109743445B (zh) * 2018-12-20 2020-07-17 惠州Tcl移动通信有限公司 一种应用图标的调整方法、装置、存储介质及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120058308A (ko) * 2010-11-29 2012-06-07 삼성전자주식회사 휴대기기 및 이에 적용되는 ｕｉ 모드 제공 방법
US20120176403A1 (en) * 2011-01-10 2012-07-12 Samsung Electronics Co., Ltd. Method and apparatus for editing touch display

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0876926A (ja) * 1994-09-02 1996-03-22 Brother Ind Ltd 画像表示装置
US8139028B2 (en) * 2006-02-01 2012-03-20 Synaptics Incorporated Proximity sensor and method for indicating extended interface results
US8086971B2 (en) * 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
JP4171770B1 (ja) * 2008-04-24 2008-10-29 任天堂株式会社 オブジェクト表示順変更プログラム及び装置
US8631340B2 (en) * 2008-06-25 2014-01-14 Microsoft Corporation Tab management in a user interface window
US8762879B1 (en) * 2008-09-01 2014-06-24 Google Inc. Tab management in a browser
JP5279646B2 (ja) * 2008-09-03 2013-09-04 キヤノン株式会社 情報処理装置、その動作方法及びプログラム
US8756519B2 (en) * 2008-09-12 2014-06-17 Google Inc. Techniques for sharing content on a web page
JP2010157189A (ja) * 2009-01-05 2010-07-15 Sony Corp 情報処理装置、情報処理方法およびプログラム
TW201101198A (en) * 2009-06-17 2011-01-01 Sonix Technology Co Ltd Command input method
US8471824B2 (en) * 2009-09-02 2013-06-25 Amazon Technologies, Inc. Touch-screen user interface
CN102023784A (zh) * 2009-09-16 2011-04-20 创新科技有限公司 非接触式输入字符的方法和设备
US8769428B2 (en) * 2009-12-09 2014-07-01 Citrix Systems, Inc. Methods and systems for generating a combined display of taskbar button group entries generated on a local machine and on a remote machine
US10007393B2 (en) * 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
US8707174B2 (en) * 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
CN102200830A (zh) * 2010-03-25 2011-09-28 夏普株式会社 基于静态手势识别的非接触控制系统和控制方法
CN102033710B (zh) * 2010-04-07 2015-03-11 苹果公司 用于管理文件夹的方法和相关设备
US8881060B2 (en) * 2010-04-07 2014-11-04 Apple Inc. Device, method, and graphical user interface for managing folders
KR20110127853A (ko) * 2010-05-20 2011-11-28 엘지전자 주식회사 이동 단말기 및 그 제어 방법
JP5556515B2 (ja) * 2010-09-07 2014-07-23 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
TW201216090A (en) * 2010-10-13 2012-04-16 Sunwave Technology Corp Gesture input method of remote control
JP2012108800A (ja) * 2010-11-18 2012-06-07 Ntt Docomo Inc 表示装置、表示装置の制御方法及びプログラム
CN102043583A (zh) * 2010-11-30 2011-05-04 汉王科技股份有限公司 页面跳转方法、页面跳转装置及电子阅读装置
TW201224843A (en) * 2010-12-03 2012-06-16 Microlink Comm Inc Paging method for electronic book reading device
US9778747B2 (en) * 2011-01-19 2017-10-03 Hewlett-Packard Development Company, L.P. Method and system for multimodal and gestural control
US20120218203A1 (en) * 2011-02-10 2012-08-30 Kanki Noriyoshi Touch drawing display apparatus and operation method thereof, image display apparatus allowing touch-input, and controller for the display apparatus
US20120304059A1 (en) * 2011-05-24 2012-11-29 Microsoft Corporation Interactive Build Instructions
US20130067392A1 (en) * 2011-09-12 2013-03-14 Microsoft Corporation Multi-Input Rearrange
KR101381484B1 (ko) * 2012-02-29 2014-04-07 주식회사 팬택 그래픽 오브젝트 플로팅 기능을 갖는 모바일 디바이스 및 그 실행 방법
US20130268837A1 (en) * 2012-04-10 2013-10-10 Google Inc. Method and system to manage interactive content display panels
US9740393B2 (en) * 2012-05-18 2017-08-22 Google Inc. Processing a hover event on a touchscreen device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120058308A (ko) * 2010-11-29 2012-06-07 삼성전자주식회사 휴대기기 및 이에 적용되는 ｕｉ 모드 제공 방법
US20120176403A1 (en) * 2011-01-10 2012-07-12 Samsung Electronics Co., Ltd. Method and apparatus for editing touch display

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11740727B1 (en) 2011-08-05 2023-08-29 P4Tents1 Llc Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
WO2018101585A1 (ko) * 2016-12-01 2018-06-07 주식회사 하이딥 사용자 인터페이스 제공을 위한 터치 입력 방법 및 장치

Also Published As

Publication number Publication date
US20140019910A1 (en) 2014-01-16
US20180136812A1 (en) 2018-05-17
TWI594178B (zh) 2017-08-01
EP2687971A3 (en) 2017-04-19
BR102013016792B1 (pt) 2021-02-23
JP2014021983A (ja) 2014-02-03
RU2013129862A (ru) 2015-01-10
CA2818248A1 (en) 2014-01-16
CN103543943B (zh) 2018-11-23
JP6230836B2 (ja) 2017-11-15
CN103543943A (zh) 2014-01-29
KR101984154B1 (ko) 2019-05-30
AU2013206192B2 (en) 2018-08-30
BR102013016792A2 (pt) 2015-08-25
TW201411469A (zh) 2014-03-16
EP2687971A2 (en) 2014-01-22
AU2013206192A1 (en) 2014-01-30

Similar Documents

Publication Publication Date Title
KR101984154B1 (ko) 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말
US10788977B2 (en) System and method for displaying information on transparent display device
CN105683895B (zh) 提供用户交互的用户终端设备及其方法
KR102035305B1 (ko) 휴대 단말에서 햅틱 효과를 제공하는 방법 및 기계로 읽을 수 있는 저장 매체 및 휴대 단말
US20180107282A1 (en) Terminal and method for controlling the same based on spatial interaction
KR102178845B1 (ko) 햅틱을 제어하는 휴대 단말 및 방법
US9703382B2 (en) Device, method, and storage medium storing program with control for terminating a program
US9395908B2 (en) Information processing apparatus, information processing method, and information processing program utilizing gesture based copy and cut operations
US9411484B2 (en) Mobile device with memo function and method for controlling the device
EP2720127A2 (en) Display device and method of providing tool therefor
US20130167090A1 (en) Device, method, and storage medium storing program
EP2770422A2 (en) Method for providing a feedback in response to a user input and a terminal implementing the same
US9658762B2 (en) Mobile terminal and method for controlling display of object on touch screen
KR20140140957A (ko) 화면 데이터의 미러링 방법, 저장 매체 및 전자 장치
EP2747057A1 (en) Text-enlargement display method
KR20140026723A (ko) 휴대 장치의 가이드 제공 방법 및 그 휴대 장치
KR20170059815A (ko) 롤러블 이동 단말기
EP2808777B1 (en) Method and apparatus for gesture-based data processing
KR102152383B1 (ko) 단말 장치 및 그 제어 방법
JP2009098990A (ja) 表示装置
CN111580706A (zh) 提供用户交互的电子设备及其方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right