KR20160077122A - 부동 또는 공중 조작 처리 방법 및 장치 - Google Patents

부동 또는 공중 조작 처리 방법 및 장치 Download PDF

Info

Publication number
KR20160077122A
KR20160077122A KR1020167013544A KR20167013544A KR20160077122A KR 20160077122 A KR20160077122 A KR 20160077122A KR 1020167013544 A KR1020167013544 A KR 1020167013544A KR 20167013544 A KR20167013544 A KR 20167013544A KR 20160077122 A KR20160077122 A KR 20160077122A
Authority
KR
South Korea
Prior art keywords
terminal
floating
operating object
screen
manipulation
Prior art date
Application number
KR1020167013544A
Other languages
English (en)
Inventor
유안리 간
지안용 콩
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Publication of KR20160077122A publication Critical patent/KR20160077122A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/04166Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 부동 또는 공중 조작 처리 방법과 장치와 관련되며, 여기서 방법은: 단말기가, 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 조작이 미리 정해진 조건을 충족시킨다고 검출할 때, 단말기에 의해, 주밍/회전 모드의 활성화를 트리거하는 것; 단말기에 의해, 조작 객체의 이동 트랙을 검출하는 것; 및 조작 객체의 이동 트랙에 따라 상기 단말기에 의해, 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 명령어를 생성하는 것을 포함한다. 본 발명에서 제공되는 부동 또는 공중 조작 처리 방법 및 장치에서는, 웹 페이지 및 화상과 같은 디스플레이된 객체들이 부동 또는 공중 조작 동안 주밍 방식으로 시청될 수 있으며, 이것은 기존의 멀티-터치 기능을 대체하고, 조작하기에 유연하고 편리하다.

Description

부동 또는 공중 조작 처리 방법 및 장치{METHOD AND APPARATUS FOR PROCESSING SUSPENDED OR DISTANCE OPERATION}
본 발명은 단말기 디바이스 기술들의 분야에 관한 것이고, 특히, 부동 또는 공중 조작 처리 방법 및 장치에 관한 것이다.
지능형 모바일 단말기들의 개발로, 터치스크린들은 사용자들과 단말기들 간의 상호작용의 경험을 크게 개선하고, 광범위하게 이용되었다. 그러나, 어떤 특정 시나리오들에서, 손가락이 스크린을 터치할 수 없거나, 또는 스크린을 터치하기가 불편하거나, 또는 단지 한 손만 스크린을 터치할 수 있다. 예를 들어, 버스에서, 사용자는 핸드레일을 잡을 필요가 있고, 또한 웹 페이지 또는 화상 정보를 볼 필요가 있고, 양쪽 손들을 이용하여 조작하기가 매우 어렵다. 예를 들어, 요리하는 동안, 손들이 스크린을 터치하기가 불편하고, 사용자가 웹 페이지 또는 화상을 볼 필요가 있을 때, 양쪽 손들이 스크린을 터치할 수 없다.
부동 터치는, 사용자의 손가락이 스크린을 터치하지 않는 경우에 단말기의 스크린 상에서 터치 조작을 행하기 위해 손가락이 이용될 수 있다는 기술이다. 부동 터치를 지원하는 터치스크린 상에 두 개의 정전용량 센서들, 즉, 상호 커패시턴스 센서와 셀프 커패시턴스 센서가 있다. 셀프 커패시턴스 센서는 더 멀리 있는 손가락의 감지를 검출하기 위해, 상호 커패시턴스 센서가 생성하는 것보다 더 강력한 신호를 생성할 수 있고, 최대 20mm까지의 검출 거리 범위를 가질 수 있다. 상호 커패시턴스 센서의 전계는 매우 작고, 그 결과, 신호 강도는 매우 약하여, 상호 커패시턴스 센서는 그러한 매우 약한 신호들을 검출할 수 없다. 그러므로, 사용자의 손가락이 스크린 위에 하버(hover)할 때, 상호 커패시턴스 센서는 신호를 검출할 수 없다. 셀프 커패시턴스 센서에 의해 검출될 수 있는 신호는 상호 커패시턴스 센서의 것보다 더 강력해서, 디바이스는 스크린 위 20mm에 있는 손가락을 검출할 수 있다.
공중 조작을 위해, 접근하는 제스처는 터치스크린, 카메라, 초음파 센서, 또는 적외선 센서와 같은 센서를 이용하여 식별 및 결정되고, 공중 조작이 감지될 수 있는 세로 영역(터치스크린까지의 거리)은 부동 조작의 것보다 더 멀다. 양쪽 손들이 스크린을 터치 할 수 없을 때, 공중 조작이 더 적합하다.
본 발명의 목적은 웹 페이지 및 화상과 같은 디스플레이된 객체들이 부동 또는 공중 조작 동안 주밍 방식으로 시청될 수 있도록 하기 위한, 부동 또는 공중 조작 처리 방법 및 장치를 제공하는 것이며, 이것은 기존의 멀티-터치 기능을 대체하고, 조작하기에 유연하고 편리하다.
상기의 목적을 구현하기 위해, 본 발명의 제1 양태는 부동 또는 공중 조작 처리 방법을 제공하고, 이 방법은:
단말기에 의해, 상기 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 검출하는 단계; 및 예(yes)라면, 상기 단말기에 의해, 상기 조작 객체의 이동 트랙을 검출하는 단계; 및
상기 조작 객체의 이동 트랙에 따라 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계를 포함한다.
제1 양태를 참조하여, 제1 양태의 제1 구현 방식에 있어서, 상기 단말기에 의해, 상기 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 검출하는 단계는: 상기 단말기에 의해, 상기 조작 객체의 부동 또는 공중 조작이, 제1 시간 임계값 내에 그 위치가 변화없이 유지되거나 또는 그 위치 시프트가 허용오차 범위 내인, 상기 조작 객체의 하버 조작인지 검출하는 단계를 포함하고, 여기서 예라면, 상기 단말기의 부동 또는 공중 센싱 영역 내의 부동 또는 공중 조작이 상기 미리 정해진 조건을 충족시킨다.
제1 양태의 제1 구현 방식을 참조하여, 제1 양태의 제2 구현 방식에 있어서, 상기 단말기에 의해, 상기 조작 객체의 부동 또는 공중 조작이 하버 조작인지 검출하는 단계는 구체적으로:
상기 단말기가 상기 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체를 검출할 때, 상기 조작 객체의 현재 위치를 초기 하버 위치로서 설정하고, 타이머를 개시하는 단계; 및
상기 초기 하버 위치에 대해 상대적인 상기 조작 객체의 시프트가 상기 허용오차 범위를 넘고, 상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하지 않은 것을 검출하면, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서 설정하고, 상기 타이머를 재개하는 단계; 또는
상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하면, 상기 부동 또는 공중 조작이 하버 조작이라고 결정하고, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서 설정하고, 상기 타이머를 재개하는 단계를 포함한다.
제1 양태의 제1 구현 방식 또는 제2 구현 방식을 참조하여, 제1 양태의 제3 구현 방식에 있어서, 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계는:
상기 단말기의 상기 스크린 상에 디스플레이되고 제2 위치에 대응하는 콘텐트 내의 영역을 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하고, 상기 제2 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 결정하고, 상기 단말기의 상기 스크린 상에 디스플레이된 콘텐트에 상기 주밍 또는 회전 조작을 수행하는 단계 - 상기 제2 위치는, 상기 단말기가 상기 조작 객체의 상기 부동 또는 공중 조작이 하버 조작이라고 검출할 때, 상기 조작 객체의 부동 위치임 -를 포함하고;
상기 단말기에 의해, 상기 조작 객체의 이동 트랙을 검출하는 단계는:
상기 조작 객체의 현재 부동 위치와 상기 시작 위치 사이의 시프트를 계산하는 단계 및 기록하는 단계, 및 상기 시프트를 상기 조작 객체의 이동 트랙으로서 이용하는 단계를 포함한다.
제1 양태의 제3 구현 방식을 참조하여, 제1 양태의 제4 구현 방식에 있어서, 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계 후에 상기 방법은:
상기 단말기가 상기 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 재차 검출할 때, 상기 단말기에 의해, 상기 조작 객체의 하버 조작이 재차 검출될 때 획득된 상기 조작 객체의 부동 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 갱신하는 단계; 및 상기 단말기의 상기 스크린 상에 디스플레이되고, 상기 조작 객체의 하버 조작이 재차 검출될 때 획득된 상기 조작 객체의 상기 부동 위치에 대응하는 콘텐트를 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하는 단계를 더 포함한다.
제1 양태, 또는 제1 양태의 제1 내지 제4 구현 방식들 중 어느 하나를 참조하여, 제1 양태의 제5 구현 방식에 있어서, 상기 조작 객체의 상기 이동 트랙은 다음:
상기 단말기의 상기 스크린과 평행한 평면 내의 평면 직교 좌표계의 x축 방향에서의 상기 조작 객체의 이동 트랙; 또는
상기 평면 직교 좌표계의 y축 방향에서의 상기 조작 객체의 이동 트랙; 또는
상기 단말기의 상기 스크린과 수직인 z 방향에서의 상기 조작 객체의 이동 트랙
중 하나 또는 임의의 조합을 포함한다.
제1 양태의 제5 구현 방식을 참조하여, 제1 양태의 제6 구현 방식에 있어서, 상기 조작 객체의 이동 트랙에 따라 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계는 구체적으로 다음:
상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 단말기의 상기 스크린에 가까워지고 있을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-인 조작을 수행하는 단계;
상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 단말기의 상기 스크린으로부터 멀어지고 있을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-아웃 조작을 수행하는 단계;
상기 x축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하는 단계; 및
상기 y축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 상기 콘텐트에 회전 조작을 수행하는 단계
중 하나 또는 임의의 조합을 포함한다.
제2 양태에 따르면, 본 발명은 부동 또는 공중 조작 처리 장치를 더 제공하고, 상기 장치는 센서 및 프로세서를 포함하고,
상기 센서는 상기 센서의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작을 검출하도록 구성되고,
상기 프로세서는 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 결정하도록 구성되고; 상기 프로세서는, 상기 프로세서가 상기 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시킨다고 결정할 때, 상기 센서를 이용하여 상기 조작 객체의 이동 트랙을 검출하도록 구성되고;
상기 프로세서는 상기 조작 객체의 상기 이동 트랙에 따라 상기 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하도록 더 구성된다.
제2 양태를 참조하여, 제2 양태의 제1 구현 방식에 있어서, 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 상기 프로세서에 의해 결정하는 것은 구체적으로: 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이, 제1 시간 임계값 내에 그 위치가 변화없이 유지되거나 또는 그 위치 시프트가 허용오차 범위 내인, 상기 조작 객체의 하버 조작인지 프로세서에 의해 결정하는 것이고, 여기서 예라면, 상기 단말기의 부동 또는 공중 센싱 영역 내의 상기 부동 또는 공중 조작이 상기 미리 정해진 조건을 충족시킨다.
제2 양태의 제1 구현 방식을 참조하여, 제2 양태의 제2 구현 방식에 있어서, 상기 조작 객체의 부동 또는 공중 조작이 하버 조작인지 프로세서에 의해 결정하는 것은 구체적으로: 상기 센서가 상기 조작 객체를 검출할 때, 상기 조작 객체의 현재 위치를 초기 하버 위치로서 상기 프로세서에 의해 설정하고, 타이머를 개시하는 것; 및
상기 초기 하버 위치에 대해 상대적인 상기 조작 객체의, 상기 센서에 의해 검출된, 시프트가 상기 허용오차 범위를 넘고, 상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하지 않은 것을 상기 프로세서가 검출하면, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서, 상기 프로세서에 의해, 설정하고, 상기 타이머를 재개하는 것; 또는
상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하면, 상기 부동 또는 공중 조작이 하버 조작이라고, 상기 프로세서에 의해, 결정하고, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서 설정하고, 상기 타이머를 재개하는 것을 포함한다.
제2 양태의 제1 구현 방식 또는 제2 구현 방식을 참조하여, 제2 양태의 제3 구현 방식에 있어서, 상기 프로세서에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 것은:
상기 프로세서에 의해, 상기 단말기의 상기 스크린 상에 디스플레이되고 제2 위치에 대응하는 콘텐트 내의 영역을 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하고, 상기 제2 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 결정하고, 상기 단말기의 상기 스크린 상에 디스플레이된 콘텐트에 상기 주밍 또는 회전 조작을 수행하는 것 - 상기 제2 위치는, 상기 단말기가 상기 조작 객체의 상기 부동 또는 공중 조작이 하버 조작이라고 검출할 때, 상기 조작 객체의 부동 위치임 -을 포함하고;
상기 프로세서에 의해, 상기 조작 객체의 이동 트랙을 검출하는 것은:
상기 조작 객체의 현재 부동 위치와 상기 시작 위치 사이의, 상기 센서에 의해 검출된, 시프트를, 상기 프로세서에 의해, 계산하고 기록하고, 상기 시프트를 상기 조작 객체의 이동 트랙으로서 이용하는 것을 포함한다.
제2 양태의 제3 구현 방식을 참조하여, 제2 양태의 제4 구현 방식에 있어서, 상기 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행한 후에, 상기 프로세서는: 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 재차 결정할 때, 상기 조작 객체의 하버 조작이 재차 검출될 때 획득된 상기 조작 객체의 부동 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 갱신하고; 상기 스크린 상에 디스플레이되고, 상기 조작 객체의 하버 조작이 재차 결정될 때 획득된 상기 조작 객체의 상기 부동 위치에 대응하는 콘텐트를 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하도록 더 구성된다.
제2 양태, 또는 제2 양태의 제1 내지 제4구현 방식 중 어느 하나를 참조하여, 제2 양태의 제5 구현 방식에 있어서, 상기 조작 객체의 상기 이동 트랙은 다음:
상기 조작 객체가 위치하고, 상기 스크린과 평행한 평면 내의 x축 방향에서의 상기 조작 객체의 이동 트랙; 또는
상기 조작 객체가 위치하고 상기 단말기의 스크린과 평행한 평면 내의 y축 방향에서의 상기 조작 객체의 이동 트랙; 또는
상기 스크린과 수직인 z 방향에서의 상기 조작 객체의 이동 트랙
중 하나 또는 임의의 조합을 포함한다.
제2 양태의 제5 구현 방식을 참조하여, 제2 양태의 제6 구현 방식에 있어서, 상기 프로세서는 구체적으로: 상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 센서에 가까워지고 있을 때, 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-인 조작을 수행하도록 구성되거나; 또는
상기 프로세서는 구체적으로, 상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 센서로부터 멀어지고 있을 때, 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-아웃 조작을 수행하도록 구성되거나; 또는
상기 프로세서는 구체적으로, 상기 x축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하도록 구성되거나; 또는
상기 프로세서는 구체적으로, 상기 y축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 스크린 상에 디스플레이된 상기 콘텐트에 회전 조작을 수행하도록 구성된다.
본 발명에서 제공되는 부동 또는 공중 조작 처리 방법 및 장치에 따르면, 이동 프로세스에서 사용자의 부동 또는 공중 조작이 처리되고, 사용자의 이동 트랙 및 경향이 결정되고, 사용자의 이동 트랙에 따라 대응하는 주밍/회전 처리가 수행됨으로써, 웹 페이지 및 화상과 같은 디스플레이된 객체들이 부동 또는 공중 조작 동안 주밍 방식으로 시청될 수 있도록 하며, 이것은 기존의 멀티-터치 기능을 대체하고, 조작하기에 유연하고 편리하다.
도 1은 본 발명의 실시예 1에 따른 부동 또는 공중 조작 처리 방법의 흐름도이다.
도 2는 본 발명에 따른 조작 객체의 부동 또는 공중 위치의 개략도이다.
도 3은 본 발명에 따른 디스플레이된 콘텐트의 주밍의 효과의 개략도이다.
도 4는 본 발명에 따른 디스플레이된 콘텐트의 회전의 효과의 개략도이다.
도 5는 본 발명의 실시예 2에 따른 부동 또는 공중 조작 처리 장치의 개략도이다.
첨부 도면들 및 실시예들에 의해, 본 발명의 기술적 해결책들이 아래에 더 상세히 설명된다.
본 발명에서 제공되는 부동 또는 공중 조작 처리 방법 및 장치는, 부동 또는 공중 조작을 감지할 수 있고, 스크린 상에 디스플레이된 웹 페이지 또는 화상과 같은 디스플레이된 콘텐트에 주밍 또는 회전과 같은 조작을, 스크린 터치 없이, 수행할 수 있는 터치스크린 및 단말 디바이스에 적용가능하다.
실시예 1
도 1은 이 실시예에 따른 부동 또는 공중 조작 처리 방법의 흐름도이다. 도 1에 도시된 바와 같이, 본 발명의 부동 또는 공중 조작 처리 방법은 다음을 포함한다:
S101: 단말기는 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 검출한다.
본 발명에서, 조작 객체는 일반적으로, 사용자의 손가락과 같은, 단말기의 터치스크린에 의해 감지될 수 있는 객체이다. 부동 또는 공중 조작은 조작 객체가 단말기의 스크린을 터치하지 않는 경우에 단말기의 터치스크린에 의해 감지될 수 있는 조작을 지칭한다.
터치스크린 또는 다른 센서를 이용함으로써, 단말기는 조작 객체의 부동 또는 공중 조작을 검출하고, 조작 객체의 하버 위치의 변화를 감지하며, 하버 위치의 변화는 구체적으로 다음 중 하나 또는 임의의 조합을 포함한다: 단말기의 스크린과 평행한 평면 내의 평면 직교 좌표계의 x축 방향에서의 조작 객체의 변화; 또는 평면 직교 좌표계의 y축 방향에서의 조작 객체의 변화; 또는 단말기의 스크린과 수직인 z 방향에서의 조작 객체의 변화.
단말기가, 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시킨다고 검출하면, S102가 수행된다. 그렇지 않다면, 단말기는 회전 또는 주밍-인 모드로 진입하지 않고, 즉, S102는 수행되지 않는다.
구체적으로, 단말기는 조작 객체의 부동 또는 공중 조작이, 제1 시간 임계값 내에 그 위치가 변화없이 유지되거나 또는 그 위치 시프트가 허용오차 범위 내인, 조작 객체의 하버 조작인지 검출하고, 여기서 예라면, 단말기의 부동 또는 공중 센싱 영역 내의 부동 또는 공중 조작이 미리 정해진 조건을 충족시킨다. 제1 시간 임계값은 실제 사용에 따라 미리 설정될 수 있고, 예를 들어, 1초일 수 있다.
시프트는, 방향을 포함할 뿐만 아니라 길이도 포함하는, 벡터일 수 있다.
허용오차(tolerance) 범위는 사용자가 조작 동안 흔들릴 수 있기 때문에 미리 설정되는 거리 범위이고, 이 거리 범위 내에서 이동할 때, 조작 객체는 대략 동일 위치에 있는 것으로 간주될 수 있다. 즉, x축 방향, y축 방향, 및 z 방향에서의 조작 객체의 시프트들이 모두 허용오차 범위 내에 있다고 결정될 때, 그것은 조작 객체의 이동이 흔들림에 속함을 지시하고, 단말기는 조작 객체가 동일 위치에 있다고 간주한다.
구체적으로, 단말기에 의해, 조작 객체의 부동 또는 공중 조작이 하버 조작인지 검출하는 것은 다음을 포함한다: 단말기가 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체를 검출할 때, 조작 객체의 현재 위치를 초기 하버 위치로서 설정하고, 타이머를 개시하는 것; 및 초기 하버 위치에 대해 상대적인 조작 객체의 시프트가 허용오차 범위를 넘고, 타이머의 카운트가 제1 시간 임계값에 도달하지 않은 것을 검출하면, 조작 객체의 현재 위치를 초기 하버 위치로서 설정하고, 타이머를 재개하는 것; 또는 타이머의 카운트가 제1 시간 임계값에 도달하면, 부동 또는 공중 조작이 하버 조작이라고 결정하고, 조작 객체의 현재 위치를 초기 하버 위치로서 설정하고, 타이머를 재개하는 것.
S102: 단말기가 조작 객체의 이동 트랙을 검출한다.
이 경우에, 단말기는 주밍/회전 모드로 진입한다.
구체적으로, 조작 객체의 이동 트랙은 다음 중 하나 또는 임의의 조합을 포함한다: 단말기의 스크린과 평행한 평면 내의 평면 직교 좌표계의 x축 방향에서의 조작 객체의 이동 트랙; 또는 평면 직교 좌표계의 y축 방향에서의 조작 객체의 이동 트랙; 또는 단말기의 스크린과 수직인 z 방향에서의 조작 객체의 이동 트랙.
단말기는 x축 방향, 또는 y축 방향, 또는 z 방향에서의 조작 객체의 하버 위치와 시작 위치 사이의 시프트를 계산한다.
조작 객체의 이동 트랙은 연속적으로 변화하는 트랙 라인일 수 있거나, 또는 변화하는 포인트들일 수 있으며, 즉, 조작 객체의 하나 이상의 포인트들이 검출되고, 계산 동안, 포인트 변화에 의해 유발된 신호 파형 변화를 이용하여, 조작 객체의 하버 위치의 변화가 계산된다.
S103: 단말기는 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을, 조작 객체의 이동 트랙에 따라, 수행한다.
구체적으로, 단말기의 스크린 상에 디스플레이되고 제2 위치에 대응하는 콘텐트 내의 영역이 주밍 또는 회전 조작의 중심 영역으로서 결정되고, 제2 위치는 주밍 또는 회전 조작의 시작 위치로서 결정되고, 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작이 수행되며, 여기서 제2 위치는, 단말기가 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 검출할 때, 조작 객체의 부동 위치이다.
단말기에 의해, 조작 객체의 이동 트랙을 검출하는 것은 다음을 포함한다: 조작 객체의 현재 부동 위치와 시작 위치 사이의 시프트를 계산하고 기록하는 것, 및 시프트를 조작 객체의 이동 트랙으로서 이용하는 것.
단말기에 의해, 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 것은 구체적으로 다음 중 하나 또는 임의의 조합을 포함한다:
z 방향에서의 조작 객체의 이동 트랙이 단말기의 스크린에 가까워지고 있을 때, 단말기에 의해, 단말기의 스크린 상에 디스플레이된 콘텐트에 줌-인 조작을 수행하는 것; 또는
z 방향에서의 조작 객체의 이동 트랙이 단말기의 스크린으로부터 멀어지고 있을 때, 단말기에 의해, 단말기의 스크린 상에 디스플레이된 콘텐트에 줌-아웃 조작을 수행하는 것; 또는
x축 방향에서의 조작 객체의 이동 트랙이 미리 설정된 범위를 넘을 때, 단말기에 의해, 단말기의 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하는 것; 또는
y축 방향에서의 조작 객체의 이동 트랙이 미리 설정된 범위를 넘을 때, 단말기에 의해, 단말기의 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하는 것.
줌 비율은 z 방향에서 시작 위치에 대한 시프트의 변화에 따라 제어되어, 예를 들어, z 방향에서 0.5 유닛은 4배의 줌 값을 가지고, 4배의 줌-인이 양의(스크린까지의 거리가 증가되는) 방향에서 수행되고, 1/4 배로의 줌-아웃이 음의(스크린까지의 거리가 감소되는) 방향에서 수행된다. 즉, △z < 0일 때, 이것은 스크린으로부터 멀어지고 있는 것을 지시하고, 줌-아웃 명령어가 발생되고, 줌-아웃 조작이 수행되며; △z > 0일 때, 이것은 스크린에 가까워지고 있는 것을 지시하고, 줌-인 명령어가 발생되고, 줌-인 조작이 수행된다.
x축 방향 또는 y축 방향에서 시작 위치에 대한 시프트의 변화에 따라 회전이 제어된다. 하버 위치의 시프트가 미리 설정된 범위(예를 들어, SAFE_X와 SAFE_Y로서 미리 설정됨)를 넘을 때, 스크린 상의 콘텐트를 회전시키기 위해, 초과 거리에 따라 회전 속력이 계산된다. x축 방향 또는 y축 방향에서 회전 속력이 0보다 크면, 부동 또는 공중 조작 제스처를 검출하기 위해 이용되는 서비스가 메시지를 전송할 수 있음으로써, 서브-인터페이스가 연속적으로 회전하거나, 또는 어느 각도만큼 회전하거나, 또는 제스처 트랙에 따라 회전하도록 한다. x축 방향과 y축 방향 양쪽에서 회전 속력들이 0이면, 이것은 조작 객체가 미리 설정된 범위(SAFE_X와 SAFE_Y) 내에서 이동하는 것을 지시하고, 원래 회전 처리는 취소되고, 회전은 정지된다.
일반적으로, 회전 방향은 손가락의 현재 위치와 (타이머가 개시될 때) 시작 위치 사이의 방향과 거리에 기초하여 결정된다. 예를 들어, 손가락의 위치는 중심점의 우측에 바로 있고, 이 경우에, 인터페이스는 오른쪽으로 회전된다; 위치와 중심점 사이의 거리의 길이는 회전 속력에 영향을 미칠 수 있고, 거리가 더 길수록, 회전은 더 빨라진다. 손가락이 중심점에 대해 45도를 가지고 상부 우측 코너의 위치에 있다면, 인터페이스는 동시에 오른쪽 및 위쪽으로 회전되고, 중심점의 위치에 따라 회전 속력이 또한 결정된다. 사용자가 중심 포인트의 위치로 손가락을 도로 이동시키면, 인터페이스의 회전이 정지된다.
옵션적으로, S103 후에, 방법은 다음을 더 포함한다:
단말기가 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 재차 검출할 때, 단말기에 의해, 조작 객체의 하버 조작이 재차 검출될 때 획득된 조작 객체의 부동 위치를 주밍 또는 회전 조작의 시작 위치로서 갱신하는 것; 및 단말기의 스크린 상에 디스플레이되고, 조작 객체의 하버 조작이 재차 검출될 때 획득된 조작 객체의 부동 위치에 대응하는 콘텐트를 주밍 또는 회전 조작의 중심 영역으로서 결정하는 것.
예를 들어, 도 2는 본 발명에 따른 조작 객체의 하버 위치들의 개략도이다. 도 2에, 4개의 포인트들, 즉, A1 내지 A4가 있고, 좌표들은 각각 (x, y, 0), (x, y, z2), (x, y, z3), 및 (x, y, z4)이고, 여기서, A2 내지 A4가 조작 객체의 하버 위치들이고, A1은 A2 내지 A4에 대응하며 스크린 상의 포인트이다. 조작 객체(예를 들어, 손가락)가 A2로부터 A3으로 이동한다면, 즉, 시프트가 s1 = z2 - z3 > 0이면, A1 포인트 (x, y)를 중심으로서 이용하여 뷰에서 줌-인이 수행된다. 조작 객체가 A2로부터 A4로 이동한다면, 즉, 시프트가 s2 = z2 - z4 < 0이면, A1 포인트 (x, y)를 중심으로서 이용하여 뷰에서 줌-아웃이 수행된다. 도 3에 도시된 바와 같이, s1 > 0일 때, 스크린 상에 디스플레이된 콘텐트는 도 3의 도 A로부터 도 B로 변화한다. s2 < 0일 때, 스크린 상에 디스플레이된 콘텐트는 도 3의 도 A로부터 도 C로 변화한다.
옵션적으로, 주밍 동안, 스크린 상에 디스플레이되는 콘텐트의 변화 속력이 또한 설정될 수 있고, 일반적으로, 콘텐트의 변화 속력은 조작 객체의 운동 속력 미만이다.
유사하게, 회전 상황이 도 4에 도시된다. 도 4에, 4개의 포인트들, 즉, A1, A2, B2, 및 C2가 있고, 좌표들은 각각 (x, y, 0), (x, y, z2), (x1, y1, z1), 및 (x2, y1, z1)이다. A2가 시작 위치이고, A1이 A2에 대응하고 스크린 상의 포인트이고, 조작 객체는 A2로부터 C2로 이동하고 그 후 B2로 이동한다. s3 = z2 - z1 < 0이기 때문에, x축 방향과 y축 방향 양쪽에서 시프트가 있고, 이동 트랙이 미리 설정된 범위를 넘고, 스크린 상의 콘텐트가 동시에 줌-아웃 및 회전되며, 즉, 도 4의 도 A로부터 도 B로 뷰가 변화한다.
옵션적으로, 조작 객체가 터치스크린의 부동 또는 공중 센싱 영역을 떠나는 것을 검출하는 기간 후에, 단말기는 조작 객체의 이동 트랙을 검출하는 상태로부터 즉시 나갈 수 있다.
본 발명에서 제공되는 부동 또는 공중 조작 처리 방법은 위에 상세히 기술되고, 본 발명에서 제공되는 부동 또는 공중 조작 처리 장치는 아래에 상세히 기술된다.
실시예 2
도 5는 본 실시예에 따른 부동 또는 공중 조작 처리 장치의 개략도이다. 도 5에 도시된 바와 같이, 본 발명의 부동 또는 공중 조작 처리 장치는 센서(501)와 프로세서(502)를 포함한다.
센서(501)는 센서(501)의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작을 검출하도록 구성된다.
센서(501)는 터치스크린, 카메라, 초음파 센서, 또는 적외선 센서와 같은 센서일 수 있거나, 또는 협동적으로 사용되는, 터치스크린과 카메라, 또는 초음파 센서, 또는 적외선 센서와 같은 센서들의 조합일 수 있다. 터치스크린은 본 발명의 이 실시예의 설명을 위한 예로서 사용되고, 카메라, 초음파 센서, 또는 적외선 센서와 같은 센서도 그것과 마찬가지이다.
본 발명에서, 조작 객체는 일반적으로 사용자의 손가락과 같은, 센서(501)에 의해 감지될 수 있는 객체이다. 부동 또는 공중 조작은, 조작 객체가 센서(501)를 터치하지 않는 경우에, 센서(501)에 의해 감지될 수 있는 조작을 지칭한다.
센서(501)는 조작 객체의 하버 위치의 변화를 감지하며, 하버 위치의 변화는 구체적으로 다음 중 하나 또는 임의의 조합을 포함한다: 스크린과 평행하고 조작 객체가 위치한 평면 내의 x축 방향에서의 조작 객체의 변화; 또는 스크린과 평행하고 조작 객체가 위치한 평면 내의 y축 방향에서의 조작 객체의 변화; 또는 센서(501)와 수직인 z축 방향에서의 조작 객체의 변화.
프로세서(502)는, 센서(501)에 의해 검출된 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 결정하도록 구성된다.
프로세서(502)는: 프로세서(502)가 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시킨다고 결정할 때, 센서(501)를 이용하여 조작 객체의 이동 트랙을 검출하도록 구성된다. 이 경우에, 단말기는 주밍/회전 모드의 활성화를 트리거한다.
센서에 의해 검출된 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 프로세서(502)에 의해 결정하는 것은 구체적으로: 조작 객체의 부동 또는 공중 조작이, 제1 시간 임계값 내에 그 위치가 변화없이 유지되거나 또는 그 위치 시프트가 허용오차 범위 내인, 조작 객체의 하버 조작인지 프로세서(502)에 의해 결정하는 것이고, 여기서 예라면, 단말기의 부동 또는 공중 센싱 영역 내의 부동 또는 공중 조작이 미리 정해진 조건을 충족시킨다. 제1 시간 임계값은 실제 사용에 따라 미리 설정될 수 있고, 예를 들어, 1초일 수 있다.
시프트는, 방향을 포함할 뿐만 아니라 길이도 포함하는, 벡터일 수 있다.
허용오차 범위는 사용자가 조작 동안 흔들릴 수 있기 때문에 미리 설정되는 거리 범위이고, 이 거리 범위 내에서 이동할 때, 조작 객체는 대략 동일 위치에 있는 것으로 간주될 수 있다. 즉, x축 방향, y축 방향, 및 z 방향에서의 조작 객체의 시프트들이 모두 허용오차 범위 내에 있다고 결정될 때, 그것은 조작 객체의 이동이 흔들림에 속함을 지시하고, 단말기는 조작 객체가 동일 위치에 있다고 간주한다.
프로세서(502)에 의해, 조작 객체의 부동 또는 공중 조작이 하버 조작인지 결정하는 것은 구체적으로 다음을 포함한다: 센서(501)가 조작 객체를 검출할 때, 조작 객체의 현재 위치를 초기 하버 위치로서 프로세서(502)에 의해 설정하고, 타이머를 개시하는 것; 및 초기 하버 위치에 대해 상대적인 조작 객체의, 센서(501)에 의해 검출된, 시프트가 허용오차 범위를 넘고, 타이머의 카운트가 제1 시간 임계값에 도달하지 않은 것을 프로세서(502)가 결정하면, 조작 객체의 현재 위치를 초기 하버 위치로서, 프로세서에 의해, 설정하고, 타이머를 재개하는 것; 또는 타이머의 카운트가 제1 시간 임계값에 도달하면, 프로세서(502)에 의해, 부동 또는 공중 조작이 하버 조작이라고 결정하고, 조작 객체의 현재 위치를 초기 하버 위치로서 설정하고, 타이머를 재개하는 것.
프로세서(502)는 센서(501)를 이용하여 조작 객체의 이동 트랙을 검출하도록 구성된다.
조작 객체의 이동 트랙은 다음 중 하나 또는 임의의 조합을 포함한다: 단말기의 스크린과 평행한 평면 내의 평면 직교 좌표계의 x축 방향에서의 조작 객체의 이동 트랙; 또는 평면 직교 좌표계의 y축 방향에서의 조작 객체의 이동 트랙; 또는 스크린과 수직인 z 방향에서의 조작 객체의 이동 트랙.
프로세서(502)는 x축 방향, 또는 y축 방향, 또는 z 방향에서의 조작 객체의 하버 위치와 시작 위치 사이의 시프트를 계산한다.
조작 객체의 이동 트랙은 연속적으로 변화하는 트랙 라인일 수 있거나, 또는 변화하는 포인트들일 수 있으며, 즉, 조작 객체의 하나 이상의 포인트들이 검출되고, 계산 동안, 포인트 변환에 의해 유발된 신호 파형 변화를 이용하여, 조작 객체의 하버 위치의 변화가 계산된다.
프로세서(502)는 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을, 조작 객체의 이동 트랙에 따라 수행하도록 더 구성된다.
프로세서(502)는 단말기의 스크린 상에 디스플레이되고 제2 위치에 대응하는 콘텐트 내의 영역을 주밍 또는 회전 조작의 중심 영역으로서 결정하고, 제2 위치를 주밍 또는 회전 조작의 시작 위치로서 결정하고, 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하며, 여기서 제2 위치는, 단말기가 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 검출할 때, 조작 객체의 부동 위치이다.
프로세서(502)에 의해, 조작 객체의 이동 트랙을 검출하는 것은 다음을 포함한다:
조작 객체의 현재 부동 위치와 시작 위치 사이의, 센서에 의해 검출된, 시프트를, 프로세서(502)에 의해, 계산하고 기록하는 것, 및 시프트를 조작 객체의 이동 트랙으로서 이용하는 것.
구체적으로, 프로세서(502)는: z 방향에서의 조작 객체의 이동 트랙이 센서(501)에 가까워지고 있을 때, 스크린 상에 디스플레이된 콘텐트에 줌-인 조작을 수행하도록 구성되거나; 또는
프로세서(502)는 z 방향에서의 조작 객체의 이동 트랙이 센서(501)로부터 멀어지고 있을 때, 스크린 상에 디스플레이된 콘텐트에 줌-아웃 조작을 수행하도록 구성되거나; 또는
프로세서(502)는 x축 방향에서의 조작 객체의 이동 트랙이 미리 설정된 범위를 넘을 때, 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하도록 구성되거나; 또는
프로세서(502)는 y축 방향에서의 조작 객체의 이동 트랙이 미리 설정된 범위를 넘을 때, 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하도록 구성된다.
줌 비율은 z 방향에서 시작 위치에 대한 시프트의 변화에 따라 제어되어, 예를 들어, z 방향에서 0.5 유닛은 4배의 줌 값을 가지고, 4배의 줌-인이 양의(스크린까지의 거리가 증가되는) 방향에서 수행되고, 1/4 배로의 줌-아웃이 음의(스크린까지의 거리가 감소되는) 방향에서 수행된다. 즉, △z < 0일 때, 이것은 스크린으로부터 멀어지고 있는 것을 지시하고, 줌-아웃 명령어가 발생되고, 줌-아웃 조작이 수행되며; △z > 0일 때, 이것은 스크린에 가까워지고 있는 것을 지시하고, 줌-인 명령어가 발생되고, 줌-인 조작이 수행된다.
x축 방향 또는 y축 방향에서 시작 위치에 대한 시프트의 변화에 따라 회전이 제어된다. 하버 위치의 시프트가 미리 설정된 범위(예를 들어, SAFE_X와 SAFE_Y로서 미리 설정됨)를 넘을 때, 스크린 상의 콘텐트를 회전시키기 위해, 초과 거리에 따라 회전 속력이 계산된다. x축 방향 또는 y축 방향에서 회전 속력이 0보다 크면, 부동 또는 공중 조작 제스처를 검출하기 위해 이용되는 서비스가 메시지를 전송할 수 있음으로써, 서브-인터페이스가 연속적으로 회전하거나, 어느 각도만큼 회전하거나, 또는 제스처 트랙에 따라 회전하도록 한다. x축 방향과 y축 방향 양쪽에서 회전 속력들이 0이면, 이것은 조작 객체가 미리 설정된 범위(SAFE_X와 SAFE_Y) 내에서 이동하는 것을 지시하고, 원래 회전 처리는 취소되고, 회전은 정지된다.
일반적으로, 회전 방향은 손가락의 현재 위치와 (타이머가 개시될 때) 시작 위치 사이의 방향과 거리에 기초하여 결정된다. 예를 들어, 손가락의 위치는 중심점의 우측에 바로 있고, 이 경우에, 인터페이스는 오른쪽으로 회전된다. 위치와 중심점 사이의 거리의 길이는 회전 속력에 영향을 미칠 수 있고, 거리가 더 길수록, 회전은 더 빨라진다. 손가락이 중심점에 대해 45도를 가지고 상부 우측 코너의 위치에 있다면, 인터페이스는 동시에 오른쪽 및 위쪽으로 회전되고, 중심점의 위치에 따라 회전 속력이 또한 결정된다. 사용자가 중심 포인트의 위치로 손가락을 도로 이동시키면, 인터페이스의 회전이 정지된다.
옵션적으로, 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행한 후, 프로세서(502)는: 센서에 의해 검출된 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 재차 결정할 때, 조작 객체의 하버 조작이 재차 결정될 때 획득된 조작 객체의 부동 위치를 주밍 또는 회전 조작의 시작 위치로서 갱신하고; 스크린 상에 디스플레이되고, 조작 객체의 하버 조작이 재차 검출될 때 획득된 조작 객체의 부동 위치에 대응하는 콘텐트를 주밍 또는 회전 조작의 중심 영역으로서 결정하도록 더 구성된다.
본 발명에서 제공되는 부동 또는 공중 조작 처리 방법 및 장치에 따르면, 이동 프로세스에서 사용자의 부동 또는 공중 조작이 처리되고, 사용자의 이동 트랙 및 경향이 결정되고, 사용자의 이동 트랙에 따라 대응하는 주밍/회전 처리가 수행되어, 웹 페이지 및 화상과 같은 디스플레이된 객체들이 부동 또는 공중 조작 동안 주밍 방식으로 시청될 수 있도록 하며, 이것은 기존의 멀티-터치 기능을 대체하고, 조작하기에 유연하고 편리하다.
통상의 기술자라면, 또한, 본 명세서에서 개시된 실시예들에서 설명되는 예들과 연계하여, 전자 하드웨어, 컴퓨터 소프트웨어, 또는 이들의 조합에 의해 유닛들 및 알고리즘 단계들이 구현될 수 있다는 것을 알 수 있을 것이다. 하드웨어와 소프트웨어 간의 교환가능성을 명백하게 설명하기 위해, 기능들에 따라 각각의 예의 단계들 및 구성들을 일반적으로 기술하였다. 기능들이 하드웨어 또는 소프트웨어에 의해 수행될 것인지는 특정 애플리케이션들 및 기술적 해결책들의 설계 제약 조건들에 의존한다. 통상의 기술자라면, 각각의 특정 애플리케이션에 대해 설명되는 기능들을 구현하기 위해 상이한 방법들을 이용할 수 있지만, 이러한 구현이 본 발명의 범위를 넘는 것이라고 간주되어서는 안 된다.
본 명세서에서 개시된 실시예들에 설명되는 방법들 및 알고리즘들의 단계들은 하드웨어, 프로세서에 의해 실행되는 소프트웨어 모듈, 또는 이들의 조합에 의해 구현될 수 있다. 소프트웨어 모듈은, 랜덤 액세스 메모리(RAM), 메모리, 판독 전용 메모리(ROM), 전기적으로 프로그램 가능한 ROM, 전기적으로 소거가능하고 프로그램 가능한 ROM, 레지스터, 하드 디스크, 착탈식 디스크, CD-ROM, 또는 본 기술에 공지된 임의의 다른 형태의 저장 매체에 상주할 수 있다.
상기 특정 구현 방식들로, 본 발명의 목적, 기술적 해결책들, 및 이점들이 상세히 더 설명되었다. 상기의 설명들은 본 발명의 특정 구현 방식들일 뿐이고, 본 발명의 보호 범위를 제한하고자 함이 아니라는 점을 이해해야 한다. 본 발명의 사상과 원리로부터 벗어나지 않고 이루어지는 임의의 수정, 균등한 대체, 또는 개선은 본 발명의 보호 범위 내에 들어와야 한다.

Claims (14)

  1. 부동(floating) 또는 공중(mid-air) 조작 처리 방법으로서,
    단말기에 의해, 상기 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 검출하는 단계; 및 예(yes)라면, 상기 단말기에 의해, 상기 조작 객체의 이동 트랙을 검출하는 단계; 및
    상기 조작 객체의 이동 트랙에 따라 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍(zooming) 또는 회전 조작을 수행하는 단계를 포함하는, 방법.
  2. 제1항에 있어서,
    상기 단말기에 의해, 상기 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 검출하는 단계는: 상기 단말기에 의해, 상기 조작 객체의 부동 또는 공중 조작이, 제1 시간 임계값 내에 그 위치가 변화없이 유지되거나 또는 그 위치 시프트가 허용오차 범위 내인, 상기 조작 객체의 하버(hover) 조작인지 검출하는 단계를 포함하고, 예라면, 상기 단말기의 부동 또는 공중 센싱 영역 내의 부동 또는 공중 조작이 상기 미리 정해진 조건을 충족시키는, 방법.
  3. 제2항에 있어서, 상기 단말기에 의해, 상기 조작 객체의 부동 또는 공중 조작이 하버 조작인지 검출하는 단계는 구체적으로:
    상기 단말기가 상기 단말기의 부동 또는 공중 센싱 영역 내의 조작 객체를 검출할 때, 상기 조작 객체의 현재 위치를 초기 하버 위치로서 설정하고, 타이머를 개시하는 단계; 및
    상기 초기 하버 위치에 대해 상대적인 상기 조작 객체의 시프트가 상기 허용오차 범위를 넘고, 상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하지 않은 것을 검출하면, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서 설정하고, 상기 타이머를 재개하는 단계; 또는
    상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하면, 상기 부동 또는 공중 조작이 하버 조작이라고 결정하고, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서 설정하고, 상기 타이머를 재개하는 단계를 포함하는, 방법.
  4. 제2항 또는 제3항에 있어서, 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계는:
    상기 단말기의 상기 스크린 상에 디스플레이되고 제2 위치에 대응하는 콘텐트 내의 영역을 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하고, 상기 제2 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 결정하고, 상기 단말기의 상기 스크린 상에 디스플레이된 콘텐트에 상기 주밍 또는 회전 조작을 수행하는 단계 - 상기 제2 위치는, 상기 단말기가 상기 조작 객체의 상기 부동 또는 공중 조작이 하버 조작이라고 검출할 때, 상기 조작 객체의 부동 위치임 -를 포함하고;
    상기 단말기에 의해, 상기 조작 객체의 이동 트랙을 검출하는 단계는:
    상기 조작 객체의 현재 부동 위치와 상기 시작 위치 사이의 시프트를 계산하는 단계 및 기록하는 단계, 및 상기 시프트를 상기 조작 객체의 이동 트랙으로서 이용하는 단계를 포함하는, 방법.
  5. 제4항에 있어서, 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계 후에:
    상기 단말기가 상기 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 재차 검출할 때, 상기 단말기에 의해, 상기 조작 객체의 하버 조작이 재차 검출될 때 획득된 상기 조작 객체의 부동 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 갱신하는 단계; 및 상기 단말기의 상기 스크린 상에 디스플레이되고, 상기 조작 객체의 하버 조작이 재차 검출될 때 획득된 상기 조작 객체의 상기 부동 위치에 대응하는 콘텐트를 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하는 단계를 더 포함하는, 방법.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서, 상기 조작 객체의 상기 이동 트랙은 다음:
    상기 단말기의 상기 스크린과 평행한 평면 내의 평면 직교 좌표계의 x축 방향에서의 상기 조작 객체의 이동 트랙; 또는
    상기 평면 직교 좌표계의 y축 방향에서의 상기 조작 객체의 이동 트랙; 또는
    상기 단말기의 상기 스크린과 수직인 z 방향에서의 상기 조작 객체의 이동 트랙
    중 하나 또는 임의의 조합을 포함하는, 방법.
  7. 제6항에 있어서, 상기 조작 객체의 이동 트랙에 따라 상기 단말기에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 단계는 구체적으로 다음:
    상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 단말기의 상기 스크린에 가까워지고 있을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-인 조작을 수행하는 단계;
    상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 단말기의 상기 스크린으로부터 멀어지고 있을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-아웃 조작을 수행하는 단계;
    상기 x축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하는 단계; 및
    상기 y축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 단말기에 의해, 상기 단말기의 상기 스크린 상에 디스플레이된 상기 콘텐트에 회전 조작을 수행하는 단계
    중 하나 또는 임의의 조합을 포함하는, 방법.
  8. 부동 또는 공중 조작 처리 장치로서,
    센서 및 프로세서를 포함하고,
    상기 센서는 상기 센서의 부동 또는 공중 센싱 영역 내의 조작 객체의 부동 또는 공중 조작을 검출하도록 구성되고,
    상기 프로세서는 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 결정하도록 구성되고; 상기 프로세서는, 상기 프로세서가 상기 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시킨다고 결정할 때, 상기 센서를 이용하여 상기 조작 객체의 이동 트랙을 검출하도록 구성되고;
    상기 프로세서는 상기 조작 객체의 상기 이동 트랙에 따라 상기 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하도록 더 구성되는, 장치.
  9. 제8항에 있어서, 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이 미리 정해진 조건을 충족시키는지 상기 프로세서에 의해 결정하는 것은 구체적으로: 상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이, 제1 시간 임계값 내에 그 위치가 변화없이 유지되거나 또는 그 위치 시프트가 허용오차 범위 내인, 상기 조작 객체의 하버 조작인지 프로세서에 의해 결정하는 것이고, 예라면, 상기 장치의 부동 또는 공중 센싱 영역 내의 상기 부동 또는 공중 조작이 상기 미리 정해진 조건을 충족시키는, 장치.
  10. 제9항에 있어서, 상기 조작 객체의 부동 또는 공중 조작이 하버 조작인지 프로세서에 의해 결정하는 것은 구체적으로:
    상기 센서가 상기 조작 객체를 검출할 때, 상기 조작 객체의 현재 위치를 초기 하버 위치로서 상기 프로세서에 의해 설정하고, 타이머를 개시하는 것; 및
    상기 초기 하버 위치에 대해 상대적인 상기 조작 객체의, 상기 센서에 의해 검출된, 시프트가 상기 허용오차 범위를 넘고, 상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하지 않은 것을 상기 프로세서가 검출하면, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서, 상기 프로세서에 의해, 설정하고, 상기 타이머를 재개하는 것; 또는
    상기 타이머의 카운트가 상기 제1 시간 임계값에 도달하면, 상기 부동 또는 공중 조작이 하버 조작이라고, 상기 프로세서에 의해, 결정하고, 상기 조작 객체의 현재 위치를 상기 초기 하버 위치로서 설정하고, 상기 타이머를 재개하는 것을 포함하는, 장치.
  11. 제9항 또는 제10항에 있어서, 상기 프로세서에 의해, 상기 단말기의 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행하는 것은:
    상기 프로세서에 의해, 상기 단말기의 상기 스크린 상에 디스플레이되고 제2 위치에 대응하는 콘텐트 내의 영역을 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하고, 상기 제2 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 결정하고, 상기 단말기의 상기 스크린 상에 디스플레이된 콘텐트에 상기 주밍 또는 회전 조작을 수행하는 것 - 상기 제2 위치는, 상기 단말기가 상기 조작 객체의 상기 부동 또는 공중 조작이 하버 조작이라고 검출할 때, 상기 조작 객체의 부동 위치임 -을 포함하고;
    상기 프로세서에 의해, 상기 조작 객체의 이동 트랙을 검출하는 것은:
    상기 조작 객체의 현재 부동 위치와 상기 시작 위치 사이의, 상기 센서에 의해 검출된, 시프트를, 상기 프로세서에 의해, 계산하고 기록하고, 상기 시프트를 상기 조작 객체의 이동 트랙으로서 이용하는 것을 포함하는, 장치.
  12. 제11항에 있어서, 상기 스크린 상에 디스플레이된 콘텐트에 주밍 또는 회전 조작을 수행한 후에: 상기 프로세서는,
    상기 센서에 의해 검출된 상기 조작 객체의 부동 또는 공중 조작이 하버 조작이라고 재차 결정할 때, 상기 조작 객체의 하버 조작이 재차 결정될 때 획득된 상기 조작 객체의 부동 위치를 상기 주밍 또는 회전 조작의 시작 위치로서 갱신하고; 상기 스크린 상에 디스플레이되고, 상기 조작 객체의 하버 조작이 재차 결정될 때 획득된 상기 조작 객체의 상기 부동 위치에 대응하는 콘텐트를 상기 주밍 또는 회전 조작의 중심 영역으로서 결정하도록 더 구성되는, 장치.
  13. 제8항 내지 제12항 중 어느 한 항에 있어서, 상기 조작 객체의 상기 이동 트랙은 다음:
    상기 조작 객체가 위치하고, 상기 스크린과 평행한 평면 내의 평면 직교 좌표계의 x축 방향에서의 상기 조작 객체의 이동 트랙; 또는
    상기 평면 직교 좌표계의 y축 방향에서의 상기 조작 객체의 이동 트랙; 또는
    상기 스크린과 수직인 z 방향에서의 상기 조작 객체의 이동 트랙
    중 하나 또는 임의의 조합을 포함하는, 장치.
  14. 제13항에 있어서, 상기 프로세서는 구체적으로, 상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 센서에 가까워지고 있을 때, 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-인 조작을 수행하도록 구성되거나; 또는
    상기 프로세서는 구체적으로, 상기 z 방향에서의 상기 조작 객체의 상기 이동 트랙이 상기 센서로부터 멀어지고 있을 때, 상기 스크린 상에 디스플레이된 상기 콘텐트에 줌-아웃 조작을 수행하도록 구성되거나; 또는
    상기 프로세서는 구체적으로, 상기 x축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 스크린 상에 디스플레이된 콘텐트에 회전 조작을 수행하도록 구성되거나; 또는
    상기 프로세서는 구체적으로, 상기 y축 방향에서의 상기 조작 객체의 상기 이동 트랙이 미리 설정된 범위를 넘을 때, 상기 스크린 상에 디스플레이된 상기 콘텐트에 회전 조작을 수행하도록 구성되는, 장치.
KR1020167013544A 2013-10-31 2013-10-31 부동 또는 공중 조작 처리 방법 및 장치 KR20160077122A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/086309 WO2015062017A1 (zh) 2013-10-31 2013-10-31 悬浮或隔空操作的处理方法及装置

Publications (1)

Publication Number Publication Date
KR20160077122A true KR20160077122A (ko) 2016-07-01

Family

ID=50864330

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167013544A KR20160077122A (ko) 2013-10-31 2013-10-31 부동 또는 공중 조작 처리 방법 및 장치

Country Status (6)

Country Link
US (1) US20160246383A1 (ko)
EP (1) EP3054373A4 (ko)
JP (1) JP2016539413A (ko)
KR (1) KR20160077122A (ko)
CN (1) CN103858085A (ko)
WO (1) WO2015062017A1 (ko)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9594489B2 (en) * 2014-08-12 2017-03-14 Microsoft Technology Licensing, Llc Hover-based interaction with rendered content
CN105630815A (zh) * 2014-10-31 2016-06-01 广州市动景计算机科技有限公司 网页重排版方法及装置
CN105278668A (zh) * 2014-12-16 2016-01-27 维沃移动通信有限公司 移动终端的控制方法及移动终端
EP3255523B1 (en) * 2015-03-13 2022-05-04 Huawei Technologies Co., Ltd. Electronic device, photographing method and photographing apparatus
KR102344045B1 (ko) * 2015-04-21 2021-12-28 삼성전자주식회사 화면을 표시하는 전자 장치 및 그 제어 방법
CN104898972A (zh) * 2015-05-19 2015-09-09 青岛海信移动通信技术股份有限公司 一种调整电子图像的方法及设备
US10372268B2 (en) * 2015-07-21 2019-08-06 Sony Corporation Spatial image display apparatus and spatial image display method
US10216405B2 (en) * 2015-10-24 2019-02-26 Microsoft Technology Licensing, Llc Presenting control interface based on multi-input command
CN105430158A (zh) * 2015-10-28 2016-03-23 努比亚技术有限公司 一种隔空操作的处理方法及终端
CN105759961A (zh) * 2016-02-03 2016-07-13 林勇 智能设备以及智能设备控制方法
CN106371512A (zh) * 2016-08-29 2017-02-01 胡镇洪 一种可悬浮空中的平板电脑
CN106547367A (zh) * 2016-10-31 2017-03-29 努比亚技术有限公司 一种输入法控制装置及方法
CN106681612A (zh) * 2016-12-29 2017-05-17 宇龙计算机通信科技(深圳)有限公司 一种应用于移动终端的调节方法及移动终端
CN108427531A (zh) * 2017-02-15 2018-08-21 上海箩箕技术有限公司 终端及其可阅读内容的查阅方法、装置
CN106997258A (zh) * 2017-03-02 2017-08-01 惠州Tcl移动通信有限公司 一种移动终端界面旋转控制方法及系统
CN107515700A (zh) * 2017-09-05 2017-12-26 电子科技大学中山学院 一种用于智能镜子的非接触式触屏效果模拟方法
CN107908313B (zh) * 2017-11-22 2021-04-13 Oppo广东移动通信有限公司 电子装置的控制方法及电子装置
CN108427534B (zh) * 2018-03-23 2020-11-24 北京硬壳科技有限公司 控制屏幕返回桌面的方法和装置
CN110389800A (zh) * 2018-04-23 2019-10-29 广州小鹏汽车科技有限公司 一种车载大屏上显示内容处理方法、装置、介质和设备
CN109450426A (zh) * 2018-10-31 2019-03-08 西安中颖电子有限公司 一种利用多感应电极实现隔空触摸的方法
CN109785442B (zh) * 2018-12-11 2023-07-11 平安科技(深圳)有限公司 图像旋转的控制方法及装置、图像旋转的显示方法及系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7394454B2 (en) * 2004-01-21 2008-07-01 Microsoft Corporation Data input device and method for detecting lift-off from a tracking surface by electrical impedance measurement
US8086971B2 (en) * 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
KR101513023B1 (ko) * 2008-03-25 2015-04-22 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
US8237666B2 (en) * 2008-10-10 2012-08-07 At&T Intellectual Property I, L.P. Augmented I/O for limited form factor user-interfaces
US20120120002A1 (en) * 2010-11-17 2012-05-17 Sony Corporation System and method for display proximity based control of a touch screen user interface
CN102736757A (zh) * 2011-03-31 2012-10-17 比亚迪股份有限公司 触控识别方法及触控识别装置
US8654076B2 (en) * 2012-03-15 2014-02-18 Nokia Corporation Touch screen hover input handling
CN102937832B (zh) * 2012-10-12 2016-01-20 广东欧珀移动通信有限公司 一种移动终端的手势捕捉方法及装置
JP5852050B2 (ja) * 2013-05-27 2016-02-03 株式会社ジャパンディスプレイ タッチ検出装置、タッチ検出機能付き表示装置、及び電子機器
US20150042580A1 (en) * 2013-08-08 2015-02-12 Lg Electronics Inc. Mobile terminal and a method of controlling the mobile terminal

Also Published As

Publication number Publication date
US20160246383A1 (en) 2016-08-25
CN103858085A (zh) 2014-06-11
EP3054373A1 (en) 2016-08-10
WO2015062017A1 (zh) 2015-05-07
EP3054373A4 (en) 2016-10-19
JP2016539413A (ja) 2016-12-15

Similar Documents

Publication Publication Date Title
KR20160077122A (ko) 부동 또는 공중 조작 처리 방법 및 장치
TWI514248B (zh) 防止誤觸發邊緣滑動手勢之方法及手勢觸發方法
EP2482179B1 (en) Apparatus and method for controlling screen display in touch screen terminal
US9678606B2 (en) Method and device for determining a touch gesture
US8570283B2 (en) Information processing apparatus, information processing method, and program
US8976140B2 (en) Touch input processor, information processor, and touch input control method
CN102591450B (zh) 信息处理装置及其操作方法
CN103376945B (zh) 信息处理装置及其控制方法
US9024895B2 (en) Touch pad operable with multi-objects and method of operating same
CN108733302B (zh) 手势触发方法
JP5915061B2 (ja) 情報処理装置および方法、プログラム、並びに記録媒体
WO2012129975A1 (en) Method of identifying rotation gesture and device using the same
US20150370443A1 (en) System and method for combining touch and gesture in a three dimensional user interface
KR20170108662A (ko) 터치 패널을 포함하는 전자 장치 및 그 제어 방법
TW201416909A (zh) 適於接觸控制及懸浮控制的觸控系統及其運作方法
US20140320430A1 (en) Input device
KR101333211B1 (ko) 베젤을 이용한 터치스크린 제어방법
KR101503159B1 (ko) 시선의 위치를 감지하여 터치스크린을 제어하는 방법
TWI547858B (zh) 於觸控螢幕上控制檔案縮放及旋轉的系統及方法
KR101134192B1 (ko) 터치스크린 제어방법, 이를 기록한 기록매체, 이를 구현하는 터치스크린 제어장치 및 모바일 기기
JP6255321B2 (ja) 情報処理装置とその指先操作識別方法並びにプログラム
CN103513881B (zh) 电子设备及电子设备中控制显示界面的方法及装置
CN103513880B (zh) 电子设备、电子设备中控制目标对象旋转的方法及装置
KR101375727B1 (ko) 선형터치패턴을 이용한 터치스크린의 화면확대/축소 방법 및 장치
JPWO2014147718A1 (ja) 電子機器、表示制御方法およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination