KR20180081143A - 터치스크린 동작모드의 제어방법 및 제어장치 - Google Patents

터치스크린 동작모드의 제어방법 및 제어장치 Download PDF

Info

Publication number
KR20180081143A
KR20180081143A KR1020187017614A KR20187017614A KR20180081143A KR 20180081143 A KR20180081143 A KR 20180081143A KR 1020187017614 A KR1020187017614 A KR 1020187017614A KR 20187017614 A KR20187017614 A KR 20187017614A KR 20180081143 A KR20180081143 A KR 20180081143A
Authority
KR
South Korea
Prior art keywords
touch screen
operation mode
mode
touch
switching
Prior art date
Application number
KR1020187017614A
Other languages
English (en)
Other versions
KR101930225B1 (ko
Inventor
빠오리 리
Original Assignee
고어텍 테크놀로지 컴퍼니., 리미티드.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 고어텍 테크놀로지 컴퍼니., 리미티드. filed Critical 고어텍 테크놀로지 컴퍼니., 리미티드.
Publication of KR20180081143A publication Critical patent/KR20180081143A/ko
Application granted granted Critical
Publication of KR101930225B1 publication Critical patent/KR101930225B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 일 실시예에 따른 터치스크린 동작모드의 제어방법은, 사용자가 터치스크린을 조작할 때 생성되는 현재 터치 조작데이터를 획득하는 단계; 및 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하며, 전환하여야 한다면 터치스크린 제어칩으로 전환신호를 송신하여, 상기 터치스크린 제어칩이 상기 전환신호를 수신한 경우 터치스크린의 동작모드를 전환하도록 제어하는 단계를 포함하는 것을 특징으로 한다. 이에 따르면, 사용자의 터치스크린 상의 터치 조작데이터 및 터치스크린의 현재 동작모드에 따라 자동으로 사용자의 터치스크린 상의 조작의도를 식별하고, 또한 터치스크린의 동작모드를 적당한 모드로 전환하도록 할 수 있어, 사용자의 터치 제어조작에 편의성을 제공하고 사용자의 사용 체험을 최적화시킨다.

Description

터치스크린 동작모드의 제어방법 및 제어장치
본 발명은 단말장치 기술분야에 관한 것으로서, 특히 터치스크린 동작모드의 제어방법 및 제어장치에 관한 것이다.
터치스크린은 새로운 입력장치로서, 또한 현재 가장 간단하고 간편하며 자연스러운 인간-기계 인터랙션방식이며, 터치스크린은 전통적인 키보드/마우스 입력방식에 비하여 아주 현저한 기술적 장점을 갖고 있다. 예를 들면, 화면을 간략화하고 정확도를 향상시키며, 내구성이 높고 또한 터치스크린을 통하여 모든 유형의 디지털 미디어를 빠르게 액세스할 수 있고, 공간을 절약하는 등 장점이 있다.
스마트폰 등 이동장치에서, 터치스크린과 디스플레이 스크린은 일반적으로 일체형 구조이고, 터치스크린 아래에 디스플레이 스크린이 설치되며, 터치스크린의맨위층 유리상에 탐지부품이 구비되고, 탐지부품은 터치스크린 제어기와 연결되며, 사용자가 손가락으로 터치스크린 상에서 조작을 수행할 때 디스플레이 스크린 상에 디스플레이되는 아이콘을 볼 수 있기때문에, 터치스크린과 디스플레이 스크린이 일체형 구조일 때 사용자 조작이 아주 직관적이고 또한 비교적 정확하다.
하지만 웨어러블 장치(예를들면, 헤드마운티드 유형의 제품)에서, 터치스크린과 디스플레이 스크린은 일반적으로 분리구조이며, 만일 사용자가 단지 간단한 스크린 전환만 진행한다면 터치스크린을 통한 이러한 인간-기계 인터랙션 방식은 여전히 아주 훌륭한 장점을 갖는다. 하지만 사용자가 터치스크린 상에서 클릭을 통하여 아이콘을 고정하고자 한다면, 이러한 터치스크린과 디스플레이 스크린 분리구조는 터치스크린의 제어점과 디스플레이 스크린의 사용자 화면 아이콘이 대응되기 어려워, 조작이 아주 어렵고 정확하게 위치 결정을 할 수 없으며 사용자 체험이 열악하다.
본발명에서는 터치스크린 동작모드의 제어방법 및 제어장치를 제공함으로써, 종래 헤드마운티드 디바이스에서 터치스크린의 제어점과 디스플레이 스크린에 표시되는 사용자화면 아이콘이 대응되기 상당히 어려워서 조작이 불편하며, 사용자 체험이 저하되는 문제점을 해결하고자 한다.
본 발명의 일 실시예에 의하면, 터치스크린 동작모드의 제어방법을 제공하는 바, 상기 방법에는, 사용자가 터치스크린을 조작할 때 생성되는 현재 터치 조작데이터를 획득하는 단계; 및 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하며, 전환하여야 한다면 터치스크린 제어칩으로 전환신호를 송신하여, 상기 터치스크린 제어칩이 상기 전환신호를 수신한 경우 터치스크린의 동작모드를 전환하도록 제어하는 단계를 포함하는 것을 특징으로 한다.
상기 터치스크린의 현재 동작모드 및 상기 터치 조작 데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하기 전에, 시스템 구성파일에 상기 터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 구성옵션을 사전에 설정하는 단계; 및 상기 구성옵션의 상태정보를 판독하고 또한 상기 구성옵션이 온 상태일 때, 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 단계를 더 포함하는 것을 특징으로 한다.
상기 터치스크린의 동작모드에는 핸드 제스처모드와 모의 마우스모드가 포함되며, 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 단계는, 상기 터치스크린의 현재 동작모드가 상기 핸드 제스처모드이고 또한 상기 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하며; 상기 터치스크린의 현재 동작모드가 상개 핸드 제스처모드이고 또한 상기 헤드마운티드 디바이스의 사용자 인터랙션 툴이 외부연결의 물리마우스로부터 터치스크린으로 전환된 경우, 수신된 상기 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터이면, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하며; 상기 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 상기 터치 조작데이터가 복수 손가락의 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하며; 상기 터치스크린의 현재 동작모드가 상기 모의 마우스모드이고 또한 상기 터치 조작데이터가 한손가락의 빠른 슬라이딩 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하는 것을 특징으로 한다.
터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 작동모드 구성옵션의 호출 인터페이스를 제3자 어플리케이션으로 제공하는 단계; 및 상기 제3자 어플리케이션을 통하여 사용자에 의해 입력된 터치스크린의 동작모드를 자동으로 전환하도록 온시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 조작정보를 수신하는 단계를 더 포함하는 것을 특징으로 한다.
상기 터치스크린 제어칩으로 제1 전환신호를 송신한 후, 전환결과에 의하여 사용자 인터페이스 상에 마우스 포인터 위젯을 표시하도록 제어하는 단계를 더 포함하는 것을 특징으로 한다.
본발명의 다른 실시예에 의하면, 터치스크린 동작모드의 제어장치를 제공하는 바, 상기 장치는, 사용자의 현재 터치 조작데이터를 취득하는 데이터 취득모듈; 및 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하며, 전환하여야 한다면 터치스크린 제어칩으로 전환신호를 송신하는 동작모드 제어모듈을 포함하되, 상기 터치스크린 제어칩은 상기 전환신호를 수신한경우 상기 터치스크린의 동작모드를 전환하도록 제어하는 것을 특징으로 한다.
시스템 구성파일에 상기 터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 구성옵션을 사전에 설정하는 구성옵션 설정모듈을 더 포함하고, 상기 동작모드 제어모듈은 상기 구성옵션의 상태정보를 판독하고, 또한 상기구성옵션이 온 상태일 때, 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 것을 특징으로 한다.
상기 터치스크린의 동작모드에는 핸드 제스처모드와 모의 마우스모드가 포함되되, 상기 동작모드 제어모듈은 논리 판단모듈과 신호 생성모듈을 포함하고, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 상기 핸드 제스처모드이고 또한 상기 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 상기 신호 생성모듈로 전송하고, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를상기 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하거나, 또는, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 상기 핸드 제스처모드이고 또한 상기 헤드마운티드 디바이스의 사용자 인터랙션 툴이 외부연결의 물리마우스로부터 터치스크린으로 전환된 경우, 수신된 상기 터치 조작데이터가 한손가락 느린 연속 이동 조작데이터이면, 동작모드를 전환하기로 결정하고 또한 판단결과를 상기 신호 생성모듈로 전송하며, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하거나; 또는, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 상기 터치 조작데이터가 복수 손가락의 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 신호 생성모듈로 전송하며, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하거나, 또는, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 상기 터치 조작데이터가 한손가락 빠른 슬라이딩 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 상기 신호 생성모듈로 전송하며, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하는 것을 특징으로 한다.
상기 터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 구성옵션의 호출 인터페이스를 제3자 어플리케이션으로 제공하여, 상기 제3자 어플리케이션을 통하여 사용자에 의해 입력된 터치스크린의 동작모드를 자동으로 전환하도록 온시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 조작정보를 수신하도록 하는 사용자 인터랙션 모듈을 더 포함하는 것을 특징으로 한다.
상기 터치스크린 제어칩으로 제1 전환신호를 송신한 후, 전환결과에 의하여 사용자 인터페이스 상에 마우스 포인터 위젯을 표시하도록 제어하는 마우스 포인터표시모듈을 더 포함하는 것을 특징으로 한다.
본 발명에 따르면, 터치스크린과 디스플레이 스크린이 분리된 상황에서, 사용자에 의해 터치스크린을 조작하는 것이 불편한 문제를 해결할 수 있다. 사용자의 터치 조작데이터를 취득하고, 또한 터치스크린의 현재 동작모드에 따라 동작모드를 전환할지의 판단을 수행함으로써, 사용자의 조작의도를 자동식별하고, 사용자의 조작의도가 핸드 제스처조작 응용상황일 때(예를 들면, 터치스크린 상에서 슬라이딩할 때), 터치스크린의 동작모드를 유지하거나 또는 핸드 제스처모드로 전환하도록 제어하며, 사용자의 조작의도가 모의 마우스조작 응용상황일 때(예를들면, 터치스크린 상에서 아이콘을 클릭할 때), 터치스크린의 동작모드를 유지하거나 또는 모의 마우스모드로 전환하도록 제어하여, 사용자로하여금 디스플레이 스크린과 터치스크린이 분리된 상황에서 유연하고 간편하게 터치스크린을 조작하고, 정확하고 자유롭게 디스플레이 스크린 상의 아이콘에 위치를 고정할 수 있도록 하며, 사용자의 사용체험을 최적화시킨다.
도 1은 본 발명에 따른 일 실시예의 터치스크린 동작모드의 제어방법 흐름도이다.
도 2는 본 발명에 따른 다른 실시예의 터치스크린 동작모드의 제어방법 흐름도이다.
도 3은 본 발명에 따른 일 실시예의 터치스크린 동작모드의 제어장치 블럭도이다.
본 발명의 핵심사상으로는, 종래기술에서, 터치스크린과 디스플레이 스크린이 분리된 구조로 인하여 사용자가 터치스크린 상에서 조작할 때, 디스플레이 스크린 상의 아이콘을 위치 결정하기 아주 어렵고, 조작이 불편하며 사용자 체험이 열악한 문제를 해결하기 위하여, 터치스크린 동작모드의 제어방법 및 제어장치를 제공하여, 해당 방법을 통하여 사용자의 터치조작 데이터와 터치스크린 현재의 동작모드에 따라 빠르게 사용자의 조작의도를 판단함으로써, 터치스크린의 동작모드를 사용자가 조작하기 간편한 모드로 전환한 후, 응용상황에 의하여 자동으로 필요한 동작모드를 식별하여, 유연한 전환을 구현하고, 사용자의 사용체험과 장치의 경쟁력을 향상시킨다.
실시예1
도 1은 본발명의 일 실시예의 터치스크린 동작모드의 제어방법 흐름도로서, 도 1에 도시된 바와 같이, 상기 터치스크린 동작모드의 제어방법에는,아래와 같은 단계들 을포함한다.
S11 단계: 사용자가 터치스크린을 조작할 때에 생성되는 현재의 터치 조작데이터를 획득한다.
S12 단계: 터치스크린 및 터치 조작데이터의 현재 동작모드에 따라 동작모드를 전환해야 할지 여부의 논리판단을 수행하며, 전환해야 한다면 터치스크린 제어칩으로 전환신호를 송신하여, 상기 터치스크린 제어칩이 상기 전환신호를 수신한 경우 터치스크린의 동작모드를 전환하도록 제어한다.
도 1에 도시된 방법을 통하여, 사용자의 터치스크린 상의 터치조작 데이터 및 터치스크린의 현재 동작모드에 따라 사용자의 조작의도를 식별하고, 또한 터치스크린의 동작모드를 적당한 모드로 전환하도록 할 수 있어, 사용자가 유연하고 자유롭게 조작할 수 있도록 편리함을 제공하고, 사용자의 사용체험을 최적화시킨다.
실시예2
아래 하나의 구체적인 응용 상황을 결부시켜, 본 발명의 실시예에 따른 터치스크린의 동작모드를 설명한다.
본 실시예에서, 터치스크린의 동작모드에는 모의 마우스모드와 핸드 제스처모드가 포함되고, 모의 마우스모드는 사용자가 터치스크린 상에서 모의 마우스 조작을 실행할 때의 응용 상황에 적용되는 바, 예를 들면 아이콘 조작 선택, 싱글 클릭 선택, 더블 클릭 선택 등이다. 핸드 제스처 모드는 사용자가 터치스크린 상에서핸드 제스처 조작시의 응용 상황에 적용되는 바, 예를 들면 스크린을 슬라이딩시켜언록을 진행하거나, 스크린화면을 전환시키는 등이다.
터치스크린 동작모드의 전환을 제어 또는 스위칭하는 이유는, 만일 터치스크린의 동작모드가 헤드마운티드 디바이스 응용 상황의 변화에 적응하지 못한다면 사용자가 터치 조작할 때 매우 불편하기 때문이다. 예를 들면, 사용자가 헤드마운티드 디바이스를 이용하여 게임할 때, 외부에 물리 마우스를 연결시켜 게임에 대하여더욱 원활한 조작을 원할 수 있다. 그러나, 사용자가 터치스크린 조작으로 전환시켜야 할 때, 양호한 사용자 인터랙션 체험을 제공하기 위하여 이때 가장 바람직하게는 터치스크린의 동작모드도 모의 마우스모드로 전환시키는 것이며, 이렇게 되면 사용자의 차원에서 보면 외부 연결된 물리 마우스 조작과 터치스크린의 터치 조작 사이에는 차이가 존재하지 않는다. 그리고, 만일 터치스크린이 모의 마우스모드에서 동작할 때, 사용자가 멀티 포인트 터치 조작(예를 들면, 두손가락으로 그림을 축소/확대)을 원한다면, 터치스크린의 동작모드는 사용자의 터치 조작에 따라 핸드 제스처 모드로 전환될 필요가 있다. 이를기반으로, 본 실시예의 방법은 사용자 현재의 응용 상황을 자동으로 식별하고, 또한, 터치스크린의 동작모드 전환을 제어하여 조작의 유연성을 향상시키고 양호한 사용 체험을 확보한다.
본 실시예에서는 헤드마운티드 디바이스를 예로 들어 설명을 진행하는 바, 상기 헤드마운티드 디바이스에는 터치스크린과 디스플레이스크린이 포함되고 또한 터치스크린과 디스플레이스크린은 분리된 구조이다. 그리고, 상기 헤드마운티드 디바이스에서 안드로이드(Android) 시스템이 구동한다. Android는 Linux를 기반으로 하는 무료 및 오픈소스코드의 운영체제로서, 주요하게는 모바일장치에 사용된다.
도 2는 본 발명의 다른 일 실시예의 터치스크린 동작모드의 제어방법 흐름도로서, 본 실시예의 이러한 터치스크린 동작모드의 제어방법과 종래 기술을 비교하면, 다음의 장점을 갖는다. 첫째, 모의 마우스모드와 핸드 제스처모드의 동작모드 구성 옵션이 Android 계층의 구성파일에서 제공되고, 또한 구성옵션에 대한 기본 설정이 모의 마우스모드와 핸드 제스처모드를 자동 식별 및 전환시키도록 되어 있다.
둘째, Android 계층의 어플리케이션 개발자들에게 상기 구성옵션을 온/오프시킬 수 있는 인터페이스를 제공하여 제3자 어플리케이션 개발을 위한 편의성을 제공한다.
셋째, 사용자의 선택 및 응용 상황의 변화에 따라 모의 마우스모드와 핸드 제스처모드의 자동 식별/전환이 구현될 수 있다.
도 2에 도시된 바와 같이, 헤드마운티드 디바이스의 터치스크린 동작모드의 자동 전환 기능은 본 실시예의 터치스크린 동작모드의 제어방법을에 의해 구현될 수 있다.
21: 터치스크린의 초기 동작모드는 핸드 제스처모드이다.
본 실시예에서, 터치스크린은 초기화된 후 기본적으로 핸드 제스처모드에서동작하여, 부팅 후의 핸드 제스처 슬라이딩에 의해 언블로킹 기능을 구현한다. 이것은 또한 스마트폰 등 일반 디바이스를 조작할 때 슬라이딩 언블로킹 습관에 부합되어, 사용자들이 쉽게 받아들일 수 있도록 한다.
22: 디바이스는 핸드 제스처모드 하에서 슬라이딩에 의해 부팅된다.
핸드 제스처모드 하에서, 사용자의 터치스크린 상의 슬라이딩 조작을 수신하여 부팅을 완성한다. 헤드마운티드 디바이스가 언블록 및 부팅된 후, 두가지 사용자 조작을 접할 수 있는 바, 첫째는 스크린 전환(즉, 현재 사용자 인터페이스를 전환)이다. 스크린 전환에 대하여, 핸드 제스처모드에서 조작이 간편하고 원활하기 때문에(예를들면, 왼쪽으로 슬라이딩시켜 왼쪽으로의 페이지 전환, 오른쪽으로 슬라이딩시켜 오른쪽으로의 페이지 전환 구현), 터치스크린의 동작모드는 초기의 핸드 제스처모드로 유지시켜야 한다. 둘째는 디스플레이스크린에 디스플레이되는 현재 사용자인터페이스의 아이콘에 대하여 조작을 진행하는 것이다. 만일 현재 디스플레이스크린 상의 어느 한 아이콘에 대하여 조작해야 한다면, 동작모드를 마우스모드로 전환시켜 사용자로 하여금 아이콘의 디스플레이스크린 상의 위치를 정확하게 결정하도록 하여야 한다.
23: Android 시스템을 가동시킨다.
터치스크린 동작모드를 자동 전환시키기 위하여, 본 실시예에서는 Android 시스템 구성파일에 터치스크린의 동작모드를 자동 전환하도록 온/오프시키는 구성옵션을 사전에 설정하여(도 2에 도시된 touch mode 옵션 참조), Android 시스템이 가동될 때마다 Android 시스템 구성파일 중의 구성옵션의 상태 정보, 예를 들면 현재 구성옵션의 동작모드를 자동으로 전환하는 기능이 온 상태인지 아니면 오프 상태인지를 판독하고, 또한 구성옵션이 온 상태일 때(도 2에 도시된 touch mode=on 참조), 해당 상태정보를 하위계층의 드라이버 어플리케이션으로 전달하여 드라이버 어플리케이션으로 하여금 터치스크린의 현재 동작모드 및 터치 조작데이터에 따라 동작모드를 전환시킬 것인지 여부의 논리판단을 수행하도록 한다.
24: 하위계층(bottom layer)의 드라이버는 Android 계층에 의해 호출될 인터페이스를 제공한다.
하위계층에서 드라이버는 상위계층의 Android 계층과 데이터 인터랙션를 수행할 필요가 있다. 예를 들면, 사용자가 구성옵션을 조작하는 법에 대한 정보를 취득하고, 터치스크린의 동작모드를 자동 전환시키는 기능이 온 상태인지 여부를 파악하기 위해, 하위계층은 Android 계층에 의해 호출되는 인터페이스를 제공하고, 해당 호출 인터페이스를 통하여 상위계층(Android 계층)으로부터 구성옵션의 상태정보를 획득하고, 또는 처리결과에 대한 정보를 Android 계층에 업로드시켜 데이터의 인터랙션을 구현한다.
그리고, 양호한 사용자 인터랙션 체험을 제공하고, 사용자의 조작감을 향상시키기 위하여, 본 실시예에서, Android 계층은 또한 터치스크린의 동작모드를 자동으로 전환하도록 온/오프시키는 작동모드 구성옵션의 호출 인터페이스를 제3자 어플리케이션으로 제공하여(즉, 도 2에 도시된 Android 계층의 기타 APK), 상기 제3자 어플리케이션을 통하여 사용자에 의해 입력된 터치스크린의 동작모드를 자동으로 전환하도록 온 시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 조작정보를 수신하도록 한다. Android 패키지(Android Package, APK)는 APK 파일을 직접 Android 장치(본 실시예에서는 헤드마운티드 디바이스)로 전송하여 실행함으로써 설치한다.
제3자 어플리케이션으로 터치스크린의 동작모드를 자동으로 전환하도록 온/오프시키는 작동모드 구성옵션의 호출인터페이스를 제공하기 때문에, 개발 완성된 제3자 어플리케이션은 헤드마운티드 디바이스에 설치된 후, 사용자들은 헤드마운티드 디바이스에서 상기 제3자 어플리케이션을 실행시키고 또한 상기 제3자 어플리케이션 화면에서 자동으로 터치스크린 동작모드를 전환시키는 구성옵션을 찾을 수 있으며, 터치스크린의 동작모드를 자동으로 전환하도록 온시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 선택 조작을 입력할 수 있다.
25: 하위계층 드라이버가 논리판단을 수행한다.
하위계층 드라이버는 터치스크린 제어칩으로부터 사용자의 터치 조작데이터를 획득하고, 또한 Android 계층으로부터 얻은 터치스크린의 현재 동작모드를 참조하여 논리판단을 수행하여, 응용 상황에 의하여 자동으로 터치스크린의 동작모드를전환시키는 유용한 효과를 구현한다.
구체적으로, 판단 1)에서, 터치스크린의 현재 동작모드가 핸드 제스처모드이고 또한 터치 조작데이터가 한손가락의 느리고 연속적인 이동 조작데이터인 경우, 동작모드를 전환하기로 결정하고, 또한 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하고, 생성된 제1 전환신호를 터치스크린 제어칩으로송신한다. 여기서, 한손가락의 느리고 연속적인 이동 조작데이터는 한손가락이 터치스크린 상에서 느리고 연속적으로 이동할 때 생성되는 데이터를 말하면, 여기에서의속도는 단위시간 내에 사용자가 슬라이딩시키는 좌표점의 수량인 바, 느린 속도란 사용자 1회 조작에서 슬라이딩시키는 좌표점 수량이 사전 설정된 수량 임계치 이하인 것을 말하며, 사전 설정된 임계치는 사용자가 핸드 제스처 조작으로 슬라이딩시키는 좌표점 수량으로 설정할 수 있다. 그리고, 연속이란 조작 시간 상의 연속을 말하는바, 즉 조작시간이란 사전 설정된 시간 임계치에 도달하는 것을 말하며, 예를 들면, 본 실시예에서는 상기 사전 설정된 시간 임계치를 0.8초로 설정하는 바, 다시 말하면 사용자의 본회 슬라이딩 조작이 슬라이딩 조작시작으로부터 슬라이딩조작 종료까지 연속되는 시간이 0.8초이상이여야만, 사용자의 터치 조작데이터를 한손가락의 느린 연속 이동으로 판단할 수 있으며, 그렇지 않으면 오동작으로 판단하여 동작모드 전환을 실행하지 않을 수 있다.
판단 2)에서, 터치스크린의 현재 동작모드가 핸드 제스처모드이고 또한 헤드마운티드 디바이스의 사용자 인터랙션 툴이 외부연결의 물리 마우스로부터 터치스크린으로 전환된 경우, 수신된 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터이면, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 터치스크린 제어칩으로 송신한다.
이 상황에서, 터치스크린이 핸드 제스처모드에서 현재 동작하고, 이때 사용자가 헤드마운티드 디바이스를 위하여 하나의 물리 마우스를 외부연결하였으며, 또한 물리마우스를 통하여 헤드마운티드 디바이스의 인간-기계 인터랙션을 구현한다(상기 사용자 게임시 외부연결 물리마우스 부분에 대한 설명 참조). 사용자가 외부연결 물리마우스를 사용할 때, 터치스크린 상에는 사용자 조작데이터가 존재하지 않으며, 사용자가 터치스크린 상에서 재차 터치 조작데이터를 입력할 때(즉, 사용자의 조작 의도가 헤드마운티드 디바이스의 인간-기계 인터랙션 모드를 터치스크린으로 전환시킨 것), 만일 이때 터치스크린이 여전히 핸드 제스처모드에서 작동한다면, 사용자 체험이 좋지 않으며 조작감의 차이가 크기 때문에, 외부연결 물리마우스 조작으로부터 핸드 제스처조작으로 양호한 연결이 이루어지지 않게 되며, 사용자들은 이러한 전환을 뚜렷하게 느낄 수 있다. 본 실시예에서는 사용자의 터치조작데이터에 따라 판단을 수행한 후, 터치스크린의 동작모드를 모의 마우스모드로 전환하도록 제어하여, 사용자의 유연한 조작을 위한 편리성을 제공하고 또한 사용자 인터페이스도 외부연결 마우스와 일치하기 때문에 사용자의 조작체험에 영향을 미치지 않도록 한다.
상기 판단 1)과 판단 2)는 모두 동작모드를 모의 마우스모드로 전환시키는 것이고, 이는 디스플레이스크린의 사용자 인터페이스 상에 대응되게 마우스 포인터(마우스 커서 포함)를 표시하여, 사용자로 하여금 정확한 위치 결정과 유연성 있는 조작을 수행하도록 한다. 그러므로, 본 실시예의 상기 방법에는 또한 터치스크린 제어칩으로 제1 전환신호를 송신한 후, 전환 결과에 의하여 사용자 인터페이스 상에 마우스 포인터 위젯을 표시하도록 제어하는 것이 포함된다.
판단 3)에서, 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 터치 조작데이터가 복수 손가락 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 터치스크린 제어칩으로 송신한다.
여기서, 복수 손가락 조작데이터에는 사용자가 두 손가락 또는 두개 이상의 손가락으로 터치조작을 진행할 때 생성되는 데이터가 포함된다. 예를 들면, 사용자가 디스플레이 스크린 상의 그림을 볼 때, 현재 보고 있는 그림을 확대 또는 축소시키려면, 두 손가락을 배합하여 터치스크린 상에서 조작을 진행하여야 한다. 터치스크린은 사용자 두 손가락의 배합조작을 캡처하면, 현재 응용 상황이 핸드 제스처조작이므로 터치스크린의 동작모드를 핸드 제스처모드로 전환시켜 응용 상황에 매칭시켜야 함을 판단한다.
판단 4)에서, 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 터치 조작데이터가 한 손가락 빠른 슬라이딩 조작데이터인 경우, 동작모드를 전환하기로결정하고 또한 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 터치스크린 제어칩으로 송신한다.
여기서, 한손가락 빠른 슬라이딩 조작데이터에는 사용자가 한손가락을 사용하여 빠르게 슬라이딩하여 터치조작을 진행할 때 생성되는 데이터가 포함된다. 예를 들면, 사용자가 디스플레이 스크린 상의 사용자 인터페이스를 전환시키고, 터치스크린이 사용자의 한손가락 빠른 슬라이딩을 캡처하면, 현재 응용 상황이 핸드 제스처조작 상황으로 결정되고, 응용 상황에 매칭시키기 위해 터치스크린의 동작모드가 핸드 제스처모드로 전환될 필요가 있다. 여기서, 빠른이란 단위 시간내에 사용자가 터치스크린 상에서 조작시 슬라이딩시킨 좌표점의 수량이 사전 설정된 임계치보다 큰 것으로 이해할 수 있다. 구체적인 수량 임계치는 실제 응용에 의하여 설정할 수 있는 바, 이에 대해서는 상세한 설명을 생략하도록 한다.
26: 터치스크린 칩이 사용자의 터치 조작데이터를 수집한다.
터치스크린 칩이 수집한 터치 조작데이터는 실시간으로 하위계층 드라이버로 전송되어, 하위계층 드라이버로 하여금 이러한 데이터를 이용하여 논리판단을 수행하도록 하는 바, 즉 터치스크린 동작모드의 전환을 수행할 것인지 여부를 판단한다. 여기서, 사용자의 터치 조작데이터에는 한손가락 빠른 슬라이딩 조작데이터, 외부연결 물리마우스 조작데이터, 한손가락 느린 연속 슬라이딩 조작데이터 및 두손가락 줌 또는 멀티터치 조작데이터가 포함된다.
현재의 터치스크린은 모두 프레스 조작을 지원하고, 터치스크린이 설치된 헤드마운티드 디바이스는 터치 제어 입력모드에 관한 두가지 방식이 존재하는 바, 한가지는 상기 헤드마운티드 디바이스의 Android 시스템 하위계층의 Linux 드라이버가 헤드마운티드 디바이스의 터치스크린 제어칩으로부터 사용자가 입력한 연속적인 터치 점좌표를 취득하고, 또한 취득한 연속적인 터치 점좌표를 Input 이벤트를 입력하는 방식으로 상위 Android 계층으로 송신하여, 상위계층 Android 계층 어플리케이션이 좌표점 또는 핸드 제스처 조작정보에 의하여 터치스크린 현재의 동작모드를 결정하도록 한다. 그리고, 현재 주류의 터치스크린은 아울러 핸드 제스처모드를 지원한다.
또한, 헤드마운티드 디바이스 하위계층의 Linux 드라이버는 또한 터치스크린의 제어칩으로부터 사용자의 핸드 제스처 조작정보를 취득하고, 핸드 제스처 조작정보를 input 이벤트에 의해 상위 Android 계층으로 송신하여, 상위계층 Android 계층 어플리케이션이 좌표점 또는 핸드 제스처조작에 의하여 현재의 동작모드를 결정하도록 한다. 터치스크린이 모의 마우스모드 하에서 동작할 때, Linux 드라이버는 터치스크린 제어칩으로부터 연속적인 터치점 좌표를 취득한다. 터치스크린이 핸드 제스처모드 하에서 동작할 때, Linux 드라이버는 터치스크린 제어칩으로부터 사용자 1회 터치조작의 핸드 제스처정보를 취득한다. 또한 Linux 드라이버가 터치스크린 제어칩으로부터 취득한 것이 핸드 제스처정보이든 아니면 연속적인 터치점 좌표이든, 핸드 제스처정보 또는 연속적인 터치점 좌표는 상응한 입력 Input 이벤트에 따라 상위 Android 계층으로 송신된다.
이와 같이, 디스플레이 스크린과 터치스크린이 분리된 전자제품에 있어서, 사용자들은 이러한 장치를 이용하여 터치조작을 수행할 때, 본 실시예의 상기 터치스크린의 동작모드의 제어방법을 사용하면, 디스플레이 스크린 아이콘 조작이 어렵거나 사용자 체험이 저하되는 문제를 효과적으로 해결할 수 있으며, 사용자 사용시의화면 조작감과 조작 유연성을 향상시키고, 제품 경쟁력을 향상시킬 수 있다.
실시예3
본 발명의 다른 일측면에 의하면, 또한 터치스크린 동작모드의 제어장치를 제공하는바, 상기 터치스크린 동작모드의 제어장치(30)에는, 사용자의 현재 터치 조작데이터를 취득하는 데이터 취득모듈(301); 터치스크린의 현재 동작모드 및 터치 조작데이터에 따라 동작모드를 전환해야 할 것인지 여부의 논리판단을 수행하며, 전환해야 한다면 터치스크린 제어칩(303)으로 전환신호를 송신하는 동작모드 제어모듈(302); 및 전환신호의 수신에 따라 상기 터치스크린의 동작모드를 전환하도록 제어하는 터치스크린 제어칩(303)이 포함된다.
본 실시예에서, 상기 장치(30)에는 시스템 구성파일에 터치스크린의 동작모드를 자동으로 전환하도록 온/오프시키는 작동모드 구성옵션을 사전에 설정하는 구성옵션 설정모듈; 및 구성옵션의 상태정보를 판독하고 또한 구성옵션이 온 상태일때, 터치스크린의 현재 동작모드 및 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 동작모드 제어모듈이 더 포함된다.
본 실시예에서, 터치스크린의 동작모드에는 핸드 제스처모드와 모의 마우스모드가 포함된다.
동작모드 제어모듈에는 구체적으로 논리 판단모듈과 신호 생성모듈이 포함된다.
논리 판단모듈은 터치스크린의 현재 동작모드가 핸드 제스처모드이고 또한 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 신호 생성모듈로 전송한다. 신호 생성모듈은 논리 판단모듈의 결과에 의하여 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 터치스크린 제어칩으로 송신한다.
또는, 논리 판단모듈은 터치스크린의 현재 동작모드가 핸드 제스처모드이고 또한 헤드마운티드 디바이스의 사용자 인터랙션 툴이 외부연결의 물리마우스로부터 터치스크린으로 전환된 경우, 수신된 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터이면, 동작모드를 전환하기로 결정하고 또한 판단결과를 신호 생성모듈로 전송한다. 신호 생성모듈은 논리 판단모듈의 결과에 의하여 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 터치스크린 제어칩으로 송신한다.
또는, 논리 판단모듈은 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 터치 조작데이터가 복수 손가락의 조작데이터인 경우, 동작모드를 전환하기로결정하고 또한 판단결과를 신호 생성모듈로 전송한다. 신호 생성모듈은 논리 판단모듈의 결과에 의하여 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 터치스크린 제어칩으로 송신한다.
또는, 논리 판단모듈은 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 터치 조작데이터가 한손가락의 빠른 슬라이딩 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 신호 생성모듈로 전송한다. 신호 생성모듈은논리 판단모듈의 결과에 의하여 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 터치스크린 제어칩으로 송신한다.
본 실시예에서, 상기 장치에는 터치스크린의 동작모드를 자동으로 전환하도록 온/오프시키는 작동모드 구성옵션의 호출 인터페이스를 제3자 어플리케이션으로제공하여, 상기 제3자 어플리케이션을 통하여 사용자에 의해 입력된 터치스크린의 동작모드를 자동으로 전환하도록 온시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 조작정보를 수신하도록 하는 사용자 인터랙션 모듈이 더 포함된다.
본 실시예에서, 상기 장치(30)에는 터치스크린 제어칩으로 제1 전환신호를 송신한 후, 전환 결과에 의하여 사용자 인터페이스 상에 마우스 포인터 위젯을 표시하도록 제어하는 마우스 포인터 표시모듈이 더 포함된다.
본 실시예 중의 이러한 터치스크린 동작모드의 제어장치의 동작과정은 상기 터치스크린 동작모드의 제어방법의 구현 단계와 상호 대응되기 때문에, 본 실시예의 터치스크린 동작모드의 제어장치의 구체적인 동작과정은 상기 터치스크린 동작모드의 제어방법의 관련 설명을 참조할 수 있으며, 여기에서는 상세한 설명을 생략하도록 한다.
요약하면, 본 발명의 실시예의 이러한 터치스크린 동작모드의 제어방법 및 제어장치는, 현재 응용상황이 핸드 제스처 조작 상황인 것을 식별할 때, 자동으로 터치스크린의 동작모드를 핸드 제스처모드로 전환시키고, 현재 응용상황이 모의 마우스 조작상황인 것을 식별할 때, 자동으로 터치스크린의 동작모드를 모의 마우스모드로 전환시키며, 디스플레이 스크린과 터치스크린이 분리된 상황 하에서, 사용자로 하여금 여전히 정확하고 자유 자재로 디스플레이 스크린의 아이콘으로 위치 결정시켜 후속 조작을 진행하게 하여, 사용자의 사용 체험을 최적화시킨다. 터치스크린과 디스플레이 스크린이 분리된 상황 하에서, 터치스크린의 제어점과 디스플레이 스크린에 표시되는 사용자 화면 아이콘이 대응되기 상당히 어렵고 조작이 불편하며, 사용자 체험이 저하되는 문제를 해결할 수 있다.
본 발명에 따르면, 사용자 현재의 터치 제어조작 습관에 부합될 뿐아니라, 또한 터치스크린 상에서 터치 제어조작을 하는 것이 더욱 유연하고 편리하며 효과적이도록 하며, 제품의 경쟁력을 향상시킨다.
이상에서는 본 발명을 특정의 실시예에 대해서 도시하고 설명하였지만, 본 발명은 상술한 실시예에만 한정되는 것은 아니고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 이하의 청구범위에 기재된 본 발명의 기술적 사상의 요지를 벗어나지 않는 범위에서 얼마든지 다양하게 변경하여 실시할 수 있을 것이다.

Claims (10)

  1. 사용자가 터치스크린을 조작할 때 생성되는 현재 터치 조작데이터를 획득하는 단계; 및
    상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하며, 전환하여야 한다면 터치스크린 제어칩으로 전환신호를 송신하여, 상기 터치스크린 제어칩이 상기 전환신호를 수신한 경우 터치스크린의 동작모드를 전환하도록 제어하는 단계를 포함하는 것을 특징으로 하는 터치스크린 동작모드의 제어방법.
  2. 제1항에 있어서,
    상기 터치스크린의 현재 동작모드 및 상기 터치 조작 데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하기 전에,
    시스템 구성파일에 상기 터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 구성옵션을 사전에 설정하는 단계; 및
    상기 구성옵션의 상태정보를 판독하고 또한 상기 구성옵션이 온 상태일 때, 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 단계를 더 포함하는 터치스크린 동작모드의 제어방법.
  3. 제1항 또는 제2항에 있어서,
    상기 터치스크린의 동작모드에는 핸드 제스처모드와 모의 마우스모드가 포함되며,
    상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 단계는,
    상기 터치스크린의 현재 동작모드가 상기 핸드 제스처모드이고 또한 상기 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하며;
    상기 터치스크린의 현재 동작모드가 상개 핸드 제스처모드이고 또한 상기 헤드마운티드 디바이스의 사용자 인터랙션 툴이 외부연결의 물리마우스로부터 터치스크린으로 전환된 경우, 수신된 상기 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터이면, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하며;
    상기 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 상기 터치 조작데이터가 복수 손가락의 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하며;
    상기 터치스크린의 현재 동작모드가 상기 모의 마우스모드이고 또한 상기 터치 조작데이터가 한손가락의 빠른 슬라이딩 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하는 것을 포함하는 터치스크린 동작모드의 제어방법.
  4. 제1항에 있어서,
    터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 작동모드 구성옵션의 호출 인터페이스를 제3자 어플리케이션으로 제공하는 단계; 및
    상기 제3자 어플리케이션을 통하여 사용자에 의해 입력된 터치스크린의 동작모드를 자동으로 전환하도록 온시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 조작정보를 수신하는 단계를 더 포함하는 터치스크린 동작모드의 제어방법.
  5. 제3항에 있어서,
    상기 터치스크린 제어칩으로 제1 전환신호를 송신한 후, 전환결과에 의하여 사용자 인터페이스 상에 마우스 포인터 위젯을 표시하도록 제어하는 단계를 더 포함하는 터치스크린 동작모드의 제어방법.
  6. 사용자의 현재 터치 조작데이터를 취득하는 데이터 취득모듈; 및
    상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하며, 전환하여야 한다면 터치스크린 제어칩으로 전환신호를 송신하는 동작모드 제어모듈을 포함하되,
    상기 터치스크린 제어칩은 상기 전환신호를 수신한경우 상기 터치스크린의 동작모드를 전환하도록 제어하는 것을 특징으로 하는 터치스크린 동작모드의 제어장치.
  7. 제6항에 있어서,
    시스템 구성파일에 상기 터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 구성옵션을 사전에 설정하는 구성옵션 설정모듈을 더 포함하고,
    상기 동작모드 제어모듈은 상기 구성옵션의 상태정보를 판독하고, 또한 상기구성옵션이 온 상태일 때, 상기 터치스크린의 현재 동작모드 및 상기 터치 조작데이터에 따라 동작모드를 전환하여야 할지의 논리판단을 수행하는 터치스크린 동작모드의 제어장치.
  8. 제6항 또는 제7항에 있어서,
    상기 터치스크린의 동작모드에는 핸드 제스처모드와 모의 마우스모드가 포함되되,
    상기 동작모드 제어모듈은 논리 판단모듈과 신호 생성모듈을 포함하고,
    상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 상기 핸드 제스처모드이고 또한 상기 터치 조작데이터가 한손가락의 느린 연속 이동 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 상기 신호 생성모듈로 전송하고,
    상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를상기 모의 마우스모드로 전환시키는 제1 전환신호를 생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하거나,
    또는, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 상기 핸드 제스처모드이고 또한 상기 헤드마운티드 디바이스의 사용자 인터랙션 툴이 외부연결의 물리마우스로부터 터치스크린으로 전환된 경우, 수신된 상기 터치 조작데이터가 한손가락 느린 연속 이동 조작데이터이면, 동작모드를 전환하기로 결정하고 또한 판단결과를 상기 신호 생성모듈로 전송하며, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를 모의 마우스모드로 전환시키는 제1 전환신호를생성하여 상기 제1 전환신호를 상기 터치스크린 제어칩으로 송신하거나;
    또는, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 상기 터치 조작데이터가 복수 손가락의 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 신호 생성모듈로 전송하며, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를 핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하거나,
    또는, 상기 논리 판단모듈은 상기 터치스크린의 현재 동작모드가 모의 마우스모드이고 또한 상기 터치 조작데이터가 한손가락 빠른 슬라이딩 조작데이터인 경우, 동작모드를 전환하기로 결정하고 또한 판단결과를 상기 신호 생성모듈로 전송하며, 상기 신호 생성모듈은 상기 논리 판단모듈의 결과에 의하여 현재 동작모드를핸드 제스처모드로 전환시키는 제2 전환신호를 생성하여 상기 제2 전환신호를 상기 터치스크린 제어칩으로 송신하는 터치스크린 동작모드의 제어장치.
  9. 제6항에 있어서,
    상기 터치스크린의 동작모드를 자동으로 전환하도록 온 또는 오프시키는 구성옵션의 호출 인터페이스를 제3자 어플리케이션으로 제공하여, 상기 제3자 어플리케이션을 통하여 사용자에 의해 입력된 터치스크린의 동작모드를 자동으로 전환하도록 온시키거나 또는 터치스크린의 동작모드를 자동으로 전환하도록 오프시키는 조작정보를 수신하도록 하는 사용자 인터랙션 모듈을 더 포함하는 터치스크린 동작모드의 제어장치.
  10. 제8항에 있어서,
    상기 터치스크린 제어칩으로 제1 전환신호를 송신한 후, 전환결과에 의하여 사용자 인터페이스 상에 마우스 포인터 위젯을 표시하도록 제어하는 마우스 포인터표시모듈을 더 포함하는 터치스크린 동작모드의 제어장치.
KR1020187017614A 2015-12-31 2016-12-23 터치스크린 동작모드의 제어방법 및 제어장치 KR101930225B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201511031593.9A CN105630393B (zh) 2015-12-31 2015-12-31 一种触摸屏工作模式的控制方法和控制装置
CN201511031593.9 2015-12-31
PCT/CN2016/111817 WO2017114318A1 (zh) 2015-12-31 2016-12-23 一种触摸屏工作模式的控制方法和控制装置

Publications (2)

Publication Number Publication Date
KR20180081143A true KR20180081143A (ko) 2018-07-13
KR101930225B1 KR101930225B1 (ko) 2019-03-14

Family

ID=56045393

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187017614A KR101930225B1 (ko) 2015-12-31 2016-12-23 터치스크린 동작모드의 제어방법 및 제어장치

Country Status (7)

Country Link
US (1) US10282022B2 (ko)
EP (1) EP3370140B1 (ko)
JP (1) JP6437170B1 (ko)
KR (1) KR101930225B1 (ko)
CN (1) CN105630393B (ko)
DK (1) DK3370140T3 (ko)
WO (1) WO2017114318A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210046059A (ko) * 2018-08-23 2021-04-27 아날로직스 (차이나) 세미컨덕터 인크 터치스크린의 제어 방법, 장치, 기기, 기억매체 및 프로세서

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107924251B (zh) * 2015-08-24 2021-01-29 华为技术有限公司 降低触摸屏设备功耗的方法及设备
CN105630393B (zh) 2015-12-31 2018-11-27 歌尔科技有限公司 一种触摸屏工作模式的控制方法和控制装置
CN106569829B (zh) * 2016-11-10 2020-11-20 北京小鸟看看科技有限公司 触摸屏工作模式切换实现方法、触摸屏装置和头戴式设备
CN106940608B (zh) * 2017-03-07 2020-06-16 Oppo广东移动通信有限公司 一种显示屏的控制方法、显示屏及电子设备
CN107341407B (zh) * 2017-07-26 2021-03-23 惠州Tcl移动通信有限公司 基于终端的多安卓系统实现方法、存储介质及终端
CN107741821B (zh) * 2017-09-29 2021-10-22 联想(北京)有限公司 处理方法、数据处理方法、处理装置和数据处理装置
CN110515206A (zh) * 2019-08-19 2019-11-29 青岛海信电器股份有限公司 一种控制方法、控制装置以及智能眼镜
CN111429907B (zh) * 2020-03-25 2023-10-20 北京百度网讯科技有限公司 语音服务模式切换方法、装置、设备及存储介质
CN112181234A (zh) * 2020-10-29 2021-01-05 四川长虹教育科技有限公司 一种在智能触摸交互大屏快速打开最近应用的方法
CN113655940A (zh) * 2021-08-24 2021-11-16 深圳技德应用技术有限公司 一种Linux兼容Android的模拟双指缩放方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140089874A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 터치 디바이스를 이용한 마우스 기능 제공 방법 및 장치
KR20140135400A (ko) * 2013-05-16 2014-11-26 삼성전자주식회사 이동 단말기 및 그 제어 방법
US20150029402A1 (en) * 2013-07-26 2015-01-29 Tianjin Funayuanchuang Technology Co.,Ltd. Remote controller, system, and method for controlling remote controller

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5707029B2 (ja) * 2009-03-09 2015-04-22 シャープ株式会社 電子機器、電子機器の制御方法および電子機器の制御プログラム
CN102855077A (zh) * 2011-07-01 2013-01-02 宫润玉 多功能触控板模式切换方法
CN103425415A (zh) * 2012-05-18 2013-12-04 昆盈企业股份有限公司 触控面板的操作方法
CN103389876A (zh) * 2013-07-04 2013-11-13 深圳市创凯电子有限公司 基于触摸显示设备的功能切换方法及触摸显示设备
CN105431810A (zh) * 2013-09-13 2016-03-23 英特尔公司 多点触摸虚拟鼠标
KR102229890B1 (ko) 2014-05-30 2021-03-19 삼성전자주식회사 데이터 처리 방법 및 그 전자 장치
CN107430430A (zh) * 2014-12-22 2017-12-01 英特尔公司 多触摸虚拟鼠标
US9880733B2 (en) * 2015-02-17 2018-01-30 Yu Albert Wang Multi-touch remote control method
CN105045516B (zh) * 2015-08-27 2017-07-11 广东欧珀移动通信有限公司 一种工作模式的切换方法和终端
CN105630393B (zh) * 2015-12-31 2018-11-27 歌尔科技有限公司 一种触摸屏工作模式的控制方法和控制装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140089874A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 터치 디바이스를 이용한 마우스 기능 제공 방법 및 장치
KR20140135400A (ko) * 2013-05-16 2014-11-26 삼성전자주식회사 이동 단말기 및 그 제어 방법
US20150029402A1 (en) * 2013-07-26 2015-01-29 Tianjin Funayuanchuang Technology Co.,Ltd. Remote controller, system, and method for controlling remote controller

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210046059A (ko) * 2018-08-23 2021-04-27 아날로직스 (차이나) 세미컨덕터 인크 터치스크린의 제어 방법, 장치, 기기, 기억매체 및 프로세서

Also Published As

Publication number Publication date
JP2019500701A (ja) 2019-01-10
CN105630393B (zh) 2018-11-27
US20180348947A1 (en) 2018-12-06
JP6437170B1 (ja) 2018-12-12
US10282022B2 (en) 2019-05-07
WO2017114318A1 (zh) 2017-07-06
EP3370140A1 (en) 2018-09-05
EP3370140B1 (en) 2019-08-28
CN105630393A (zh) 2016-06-01
EP3370140A4 (en) 2018-12-05
KR101930225B1 (ko) 2019-03-14
DK3370140T3 (da) 2019-11-25

Similar Documents

Publication Publication Date Title
KR101930225B1 (ko) 터치스크린 동작모드의 제어방법 및 제어장치
US8271908B2 (en) Touch gestures for remote control operations
KR100801089B1 (ko) 터치 및 드래그를 이용하여 제어 가능한 모바일 장치 및 그조작 방법
JP6012859B2 (ja) 分割画面表示の方法および装置、ならびにその電子デバイス
EP3355167B1 (en) Method and apparatus for providing character input interface
US9459704B2 (en) Method and apparatus for providing one-handed user interface in mobile device having touch screen
US20120212420A1 (en) Multi-touch input control system
US8456433B2 (en) Signal processing apparatus, signal processing method and selection method of user interface icon for multi-touch panel
US20110060986A1 (en) Method for Controlling the Display of a Touch Screen, User Interface of the Touch Screen, and an Electronic Device using The Same
US20150185953A1 (en) Optimization operation method and apparatus for terminal interface
KR101636665B1 (ko) 프로그래머블 표시기 및 그 화면 조작 처리 프로그램
CN106227449B (zh) 基于触觉-视觉技术的输入控制方法及系统
US20150169122A1 (en) Method for operating a multi-touch-capable display and device having a multi-touch-capable display
CN103324389A (zh) 智能终端应用程序的操作方法
WO2013070558A1 (en) Interaction models for indirect interaction devices
WO2016183912A1 (zh) 菜单布局方法及装置
US20170052694A1 (en) Gesture-based interaction method and interaction apparatus, and user equipment
US20140210732A1 (en) Control Method of Touch Control Device
CN104007999B (zh) 用于控制应用的方法和相关的系统
CN104820489A (zh) 管理低延时直接控制反馈的系统和方法
KR101371524B1 (ko) 원격 접속 제어용 마우스 장치
CN109558007B (zh) 手势控制装置及其方法
CN105320324A (zh) 触摸板模拟触摸屏操作方式的方法和触摸板装置
KR20120078816A (ko) 가상 터치 포인터 운용 방법 및 이를 지원하는 휴대 단말기
TW201519072A (zh) 依據滑動手勢切換程序執行之觸控裝置及其方法

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant