KR20190109551A - 터치 제스처 판정 장치, 터치 제스처 판정 방법, 터치 제스처 판정 프로그램, 및 터치 패널 입력 장치 - Google Patents

터치 제스처 판정 장치, 터치 제스처 판정 방법, 터치 제스처 판정 프로그램, 및 터치 패널 입력 장치 Download PDF

Info

Publication number
KR20190109551A
KR20190109551A KR1020197026428A KR20197026428A KR20190109551A KR 20190109551 A KR20190109551 A KR 20190109551A KR 1020197026428 A KR1020197026428 A KR 1020197026428A KR 20197026428 A KR20197026428 A KR 20197026428A KR 20190109551 A KR20190109551 A KR 20190109551A
Authority
KR
South Korea
Prior art keywords
gesture
mode
touch
determination
input
Prior art date
Application number
KR1020197026428A
Other languages
English (en)
Other versions
KR102136526B1 (ko
Inventor
고토유 사사야마
유이치 사사키
다쿠야 마에카와
Original Assignee
미쓰비시덴키 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 미쓰비시덴키 가부시키가이샤 filed Critical 미쓰비시덴키 가부시키가이샤
Publication of KR20190109551A publication Critical patent/KR20190109551A/ko
Application granted granted Critical
Publication of KR102136526B1 publication Critical patent/KR102136526B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

터치 제스처 판정 장치(110)는, 조작 정보 입력부(11)와, 조작 판정부(12)와, 통지부(13)와, 표시 제어부(14)를 갖고, 조작 판정부(12)는, 표시 부품 입력 판정부(12a)와, 화면 전체 입력 판정부(12b)와, 조작 모드 전환 판정부(12c)를 갖고, 화면 전체 입력 판정부(12b)는, 제스처 모드 판정부(113)를 갖는다. 제스처 모드 판정부(113)는, 터치 제스처 조작이 슬라이더 제스처라고 판정된 경우, 슬라이더 모드의 파라미터에 의해 모드 일탈 판정을 행하고, 터치 제스처 조작이 다이얼 제스처라고 판정된 경우, 다이얼 모드의 파라미터에 의해 모드 일탈 판정을 행한다.

Description

터치 제스처 판정 장치, 터치 제스처 판정 방법, 터치 제스처 판정 프로그램, 및 터치 패널 입력 장치
본 발명은, 터치 제스처 조작에 대응하는 조작 정보가 입력되고, 입력된 조작 정보에 근거하는 신호를 출력하기 위한 터치 제스처 판정 장치, 터치 제스처 판정 방법, 및 터치 제스처 판정 프로그램, 및, 터치 제스처 조작을 접수하고, 터치 제스처 조작에 근거하는 신호를 출력하는 터치 패널 입력 장치에 관한 것이다.
터치 조작 등으로 터치 패널에 정보를 입력할 때에, 2개의 상이한 제스처의 조작이 비슷한 경우(예컨대 2점 터치에서의 슬라이더 조작과 2점 터치에서의 다이얼 조작 등)에는, 1개의 제스처 조작 중에, 다른 제스처로 잘못 판정되어 버려, 올바르게 입력을 행할 수 없는 경우가 있다.
특허문헌 1에는, 3차원 공간에서 행하는 제스처에서, 과거의 제스처 조작 이력을 이용하여, 그 제스처 조작이 전환된 타이밍으로부터의 상대적인 움직임을 바탕으로, 다음의 제스처 조작으로 전환되었는지를 판정하는 방법이 개시되어 있다.
특허문헌 1 : 일본 특허 공표 2012-528405호 공보
그렇지만, 특허문헌 1에는, 어느 모드로 전환되었을 때의 상태를 초기로 하고, 그로부터의 회전 각도 및 이동량을 판정하고 있지만, 그 초기 상태로부터의 임계치를 변경하는 것에 대해서는 기재되어 있지 않다. 그 때문에, 어느 모드에서의 제스처 조작 중에, 다른 모드의 제스처로 잘못 인식되어 버리는 문제가 있었다.
본 발명은, 상기의 문제점을 해결하기 위해 이루어진 것이고, 어느 모드에서의 제스처 조작 중에, 다른 모드의 제스처로 잘못 인식되는 것을 막고, 제스처에서의 입력 조작을 용이하게 하는 것을 목적으로 한다.
본 발명의 일 태양과 관련되는 터치 제스처 판정 장치는, 화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널로부터, 상기 조작 정보를 받고, 상기 조작 정보에 근거하는 출력 정보를 생성하는 터치 제스처 판정 장치이고, 상기 터치 제스처 판정 장치는, 상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 출력 정보를 생성하는 조작 판정부와, 상기 출력 정보를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 출력 정보에 따른 화상을 표시시키는 표시 제어부를 갖고, 상기 조작 판정부는, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 화면 전체 입력 판정부를 갖고, 상기 화면 전체 입력 판정부는, 상기 터치 제스처 조작의 제스처 모드가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정부와, 상기 제 1 제스처 모드에 관한 제 1 파라미터와, 상기 제 2 제스처 모드에 관계되고, 상기 제 1 파라미터와 상이한 제 2 파라미터를 갖고, 상기 제스처 모드 판정부는, 상기 터치 제스처 조작의 제스처 모드가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 상기 제 1 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하고, 상기 터치 제스처 조작의 제스처 모드가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 상기 제 2 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하는 것을 특징으로 한다.
본 발명의 다른 태양과 관련되는 터치 제스처 판정 방법은, 화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널로부터, 상기 조작 정보를 받고, 상기 조작 정보에 근거하는 출력 정보를 생성하는 터치 제스처 판정 방법이고, 상기 터치 제스처 판정 방법은, 상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 출력 정보를 생성하는 조작 판정 스텝과, 상기 출력 정보를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 출력 정보에 따른 화상을 표시시키는 표시 제어 스텝을 갖고, 상기 조작 판정 스텝은, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 화면 전체 입력 판정 스텝을 갖고, 상기 화면 전체 입력 판정 스텝은, 상기 터치 제스처 조작의 제스처 모드가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정 스텝을 갖고, 상기 제스처 모드 판정 스텝은, 상기 제 1 제스처 모드에 관한 제 1 파라미터와, 상기 제 2 제스처 모드에 관계되고, 상기 제 1 파라미터와 상이한 제 2 파라미터로부터, 상기 터치 제스처 조작의 제스처 모드가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 상기 제 1 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하고, 상기 터치 제스처 조작의 제스처 모드가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 상기 제 2 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하는 것을 특징으로 한다.
본 발명의 다른 태양과 관련되는 터치 패널 입력 장치는, 화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널과, 상기 조작 정보를 받고, 상기 조작 정보에 근거하여 상기 터치 패널의 표시를 제어하는 터치 제스처 판정 장치를 갖는 터치 패널 입력 장치이고, 상기 터치 제스처 판정 장치는, 상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 선택치를 생성하는 조작 판정부와, 상기 선택치를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 선택치에 따른 화상을 표시시키는 표시 제어부를 갖고, 상기 조작 판정부는, 상기 터치 패널에 상기 조작용 화상으로서 표시된 표시 부품에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 표시 부품 입력 모드와, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드를 전환하는 조작 모드 전환 판정부와, 상기 표시 부품 입력 모드에 있어서 상기 조작 정보로부터 상기 선택치를 결정하는 표시 부품 입력 판정부와, 상기 화면 전체 입력 모드에 있어서 상기 조작 정보로부터 상기 선택치를 결정하는 화면 전체 입력 판정부를 갖고, 상기 화면 전체 입력 판정부는, 상기 터치 제스처 조작의 제스처 모드의 종류가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정부와, 상기 제 1 제스처 모드에 관한 제 1 파라미터와, 상기 제 2 제스처 모드에 관한 제 2 파라미터를 갖고, 상기 제스처 모드 판정부는, 상기 터치 제스처 조작의 제스처 모드의 종류가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 모드 일탈 판정을 행하고, 상기 터치 제스처 조작의 제스처 모드의 종류가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 모드 일탈 판정을 행하는 것을 특징으로 한다.
본 발명에 따르면, 어느 모드에서의 제스처 조작 중에, 다른 모드의 제스처로 잘못 인식되는 것을 막고, 제스처에서의 입력 조작을 용이하게 할 수 있다.
도 1은 본 발명의 실시의 형태와 관련되는 터치 패널 입력 장치의 개략 구성을 나타내는 기능 블록도이다.
도 2는 실시의 형태에 있어서의 화면 전체 입력 판정부의 개략 구성을 나타내는 기능 블록도이다.
도 3은 실시의 형태와 관련되는 터치 패널 입력 장치의 하드웨어(H/W) 구성의 일례를 나타내는 도면이다.
도 4(a) 및 도 4(b)는 실시의 형태와 관련되는 터치 패널 입력 장치에 있어서의 터치 패널의 화면 및 터치 제스처 조작의 예를 나타내는 도면이다.
도 5는 실시의 형태와 관련되는 터치 패널 입력 장치에 있어서의 터치 제스처 판정 장치의 동작(터치 제스처 판정 방법)을 나타내는 플로차트이다.
도 6은 실시의 형태에 있어서의 제스처 모드 판정부에 의한 제스처 모드 일탈 판정의 동작을 나타내는 플로차트이다.
이하에, 본 발명의 실시의 형태를, 첨부 도면을 참조하면서 설명한다. 이하의 설명에 있어서, 터치 패널 입력 장치는, 터치식의 조작용의 화면(조작 화면)을 갖는 터치 패널과, 터치 패널에 있어서의 조작 정보를 받는 터치 제스처 판정 장치를 구비한다.
터치 패널 입력 장치는, 대상 기기에 탑재되는 것에 의해, 또는, 대상 기기와 통신 가능하게 접속되는 것에 의해, 대상 기기로서의 전기 기기의 조작 화면, 대상 기기로서의 카메라의 조작 화면, 대상 기기로서의 공장 설비의 조작 화면, 대상 기기로서의 자동차, 선박, 항공기 등에 탑재되는 조작 화면, 대상 기기로서의 스마트폰 및 태블릿 단말 등의 휴대 정보 단말의 조작 화면 등에 적용 가능하다.
터치 패널 입력 장치는, 터치 패널의 조작 화면으로부터 터치 제스처 조작("터치 조작"이라고도 한다)에 의해 입력된 조작 정보에 근거하는 신호(예컨대, 선택치)를, 터치 패널 입력 장치를 탑재한 대상 기기, 또는, 터치 패널 입력 장치와 통신 가능한 대상 기기에 제공할 수 있다.
터치 패널은, 유저가 행하는 터치 제스처 조작을 접수하는 터치 제스처 입력 수단이다. 또한, 터치 제스처 조작은, 유저의 손가락(또는, 유저의 손바닥, 또는, 유저의 손가락 및 손바닥) 등의 특정한 움직임에 의한 정보 입력 조작이다. 터치 제스처 조작은, 터치 패널의 조작 화면을 손가락으로 가볍게 두드리는 조작인 탭, 터치 패널의 조작 화면을 손가락으로 튀기는 조작인 플릭, 터치 패널의 조작 화면을 손가락으로 덧쓰는 조작(손가락을 미끄러지게 하는 조작)인 스와이프를 포함할 수 있다.
또한, 터치 제스처 조작은, 터치 패널에 있어서의 표시 부품을 손가락으로 끄는 조작인 드래그, 터치 패널의 조작 화면에 있어서 복수 개의 손가락으로 집으면서 손가락의 간격을 좁히는 조작인 핀치 인, 터치 패널의 조작 화면에 있어서 복수 개의 손가락의 간격을 넓히는 조작인 핀치 아웃 등을 포함할 수 있다.
또한, 터치 제스처 조작은, 2점 이상의 터치로 다이얼을 회전시키도록 조작하는 다이얼 제스처, 손가락을 터치 패널에 접촉시킨 채로, 손가락을 미끄러지게 하듯이 움직이는 슬라이더 제스처 등을 포함할 수 있다. 또, 터치 제스처 조작은, 펜 형태의 입력 보조 도구인 터치펜을 이용하는 조작도 포함할 수 있다.
실시의 형태.
《1》 구성
도 1은 본 발명의 실시의 형태와 관련되는 터치 패널 입력 장치(100)의 개략 구성을 나타내는 기능 블록도이다. 도 2는 실시의 형태에 있어서의 화면 전체 입력 판정부(12b)의 개략 구성을 나타내는 기능 블록도이다. 도 1에 나타내어지는 바와 같이, 실시의 형태와 관련되는 터치 패널 입력 장치(100)는, 터치 제스처 판정 장치(110)와, 터치 패널(120)을 갖고 있다. 터치 제스처 판정 장치(110)는, 실시의 형태와 관련되는 터치 제스처 판정 방법 및 실시의 형태와 관련되는 터치 제스처 판정 프로그램을 실행할 수 있는 장치이다.
도 1에 나타내어지는 바와 같이, 터치 패널(120)은, 유저에 의해 행하여지는 터치 제스처 조작을 접수하고, 터치 제스처 조작에 대응하는 조작 정보("터치 정보"라고도 한다) A0을 출력하는 조작 패널부(122)와, 조작 패널부(122)와 겹쳐 배치되고, GUI(Graphical User Interface) 화면 등과 같은 조작용 화상을 표시할 수 있는 표시 패널부(121)를 갖고 있다. 표시 패널부(121)는, 예컨대, 액정 디스플레이이다.
도 1에 나타내어지는 바와 같이, 터치 제스처 판정 장치(110)는, 조작 정보 입력부(11)와, 조작 판정부(12)와, 표시 제어부(14)를 갖고 있다. 터치 제스처 판정 장치(110)는, 통지부(13)를 갖고 있더라도 좋다.
조작 정보 입력부(11)는, 조작 패널부(122)로부터 출력된 조작 정보(조작 신호) A0을 받는다. 조작 정보 입력부(11)는, 받은 조작 정보 A0에 대응하는 입력 정보 A1을 조작 판정부(12)에 출력한다. 입력 정보 A1은, 조작 정보 A0에 대응하는 정보이고, 조작 정보 A0과 동일한 정보이더라도 좋다.
조작 판정부(12)는, 조작 정보 입력부(11)로부터 입력 정보 A1을 받고, 출력 정보로서의 선택치 A2를 통지부(13) 및 표시 제어부(14)에 대하여 출력한다. 조작 판정부(12)로부터 출력되는 선택치 A2는, 조작 판정부(12)가 입력 정보 A1을 기초로 결정한 선택치이고, 이 선택치 A2를 기초로, 터치 패널 입력 장치(100)를 탑재한 장치의 애플리케이션 프로그램 등이, 기기 제어 등을 행한다.
조작 판정부(12)는, 받은 입력 정보 A1로부터, 유저에 의한 터치 제스처 조작의 종류 및 내용을 판정한다. 도 1에 나타내어지는 바와 같이, 조작 판정부(12)는, 표시 부품 입력 판정부(12a)와, 화면 전체 입력 판정부(12b)와, 조작 모드 전환 판정부(12c)를 갖고 있다.
조작 모드 전환 판정부(12c)는, 조작 정보 입력부(11)로부터 받은 입력 정보 A1로부터, 입력 정보 A1에 화면의 조작 모드의 전환에 관한 정보가 포함되는지를 판정한다. 화면의 조작 모드에는, 조작 대상으로 하는 표시 부품을 화면 내에 표시한 표시 부품 조작 모드와, 화면 전체를 입력 범위로서 설정하는 화면 전체 조작 모드가 존재하고, 이들 조작 모드를 전환할 수 있다.
조작 모드 전환 판정부(12c)는, 조작 모드의 전환에 관한 판정 결과로부터, 조작 모드를 전환한다. 조작 모드 전환 판정부(12c)가 조작 모드를 전환하는 것에 의해, 조작 화면의 표시 내용, 입력 방법, 및 통지 방법이 전환된다.
화면 전체 입력 판정부(12b)는, 화면 전체에 대한 터치 정보로부터 입력 내용을 식별하고, 조작의 접수 및 선택치 A2의 결정을 담당한다. 도 2에 나타내어지는 바와 같이, 화면 전체 입력 판정부(12b)는, 모드 중 파라미터(111)와, 모드 중 이외의 파라미터(112)와, 제스처 모드 판정부(113)와, 제스처 입력 정보 판정부(114)를 갖는다.
화면 전체에 대한 터치 정보의 입력 내용은, 모드 중 파라미터(111)와, 모드 중 이외의 파라미터(112)와, 제스처 모드 판정부(113)에 의해 식별된다. 모드 중 파라미터(111)에는, 어느 모드 중에 사용하는 이동량, 터치 시간 등의 파라미터가 저장되어 있다.
모드 중 파라미터(111)에는, 제스처 모드의 종류마다 그 제스처 모드에 관한 파라미터가 저장되어 있다. 도 2에 나타내어지는 바와 같이, 모드 중 파라미터(111)에는, 예컨대, 슬라이더 모드의 파라미터(111a)와, 다이얼 모드의 파라미터(111b)가 저장되어 있다. 슬라이더 모드의 파라미터(111a)와, 다이얼 모드의 파라미터(111b)는, 터치 제스처 조작의 미리 정해진 시간에 있어서의 이동량, 터치 제스처 조작의 속도, 곡률, 또는 터치 시간 중 어느 1개 또는 2개 이상의 조합에 근거하여 정해지는 파라미터이다.
또, 모드 중 파라미터(111)에 저장되는 파라미터는, 도 2에 나타내어지는 예로 한정되지 않는다. 또한, 모드 중 이외의 파라미터(112)에는, 초회 조작 때 등, 어느 모드도 아닐 때에 사용하는 이동량, 터치 시간 등의 파라미터가 저장되어 있다.
제스처 모드 판정부(113)는, 모드 중 파라미터(111)와, 모드 중 이외의 파라미터(112)를 참조하여, 입력된 터치 정보의 제스처 모드를 특정한다. 제스처 입력 정보 판정부(114)는, 제스처 모드 판정부(113)에서 특정된 제스처 모드에서의 값 설정 방식에 따라 선택치 A2를 결정한다.
표시 부품 입력 판정부(12a)는, 화면에 표시되는 표시 부품에 대한 터치 정보로부터 입력 내용을 식별하고, 조작의 접수 및 선택치 A2의 결정을 담당한다.
통지부(13)는, 조작 모드 전환 판정부(12c)의 판정 결과에 따라, 조작 화면의 통지 방법을 전환하고, 또한, 조작 판정부(12)에 의해 결정한 선택치 A2의 정보를 받아, 조작의 상황을 통지한다. 통지부(13)는, 선택치 A2에 따르는 통지 내용의 통지를 발하거나, 또는 통지 신호를 출력한다.
예컨대, 통지부(13)는, 조작 판정부(12)에 의해 받은 입력 정보 A2에 따라, 유저의 터치 제스처 조작의 상황을, 예컨대, 소리, 화면 표시, 바이브레이터에 의한 진동, 또는 램프 점등 등으로 통지한다.
통지부(13)에 의한 통지가 소리에 의한 통지인 경우에는, 통지부(13)는 음성 출력부로서의 스피커에 통지 신호를 출력한다. 스피커는, 후술하는 도 3에 나타내어진다. 통지부(13)에 의한 통지가 화상 표시인 경우에는, 통지부(13)는 통지 정보 A3을 표시 제어부(14)에 보내고, 표시 제어부(14)가 통지 정보 A3에 근거하는 화상 신호 A4를 터치 패널(120)의 표시 패널부(121)에 송신한다.
표시 제어부(14)는, 조작 모드 전환 판정부(12c)의 판정 결과에 따라, 조작 화면의 표시 내용을 전환하고, 또한, 조작 판정부(12)에 의해 결정한 선택치 A2의 정보를 받아, 조작 결과를 화면에 반영한다. 도 1에 나타내어지는 바와 같이, 표시 제어부(14)는, 터치 패널(120)의 표시 패널부(121)에 표시되는 조작용 화상의 화상 신호 A4를 표시 패널부(121)에 대하여 출력한다.
도 3은 실시의 형태와 관련되는 터치 패널 입력 장치(100)의 하드웨어(H/W) 구성의 일례를 나타내는 도면이다. 도 3에 나타내어지는 바와 같이, 실시의 형태와 관련되는 터치 패널 입력 장치(100)는, 터치 패널(120)과, 프로세서(301)와, 메모리(302)와, 스피커(303)를 갖고 있다.
도 1에 나타내어지는 터치 제스처 판정 장치(110)는, 소프트웨어로서의 터치 제스처 판정 프로그램을 저장하는 기억 장치로서의 메모리(302)와, 메모리(302)에 저장된 터치 제스처 판정 프로그램을 실행하는 정보 처리부로서의 프로세서(301)를 이용하여(예컨대, 컴퓨터에 의해) 실현할 수 있다.
이 경우에는, 도 1에 있어서의 구성 요소(11~14)는, 도 3에 있어서 터치 제스처 판정 프로그램을 실행하는 프로세서(301)에 상당한다. 또, 도 1에 나타내어지는 터치 제스처 판정 장치(110)의 일부를, 도 2에 나타내어지는 메모리(302)와, 터치 제스처 판정 프로그램을 실행하는 프로세서(301)에 의해 실현할 수도 있다.
터치 패널(120)은, 복수의 손가락의 접촉을 검지하고, 터치 정보(각 손가락의 식별 번호, 좌표, 접촉 상태)를 프로세서(301)에 송신한다. 프로세서(301)는, 터치 패널(120)로부터 취득한 터치 정보를 메모리(302)에 기억하고, 메모리(302)에 축적한 터치의 이력 정보를 기초로, 조작 화면, 입력 방법, 통지 방법을 전환한다.
또한, 프로세서(301)는, 메모리(302)에 기억한 터치 정보로부터, 화면 전체에 대한 조작인지, 표시 부품에 대한 조작인지를 판정하고, 각각의 조작 모드에 있어서 선택치를 결정한다.
스피커(303)는, 예컨대, 터치 제스처 조작 상황을 어나운스 등 소리로 통지하는 경우에 사용되는 소리 출력부이다. 터치 패널 입력 장치(100)는, 스피커(303) 대신에, 또는, 추가의 구성으로서, 바이브레이터, 램프, 통지 신호를 무선 송신하기 위한 송신 장치 등의 추가의 장치를 구비하더라도 좋다.
도 4(a) 및 도 4(b)는 실시의 형태와 관련되는 터치 패널 입력 장치(100)에 있어서의 터치 패널(120)의 화면 및 터치 제스처 조작의 예를 나타내는 도면이다. 도 4(a)는 표시 부품 조작 모드에서 표시하는 화면의 예(401)를 나타내고 있다. 도 4(a)에 나타내어지는 바와 같이, 화면의 예(401)에는, 선택치를 직접 선택하는 버튼(402) 등, 조작 대상으로 하는 다양한 부품이 표시된다. 표시 부품이 표시되는 영역에 대하여 터치 입력하는 것에 의해, 대상의 부품의 조작이 가능하게 된다.
도 4(b)는 화면 전체 조작 모드에서 표시하는 화면의 예(403)를 나타내고 있다. 도 4(b)에 나타내어지는 바와 같이, 화면의 예(403)에는, 현재 선택하고 있는 선택치의 표시(404), 화면 전환을 위한 조작 지시를 재촉하는 표시(예컨대, 후술하는 캔슬 영역(405)) 등이 나타내어진다. 이 화면에서의 입력 방법으로서는, 예컨대 탭 조작의 횟수, 2점 이상의 터치로 다이얼을 회전시키는 제스처 등으로 정보를 입력한다.
도 4(b)의 화면의 예(403)의 하부에는, ">>Cancel>>"를 둘러싸는 직사각형 영역인 캔슬 영역(405)이 나타내어지고 있다. 캔슬 영역(405)을 선택하여 스와이프 하는(미리 결정된 방향으로 손가락을 왼쪽에서 오른쪽으로 미끄러지게 하는) 것에 의해, 화면 전체 조작 모드를 캔슬하여, 화면 전체 조작 모드로부터 표시 부품 조작 모드의 화면으로의 전환을 실행할 수 있다.
도 5는 실시의 형태와 관련되는 터치 패널 입력 장치(100)에 있어서의 터치 제스처 판정 장치(110)의 동작(터치 제스처 판정 방법)을 나타내는 플로차트이다. 도 5에 나타내어지는 바와 같이, 스텝 ST401에 있어서, 유저는, 표시 부품 조작 모드로 시스템을 기동하고, 각 처리부의 초기화를 실시한다.
다음의 스텝 ST402에 있어서, 조작 모드 전환 판정부(12c)가, 조작 정보 입력부(11)로부터 입력된 터치 정보를 기초로, 화면 전체 조작 모드로의 전환 입력을 판정한다. 화면 전체 조작 모드로의 전환 입력을 접수한 경우(ST402에 있어서 예), 다음의 스텝 ST403에 있어서, 조작 모드를 천이시켜, 화면 전체 조작 모드에 있어서의 표시 내용, 입력 방법, 통지 방법을 전환한다.
다음의 스텝 ST404에 있어서, 제스처 입력 정보 판정부(114)가, 유저에 의해 입력된 터치 정보로부터 제스처 입력에 관한 정보를 식별하고, 그것에 의해 선택치 A2를 결정한다. 유저는, 예컨대, 2점 이상의 터치로 다이얼을 회전시키는 제스처(다이얼 제스처) 등으로 정보를 입력한다.
여기서, 유저에 의한 다이얼 제스처 조작에 있어서 다이얼 회전 각도의 곡률 반경이 큰 경우에는, 다이얼 입력이 아닌 슬라이더 입력을 했다고, 터치 패널(120)이 잘못 인식할 가능성이 있다. 터치 패널(120)이 잘못 인식한 경우, 인식되어 있던 다이얼 제스처가 완료되어 있지 않은 동안(제스처 모드의 도중)에, 슬라이더 제스처로 전환되어 인식되어 버린다. 실시의 형태와 관련되는 터치 제스처 판정 방법은, 상기와 같이, 어느 제스처 조작을 하고 있을 때에, 다른 제스처 조작으로 잘못 인식되는 것을 막는 것을 목적으로 한다.
다음의 스텝 ST405에 있어서, 스텝 ST404에서 결정한 선택치 A2를 조작 화면 표시부(109)에 건네주는 것에 의해, 표시 내용을 전환하고, 조작 내용을 반영한 화면을 표시한다.
다음의 스텝 ST406에 있어서, 스텝 ST404에서 결정한 선택치 A2를 통지부(13)에 건네주는 것에 의해, 통지 내용을 전환하고, 조작 결과 후의 상황의 통지, 조작을 재촉하는 어나운스를 실시한다.
다음의 스텝 ST407에 있어서, 조작 모드 전환 판정부(12c)가, 조작 정보 입력부(11)로부터 입력된 터치 정보와 터치의 이력 정보로부터, 표시 부품 조작 모드로의 전환 입력을 판정한다.
전환 입력을 검지한 경우(ST407에 있어서 예)는, 다음의 스텝 ST408에 있어서, 표시 부품 조작 모드로 천이하고, 초기 기동 때에 표시한 표시 부품의 조작 화면으로 이행한다. 표시 부품 조작 모드로의 전환 입력이 없는 경우는, 전환 입력을 접수할 때까지, 조작 패널부(122)에 대한 터치 입력을 접수하고, 그리고, 그에 따라 표시 내용 및 통지 내용을 전환한다.
스텝 ST402의 화면 전환에 관한 입력 판정에 있어서, 입력 내용이 화면 전체 조작 모드로의 전환이 아니었던 경우(ST402에 있어서 아니오), 다음의 스텝 ST709에 있어서, 표시 부품에 대한 입력 판정을 실시한다.
표시 부품 조작 모드에 있어서의 표시 부품에 대한 입력의 판정은, 표시 부품의 조작 범위에 터치 입력 좌표가 포함되는지에 따라 판정한다. 표시 부품의 조작 입력을 검지한 경우, 다음의 스텝 ST410에서 선택치 A2의 결정을, 조작 대상이 표시 부품이 아닌 경우는 스텝 ST402에서 재차 터치 입력의 접수를 실시한다.
다음의 스텝 ST410에 있어서, 표시 부품 입력 판정부(12a)가 조작 정보 입력부(11)로부터 입력된 터치 정보를 기초로, 선택치 A2를 결정한다. 선택의 예로서, 도 3의 각 표시 부품의 표시 화면의 도면에 나타내는 바와 같이, 버튼 등, 고유의 선택치를 할당한 표시 부품을 배치하여 두고, 표시 부품으로의 터치 입력에 의해 그 선택치를 결정한다.
다음의 스텝 ST411에 있어서, 스텝 ST410에서 결정한 선택치 A2를 표시 제어부(14)에 건네주는 것에 의해, 표시 패널부(121)의 표시 내용을 전환하고, 조작 내용에 대응하는 화면을 표시한다.
다음의 스텝 ST412에 있어서, 스텝 ST410에서 결정한 선택치 A2를 통지부(13)에 건네주는 것에 의해, 통지 내용을 전환하고, 조작 결과 후의 상황의 통지, 조작을 재촉하는 어나운스를 실시한다.
도 6은 실시의 형태에 있어서의 제스처 모드 판정부(113)에 의한 제스처 모드 일탈 판정의 동작을 나타내는 플로차트이다. 스텝 ST501에서, 제스처 모드 판정부(113)가, 제스처 모드 중인지 여부를 판정한다.
제스처 모드 판정부(113)는, 예컨대, 제스처 입력 정보 판정부(114)에서 선택치 A2를 결정한 직후는, 제스처 모드 중이 아니라고 판정한다. 또한, 제스처 모드 판정부(113)는, 예컨대, 터치 패널 상에서 유저가 스크롤 중인 경우, 다이얼 모드 중 등의 경우는, 제스처 모드 중이라고 판정한다.
스텝 ST501에서 제스처 모드 중이라고 판정된 경우(ST501에 있어서 예), 다음의 스텝 ST502에 있어서, 제스처 모드 판정부(113)가, 제 1 제스처 모드로서의 슬라이더 모드, 제 2 제스처 모드로서의 다이얼 제스처 모드, 또는 터치 제스처 모드 중 어느 제스처 모드 중인지를 판정한다.
스텝 ST502에 있어서, 슬라이더 제스처라고 판정된 경우, 스텝 ST503으로 진행하고, 제 1 파라미터로서의 슬라이더 모드의 파라미터를 취득한다. 스텝 ST502에 있어서, 다이얼 제스처라고 판정된 경우, 스텝 ST504로 진행하고, 제 2 파라미터로서의 다이얼 모드의 파라미터를 취득한다. 스텝 ST502에 있어서, 터치 제스처라고 판정된 경우, 스텝 ST505로 진행하고, 터치 제스처에 따른 터치 모드의 파라미터를 취득한다.
슬라이더 모드의 파라미터, 다이얼 모드의 파라미터, 및 터치 모드의 파라미터는, 터치 제스처 조작의 미리 정해진 시간에 있어서의 이동량, 터치 제스처 조작의 속도, 곡률, 또는 터치 시간 중 어느 1개 또는 2개 이상의 조합에 근거하여 정해진다.
스텝 ST503으로부터 ST505에서 각각의 제스처 모드에 따른 파라미터를 취득한 후, 다음의 스텝 ST506으로 진행하고, 스텝 ST502에 있어서 제스처 모드의 종류가 판정되고 나서 소정 시간이 경과했는지를 판정한다. 소정 시간이 경과한 경우(스텝 ST506에 있어서 예), 다음의 스텝 ST507로 진행하고, 취득한 제스처 모드에 있어서의 파라미터를 이용하여, 제스처가 일탈했는지 여부를 판정하는 모드 일탈 판정을 행한다.
스텝 ST501에서 제스처 모드 중이 아니라고 판정되면(ST501에 있어서 아니오), 처리는 스텝 ST508로 진행하고, 제 3 파라미터로서의 모드 중 이외의 파라미터(112)를 취득하고, 다음의 스텝 ST509에서 모드 일탈 판정을 행한다.
《2》 효과
이상과 같이, 실시의 형태와 관련되는 터치 패널 입력 장치(100)에 의하면, 제스처 모드 판정부(113)에 의해 실행 중인 제스처 모드의 종류를 판정하고, 판정된 제스처 모드의 종류에 따른 파라미터를 취득하고, 취득한 파라미터를 이용하여 모드 일탈 판정을 행한다. 이것에 의해, 어느 모드에서의 조작 중에, 다른 모드로 잘못 인식되는 것을 막을 수 있고, 제스처에서의 입력 조작이 용이하게 되고, 유저의 조작성이 향상된다.
실시의 형태와 관련되는 터치 패널 입력 장치(100)에 의하면, 어느 모드에 들어간 후는, 소정 시간 이상은 그 모드를 유지하고, 그 후 모드 일탈 판정을 행한다. 이것에 의해, 어느 모드에서의 조작 중에 의도하지 않게 그 모드로부터 일탈하는 것을 막을 수 있다.
11 : 조작 정보 입력부
12 : 조작 판정부
12a : 표시 부품 입력 판정부
12b : 화면 전체 입력 판정부
13 : 통지부
14 : 표시 제어부
100 : 터치 패널 입력 장치
110 : 터치 제스처 판정 장치
111 : 모드 중 파라미터
111a : 슬라이더 모드의 파라미터
111b : 다이얼 모드의 파라미터
112 : 모드 중 이외의 파라미터
113 : 제스처 모드 판정부
114 : 제스처 입력 정보 판정부
120 : 터치 패널
121 : 표시 패널부
122 : 조작 패널부
301 : 프로세서
302 : 메모리
303 : 스피커
A0 : 조작 정보
401, 403 : 화면의 예
405 : 캔슬 영역
A1 : 입력 정보
A2 : 선택치
A3 : 통지 정보
A4 : 조작 판정 정보

Claims (11)

  1. 화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널로부터, 상기 조작 정보를 받고, 상기 조작 정보에 근거하는 출력 정보를 생성하는 터치 제스처 판정 장치로서,
    상기 터치 제스처 판정 장치는,
    상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 출력 정보를 생성하는 조작 판정부와,
    상기 출력 정보를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 출력 정보에 따른 화상을 표시시키는 표시 제어부
    를 갖고,
    상기 조작 판정부는, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 화면 전체 입력 판정부를 갖고,
    상기 화면 전체 입력 판정부는,
    상기 터치 제스처 조작의 제스처 모드가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정부와,
    상기 제 1 제스처 모드에 관한 제 1 파라미터와,
    상기 제 2 제스처 모드에 관계되고, 상기 제 1 파라미터와 상이한 제 2 파라미터
    를 갖고,
    상기 제스처 모드 판정부는, 상기 터치 제스처 조작의 제스처 모드가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 상기 제 1 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하고, 상기 터치 제스처 조작의 제스처 모드가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 상기 제 2 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하는
    것을 특징으로 하는 터치 제스처 판정 장치.
  2. 제 1 항에 있어서,
    상기 모드 일탈 판정은, 상기 터치 제스처 조작의 제스처 모드의 상기 판정으로부터 미리 정해진 시간이 경과한 후에 행하여지는 것을 특징으로 하는 터치 제스처 판정 장치.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 화면 전체 입력 판정부는, 제스처 모드 이외의 조작에 관한 파라미터인 제 3 파라미터를 더 갖고,
    상기 제스처 모드 판정부는, 상기 유저가 제스처 모드 중인지 여부의 판정을 행하고, 상기 유저가 제스처 모드 중이 아니라고 판정한 경우에는, 상기 제 3 파라미터를 이용하여 모드 일탈 판정을 행하는
    것을 특징으로 하는 터치 제스처 판정 장치.
  4. 제 3 항에 있어서,
    상기 제 1 내지 제 3 파라미터는, 상기 터치 제스처 조작의 미리 정해진 시간에 있어서의 이동량, 상기 터치 제스처 조작의 속도, 곡률, 또는 터치 시간 중 어느 1개 또는 2개 이상의 조합에 근거하여 정해지는 것을 특징으로 하는 터치 제스처 판정 장치.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 조작 판정부는,
    상기 터치 패널에 상기 조작용 화상으로서 표시된 표시 부품에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 표시 부품 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 표시 부품 입력 판정부와,
    상기 표시 부품 입력 모드와 상기 화면 전체 입력 모드를 전환하는 조작 모드 전환부
    를 더 갖는 것을 특징으로 하는 터치 제스처 판정 장치.
  6. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서,
    상기 터치 패널로부터 출력된 상기 조작 정보를 받고, 받은 상기 조작 정보에 대응하는 입력 정보를 상기 조작 판정부에 출력하는 조작 정보 입력부를 더 갖는 것을 특징으로 하는 터치 제스처 판정 장치.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
    상기 출력 정보에 따르는 통지 내용의 통지를 발하거나, 또는 상기 출력 정보에 따르는 통지 내용의 통지 신호를 출력하는 통지부를 더 갖는 것을 특징으로 하는 터치 제스처 판정 장치.
  8. 화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널로부터, 상기 조작 정보를 받고, 상기 조작 정보에 근거하는 출력 정보를 생성하는 터치 제스처 판정 방법으로서,
    상기 터치 제스처 판정 방법은,
    상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 출력 정보를 생성하는 조작 판정 스텝과,
    상기 출력 정보를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 출력 정보에 따른 화상을 표시시키는 표시 제어 스텝
    을 갖고,
    상기 조작 판정 스텝은, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 화면 전체 입력 판정 스텝을 갖고,
    상기 화면 전체 입력 판정 스텝은, 상기 터치 제스처 조작의 제스처 모드가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정 스텝을 갖고,
    상기 제스처 모드 판정 스텝은, 상기 제 1 제스처 모드에 관한 제 1 파라미터와, 상기 제 2 제스처 모드에 관계되고, 상기 제 1 파라미터와 상이한 제 2 파라미터로부터, 상기 터치 제스처 조작의 제스처 모드가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 상기 제 1 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하고, 상기 터치 제스처 조작의 제스처 모드가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 상기 제 2 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하는
    것을 특징으로 하는 터치 제스처 판정 방법.
  9. 컴퓨터에,
    화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널로부터, 상기 조작 정보를 받고, 상기 조작 정보에 근거하는 출력 정보를 생성하기 위해,
    상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 출력 정보를 생성하는 조작 판정 처리와,
    상기 출력 정보를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 출력 정보에 따른 화상을 표시시키는 표시 제어 처리
    를 실행시키고,
    상기 조작 판정 처리는, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 화면 전체 입력 판정 처리를 갖고,
    상기 화면 전체 입력 판정 처리는, 상기 터치 제스처 조작의 제스처 모드가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정 처리를 갖고,
    상기 제스처 모드 판정 처리는, 상기 제 1 제스처 모드에 관한 제 1 파라미터와, 상기 제 2 제스처 모드에 관계되고, 상기 제 1 파라미터와 상이한 제 2 파라미터로부터, 상기 터치 제스처 조작의 제스처 모드가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 상기 제 1 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정 처리와, 상기 터치 제스처 조작의 제스처 모드가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 상기 제 2 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정 처리를 행하는
    것을 특징으로 하는 터치 제스처 판정 프로그램.
  10. 화면에 조작용 화상을 표시하고, 유저의 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 조작 정보를 출력하는 터치 패널과,
    상기 조작 정보를 받고, 상기 조작 정보에 근거하여 상기 터치 패널의 표시를 제어하는 터치 제스처 판정 장치
    를 갖는 터치 패널 입력 장치로서,
    상기 터치 제스처 판정 장치는,
    상기 조작 정보에 근거하여, 상기 터치 패널의 표시를 위한 출력 정보를 생성하는 조작 판정부와,
    상기 출력 정보를 받고, 상기 터치 패널에 상기 조작용 화상으로서 상기 출력 정보에 따른 화상을 표시시키는 표시 제어부
    를 갖고,
    상기 조작 판정부는, 상기 터치 패널의 화면 전체에 대하여 행하여진 터치 제스처 조작에 근거하여 입력 내용을 식별하는 화면 전체 입력 모드에 있어서 행하여진 터치 제스처 조작에 대응하는 조작 정보로부터 상기 출력 정보를 결정하는 화면 전체 입력 판정부를 갖고,
    상기 화면 전체 입력 판정부는,
    상기 터치 제스처 조작의 제스처 모드가 제 1 제스처 모드인지 제 2 제스처 모드인지를 판정하는 제스처 모드 판정부와,
    상기 제 1 제스처 모드에 관한 제 1 파라미터와,
    상기 제 2 제스처 모드에 관계되고, 상기 제 1 파라미터와 상이한 제 2 파라미터
    를 갖고,
    상기 제스처 모드 판정부는, 상기 터치 제스처 조작의 제스처 모드가 상기 제 1 제스처 모드라고 판정한 경우에는 상기 제 1 파라미터를 이용하여 상기 제 1 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하고, 상기 터치 제스처 조작의 제스처 모드가 상기 제 2 제스처 모드라고 판정한 경우에는 상기 제 2 파라미터를 이용하여 상기 제 2 제스처 모드로부터의 일탈을 판정하는 모드 일탈 판정을 행하는
    것을 특징으로 하는 터치 패널 입력 장치.
  11. 제 10 항에 있어서,
    상기 터치 패널은,
    상기 터치 제스처 조작을 접수하고, 상기 터치 제스처 조작에 대응하는 상기 조작 정보를 출력하는 조작 패널부와,
    상기 조작 패널부와 겹쳐 배치되고, 상기 화면에 상기 조작용 화상을 표시하는 표시 패널부
    를 갖는 것을 특징으로 하는 터치 패널 입력 장치.
KR1020197026428A 2017-03-15 2017-03-15 터치 제스처 판정 장치, 터치 제스처 판정 방법, 터치 제스처 판정 프로그램, 및 터치 패널 입력 장치 KR102136526B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/010345 WO2018167865A1 (ja) 2017-03-15 2017-03-15 タッチジェスチャ判定装置、タッチジェスチャ判定方法、タッチジェスチャ判定プログラム、及びタッチパネル入力装置

Publications (2)

Publication Number Publication Date
KR20190109551A true KR20190109551A (ko) 2019-09-25
KR102136526B1 KR102136526B1 (ko) 2020-07-22

Family

ID=60265772

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197026428A KR102136526B1 (ko) 2017-03-15 2017-03-15 터치 제스처 판정 장치, 터치 제스처 판정 방법, 터치 제스처 판정 프로그램, 및 터치 패널 입력 장치

Country Status (5)

Country Link
JP (1) JP6227213B1 (ko)
KR (1) KR102136526B1 (ko)
CN (1) CN110402427B (ko)
DE (1) DE112017006949T5 (ko)
WO (1) WO2018167865A1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008070968A (ja) * 2006-09-12 2008-03-27 Funai Electric Co Ltd 表示処理装置
JP2012528405A (ja) 2009-05-27 2012-11-12 オブロング・インダストリーズ・インコーポレーテッド 空間動作システムと共に用いるための空間マルチモード制御デバイス
KR20150143495A (ko) * 2013-04-15 2015-12-23 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 멀티 핑거 터치 상호작용 동안의 패닝 및 스케일링을 검출하는 기법
US20160261768A1 (en) * 2015-03-06 2016-09-08 Kyocera Document Solutions Inc. Display input device and image forming apparatus including same, and method for controlling display input device

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8106856B2 (en) * 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
JPWO2010067537A1 (ja) * 2008-12-08 2012-05-17 シャープ株式会社 操作受付装置及びコンピュータプログラム
US8427440B2 (en) * 2009-05-05 2013-04-23 Microsoft Corporation Contact grouping and gesture recognition for surface computing
US8933910B2 (en) * 2010-06-16 2015-01-13 Panasonic Intellectual Property Corporation Of America Information input apparatus, information input method, and program
CN102694942B (zh) * 2011-03-23 2015-07-15 株式会社东芝 图像处理装置、操作方法显示方法及画面显示方法
JP6032420B2 (ja) * 2012-04-02 2016-11-30 カシオ計算機株式会社 印刷情報出力装置、印刷情報出力方法、プログラム及び携帯電子機器
JP5852514B2 (ja) * 2012-06-13 2016-02-03 株式会社東海理化電機製作所 タッチセンサ
JP5772773B2 (ja) * 2012-09-19 2015-09-02 コニカミノルタ株式会社 画像処理装置、操作標準化方法および操作標準化プログラム
CN102890616B (zh) * 2012-09-26 2016-03-30 杨生虎 触摸屏的快捷输入方法及系统
JP5700020B2 (ja) * 2012-10-10 2015-04-15 コニカミノルタ株式会社 画像処理装置、プログラム及び操作イベント判別方法
JP5862587B2 (ja) * 2013-03-25 2016-02-16 コニカミノルタ株式会社 ジェスチャ判別装置、ジェスチャ判別方法、およびコンピュータプログラム
CN106095307B (zh) * 2016-06-01 2019-05-31 努比亚技术有限公司 旋转手势识别装置及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008070968A (ja) * 2006-09-12 2008-03-27 Funai Electric Co Ltd 表示処理装置
JP2012528405A (ja) 2009-05-27 2012-11-12 オブロング・インダストリーズ・インコーポレーテッド 空間動作システムと共に用いるための空間マルチモード制御デバイス
KR20150143495A (ko) * 2013-04-15 2015-12-23 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 멀티 핑거 터치 상호작용 동안의 패닝 및 스케일링을 검출하는 기법
US20160261768A1 (en) * 2015-03-06 2016-09-08 Kyocera Document Solutions Inc. Display input device and image forming apparatus including same, and method for controlling display input device

Also Published As

Publication number Publication date
WO2018167865A1 (ja) 2018-09-20
CN110402427B (zh) 2022-05-31
DE112017006949T5 (de) 2019-10-31
JP6227213B1 (ja) 2017-11-08
CN110402427A (zh) 2019-11-01
KR102136526B1 (ko) 2020-07-22
JPWO2018167865A1 (ja) 2019-03-22

Similar Documents

Publication Publication Date Title
EP2482179B1 (en) Apparatus and method for controlling screen display in touch screen terminal
US8271908B2 (en) Touch gestures for remote control operations
US20140223299A1 (en) Gesture-based user interface method and apparatus
US9323437B2 (en) Method for displaying scale for enlargement and reduction operation, and device therefor
KR102254794B1 (ko) 터치 패널 입력 장치, 터치 제스처 판정 장치, 터치 제스처 판정 방법, 및 터치 제스처 판정 프로그램
US10402080B2 (en) Information processing apparatus recognizing instruction by touch input, control method thereof, and storage medium
US20120249420A1 (en) Portable terminal apparatus and computer readable medium
EP2829967A2 (en) Method of processing input and electronic device thereof
JP2014107848A (ja) 文字入力装置、文字入力方法及びプログラム
US20170075453A1 (en) Terminal and terminal control method
JP5835240B2 (ja) 情報処理装置、情報処理方法及びプログラム
US20180173398A1 (en) Touch panel type information terminal device, information input processing method and program thereof
JP6253861B1 (ja) タッチジェスチャ判定装置、タッチジェスチャ判定方法、タッチジェスチャ判定プログラム、及びタッチパネル入力装置
JP6737239B2 (ja) 表示装置及び表示制御プログラム
KR102136526B1 (ko) 터치 제스처 판정 장치, 터치 제스처 판정 방법, 터치 제스처 판정 프로그램, 및 터치 패널 입력 장치
US8731824B1 (en) Navigation control for a touch screen user interface
JP6327834B2 (ja) 操作表示装置、操作表示方法及びプログラム
JP6365268B2 (ja) 表示装置、画像形成装置、表示方法、および表示プログラム
JPWO2018142609A1 (ja) グラフィカルユーザインタフェース制御装置およびグラフィカルユーザインタフェース制御方法
JP6971573B2 (ja) 電子機器、その制御方法およびプログラム
JP2020077181A (ja) 表示制御装置、表示制御装置の制御方法及びプログラム
JP2016038619A (ja) 携帯端末装置及びその操作方法
JP7030527B2 (ja) 電子機器、情報処理方法、プログラム及び記憶媒体
US20150241982A1 (en) Apparatus and method for processing user input
JP2016095576A (ja) 画面処理装置、その制御方法、およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant