CN110402427B - 触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定程序的记录介质和触摸面板输入装置 - Google Patents

触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定程序的记录介质和触摸面板输入装置 Download PDF

Info

Publication number
CN110402427B
CN110402427B CN201780088102.5A CN201780088102A CN110402427B CN 110402427 B CN110402427 B CN 110402427B CN 201780088102 A CN201780088102 A CN 201780088102A CN 110402427 B CN110402427 B CN 110402427B
Authority
CN
China
Prior art keywords
gesture
mode
touch
determination
touch gesture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780088102.5A
Other languages
English (en)
Other versions
CN110402427A (zh
Inventor
笹山琴由
佐佐木雄一
前川拓也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN110402427A publication Critical patent/CN110402427A/zh
Application granted granted Critical
Publication of CN110402427B publication Critical patent/CN110402427B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

触摸手势判定装置(110)具有操作信息输入部(11)、操作判定部(12)、通知部(13)以及显示控制部(14)，操作判定部(12)具有显示部件输入判定部(12a)、画面全体输入判定部(12b)以及操作模式切换判定部(12c)，画面全体输入判定部(12b)具有手势模式判定部(113)。手势模式判定部(113)在判定为触摸手势操作是滑动手势的情况下，根据滑动模式的参数进行模式偏离判定，在判定为触摸手势操作是拨盘手势的情况下，根据拨盘模式的参数进行模式偏离判定。

Description

触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定 程序的记录介质和触摸面板输入装置
技术领域
本发明涉及被输入与触摸手势操作对应的操作信息且用于输出基于被输入的操作信息的信号的触摸手势判定装置、触摸手势判定方法和记录有触摸手势判定程序的记录介质，以及受理触摸手势操作且输出基于触摸手势操作的信号的触摸面板输入装置。
背景技术
在通过触摸操作等对触摸面板输入信息时，在2个不同的手势的操作相似的情况下(例如基于2点触摸的滑动操作和基于2点触摸的拨盘操作等)，有时在1个手势操作中误判定为另一个手势，导致无法正确进行输入。
在专利文献1中公开了如下方法：通过在三维空间内进行的手势，利用过去的手势操作历史，根据从该手势操作被切换的时刻起的相对运动，判定是否被切换成下一个手势操作。
现有技术文献
专利文献
专利文献1：日本特表2012-528405号公报
发明内容
发明要解决的课题
但是，在专利文献1中，设被切换成某个模式时的状态为初始状态，判定从该状态起的旋转角度和移动量，但是，没有记载对从该初始状态起的阈值进行变更。因此，存在在某个模式下的手势操作中误识别为另一个模式的手势的问题。
本发明正是为了解决上述问题点而完成的，其目的在于，防止在某个模式下的手势操作中误识别为另一个模式的手势，容易进行基于手势的输入操作。
用于解决课题的手段
本发明的一个方式的触摸手势判定装置从触摸面板接受操作信息，生成基于所述操作信息的输出信息，该触摸面板在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的所述操作信息，其特征在于，所述触摸手势判定装置具有：操作判定部，其根据所述操作信息生成所述触摸面板的显示用的输出信息；以及显示控制部，其接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，所述操作判定部具有画面全体输入判定部，该画面全体输入判定部根据与在画面全体操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体操作模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，所述画面全体输入判定部具有：手势模式判定部，其判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式；与所述滑动模式有关的第1参数；以及与所述拨盘模式有关且与所述第1参数不同的第2参数，所述手势模式判定部在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
在本发明的另一个方式的触摸手势判定方法中，从触摸面板接受操作信息，生成基于所述操作信息的输出信息，该触摸面板在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的所述操作信息，其特征在于，所述触摸手势判定方法具有以下步骤：操作判定步骤，根据所述操作信息生成所述触摸面板的显示用的输出信息；以及显示控制步骤，接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，所述操作判定步骤具有画面全体操作判定步骤，在该画面全体操作判定步骤中，根据与在画面全体输入模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体输入模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，所述画面全体输入判定步骤具有手势模式判定步骤，在该手势模式判定步骤中，判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式，在所述手势模式判定步骤中，根据与所述滑动模式有关的第1参数以及与所述拨盘模式有关且与所述第1参数不同的第2参数，在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2 参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
本发明的另一个方式的触摸面板输入装置具有：触摸面板，其在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的操作信息；以及触摸手势判定装置，其接受所述操作信息，根据所述操作信息对所述触摸面板的显示进行控制，其特征在于，所述触摸手势判定装置具有：操作判定部，其根据所述操作信息生成所述触摸面板的显示用的输出信息；以及显示控制部，其接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，所述操作判定部具有画面全体输入判定部，该画面全体输入判定部根据与在画面全体操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体操作模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，所述画面全体输入判定部具有：手势模式判定部，其判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式；与所述滑动模式有关的第1 参数；以及与所述拨盘模式有关且与所述第1参数不同的的第2参数，所述手势模式判定部在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第 1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
发明效果
根据本发明，能够防止在某个模式下的手势操作中误识别为另一个模式的手势，容易地进行基于手势的输入操作。
附图说明
图1是示出本发明的实施方式的触摸面板输入装置的概略结构的功能框图。
图2是示出实施方式中的画面全体输入判定部的概略结构的功能框图。
图3是示出实施方式的触摸面板输入装置的硬件(H/W)结构的一例的图。
图4的(a)和(b)是示出实施方式的触摸面板输入装置中的触摸面板的画面和触摸手势操作的例子的图。
图5是示出实施方式的触摸面板输入装置中的触摸手势判定装置的动作(触摸手势判定方法)的流程图。
图6是示出实施方式中的手势模式判定部进行的手势模式偏离判定的动作的流程图。
具体实施方式
下面，参照附图对本发明的实施方式进行说明。在以下的说明中，触摸面板输入装置具备具有触摸式的操作用画面(操作画面)的触摸面板和接受触摸面板中的操作信息的触摸手势判定装置。
触摸面板输入装置搭载于对象设备，或者以能够通信的方式与对象设备连接，由此，能够应用于作为对象设备的电气设备的操作画面、作为对象设备的摄像机的操作画面、作为对象设备的工厂设备的操作画面、搭载于作为对象设备的汽车、船舶、飞机等上的操作画面、作为对象设备的智能手机和平板终端等便携信息终端的操作画面等。
触摸面板输入装置能够将基于从触摸面板的操作画面通过触摸手势操作(也称作“触摸操作”)输入的操作信息的信号(例如选择值)提供给搭载有触摸面板输入装置的对象设备或能够与触摸面板输入装置进行通信的对象设备。
触摸面板是受理用户进行的触摸手势操作的触摸手势输入单元。此外，触摸手势操作是基于用户的手指(或用户的手掌或用户的手指和手掌)等的特定运动的信息输入操作。触摸手势操作能够包含利用手指轻轻叩击触摸面板的操作画面的操作即点击、利用手指弹击触摸面板的操作画面的操作即轻弹、利用手指划动触摸面板的操作画面的操作(滑动手指的操作)即轻扫。
此外，触摸手势操作能够包含利用手指拖动触摸面板中的显示部件的操作即拖曳、在触摸面板的操作画面中利用多根手指捏起并使手指间隔变窄的操作即缩小、在触摸面板的操作画面中扩大多根手指的间隔的操作即放大等。
此外，触摸手势操作能够包含通过2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势、在使手指接触触摸面板的状态下以滑动手指的方式移动的滑动手势等。另外，触摸手势操作还能够包含使用作为笔型输入辅助器械的触摸笔的操作。
实施方式
《1》结构
图1是示出本发明的实施方式的触摸面板输入装置100的概略结构的功能框图。
图2是示出实施方式中的画面全体输入判定部12b的概略结构的功能框图。如图1所示，实施方式的触摸面板输入装置100具有触摸手势判定装置110和触摸面板120。触摸手势判定装置110是能够执行实施方式的触摸手势判定方法和实施方式的触摸手势判定程序的装置。
如图1所示，触摸面板120具有：操作面板部122，其受理由用户进行的触摸手势操作，输出与触摸手势操作对应的操作信息(也称作“触摸信息”)A0；以及显示面板部121，其与操作面板部122重叠配置，能够显示GUI(Graphical User Interface) 画面等操作用图像。显示面板部121例如是液晶显示器。
如图1所示，触摸手势判定装置110具有操作信息输入部11、操作判定部12以及显示控制部14。触摸手势判定装置110也可以具有通知部13。
操作信息输入部11接受从操作面板部122输出的操作信息(操作信号)A0。操作信息输入部11将与所接受的操作信息A0对应的输入信息A1输出到操作判定部 12。输入信息A1是与操作信息A0对应的信息，也可以是与操作信息A0相同的信息。
操作判定部12从操作信息输入部11接受输入信息A1，将作为输出信息的选择值A2输出到通知部13和显示控制部14。从操作判定部12输出的选择值A2是操作判定部12根据输入信息A1决定的选择值，搭载有触摸面板输入装置100的装置的应用程序等根据该选择值A2进行设备控制等。
操作判定部12根据所接受的输入信息A1判定用户进行的触摸手势操作的种类和内容。如图1所示，操作判定部12具有显示部件输入判定部12a、画面全体输入判定部12b以及操作模式切换判定部12c。
操作模式切换判定部12c根据从操作信息输入部11接受的输入信息A1，判定输入信息A1中是否包含与画面的操作模式的切换有关的信息。画面的操作模式存在在画面内显示有作为操作对象的显示部件的显示部件操作模式、以及设定画面全体作为输入范围的画面全体操作模式，能够对这些操作模式进行切换。
操作模式切换判定部12c根据与操作模式的切换有关的判定结果对操作模式进行切换。操作模式切换判定部12c通过切换操作模式，对操作画面的显示内容、输入方法和通知方法进行切换。
画面全体输入判定部12b根据针对画面全体的触摸信息识别输入内容，进行操作的受理和选择值A2的决定。如图2所示，画面全体输入判定部12b具有模式中参数 111、模式中以外的参数112、手势模式判定部113以及手势输入信息判定部114。
通过模式中参数111、模式中以外的参数112、手势模式判定部113识别针对画面全体的触摸信息的输入内容。在模式中参数111存储有在某个模式中使用的移动量、触摸时间等参数。
在模式中参数111中，按照手势模式的每个种类存储有与该手势模式有关的参数。如图2所示，在模式中参数111中例如存储有滑动模式的参数111a和拨盘模式的参数111b。滑动模式的参数111a和拨盘模式的参数111b是根据触摸手势操作的预定时间内的移动量、触摸手势操作的速度、曲率和触摸时间中的任意1个或2个以上的组合而确定的参数。
另外，模式中参数111中存储的参数不限于图2所示的例子。此外，在模式中以外的参数112中存储有初次操作时等不是任意模式时使用的移动量、触摸时间等参数。
手势模式判定部113参照模式中参数111和模式中以外的参数112，确定所输入的触摸信息的手势模式。手势输入信息判定部114按照由手势模式判定部113确定的手势模式下的值设定方式决定选择值A2。
显示部件输入判定部12a根据针对画面中显示的显示部件的触摸信息识别输入内容，进行操作的受理和选择值A2的决定。
通知部13按照操作模式切换判定部12c的判定结果对操作画面的通知方法进行切换，此外，接受由操作判定部12决定的选择值A2的信息，通知操作的状况。通知部13发出基于选择值A2的通知内容的通知，或者输出通知信号。
例如，通知部13根据从操作判定部12接受的输入信息A2，通过例如声音、画面显示、振动器的振动或灯点亮等通知用户的触摸手势操作的状况。
在通知部13的通知是基于声音的通知的情况下，通知部13向作为语音输出部的扬声器输出通知信号。在后述图3中示出扬声器。在通知部13的通知是图像显示的情况下，通知部13向显示控制部14发送通知信息A3，显示控制部14向触摸面板120的显示面板部121发送基于通知信息A3的图像信号A4。
显示控制部14按照操作模式切换判定部12c的判定结果对操作画面的显示内容进行切换，此外，接受由操作判定部12决定的选择值A2的信息，在画面中反映操作结果。如图1所示，显示控制部14将触摸面板120的显示面板部121中显示的操作用图像的图像信号A4输出到显示面板部121。
图3是示出实施方式的触摸面板输入装置100的硬件(H/W)结构的一例的图。如图3所示，实施方式的触摸面板输入装置100具有触摸面板120、处理器301、存储器302以及扬声器303。
图1所示的触摸手势判定装置110能够使用存储作为软件的触摸手势判定程序的作为存储装置的存储器302、以及执行存储器302中存储的触摸手势判定程序的作为信息处理部的处理器301(例如通过计算机)实现。
该情况下，图1中的结构要素11～14相当于在图3中执行触摸手势判定程序的处理器301。另外，还能够通过图3所示的存储器302和执行触摸手势判定程序的处理器301实现图1所示的触摸手势判定装置110的一部分。
触摸面板120检测多个手指的接触，向处理器301发送触摸信息(各手指的识别编号、坐标、接触状态)。处理器301在存储器302中存储从触摸面板120取得的触摸信息，根据存储器302中蓄积的触摸的历史信息对操作画面、输入方法、通知方法进行切换。
此外，处理器301根据存储器302中存储的触摸信息，判定是针对画面全体的操作还是针对显示部件的操作，在各个操作模式下决定选择值。
扬声器303例如是通过广播等声音通知触摸手势操作状况的情况下使用的声音输出部。触摸面板输入装置100也可以代替扬声器303或作为追加的结构而具有振动器、灯、用于无线发送通知信号的发送装置等追加装置。
图4的(a)和(b)是示出实施方式的触摸面板输入装置100中的触摸面板120 的画面和触摸手势操作的例子的图。图4的(a)示出在显示部件操作模式下显示的画面例401。如图4的(a)所示，在画面例401中显示有直接选择选择值的按钮402 等作为操作对象的各种部件。能够通过对显示有显示部件的区域进行触摸输入，进行对象部件的操作。
图4的(b)示出在画面全体操作模式下显示的画面例403。如图4的(b)所示，在画面例403中示出当前选择的选择值的显示404、提示画面切换用的操作指示的显示(例如后述的取消区域405)等。作为该画面中的输入方法，通过例如点击操作的次数、利用2点以上的触摸使拨盘旋转的手势等输入信息。
在图4的(b)的画面例403的下部示出包围“>>取消>>”的矩形区域即取消区域405。通过选择取消区域405并进行轻扫(在预先决定的方向上使手指从左向右滑动)，取消画面全体操作模式，能够执行从画面全体操作模式到显示部件操作模式的画面的切换。
图5是示出实施方式的触摸面板输入装置100中的触摸手势判定装置110的动作(触摸手势判定方法)的流程图。如图5所示，在步骤ST401中，用户在显示部件操作模式下起动系统，实施各处理部的初始化。
在接下来的步骤ST402中，操作模式切换判定部12c根据从操作信息输入部11 输入的触摸信息，判定针对画面全体操作模式的切换输入。在受理了针对画面全体操作模式的切换输入的情况下(ST402：是)，在接下来的步骤ST403中，使操作模式进行转变，切换成画面全体操作模式下的显示内容、输入方法、通知方法。
在接下来的步骤ST404中，手势输入信息判定部114根据由用户输入的触摸信息识别与手势输入有关的信息，由此决定选择值A2。用户例如通过利用2点以上的触摸使拨盘旋转的手势(拨盘手势)等输入信息。
这里，在用户进行的拨盘手势操作中拨盘旋转角度的曲率半径较大的情况下，触摸面板120可能误识别为不是进行拨盘输入而是进行滑动输入。在触摸面板120进行了误识别的情况下，在被识别出的拨盘手势未完成的期间内(手势模式的中途)，被切换识别为滑动手势。实施方式的触摸手势判定方法的目的在于，如上所述，在进行某个手势操作时，防止误识别为另一个手势操作。
在接下来的步骤ST405中，通过将在步骤ST404中决定的选择值A2转交给操作画面显示部109，对显示内容进行切换，显示反映了操作内容的画面。
在接下来的步骤ST406中，通过将在步骤ST404中决定的选择值A2转交给通知部13，对通知内容进行切换，实施操作结果后的状况的通知、提示操作的广播。
在接下来的步骤ST407中，操作模式切换判定部12c根据从操作信息输入部11 输入的触摸信息和触摸的历史信息，判定针对显示部件操作模式的切换输入。
在检测到切换输入的情况下(ST407：是)，在接下来的步骤ST408中，转变成显示部件操作模式，转移到在初始起动时显示的显示部件的操作画面。在不存针对显示部件操作模式的切换输入的情况下，在受理切换输入之前，受理针对操作面板部 122的触摸输入，然后，与其对应地对显示内容和通知内容进行切换。
在步骤ST402的与画面切换有关的输入判定中，在输入内容不是针对画面全体操作模式的切换的情况下(ST402：否)，在接下来的步骤ST409中，实施针对显示部件的输入判定。
关于显示部件操作模式下的针对显示部件的输入判定，根据显示部件的操作范围内是否包含触摸输入坐标来进行判定。在检测到显示部件的操作输入的情况下，在接下来的步骤ST410中实施选择值A2的决定，在操作对象不是显示部件的情况下，在步骤ST402中再次实施触摸输入的受理。
在接下来的步骤ST410中，显示部件输入判定部12a根据从操作信息输入部11 输入的触摸信息决定选择值A2。作为选择的例子，如图3的各显示部件的显示画面的图所示，配置按钮等分配有固有选择值的显示部件，通过针对显示部件的触摸输入来决定该选择值。
在接下来的步骤ST411中，通过将在步骤ST410中决定的选择值A2转交给显示控制部14，对显示面板部121的显示内容进行切换，显示与操作内容对应的画面。
在接下来的步骤ST412中，通过将在步骤ST410中决定的选择值A2转交给通知部13，对通知内容进行切换，实施操作结果后的状况的通知、提示操作的广播。
图6是示出实施方式中的手势模式判定部113进行的手势模式偏离判定的动作的流程图。在步骤ST501中，手势模式判定部113判定是否处于手势模式下。
手势模式判定部113例如在刚刚通过手势输入信息判定部114决定选择值A2后，判定为未处于手势模式下。此外，手势模式判定部113例如在触摸面板上用户进行滚动中的情况下、拨盘模式下等的情况下，判定为处于手势模式下。
在步骤ST501中判定为处于手势模式下的情况下(ST501：是)，在接下来的步骤ST502中，手势模式判定部113判定处于作为第1手势模式的滑动模式、作为第2 手势模式的拨盘模式或触摸模式中的哪个手势模式下。
在步骤ST502中判定为是滑动手势的情况下，进入步骤ST503，取得作为第1 参数的滑动模式的参数。在步骤ST502中判定为是拨盘手势的情况下，进入步骤 ST504，取得作为第2参数的拨盘模式的参数。在步骤ST502中判定为是触摸手势的情况下，进入步骤ST505，取得与触摸手势对应的触摸模式的参数。
滑动模式的参数、拨盘模式的参数和触摸模式的参数是根据触摸手势操作的预定时间内的移动量、触摸手势操作的速度、曲率和触摸时间中的任意1个或2个以上的组合确定的。
在步骤ST503～ST505中取得与各个手势模式对应的参数后，进入接下来的步骤ST506，判定是否在步骤ST502中判定出手势模式的种类后经过了规定时间。在经过了规定时间的情况下(步骤ST506：是)，进入接下来的步骤ST507，使用所取得的手势模式下的参数，进行判定手势是否偏离的模式偏离判定。
在步骤ST501中判定为未处于手势模式下时(ST501：否)，处理进入步骤ST508，取得作为第3参数的模式中以外的参数112，在接下来的步骤ST509中进行模式偏离判定。
《2》效果
如上所述，根据实施方式的触摸面板输入装置100，通过手势模式判定部113判定执行中的手势模式的种类，取得与判定出的手势模式的种类对应的参数，使用所取得的参数进行模式偏离判定。由此，能够防止在某个模式的操作中误识别为另一个模式，容易进行基于手势的输入操作，用户的操作性提高。
根据实施方式的触摸面板输入装置100，在进入某个模式后，维持该模式达到规定时间以上，然后进行模式偏离判定。由此，能够防止在某个模式的操作中无意识地从该模式偏离。
标号说明
11：操作信息输入部；12：操作判定部；12a：显示部件输入判定部；12b：画面全体输入判定部；13：通知部；14：显示控制部；100：触摸面板输入装置；110：触摸手势判定装置；111：模式中的参数；111a：滑动模式的参数；111b：拨盘模式的参数；112：模式中以外的参数；113：手势模式判定部；114：手势输入信息判定部； 120：触摸面板；121：显示面板部；122：操作面板部；301：处理器；302：存储器； 303：扬声器；A0：操作信息；401、403：画面例；405：取消区域；A1：输入信息； A2：选择值；A3：通知信息；A4：图像信号。

Claims (11)

1.一种触摸手势判定装置，该触摸手势判定装置从触摸面板接受操作信息并生成基于所述操作信息的输出信息，该触摸面板在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的所述操作信息，其特征在于，
所述触摸手势判定装置具有：
操作判定部，其根据所述操作信息生成所述触摸面板的显示用的输出信息；以及
显示控制部，其接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，
所述操作判定部具有画面全体输入判定部，该画面全体输入判定部根据与在画面全体操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体操作模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，
所述画面全体输入判定部具有：
手势模式判定部，其判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式；
与所述滑动模式有关的第1参数；以及
与所述拨盘模式有关且与所述第1参数不同的第2参数，
所述手势模式判定部在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
2.根据权利要求1所述的触摸手势判定装置，其特征在于，
在从所述触摸手势操作的手势模式的所述判定起经过预定时间后进行所述模式偏离判定。
3.根据权利要求1或2所述的触摸手势判定装置，其特征在于，
所述画面全体输入判定部还具有与手势模式以外的操作有关的参数即第3参数，
所述手势模式判定部判定所述触摸手势判定装置是否处于手势模式中，在判定为所述触摸手势判定装置未处于手势模式中的情况下，使用所述第3参数进行模式偏离判定。
4.根据权利要求3所述的触摸手势判定装置，其特征在于，
所述第1参数～第3参数是根据所述触摸手势操作的预定时间内的移动量、所述触摸手势操作的速度、曲率和触摸时间中的任意1个或2个以上的组合确定的。
5.根据权利要求1～4中的任意一项所述的触摸手势判定装置，其特征在于，
所述操作判定部还具有：
显示部件输入判定部，其根据与在显示部件操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该显示部件操作模式是根据对作为所述操作用图像显示于所述触摸面板的显示部件进行的触摸手势操作来识别输入内容的模式；以及
操作模式切换部，其对所述显示部件操作模式和所述画面全体操作模式进行切换。
6.根据权利要求1～5中的任意一项所述的触摸手势判定装置，其特征在于，
所述触摸手势判定装置还具有操作信息输入部，该操作信息输入部接受从所述触摸面板输出的所述操作信息，将与所接受的所述操作信息对应的输入信息输出到所述操作判定部。
7.根据权利要求1～6中的任意一项所述的触摸手势判定装置，其特征在于，
所述触摸手势判定装置还具有通知部，该通知部发出基于所述输出信息的通知内容的通知，或者输出基于所述输出信息的通知内容的通知信号。
8.一种触摸手势判定方法，从触摸面板接受操作信息并生成基于所述操作信息的输出信息，该触摸面板在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的所述操作信息，其特征在于，
所述触摸手势判定方法具有以下步骤：
操作判定步骤，根据所述操作信息生成所述触摸面板的显示用的输出信息；以及
显示控制步骤，接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，
所述操作判定步骤具有画面全体输入判定步骤，在该画面全体输入判定步骤中，根据与在画面全体操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体操作模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，
所述画面全体输入判定步骤具有手势模式判定步骤，在该手势模式判定步骤中，判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式，
在所述手势模式判定步骤中，根据与所述滑动模式有关的第1参数以及与所述拨盘模式有关且与所述第1参数不同的第2参数，在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
9.一种记录有触摸手势判定程序的记录介质，其特征在于，为了从触摸面板接受操作信息并生成基于所述操作信息的输出信息，所述触摸手势判定程序使计算机执行以下处理，其中，该触摸面板在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的所述操作信息，所述处理具有：
操作判定处理，根据所述操作信息生成所述触摸面板的显示用的输出信息；以及
显示控制处理，接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，
所述操作判定处理具有画面全体输入判定处理，在该画面全体输入判定处理中，根据与在画面全体操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体操作模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，
所述画面全体输入判定处理具有手势模式判定处理，在该手势模式判定处理中，判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式，
在所述手势模式判定处理中，根据与所述滑动模式有关的第1参数以及与所述拨盘模式有关且与所述第1参数不同的第2参数，在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
10.一种触摸面板输入装置，该触摸面板输入装置具有：触摸面板，其在画面中显示操作用图像，受理用户的触摸手势操作，输出与所述触摸手势操作对应的操作信息；以及触摸手势判定装置，其接受所述操作信息，根据所述操作信息对所述触摸面板的显示进行控制，其特征在于，
所述触摸手势判定装置具有：
操作判定部，其根据所述操作信息生成所述触摸面板的显示用的输出信息；以及
显示控制部，其接受所述输出信息，使所述触摸面板显示与所述输出信息对应的图像作为所述操作用图像，
所述操作判定部具有画面全体输入判定部，该画面全体输入判定部根据与在画面全体操作模式下进行的触摸手势操作对应的操作信息决定所述输出信息，该画面全体操作模式是根据对所述触摸面板的画面全体进行的触摸手势操作来识别输入内容的模式，
所述画面全体输入判定部具有：
手势模式判定部，其判定所述触摸手势操作的手势模式是滑动模式还是拨盘模式，所述滑动模式是在使所述用户的手指接触所述触摸面板的状态下以滑动的方式移动的滑动手势的手势模式，所述拨盘模式是通过所述手指的2点以上的触摸以使拨盘旋转的方式进行操作的拨盘手势的手势模式；
与所述滑动模式有关的第1参数；以及
与所述拨盘模式有关且与所述第1参数不同的第2参数，
所述手势模式判定部在判定为所述触摸手势操作的手势模式是所述滑动模式的情况下，使用所述第1参数进行判定从所述滑动模式起的偏离的模式偏离判定，在判定为所述触摸手势操作的手势模式是所述拨盘模式的情况下，使用所述第2参数进行判定从所述拨盘模式起的偏离的模式偏离判定。
11.根据权利要求10所述的触摸面板输入装置，其特征在于，
所述触摸面板具有：
操作面板部，其受理所述触摸手势操作，输出与所述触摸手势操作对应的所述操作信息；以及
显示面板部，其与所述操作面板部重叠配置，在所述画面中显示所述操作用图像。
CN201780088102.5A 2017-03-15 2017-03-15 触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定程序的记录介质和触摸面板输入装置 Active CN110402427B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/010345 WO2018167865A1 (ja) 2017-03-15 2017-03-15 タッチジェスチャ判定装置、タッチジェスチャ判定方法、タッチジェスチャ判定プログラム、及びタッチパネル入力装置

Publications (2)

Publication Number Publication Date
CN110402427A CN110402427A (zh) 2019-11-01
CN110402427B true CN110402427B (zh) 2022-05-31

Family

ID=60265772

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780088102.5A Active CN110402427B (zh) 2017-03-15 2017-03-15 触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定程序的记录介质和触摸面板输入装置

Country Status (5)

Country Link
JP (1) JP6227213B1 (zh)
KR (1) KR102136526B1 (zh)
CN (1) CN110402427B (zh)
DE (1) DE112017006949T5 (zh)
WO (1) WO2018167865A1 (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008070968A (ja) * 2006-09-12 2008-03-27 Funai Electric Co Ltd 表示処理装置
CN101893992A (zh) * 2006-09-06 2010-11-24 苹果公司 用于照片管理的便携式电子装置
CN102239464A (zh) * 2008-12-08 2011-11-09 夏普株式会社 操作受理装置和计算机程序
CN102694942A (zh) * 2011-03-23 2012-09-26 株式会社东芝 图像处理装置、操作方法显示方法及画面显示方法
CN102713822A (zh) * 2010-06-16 2012-10-03 松下电器产业株式会社 信息输入装置、信息输入方法以及程序
CN102890616A (zh) * 2012-09-26 2013-01-23 杨生虎 触摸屏的快捷输入方法及系统
CN103365610A (zh) * 2012-04-02 2013-10-23 卡西欧计算机株式会社 印刷信息输出装置、便携电子设备以及印刷信息输出方法
CN103677402A (zh) * 2012-09-19 2014-03-26 柯尼卡美能达株式会社 图像处理装置、操作标准化方法以及操作标准化程序
CN103731578A (zh) * 2012-10-10 2014-04-16 柯尼卡美能达株式会社 图像处理装置以及操作事件判别方法
CN104076974A (zh) * 2013-03-25 2014-10-01 柯尼卡美能达株式会社 手势判别装置、手势判别方法、以及计算机程序
JP2016515741A (ja) * 2013-04-15 2016-05-30 マイクロソフト テクノロジー ライセンシング，エルエルシー マルチフィンガータッチインタラクション中のパンおよびスケーリングの検出
CN106095307A (zh) * 2016-06-01 2016-11-09 努比亚技术有限公司 旋转手势识别装置及方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8427440B2 (en) * 2009-05-05 2013-04-23 Microsoft Corporation Contact grouping and gesture recognition for surface computing
JP5782431B2 (ja) 2009-05-27 2015-09-24 オブロング・インダストリーズ・インコーポレーテッド 空間動作システムと共に用いるための空間マルチモード制御デバイス
JP5852514B2 (ja) * 2012-06-13 2016-02-03 株式会社東海理化電機製作所 タッチセンサ
JP6269537B2 (ja) * 2015-03-06 2018-01-31 京セラドキュメントソリューションズ株式会社 表示入力装置、それを備えた画像形成装置、表示入力装置の制御方法およびプログラム

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101893992A (zh) * 2006-09-06 2010-11-24 苹果公司 用于照片管理的便携式电子装置
JP2008070968A (ja) * 2006-09-12 2008-03-27 Funai Electric Co Ltd 表示処理装置
CN102239464A (zh) * 2008-12-08 2011-11-09 夏普株式会社 操作受理装置和计算机程序
CN102713822A (zh) * 2010-06-16 2012-10-03 松下电器产业株式会社 信息输入装置、信息输入方法以及程序
CN102694942A (zh) * 2011-03-23 2012-09-26 株式会社东芝 图像处理装置、操作方法显示方法及画面显示方法
CN103365610A (zh) * 2012-04-02 2013-10-23 卡西欧计算机株式会社 印刷信息输出装置、便携电子设备以及印刷信息输出方法
CN103677402A (zh) * 2012-09-19 2014-03-26 柯尼卡美能达株式会社 图像处理装置、操作标准化方法以及操作标准化程序
CN102890616A (zh) * 2012-09-26 2013-01-23 杨生虎 触摸屏的快捷输入方法及系统
CN103731578A (zh) * 2012-10-10 2014-04-16 柯尼卡美能达株式会社 图像处理装置以及操作事件判别方法
CN104076974A (zh) * 2013-03-25 2014-10-01 柯尼卡美能达株式会社 手势判别装置、手势判别方法、以及计算机程序
JP2016515741A (ja) * 2013-04-15 2016-05-30 マイクロソフト テクノロジー ライセンシング，エルエルシー マルチフィンガータッチインタラクション中のパンおよびスケーリングの検出
CN106095307A (zh) * 2016-06-01 2016-11-09 努比亚技术有限公司 旋转手势识别装置及方法

Also Published As

Publication number Publication date
CN110402427A (zh) 2019-11-01
JP6227213B1 (ja) 2017-11-08
KR20190109551A (ko) 2019-09-25
KR102136526B1 (ko) 2020-07-22
WO2018167865A1 (ja) 2018-09-20
DE112017006949T5 (de) 2019-10-31
JPWO2018167865A1 (ja) 2019-03-22

Similar Documents

Publication Publication Date Title
US9250729B2 (en) Method for manipulating a plurality of non-selected graphical user elements
US9335899B2 (en) Method and apparatus for executing function executing command through gesture input
US20150199125A1 (en) Displaying an application image on two or more displays
US20140223299A1 (en) Gesture-based user interface method and apparatus
EP2701044A1 (en) Information processing device, information processing method, and computer-readable recording medium which records program
JP2022140510A (ja) 画像処理装置、画像処理装置の制御方法及びプログラム
US9146667B2 (en) Electronic device, display system, and method of displaying a display screen of the electronic device
JP5522755B2 (ja) 入力表示制御装置、シンクライアントシステム、入力表示制御方法およびプログラム
EP2829967A2 (en) Method of processing input and electronic device thereof
US10691287B2 (en) Touch panel type information terminal device, information input processing method and program thereof
JP6253861B1 (ja) タッチジェスチャ判定装置、タッチジェスチャ判定方法、タッチジェスチャ判定プログラム、及びタッチパネル入力装置
CN110402427B (zh) 触摸手势判定装置、触摸手势判定方法、记录有触摸手势判定程序的记录介质和触摸面板输入装置
JP6737239B2 (ja) 表示装置及び表示制御プログラム
JP6087602B2 (ja) 電子黒板
JP2022179604A (ja) 情報処理装置、情報処理方法、及びプログラム
JP6971573B2 (ja) 電子機器、その制御方法およびプログラム
JP2020077181A (ja) 表示制御装置、表示制御装置の制御方法及びプログラム
JP2015088090A (ja) 操作表示装置、操作表示方法及びプログラム
KR20130074778A (ko) 정전식 터치스크린을 이용하는 스마트폰 및 스마트 기기의 키보드 확대 장치 및 입력 방법
JP7030527B2 (ja) 電子機器、情報処理方法、プログラム及び記憶媒体
JP2017174201A (ja) 電子書籍表示装置及びプログラム
JP2016042394A (ja) 情報処理装置および方法、プログラム、並びに記録媒体
WO2016001748A1 (en) Method and apparatus for displaying an operation on a touch screen of a device
JP2014209334A (ja) 情報端末、表示制御方法、及び表示制御プログラム
JP2014182587A (ja) 情報端末、操作領域制御方法及び操作領域制御プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant