CN109240571A - 一种控制装置、终端及控制方法 - Google Patents

一种控制装置、终端及控制方法 Download PDF

Info

Publication number
CN109240571A
CN109240571A CN201810759758.1A CN201810759758A CN109240571A CN 109240571 A CN109240571 A CN 109240571A CN 201810759758 A CN201810759758 A CN 201810759758A CN 109240571 A CN109240571 A CN 109240571A
Authority
CN
China
Prior art keywords
touch
module
incoming event
input
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810759758.1A
Other languages
English (en)
Inventor
顾弘
张华琪
王国刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201810759758.1A priority Critical patent/CN109240571A/zh
Publication of CN109240571A publication Critical patent/CN109240571A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例公开了一种控制装置、终端及控制方法，涉及通信技术领域，以解决人机交互的灵活性较低的问题。控制装置应用于终端，终端包括触控屏，控制装置包括输入参数获取模块以及与该输入参数获取模块连接的输入事件识别模块。输入参数获取模块用于检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，获取与触控体对应的输入参数，并将输入参数发送给输入事件识别模块。输入事件识别模块用于接收输入参数，并根据输入参数确定与触控体对应的输入事件，以及将该输入事件发送给终端。

Description

一种控制装置、终端及控制方法
技术领域
本发明实施例涉及通信技术领域，尤其涉及一种控制装置、终端及控制方法。
背景技术
随着终端的应用范围越来越广，用户对于人机交互的灵活性的需求日益提升。
目前，用户可以通过在终端的触控屏上单击、双击以及滑动等各种输入实现与终端的交互。例如，用户可以使用手指在终端的触控屏上触摸一定时间以实现在触控屏上的各种输入。当用户的手指在触控屏上触摸时，终端可以获取用户触摸位置的位置信息，并根据该位置信息响应用户的输入。
然而，上述过程中，由于只有用户的手指在触控屏上触摸(即用户的手指与触控屏接触)时，终端才能获取到用户触摸位置的位置信息，因此上述过程的局限性比较大，从而使得用户与终端交互的灵活性较低，即人机交互的灵活性较低。
发明内容
本发明实施例提供一种控制装置、终端及控制方法，以解决现有技术中人机交互的灵活性较低的问题。
为了解决上述技术问题，本发明是这样实现的：
第一方面，本发明实施例提供了一种控制装置，该控制装置应用于终端，终端包括触控屏，控制装置包括输入参数获取模块以及与该输入参数获取模块连接的输入事件识别模块。输入参数获取模块用于检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，获取与触控体对应的输入参数，并将该输入参数发送给输入事件识别模块。输入事件识别模块用于接收该输入参数，并根据该输入参数确定与触控体对应的输入事件，以及将该输入事件发送给终端。
第二方面，本发明实施例提供了一种终端，该终端包括触控屏、处理器，以及上述第一方面中的控制装置。控制装置用于在检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件；当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件；以及将与触控体对应的输入事件发送给处理器。处理器用于接收该输入事件，并响应于该输入事件，在触控屏上显示与该输入事件对应的输出结果。
第三方面，本发明实施例提供了一种控制方法，该控制方法应用于终端，终端包括触控屏。该控制方法包括：检测触控体、预设平面以及终端的触控屏之间的位置关系是否符合预设条件；当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件；并响应于该输入事件，在触控屏上显示与该输入事件对应的输出结果。
第四方面，本发明实施例提供了一种终端，该终端包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述第三方面中的控制方法的步骤。
第五方面，本发明实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储计算机程序，该计算机程序被处理器执行时实现上述第三方面中的控制方法的步骤。
在本发明实施例中，可以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，并且当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件，以及响应于该输入事件，能够在触控屏上显示与该输入事件对应的输出结果，从而使得用户可以与终端隔空交互。与现有技术相比，本发明实施例中，由于不再局限于需要用户的手指与终端的触控屏接触的情况下终端才会响应用户的输入，因此能够提高用户与终端之间的人机交互的灵活性。
附图说明
图1为本发明实施例提供的控制装置的示意图之一；
图2为本发明实施例提供的预设平面与触控屏的位置关系示意图；
图3为本发明实施例提供的控制装置应用的界面示意图之一；
图4为本发明实施例提供的控制装置应用的界面示意图之二；
图5为本发明实施例提供的控制装置的示意图之二；
图6为本发明实施例提供的深度摄像头的位置排布示意图；
图7为本发明实施例提供的预设平面的形状示意图；
图8为本发明实施例提供的控制装置的示意图之三；
图9为本发明实施例提供的控制装置的示意图之四；
图10为本发明实施例提供的控制装置应用的界面示意图之三；
图11为本发明实施例提供的控制装置的示意图之五；
图12为本发明实施例提供的终端的结构示意图；
图13为本发明实施例提供的控制方法的示意图之一；
图14为本发明实施例提供的控制方法的示意图之二；
图15为本发明实施例提供的终端的硬件示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本文中术语“和/或”，是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。本文中符号“/”表示关联对象是或者的关系，例如A/B表示A或者B。
本发明的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象，而不是用于描述对象的特定顺序。例如，第一轨迹和第二轨迹等是用于区别不同的轨迹，而不是用于描述轨迹的特定顺序。
在本发明实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本发明实施例的描述中，除非另有说明，“多个”的含义是指两个或者两个以上，例如，多个元件是指两个或者两个以上的元件等。
本发明实施例提供一种控制装置、终端及控制方法，控制装置包括输入参数获取模块以及与该输入参数获取模块连接的输入事件识别模块。输入参数获取模块用于检测触控体、预设平面以及终端的触控屏之间的位置关系是否符合预设条件，当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，获取与触控体对应的输入参数，并将该输入参数发送给输入事件识别模块。输入事件识别模块用于接收该输入参数，并根据该输入参数确定与触控体对应的输入事件，以及将该输入事件发送给终端。在本发明实施例中，可以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，并且当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件，以及响应于该输入事件，能够在触控屏上显示与该输入事件对应的输出结果，从而使得用户可以与终端隔空交互。与现有技术相比，本发明实施例中，由于不再局限于需要用户的手指与终端的触控屏接触的情况下终端才会响应用户的输入，因此能够提高用户与终端之间的人机交互的灵活性。
本发明实施例中的终端可以为移动终端，也可以为非移动终端。示例性的，移动终端可以为手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personaldigital assistant，PDA)等，非移动终端可以为个人计算机(personal computer，PC)、电视机(television，TV)、投影仪、柜员机或者自助机等，本发明实施例不作具体限定。
参考图1所示，本发明实施例提供一种控制装置100，该控制装置100可以应用于终端，终端可以包括触控屏。本发明实施例提供的控制装置100可以包括输入参数获取模块101，以及与所述输入参数获取模块101连接的输入事件识别模块102。
其中，输入参数获取模块101可以用于检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，获取与触控体对应的输入参数，并将该输入参数发送给输入事件识别模块102。输入事件识别模块102可以用于接收该输入参数，并根据该输入参数确定与触控体对应的输入事件，以及将该输入事件发送给终端。
本发明实施例中，如图2所示，该预设平面可以是终端所在空间内、且位于触控屏上方的用户不可见的平面。可选的，该预设平面可以与触控屏平行。需要说明的是，预设平面的大小可以通过设置在终端的前壳上的摄像头(即下文中提及的深度摄像头)的视场角确定。
本发明实施例中，触控体可以为用户的手指，以及类似于手指的其他替代物(例如触控笔)。下面以触控体为用户的手指举例说明，用户的手指可以在预设平面上输入，一旦用户的手指(例如指尖)低于预设平面时，即可触发触屏事件(即相当于可触发在触控屏上的触屏事件)，进而可以在预设平面上实现类似于在触控屏上实现的该触屏事件。可以理解，用户通过触控体在预设平面上的输入事件(例如触控体在预设平面上用指尖滑动的事件)，可以被终端确定为是与在触控屏上相同的输入事件。即对于相同的输入事件，终端响应用户通过触控体在预设平面上的输入事件的结果与终端响应用户通过触控体在触控屏上的输入事件的结果相同。
示例性的，如图2所示，该预设平面与触控屏可以相距特定距离z1，假设z1＝5cm(厘米)，那么上述输入参数获取模块101可以根据该特定距离判断用户是否触发在预设平面上的输入。具体的，上述输入参数获取模块101可以判断用户的手指与触控屏之间的垂直距离是否小于z1，若该垂直距离小于z1，则上述输入参数获取模块101可以判断用户通过触控体触发了在预设平面上的输入，即可以检测到触控体在预设平面上的输入。
可选的，该预设平面与触控屏之间的距离可以在一定范围内。示例性的，该范围可以为[z1-Δz，z1+Δz]，其中，Δz为相对于z1较小的误差值。可以理解，该范围只是示例性的举例，具体可以根据实际使用需求确定，本发明实施例不作限定。
可选的，本发明实施例中，用户通过触控体在预设平面上的输入可以为滑动输入或者点击输入(例如单击输入或双击输入)，具体可以根据实际使用需求确定，本发明实施例不作限定。
可选的，本发明实施例中，上述输入参数获取模块101可以检测用户的手指在预设平面上的输入，也可以检测用户通过类似于手指的其他替代物在预设平面上的输入。也就是说，本发明实施例中，用户通过触控体在预设平面上的输入不限于通过手指来实现，也可以通过上述类似于手指的其他替代物实现，具体可以根据实际使用需求确定，本发明实施例不作限定。
可选的，本发明实施例中，上述输入参数获取模块101可以周期性地检测触控体在预设平面上的输入。示例性的，上述输入参数获取模块101可以每隔0.5s(秒)检测一次触控体在预设平面上的输入。
本发明实施例中，在检测到触控体、预设平面以及触控屏之间的位置关系符合预设条件时，上述输入参数获取模块101可以获取与触控体对应的输入参数。示例性的，输入参数可以包括第一轨迹信息(例如触控体在预设平面上对应的x方位信息和y方位信息)、时长信息、轨迹信息，以及手指在垂直于触控屏的方向上的移动加速度信息(例如触控体在预设平面上对应的z方位信息)中的至少一项。然后上述输入参数获取模块101再将获取到的输入参数发送给输入事件识别模块102。如此，与现有技术相比，由于本发明实施例提供的控制装置不但可以获得触控体对应的x方位信息和y方位信息，还可以获得触控体对应的z方位信息(也可以理解为触控体对应的深度信息)，因此包括该控制装置的终端可以提供相比只有触控屏的情况更为丰富的交互逻辑。
本发明实施例中，上述输入事件识别模块102可以接收上述输入参数获取模块101发送的与触控体对应的输入参数，并根据该输入参数确定与触控体对应的输入事件。例如，假设用户通过触控体在预设平面上的输入为滑动输入，那么与触控体对应的输入事件可以为滑动输入事件；再假设用户通过触控体在预设平面上的输入为点击输入，那么与触控体对应的输入事件可以为点击输入事件(例如单击输入事件或双击输入事件)。然后上述输入事件识别模块102再将该输入事件发送给终端，以便于终端可以响应该输入事件。进一步的，本发明实施例中，终端响应于该输入事件，可以在触控屏上显示与该输入事件对应的输出结果。即本发明实施例提供的控制方法，用户通过在预设平面上的输入可以实现与触控屏上的输入相同的效果，如此可以实现用户与终端隔空交互(即用户的手指无需与触控屏接触即可实现与终端的交互)，从而能够提高用户与终端之间的人机交互的灵活性。
示例性的，下面以用户通过触控体在预设平面上的输入为单击输入为例，详细说明本发明实施例提供的用户通过预设平面与终端之间交互的过程。如图3所示，在用户用手指在预设平面上的触点30处单击输入的情况下，输入参数获取模块可以检测到用户通过触控体在预设平面上的单击输入，并获取该单击输入的输入参数(例如，该单击输入在预设平面上对应的x方位信息、y方位信息和z方位信息，以及时长信息等)，并将该输入参数发送给输入事件识别模块，输入事件识别模块可以根据该输入参数确定本次输入事件为单击事件，然后输入事件识别模块再将该单击事件发送给终端，进而终端可以响应于该单击事件，在触控屏上(例如在图3中的投影点31处)显示一个投影点标记，例如图3中在“设置”应用图标处显示投影点标记。如此，本发明实施例通过用户通过触控体在预设平面上的输入可以实现选中应用图标。
又示例性的，下面再以用户通过触控体在预设平面上的输入为滑动输入，例如触控体触发终端移动终端的界面上的应用图标的输入为例，详细说明本发明实施例提供的用户通过预设平面与终端之间交互的过程。如图4所示，在用户用手指在预设平面上的触点40处单击输入，并且继续按照图4所示的预设平面上的箭头方向滑动一段距离到达触点41后抬起手指的情况下，输入参数获取模块可以检测到用户通过触控体在预设平面上的滑动输入，并获取该滑动输入的输入参数(例如，该滑动输入在预设平面上对应的x方位信息、y方位信息和z方位信息、时长信息，以及轨迹信息等)，并将该输入参数发送给输入事件识别模块，输入事件识别模块可以根据该输入参数确定本次输入事件为滑动事件，然后输入事件识别模块再将该滑动事件发送给终端，进而终端可以响应于该滑动事件，在触控屏上显示触点40对应的应用图标从原始位置(即触点40对应的位置)移动到目标位置(即触点41对应的位置)的(沿图4所示的触控屏上的箭头方向)移动轨迹，并最终在触控屏上的目标位置处显示该应用图标，例如图4中的“设置”应用图标沿着箭头方向从原始位置移动到目标位置。如此，本发明实施例通过用户通过触控体在预设平面上的输入可以实现应用图标在触控屏上的位置改变。
可以理解，上述用户通过触控体触发终端移动终端的界面上的应用图标的过程中，由于用户通过触控体在预设平面上的滑动输入为动态输入，因此在用户输入过程中，终端可以实时地响应用户的输入，并实时地在触控屏上显示与该输入事件对应的输出结果，如此可以更好地体现用户通过预设平面与终端交互的可视化效果。
本发明实施例提供一种控制装置，该控制装置可以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，并且当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件，以及响应于该输入事件，能够在触控屏上显示与该输入事件对应的输出结果，从而使得用户可以与终端隔空交互。与现有技术相比，本发明实施例中，由于不再局限于需要用户的手指与终端的触控屏接触的情况下终端才会响应用户的输入，因此能够提高用户与终端之间的人机交互的灵活性。
可选的，结合图1，如图5所示，本发明实施例中，上述输入参数获取模块101可以包括图像采集模块1011、与图像采集模块1011连接的输入触发模块1012，以及与输入触发模块1012连接的输入跟踪模块1013，输入跟踪模块1013与输入事件识别模块102连接。
其中，图像采集模块1011可以用于针对预设平面，采集第一图像，并将该第一图像发送给输入触发模块1012。输入触发模块1012可以用于接收该第一图像，并根据该第一图像检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，以及当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，指示输入跟踪模块1013获取输入参数。输入跟踪模块1013可以用于在输入触发模块1012的指示下，获取输入参数，并将该输入参数发送给输入事件识别模块102。
可选的，本发明实施例中，图像采集模块1011可以为摄像头，该摄像头中可以包括深度传感器。即该摄像头可以称为深度摄像头。深度摄像头除了能够获取拍摄对象的平面信息以外，还可以获取拍摄对象的深度信息，也就是说，深度摄像头可以获取拍摄对象的三维立体数据。该三维立体数据可以包括三维位置信息和三维尺寸信息。如此，图像采集模块1011采集的第一图像也可以称为深度图像，即包含拍摄对象的深度信息的图像。
示例性的，深度摄像头可以为基于飞行时间(time of flight，TOF)技术的深度摄像头，或者也可以为基于结构光的深度摄像头。对于基于TOF技术的深度摄像头，其基本原理是传感器发出经调制的近红外光，遇物体后反射，传感器通过计算光线发射和反射时间差或相位差，来换算被拍摄对象的距离，以产生深度信息，此外再结合传统的相机拍摄，就能将物体的三维轮廓以不同颜色代表不同距离的地形图方式呈现出来。对于基于结构光的深度摄像头，其基本原理是：由结构光投射器向被拍摄对象表面投射可控制的光点、光条或光面结构，并由图像传感器获得第一图像，通过系统几何关系，利用三角原理计算得到被拍摄对象的三维坐标。
需要说明的是，该深度摄像头可以位于终端的前壳上，以便于用户可以通过触控体在终端的触控屏的上方的预设平面上进行输入。
可选的，本发明实施例中，可以在终端的前壳中嵌入一个或多个深度摄像头，以用于采集第一图像。示例性的，如图6所示，示出了一个或多个深度摄像头的位置排布示意图。其中，图6中的(a)示出了终端的前壳中嵌入一个深度摄像头60；图6中的(b)示出了终端的前壳中嵌入深度摄像头61、深度摄像头62、深度摄像头63。
本发明实施例中，如图7所示，预设平面是以终端的深度摄像头70为中心点、且位于终端的前壳的上方，以及与终端的触控屏平行的平面71。可选的，预设平面可以为矩形形状，其长度和宽度的大小可以根据深度摄像头的性能参数(例如视场角)确定。具体的，视场角的大小决定了深度摄像头的视野范围；例如，视场角越大，视野就越大，长度和宽度也就越大。上述预设平面的形状和尺寸只是示例性的列举，具体可以根据实际使用需求确定，本发明实施例不作限定。
本发明实施例中，上述的预设平面与触控屏之间的特定距离z1(参考上述图2)可以根据深度摄像头的性能参数(例如焦距)确定。具体的，若深度摄像头的焦距越大，则特定距离z1越大，即预设平面距离触控屏越远；若深度摄像头的焦距越小，则特定距离z1越小，即预设平面距离触控屏越近。
可选的，本发明实施例中，上述输入触发模块1012具体可以用于通过在第一图像中检测团块，以确定触控体、预设平面以及触控屏之间的位置关系是否符合预设条件。具体的，上述输入触发模块1012可以用于当在第一图像中检测到第一团块、且第一团块的深度值小于第一数值时，确定触控体、预设平面以及触控屏之间的位置关系符合预设条件；或者，当在第一图像中未检测到第一团块，或者在第一图像中检测到第一团块、且第一团块的深度值大于或等于第一数值时，确定触控体、预设平面以及触控屏之间的位置关系不符合预设条件。
可选的，本发明实施例中，上述位置关系可以为第一团块的深度值与第一数值之间的关系，该第一团块在第一图像中的位置对应触控体与预设平面接触的第一轨迹，该第一数值可以为预设平面与触控屏之间的垂直距离(例如上述图2所示的z1)，上述预设条件可以为第一团块的深度值小于第一数值。
可选的，本发明实施例中，第一团块可以包括至少一个像素点，第一团块的深度值可以为至少一个像素点的深度值的加权值，一个像素点的深度值可以为第一位置与触控屏之间的垂直距离，第一位置可以为一个像素点在预设平面上的位置。
本发明实施例中，若上述输入触发模块1012在第一图像中检测到的第一团块包括一个像素点，则可以将该像素点的深度值与垂直距离z1进行比较，若该像素点的深度值小于垂直距离z1(即用户的手指低于预设平面)，则输入触发模块1012确定触控体、预设平面以及触控屏之间的位置关系符合预设条件。若输入触发模块1012在第一图像中检测到的第一团块包括多个像素点，则可以将多个像素点的深度值的加权值(下文称为平均深度值)与垂直距离z1进行比较，若多个像素点的平均深度值小于垂直距离z1(即用户的手指低于预设平面)，则输入触发模块1012确定触控体、预设平面以及触控屏之间的位置关系符合预设条件。
可选的，本发明实施例中，上述输入触发模块1012具体可以用于：若在第一图像中检测到第一团块、且该第一团块的深度值小于第一数值，以及第一团块的置信度大于置信度阈值，则确定触控体、预设平面以及触控屏之间的位置关系符合预设条件。其中，置信度是指终端对于在第一图像中检测到第一团块的真实性相信的程度(也称为可信度或可靠性程度)。
可选的，本发明实施例中，上述输入触发模块1012可以通过最大稳定极值区域(maximally stable extremal regions，MSER)算法从获取到的第一图像中提取包含至少一个像素点的区域(即上述的团块)，然后可以再通过置信度加权平均算法计算该区域内的各个像素的平均深度值，如此可以得到与该区域对应的团块的平均深度值。
可选的，本发明实施例中，输入触发模块1012触发的事件可以包括以下列举的任意一种。
ACTION_DOWN：表示用户开始触摸(单触点触控)；
ACTION_MOVE：表示用户在移动手指或者类似于手指的替代物；
ACTION_UP：表示用户抬起手指；
ACTION_OUTSIDE：表示用户触碰超出用户界面(user interface，UI)的边界；
ACTION_POINTER_DOWN：表示用户按下其他手指(多触点触控)；
ACTION_POINTER_UP：表示用户抬起其他手指。
上述列举的各个事件仅是示意性的，具体可以根据实际使用需求确定，本发明实施例不作限定。
本发明实施例中，上述图像采集模块1011在采集到第一图像之后，可以将该第一图像发送给上述输入触发模块1012。输入触发模块1012接收到该第一图像之后，可以根据该第一图像检测用户通过触控体在预设平面上的输入。
可选的，本发明实施例中，用户通过触控体在预设平面上的输入可以通过用户通过触控体在预设平面上的触点确定。示例性的，若用户的手指低于预设平面(即表示用户通过触控体触发了触屏事件)，则终端可以确定用户通过触控体在预设平面上触发的触点，进而终端可以根据这些触点确定用户通过触控体在预设平面上的输入。
本发明实施例中，上述输入触发模块1012在检测到触控体、预设平面以及触控屏之间的位置关系符合预设条件时，可以指示上述输入跟踪模块1013获取与触控体对应的输入参数(例如第一轨迹信息、时长信息，以及手指在垂直于触控屏的方向上的移动加速度信息等)。
可选的，本发明实施例中，上述输入触发模块1012可以通过一个指令指示上述输入跟踪模块1013获取与触控体对应的输入参数；或者可以直接把检测到的与触控体在预设平面上的输入对应的原始触点发送给输入跟踪模块1013，以指示输入跟踪模块1013跟踪触控体在预设平面上的第一轨迹。进而输入跟踪模块1013可以在输入触发模块1012的指示下，获取上述的输入参数，并将该输入参数发送给输入事件识别模块102，以便于输入事件识别模块102根据该输入参数确定与触控体对应的输入事件。
可选的，结合图5，如图8所示，上述输入事件识别模块102可以包括手势检测模块1021和与手势检测模块1021连接的上报模块1022。其中，手势检测模块1021与上述输入跟踪模块1013连接。
本发明实施例中，手势检测模块1021可以用于接收输入跟踪模块1013发送的输入参数(例如第一轨迹信息、时长信息，以及手指在垂直于触控屏的方向上的移动加速度信息等)，并根据这些输入参数确定输入事件，以及将该输入事件发送给上报模块1022。需要说明的是，上述轨迹信息可以包括触控体在预设平面上输入的多个触点的轨迹信息。
示例性的，上述手势检测模块1021确定的输入事件可以包括以下列举的任意一种。
ACTION_SHOWPRESS：表示按下时间超过预设时间；
ACTION_LONGPRESS：表示长按；
ACTION_SINGLETAPUP：表示轻触并抬起；
ACTION_SCROLL：表示包括x方位信息、y方位信息和z方位信息的滑动事件。
上述列举的各个事件仅是示意性的，具体可以根据实际使用需求确定，本发明实施例不作限定。
与现有技术相比，本发明实施例中用户通过触控体在预设平面上的输入可以实现与触控屏上的输入相同的效果，并且本发明实施例不但可以精确提供触点的x方位信息和y方位信息，而且还可以提供触点的z方位信息，因而可以应用于游戏、三维建模、手势控制等需要x方位信息、y方位信息和z方位信息的场景中，并且提高了用户与终端之间的人机交互的灵活性。
本发明实施例中，上述手势检测模块1021将输入事件(例如ACTION_LONGPRESS)发送给上报模块1022之后，可以由上报模块1022将该输入事件(ACTION_LONGPRESS)发送给终端，进而终端可以响应于该输入事件(ACTION_LONGPRESS)，在触控屏上显示与该输入事件对应的输出结果，例如终端响应该长按事件，并在触控屏上显示响应该长按事件的结果。
示例性的，以用户通过触控体触发在应用图标上的长按事件为例进行说明。用户通过触控体在预设平面上某个触点长按输入的情况下，终端可以确定该触点在触控屏上的投影点的位置，假设该投影点的位置上显示有某个应用图标，那么终端可以响应于用户通过触控体在预设平面上的长按事件，在触控屏上选中(例如放大显示)该应用图标，并在触控屏上显示“分享”控件和“删除”控件，以提示用户可以分享或删除该应用图标，从而可以实现用户通过触控体在预设平面上输入时，与触控屏类似的交互体验。
可选的，本发明实施例中，上述输入事件中可以包括第一轨迹信息，该第一轨迹信息可以用于指示触控体与预设平面接触的第一轨迹。
可选的，结合图8，如图9所示，本发明实施例提供的控制装置100还可以包括与上述手势检测模块1021和上述上报模块1022连接的校验模块103。
本发明实施例中，手势检测模块1021具体可以用于将输入事件发送给校验模块103。校验模块103可以用于接收输入事件，并根据该输入事件中的第一轨迹信息，采用校验函数，确定第二轨迹信息，以及将包括第二轨迹信息的输入事件发送给上报模块1022，第二轨迹信息可以用于指示在触控屏上与第一轨迹对应的第二轨迹。
示例性的，上述的校验函数可以表示为g＝F(p)，其中，p表示图像采集模块1011采集的与触控体在预设平面上的输入对应的触点的位置信息(即上述的第一轨迹信息)，g表示与触控体在预设平面上的输入对应的触点在触控屏上的投影点的位置信息(即上述的第二轨迹信息)。假设g可以表示为g＝{(gx_1，gy_1)，(gx_2，gy_2)，…(gx_n，gy_n)}，p可以表示为p＝{(x_1，y_1)，(x_2，y_2)，…(x_n，y_n)}，检验模块103可以通过拟合校验函数F，使得g＝F(p)，即使得(gx_1，gy_1)＝F((x_1，y_1))，(gx_2，gy_2)＝F((x_2，y_2))，……，以及(gx_n，gy_n)＝F((gx_n，gy_n))，从而检验模块103可以确定图像采集模块1011所采集的与触控体在预设平面上的输入对应的触点(触点的位置即为上述第一轨迹)在触控屏上的投影点的位置(即上述的第二轨迹)。
需要说明的是，本发明实施例中，上述校验函数F可以通过如最小二乘法、神经网络法等手段进行拟合。
本发明实施例中，上述上报模块1022接收校验模块103发送的包括第二轨迹信息的输入事件之后，上报模块1022可以将该输入事件发送给终端，进而终端可以响应于该输入事件，在触控屏上显示与该输入事件对应的输出结果。
示例性的，如图10所示，当用户通过触控体在预设平面上单击输入(如图10中的手指所示，该单击输入对应一个触点)，且该输入触发了触屏事件时，终端可以响应于与触控体对应的输入事件，在触控屏上以光标或高亮等形式显示该触点在触控屏上的投影点的位置(如图10中的箭头所示)。以光标为例，在用户手指抬起的情况下，光标仍然会显示，并且在用户继续输入时，终端可以控制光标在触控屏上跟随用户的手指在预设平面上的移动而移动，如此，便于实现用户与终端之间的可视化交互。
与现有技术相比，本发明实施例通过将采集的用户通过触控体在预设平面上的输入对应的触点的位置信息与其在触控屏上的投影点的位置信息进行拟合，可以使得终端在触控屏上显示用户通过触控体在预设平面上的输入对应的触点的方位，从而实现用户通过触控体在预设平面上输入时，与触控屏类似的交互体验，并且实现了用户与终端之间的可视化交互。即本发明实施例在人机交互方面更加灵活。
可选的，本发明实施例中，上述输入参数中可以包括第一轨迹信息。可选的，结合图8，如图11所示，本发明实施例提供的控制装置还可以包括与上述输入跟踪模块1013和上述手势检测模块1021连接的滤波模块104。
本发明实施例中，输入跟踪模块1013具体可以用于将输入参数发送给滤波模块104。滤波模块104可以用于接收输入参数，并对第一轨迹信息指示的所述第一轨迹进行平滑处理，以得到目标轨迹，以及将包括目标轨迹信息的输入参数发送给手势检测模块1021，其中目标轨迹信息用于指示目标轨迹。
可选的，本发明实施例中，滤波模块104可以采用卡尔曼滤波算法，对滑动输入的轨迹进行时域上的跟踪和平滑处理。示例性的，以光标为例，通过对滑动输入的轨迹进行平滑处理，可以使得光标在触控屏上的移动轨迹更加平滑。从而可以提升用户的使用体验感。
参考图12所示，本发明实施例提供一种终端200，终端200可以包括触控屏201、处理器202，以及上述实施例中所示的控制装置100。
可选的，本发明实施例中，控制装置100可以用于检测触控体、预设平面以及触控屏201之间的位置关系是否符合预设条件；当触控体、预设平面以及触控屏201之间的位置关系符合预设条件时，确定与触控体对应的输入事件；以及将该输入事件发送给处理器202。处理器303可以用于接收输入事件，并响应于该输入事件，在触控屏201上显示与该输入事件对应的输出结果。
对于控制装置的描述具体可以参见上述各个实施例中对控制装置的相关描述，为避免重复，此处不再赘述。
本发明实施例提供一种终端，该终端可以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，并且当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，终端可以确定与触控体对应的输入事件，以及响应于该输入事件，终端能够在触控屏上显示与该输入事件对应的输出结果，从而使得用户可以与终端隔空交互。与现有技术相比，本发明实施例中，由于不再局限于需要用户的手指与终端的触控屏接触的情况下终端才会响应用户的输入，因此能够提高用户与终端之间的人机交互的灵活性。
本发明实施例还提供了一种控制方法，该控制方法可以应用于终端，终端可以包括触控屏。本发明实施例提供的控制方法的执行主体可以为上述的终端，也可以为该终端中能够实现该控制方法的功能模块和/或功能实体(例如可以为上述实施例中的控制装置)，具体的可以根据实际使用需求确定，本发明实施例不作限定。下面以终端为例，对本发明实施例提供的控制方法进行示例性的说明。
参考图13所示，本发明实施例提供的控制方法可以包括下述的S1301-S1303。
S1301、终端检测触控体、预设平面以及终端的触控屏之间的位置关系是否符合预设条件。
可选的，本发明实施例中，终端可以通过深度传感器检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件。
S1302、当终端检测到触控体、预设平面以及终端的触控屏之间的位置关系符合预设条件时，终端确定与触控体对应的输入事件。
可选的，本发明实施例中，上述S1302具体可以通过下述步骤实现：当终端检测到触控体、预设平面以及终端的触控屏之间的位置关系符合预设条件时，终端获取与触控体对应的输入参数，并根据该输入参数确定与触控体对应的输入事件。对于输入参数的描述具体可以参见上述控制装置的各个实施例中的相关描述，此处不再赘述。
S1303、终端响应于该输入事件，在触控屏上显示与该输入事件对应的输出结果。
对于上述触控体、预设平面、触控屏、与触控体对应的输入事件，以及终端响应输入事件的描述具体可以参见上述控制装置的各个实施例中的相关描述，此处不再赘述。
可选的，结合图13，如图14所示，上述S1301具体可以通过下述的S1304和S1305a或者S1304和S1305b实现。
S1304、终端针对预设平面，采集第一图像。
可选的，本发明实施例中，终端可以通过在第一图像中检测团块，以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件。
S1305a、当在第一图像中检测到第一团块、且第一团块的深度值小于第一数值时，终端确定触控体、预设平面以及触控屏之间的位置关系符合预设条件。
S1305b、当在第一图像中未检测到第一团块，或者在第一图像中检测到第一团块、且第一团块的深度值大于或等于第一数值时，终端确定触控体、预设平面以及触控屏之间的位置关系不符合预设条件。
可选的，本发明实施例中，上述位置关系可以为第一团块的深度值与第一数值之间的关系，该第一团块在第一图像中的位置对应触控体与预设平面接触的第一轨迹，该第一数值可以为预设平面与触控屏之间的垂直距离，上述预设条件为第一团块的深度值小于第一数值。
可选的，本发明实施例中，第一团块可以包括至少一个像素点，第一团块的深度值可以为至少一个像素点的深度值的加权值，一个像素点的深度值可以为第一位置与触控屏之间的垂直距离，第一位置可以为一个像素点在预设平面上的位置。
对于终端检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件的方法的描述具体可以参见上述控制装置的各个实施例中的相关描述，此处不再赘述。
本发明实施例提供的控制方法，可以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，并且当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件，以及响应于该输入事件，能够在触控屏上显示与该输入事件对应的输出结果，从而使得用户可以与终端隔空交互。与现有技术相比，本发明实施例中，由于不再局限于需要用户的手指与终端的触控屏接触的情况下终端才会响应用户的输入，因此能够提高用户与终端之间的人机交互的灵活性。
图15为实现本发明各个实施例的一种终端的硬件结构示意图。如图15所示，该终端300包括但不限于：射频单元301、网络模块302、音频输出单元303、输入单元304、传感器305、显示单元306、用户输入单元307、接口单元308、存储器309、处理器310、以及电源311等部件。本领域技术人员可以理解，图15中示出的终端结构并不构成对终端的限定，终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中，处理器310，用于检测触控体、预设平面以及终端的触控屏之间的位置关系是否符合预设条件；当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，确定与触控体对应的输入事件；且响应于该输入事件，在触控屏上显示与该输入事件对应的输出结果。
本发明实施例提供一种终端，该终端可以检测触控体、预设平面以及触控屏之间的位置关系是否符合预设条件，并且当触控体、预设平面以及触控屏之间的位置关系符合预设条件时，终端可以确定与触控体对应的输入事件，以及响应于该输入事件，终端能够在触控屏上显示与该输入事件对应的输出结果，从而使得用户可以与终端隔空交互。与现有技术相比，本发明实施例中，由于不再局限于需要用户的手指与终端的触控屏接触的情况下终端才会响应用户的输入，因此能够提高用户与终端之间的人机交互的灵活性。
应理解的是，本发明实施例中，射频单元301可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器310处理；另外，将上行的数据发送给基站。通常，射频单元301包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元301还可以通过无线通信系统与网络和其他设备通信。
终端通过网络模块302为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元303可以将射频单元301或网络模块302接收的或者在存储器309中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元303还可以提供与终端300执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元303包括扬声器、蜂鸣器以及受话器等。
输入单元304用于接收音频或视频信号。输入单元304可以包括图形处理器(graphics processing unit，GPU)3041和麦克风3042，图形处理器3041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元306上。经图形处理器3041处理后的图像帧可以存储在存储器309(或其它存储介质)中或者经由射频单元301或网络模块302进行发送。麦克风3042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元301发送到移动通信基站的格式输出。
终端300还包括至少一种传感器305，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板3061的亮度，接近传感器可在终端300移动到耳边时，关闭显示面板3061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器305还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
显示单元306用于显示由用户输入的信息或提供给用户的信息。显示单元306可包括显示面板3061，可以采用液晶显示器(liquid crystal display，LCD)、有机发光二极管(organic light-emitting diode，OLED)等形式来配置显示面板3061。
用户输入单元307可用于接收输入的数字或字符信息，以及产生与终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元307包括触控面板3071以及其他输入设备3072。触控面板3071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板3071上或在触控面板3071附近的操作)。触控面板3071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器310，接收处理器310发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板3071。除了触控面板3071，用户输入单元307还可以包括其他输入设备3072。具体地，其他输入设备3072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
进一步的，触控面板3071可覆盖在显示面板3061上，当触控面板3071检测到在其上或附近的触摸操作后，传送给处理器310以确定触摸事件的类型，随后处理器310根据触摸事件的类型在显示面板3061上提供相应的视觉输出。虽然在图15中，触控面板3071与显示面板3061是作为两个独立的部件来实现终端的输入和输出功能，但是在某些实施例中，可以将触控面板3071与显示面板3061集成而实现终端的输入和输出功能，具体此处不做限定。
接口单元308为外部装置与终端300连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元308可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到终端300内的一个或多个元件或者可以用于在终端300和外部装置之间传输数据。
存储器309可用于存储软件程序以及各种数据。存储器309可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器309可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器310是终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器309内的软件程序和/或模块，以及调用存储在存储器309内的数据，执行终端的各种功能和处理数据，从而对终端进行整体监控。处理器310可包括一个或多个处理单元；可选的，处理器310可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器310中。
终端300还可以包括给各个部件供电的电源311(比如电池)，可选的，电源311可以通过电源管理系统与处理器310逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外，终端300包括一些未示出的功能模块，在此不再赘述。
可选的，本发明实施例还提供一种终端，包括如图15所示的处理器310，存储器309，存储在存储器309上并可在所述处理器310上运行的计算机程序，该计算机程序被处理器310执行时实现上述控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，该计算机可读存储介质可以包括只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (12)

1.一种控制装置，其特征在于，应用于终端，所述终端包括触控屏，所述控制装置包括输入参数获取模块以及与所述输入参数获取模块连接的输入事件识别模块；
所述输入参数获取模块，用于检测触控体、预设平面以及所述触控屏之间的位置关系是否符合预设条件，当所述触控体、所述预设平面以及所述触控屏之间的位置关系符合所述预设条件时，获取与所述触控体对应的输入参数，并将所述输入参数发送给所述输入事件识别模块；
所述输入事件识别模块，用于接收所述输入参数，并根据所述输入参数确定与所述触控体对应的输入事件，以及将所述输入事件发送给所述终端。
2.根据权利要求1所述的控制装置，其特征在于，所述输入参数获取模块包括图像采集模块、与所述图像采集模块连接的输入触发模块，以及与所述输入触发模块连接的输入跟踪模块，所述输入跟踪模块与所述输入事件识别模块连接；
所述图像采集模块，用于针对所述预设平面，采集第一图像，并将所述第一图像发送给所述输入触发模块；
所述输入触发模块，用于接收所述第一图像，并根据所述第一图像检测所述触控体、所述预设平面以及所述触控屏之间的位置关系是否符合所述预设条件，以及当所述触控体、所述预设平面以及所述触控屏之间的位置关系符合所述预设条件时，指示所述输入跟踪模块获取所述输入参数；
所述输入跟踪模块，用于在所述输入触发模块的指示下，获取所述输入参数，并将所述输入参数发送给所述输入事件识别模块。
3.根据权利要求2所述的控制装置，其特征在于，所述输入事件识别模块包括手势检测模块和与所述手势检测模块连接的上报模块，所述手势检测模块与所述输入跟踪模块连接；
所述手势检测模块，用于接收所述输入跟踪模块发送的所述输入参数，并根据所述输入参数确定所述输入事件，以及将所述输入事件发送给所述上报模块；
所述上报模块，用于接收所述输入事件，并将所述输入事件发送给所述终端。
4.根据权利要求3所述的控制装置，其特征在于，所述输入事件中包括第一轨迹信息，所述第一轨迹信息用于指示所述触控体与所述预设平面接触的第一轨迹；所述控制装置还包括与所述手势检测模块和所述上报模块连接的校验模块；
所述手势检测模块，具体用于将所述输入事件发送给所述校验模块；
所述校验模块，用于接收所述输入事件，并根据所述输入事件中的所述第一轨迹信息，采用校验函数，确定第二轨迹信息，以及将包括所述第二轨迹信息的所述输入事件发送给所述上报模块，所述第二轨迹信息用于指示在所述触控屏上与所述第一轨迹对应的第二轨迹。
5.根据权利要求4所述的控制装置，其特征在于，所述输入参数中包括所述第一轨迹信息；所述控制装置还包括与所述输入跟踪模块和所述手势检测模块连接的滤波模块；
所述输入跟踪模块，具体用于将所述输入参数发送给所述滤波模块；
所述滤波模块，用于接收所述输入参数，并对所述第一轨迹信息指示的所述第一轨迹进行平滑处理，以得到目标轨迹，以及将包括目标轨迹信息的所述输入参数发送给所述手势检测模块，所述目标轨迹信息用于指示所述目标轨迹。
6.根据权利要求2至4中任一项所述的控制装置，其特征在于，所述预设平面与所述触控屏平行；
所述图像采集模块为摄像头，所述摄像头中包括深度传感器。
7.根据权利要求2所述的控制装置，其特征在于，所述输入触发模块，还用于当在所述第一图像中检测到第一团块、且所述第一团块的深度值小于第一数值时，确定所述触控体、所述预设平面以及所述触控屏之间的位置关系符合所述预设条件；或者，当在所述第一图像中未检测到第一团块，或者在所述第一图像中检测到第一团块、且所述第一团块的深度值大于或等于所述第一数值时，确定所述触控体、所述预设平面以及所述触控屏之间的位置关系不符合所述预设条件。
8.根据权利要求7所述的控制装置，其特征在于，所述第一团块包括至少一个像素点，所述第一团块的深度值为所述至少一个像素点的深度值的加权值，一个像素点的深度值为第一位置与所述触控屏之间的垂直距离，所述第一位置为所述一个像素点在所述预设平面上的位置。
9.一种终端，其特征在于，所述终端包括触控屏、处理器，以及如权利要求1至8中任一项所述的控制装置；
所述控制装置，用于检测触控体、预设平面以及所述触控屏之间的位置关系是否符合预设条件；当所述触控体、所述预设平面以及所述触控屏之间的位置关系符合所述预设条件时，确定与所述触控体对应的输入事件；以及将所述输入事件发送给所述处理器；
所述处理器，用于接收所述输入事件，并响应于所述输入事件，在所述触控屏上显示与所述输入事件对应的输出结果。
10.一种控制方法，其特征在于，应用于终端，所述方法包括：
检测触控体、预设平面以及所述终端的触控屏之间的位置关系是否符合预设条件；
当所述触控体、所述预设平面以及所述触控屏之间的位置关系符合所述预设条件时，确定与所述触控体对应的输入事件；
响应于所述输入事件，在所述触控屏上显示与所述输入事件对应的输出结果。
11.根据权利要求10所述的控制方法，其特征在于，所述预设平面与所述触控屏平行。
12.根据权利要求10或11所述的控制方法，其特征在于，所述预设平面以所述终端的深度传感器为中心；
所述检测触控体、预设平面以及所述终端的触控屏之间的位置关系是否符合预设条件，包括：
通过所述深度传感器检测所述触控体、所述预设平面以及所述触控屏之间的位置关系是否符合预设条件。
CN201810759758.1A 2018-07-11 2018-07-11 一种控制装置、终端及控制方法 Pending CN109240571A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810759758.1A CN109240571A (zh) 2018-07-11 2018-07-11 一种控制装置、终端及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810759758.1A CN109240571A (zh) 2018-07-11 2018-07-11 一种控制装置、终端及控制方法

Publications (1)

Publication Number Publication Date
CN109240571A true CN109240571A (zh) 2019-01-18

Family

ID=65072463

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810759758.1A Pending CN109240571A (zh) 2018-07-11 2018-07-11 一种控制装置、终端及控制方法

Country Status (1)

Country Link
CN (1) CN109240571A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110750370A (zh) * 2019-10-17 2020-02-04 Oppo（重庆）智能科技有限公司 信息处理方法及装置、设备、存储介质
CN112540683A (zh) * 2020-12-08 2021-03-23 维沃移动通信有限公司 智能指环及手写文字的识别方法和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140258917A1 (en) * 2013-03-07 2014-09-11 Peter Greif Method to operate a device in a sterile environment
CN104793784A (zh) * 2015-03-23 2015-07-22 中国科学技术大学先进技术研究院 一种基于深度数据的模拟触摸操作系统及操作方法
CN105278668A (zh) * 2014-12-16 2016-01-27 维沃移动通信有限公司 移动终端的控制方法及移动终端
CN106055098A (zh) * 2016-05-24 2016-10-26 北京小米移动软件有限公司 隔空手势操作方法及装置
CN107390922A (zh) * 2017-06-30 2017-11-24 广东欧珀移动通信有限公司 虚拟触控方法、装置、存储介质及终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140258917A1 (en) * 2013-03-07 2014-09-11 Peter Greif Method to operate a device in a sterile environment
CN105278668A (zh) * 2014-12-16 2016-01-27 维沃移动通信有限公司 移动终端的控制方法及移动终端
CN104793784A (zh) * 2015-03-23 2015-07-22 中国科学技术大学先进技术研究院 一种基于深度数据的模拟触摸操作系统及操作方法
CN106055098A (zh) * 2016-05-24 2016-10-26 北京小米移动软件有限公司 隔空手势操作方法及装置
CN107390922A (zh) * 2017-06-30 2017-11-24 广东欧珀移动通信有限公司 虚拟触控方法、装置、存储介质及终端

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110750370A (zh) * 2019-10-17 2020-02-04 Oppo（重庆）智能科技有限公司 信息处理方法及装置、设备、存储介质
CN110750370B (zh) * 2019-10-17 2022-06-14 Oppo（重庆）智能科技有限公司 信息处理方法及装置、设备、存储介质
CN112540683A (zh) * 2020-12-08 2021-03-23 维沃移动通信有限公司 智能指环及手写文字的识别方法和电子设备

Similar Documents

Publication Publication Date Title
CN109343759A (zh) 一种息屏显示的控制方法及终端
CN109828732A (zh) 一种显示控制方法及终端设备
CN109542306A (zh) 一种截屏方法及终端设备
CN110069178A (zh) 界面控制方法及终端设备
CN109582475A (zh) 一种分享方法及终端
CN109032486A (zh) 一种显示控制方法及终端设备
CN110502878A (zh) 一种应用权限设置方法及终端设备
CN109408072A (zh) 一种应用程序删除方法及终端设备
CN110046013A (zh) 一种界面显示方法及终端设备
CN110287741A (zh) 一种屏幕内容显示方法及终端
CN108984082A (zh) 一种图像显示方法及移动终端
CN109343788A (zh) 一种移动终端的操作控制方法及移动终端
CN109558000A (zh) 一种人机交互方法及电子设备
CN108898555A (zh) 一种图像处理方法及终端设备
CN109408171A (zh) 一种显示控制方法及终端
CN107888833A (zh) 一种图像拍摄方法及移动终端
CN109976629A (zh) 图像显示方法、终端和移动终端
CN110531915A (zh) 屏幕操作方法及终端设备
CN109407949A (zh) 一种显示控制方法及终端
CN110096203A (zh) 一种截图方法及移动终端
CN109688341A (zh) 一种打光方法及终端设备
CN109993711A (zh) 一种图像处理方法及终端设备
CN109756621A (zh) 一种二维码显示方法及终端设备
CN109814799A (zh) 屏幕响应控制方法及终端设备
CN109240571A (zh) 一种控制装置、终端及控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190118