CN106648263B - 终端设备及其操控系统、操控方法和装置 - Google Patents

终端设备及其操控系统、操控方法和装置 Download PDF

Info

Publication number
CN106648263B
CN106648263B CN201610997761.8A CN201610997761A CN106648263B CN 106648263 B CN106648263 B CN 106648263B CN 201610997761 A CN201610997761 A CN 201610997761A CN 106648263 B CN106648263 B CN 106648263B
Authority
CN
China
Prior art keywords
interface
projection
terminal equipment
terminal
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610997761.8A
Other languages
English (en)
Other versions
CN106648263A (zh
Inventor
向前明
何晟
刘旭强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201610997761.8A priority Critical patent/CN106648263B/zh
Publication of CN106648263A publication Critical patent/CN106648263A/zh
Application granted granted Critical
Publication of CN106648263B publication Critical patent/CN106648263B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种终端设备及其操控系统、操控方法和装置,涉及人机交互技术领域,包括:至少一个投影装置,用于分别设置在终端设备上,用于将终端设备的界面投影到终端设备的外部,以形成与终端设备界面匹配的投影界面,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射;至少一个光学传感器,用于分别设置在终端设备上,用于扫描投影界面,在检测到触发投影界面的触控对象的操作后,向终端设备发送触控对象的触发操作,以使终端设备响应与触发操作映射的触发事件。从而,用户可以在终端设备触摸屏以外的虚拟投影界面上对终端进行操作,用户在对终端操作不接触终端设备和触摸屏,进而,减少触摸屏的物理损耗提高终端设备的使用寿命。

Description

终端设备及其操控系统、操控方法和装置
技术领域
本发明涉及人机交互技术领域,具体涉及到一种终端设备及其操控系统、操控方法和装置。
背景技术
触摸屏技术利用人体电流的感应效应实现对设备的操作,例如容抗屏、阻抗屏等。现有的终端设备通常采用触摸显示屏感知手指的操作实现用户与设备的交互操作。
然而,由于触摸屏通过手指的触发响应,手指上的污渍容易被携带到触摸屏上。触摸屏上的污渍、触摸屏的轻微破损会导致触摸屏的灵敏程度下降,另一方面,手指上的污渍也会导致触摸屏的灵敏程度下降,影响交互体验;此外,频繁地对触摸屏进行触发操作,会加快触摸屏的物理损耗,导致终端设备的使用寿命减少。
因此,如何减少触摸屏的物理损耗提高终端设备的使用寿命成为亟待解决的问题。
发明内容
本发明要解决的技术问题在于提高用户与终端设备的交互操作体验。
为此,根据第一方面,本发明实例提供了一种终端操控系统,包括:
至少一个投影装置,用于分别设置在终端设备上,用于将终端设备的界面投影到终端设备的外部,以形成与终端设备界面匹配的投影界面,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射;至少一个光学传感器,用于分别设置在终端设备上,用于扫描投影界面,在检测到触发投影界面的触控对象的操作后,向终端设备发送用于表征触控对象的触发操作的触发信号,以触发终端设备响应与触发操作映射的触发事件。
可选地,至少一个光学传感器以固定频率扫描投影界面。
可选地,至少一个投影装置分别投影终端设备的至少部分界面,各至少部分界面的集合遍历终端设备的界面。
可选地,投影界面划分为多个独立区域,至少一个光学传感器用于检测被触发的独立区域的坐标,以确定被触发的触控对象。
可选地,终端操控系统还包括:气体屏幕发生装置,用于在终端设备制造气流,以形成用于呈现投影界面的悬浮屏幕。
根据第二方面,本发明实施例还提供了一种终端设备操控方法,包括如下步骤:
发送用于控制投影装置进行投影的控制信号,以控制投影装置将终端设备的界面数据投影至终端设备的外部,以形成与终端设备界面匹配的投影界面;获取用于表征投影界面的触控对象的触发操作事件的触发信号,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射,触发信号为光学传感器扫描投影界面,在检测到触发投影界面的触控对象的操作后,产生的用于表征触控对象的触发操作的信号;根据触发操作事件响应与触发操作事件映射的终端设备界面的触发事件。
可选地,发送用于控制投影装置进行投影的控制信号,包括:将终端设备的界面数据划分为与多个投影装置对应的多个子界面数据,子界面数据的集合遍历终端设备的界面数据;发送与多个投影装置对应到的多个控制信号,以控制多个投影装置分别将对应的多个子界面数据投影至终端设备的外部。
可选地,在将终端设备的界面数据划分为与多个投影装置对应的多个子界面数据和发送与多个投影装置对应到的多个控制信号,包括:获取各个子界面数据的投影位置;根据投影位置确定各个子界面数据的投影方向,以使各个子界面数据投影后拼接形成投影界面。
根据第三方面,本发明实施例提供了一种终端设备操控装置,包括:
投影模块,用于发送用于控制投影装置进行投影的控制信号,以控制投影装置将终端设备的界面数据投影至终端设备的外部,以形成与终端设备界面匹配的投影界面;获取模块,用于获取用于表征投影界面的触控对象的触发操作事件的触发信号,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射,触发信号为光学传感器扫描投影界面,在检测到触发投影界面的触控对象的操作后,产生的用于表征触控对象的触发操作的信号;响应模块,用于根据触发操作事件响应与触发操作事件映射的终端设备界面的触发事件。
可选地,投影模块包括:划分子模块,用于将终端设备的界面数据划分为与多个投影装置对应的多个子界面数据,子界面数据的集合遍历终端设备的界面数据;投影子模块,用于发送与多个投影装置对应到的多个控制信号,以控制多个投影装置分别将对应的多个子界面数据投影至终端设备的外部。
可选地,投影模块还包括:获取子模块:用于获取各个子界面数据的投影位置;拼接子模块:用于根据投影位置确定各个子界面数据的投影方向,以使各个子界面数据投影后拼接形成投影界面。
根据第四方面,本发明实施例还提供了一种终端设备,包括:
终端设备本体;本发明实施例第一方面描述地任意一项终端操控系统。
根据第五方面,本发明实施例还提供了一种终端操控设备,包括:
至少一个投影装置,用于将终端设备的界面投影到终端设备的外部,以形成与终端设备界面匹配的投影界面;至少一个光学传感器,用于扫描投影界面,检测触发投影界面的触控对象的操作;处理器,执行本发明实施例第二方面描述地任意一项的终端设备操控方法。
本发明实例提供的终端设备及其操控系统、操控方法和装置,用户可以通过操作投影装置在终端设备外部,投影形成的与终端设备界面匹配的投影界面,在操作的过程中,光学传感器扫描投影界面,在检测到有操作后,向终端设备发送用于表征触控对象的触发操作的触发信号,终端设备响应与触发操作映射的用户的操作事件。使得用户在对终端设备操作时不需要接触终端设备和触摸屏,从而,减少触摸屏的物理损耗提高终端设备的使用寿命。
本发明实施例提供的终端设备操控方法,通过将终端设备的界面数据投影至终端设备的外部,以形成与终端设备界面匹配的投影界面;获取投影界面的触控对象的触发操作事件,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射;根据触发操作事件响应与触发操作事件映射的终端设备界面的触发事件。从而,用户可以在终端设备触摸屏以外的虚拟投影界面上对终端进行操作,用户在对终端操作时不受触摸屏灵敏度的影响,不接触终端设备和触摸屏,进而,减少触摸屏的物理损耗提高终端设备的使用寿命。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本发明实施例的终端操控系统的示意图;
图2示出了本实施例的投影装置、光学传感器及投影界面设置位置的示意图;
图3示出了本实施例的终端设备操控方法流程示意图;
图4示出了本实施例的投影方法的流程示意图;
图5示出了本实施例的终端设备操控装置示意图;
图6示出了本实施例的终端设备的示意图;
图7示出了本实施例的终端操控设备的示意图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,还可以是两个元件内部的连通,可以是无线连接,也可以是有线连接。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
本发明实施例提供了一种终端操控系统,如图1所示,该系统用于实现终端设备的悬浮操作,包括:
至少一个投影装置20,用于分别设置在终端设备10上,用于将将终端设备10的界面投影到终端设备10的外部,以形成与终端设备10界面匹配的投影界面,投影界面上的触控对象的触发操作与终端设备10界面的触发事件一一映射。投影界面是用于在终端设备外显示终端设备的界面,投影界面为虚拟界面。在具体的实施例中,在终端设备10上可以集成至少一个投影设备,例如,可以在终端设备10端面的四个边角各集成一个可翻转的小型投影灯,小型投影灯可以向终端设备10的上方投影与终端设备10界面匹配的投影界面;也可以在设备终端10侧面集成至少一个小型投影灯,当终端设备10放在桌面上时,可以将终端设备10的界面投影到桌面上,形成投影界面。在图2中示出了投影装置20和投影界面的示例位置,但是,本发明实施例并限于图2公开的位置。在本实施例中,投影界面是虚拟的终端设备10界面,所称触控对象可以是例如,APP、网页以及虚拟键盘等,所称触发操作为用户使用APP、浏览网页及通过虚拟键盘输入文字等操作。在对投影界面上触控对象的触发操作与终端设备界面的触发事件一一映射,即用于在对投影界面进行操作时,与用户在终端设备10界面的操作一一对应。
至少一个光学传感器30,用于设置在中终端设备10上,用于扫描投影界面,在检测到触发投影界面的触控对象的操作后,向终端设备10发送用于表征触控对象的触发操作的触发信号,以触发终端设备10响应与触发操作映射的触发事件。在具体的实施例中,所称投影界面可以是平面或曲面,该平面或曲面可以是规则平面或曲面,也可以是不规则的平面或曲面。至少一个光学传感器30可以设置在与投影装置20对应的位置,例如,投影装置20设置在终端设备10端面上,光学传感器30可以设置在终端设备10端面上的任意位置,例如,可以设置在终端设备的边框、触摸屏或边角等位置,为了方便扫描,光学传感器30可以设置在终端设备10端面的对应的边框上。投影装置20设置在终端设备10的侧面,光学传感器30可以设置在设置投影装置的侧面上,可以光学传感器30方便的对投影装置20投影的投影界面上。在图2中示出了光学传感器30示例位置,但是,本发明实施例并不限于图2所示的位置。在光学传感器30对投影界面扫描时,在检测到触发投影界面的触控对象的操作后,例如,在检测到用户对投影界面进行翻页、文字输入。上下移动等操作后,光学传感器30的扫描的对应的投影界面位置的电位发生变化,移动终端根据光学传感器30扫描的对应的投影界面发生电位发生的位置,响应触发操作,实现在终端设备10触摸屏外操作终端设备10。
在可选的实施例中,至少一个光学传感器30以固定频率扫描投影界面。在具体的实施了中,可以根据用户要求的灵敏程度设置扫描的频率,例如,可以间隔100ms扫描一次,在包含两个或两个以上的光学传感器30交叉间隔扫描时,就可以达到很好的灵敏程度。在本实施例中,包含两个或两个以上的光学传感器30时,各个光学传感器30的扫描频率可以相同,也可以不等频的进行扫描。
在可选地实施例中,至少一个投影装置20分别投影终端设备10的至少部分界面,各至少部分界面的集合遍历终端设备10的界面。在具体的实施例中,投影装置20只有一个时,该一个投影装置10可以投影全部的终端设备界面。为保证画面的分辨率,可以设置多个投影装置20,每个投影装置20投影部分界面,在将各个投影装置20投影的各个部分界面,拼接组成投影界面,各个部分界面在组成投影界面时,其拼接部分可以部分重合地组成一个完整的终端设备的界面,也可以不重合的组成完整的界面。
在可选地实施了中,投影界面划分为多个独立区域,至少一个光学传感器30用于检测被触发的独立区域的坐标,以确定被触发的触控对象。在具体的实施例中,投影界面划分为不同的阵列,形成网格,网格中每个子网格可以作为一个独立区域。具体地,每个独立区域满足手指单点操作的要求,光学传感器30扫描整个投影界面,在触发操作发生后,光学传感器30可以检测到投影界面的阴影部分,由于用户操作精度的限制,阴影部分可能覆盖到几个不同的独立区域,选择独立区域阴影面积最大的独立区域,每个独立区域对应一个坐标,光学传感器30通过扫描发生触发操作的独立区域,得到发生触发操作的位置的坐标,发送至终端设备,由于投影界面的触控对象与终端设备的触控对象一一映射,终端设备确定发生触发操作的触控对象。
在可选的实施例中,终端操控系统还可以包括:气体屏幕发生装置,用于在终端设备外制造气流,以形成用于呈现投影界面的悬浮屏幕。在具体的实施例中,气体屏幕发生装置可以在终端设备的正上方、侧上方或者其他外部方位,可以根据投影装置20的投射角度确定。所称气流可以是水蒸气液化的水雾,水雾可以形成显示投影界面的悬浮屏幕,有利于保证悬浮屏幕的稳定性。在可选的实施例中,投影设备20可以将投影界面投影到桌面上,更加方面用户的使用。
用户可以通过操作投影装置在终端设备外部,投影形成的与终端设备界面匹配的投影界面,在操作的过程中,光学传感器扫描投影界面,在检测到有操作后,向终端设备发送用于表征触控对象的触发操作的触发信号,终端设备响应与触发操作映射的用户的操作事件。使得用户在对终端设备操作时不需要接触终端设备和触摸屏,从而,减少触摸屏的物理损耗提高终端设备的使用寿命。
本发明实施例还提供了一种终端操控方法,如图3所示,该方法包括:
S210.发送用于控制投影装置进行投影的控制信号,以控制投影装置将终端设备的界面数据投影至终端设备的外部,以形成与终端设备界面匹配的投影界面。在具体的实施例中,在具体的实施例中,在发送控制信号时,将终端设备的界面数据发送到投影装置,界面数据和控制信号可以同时发送也可以顺序发送,投影装置在接收到控制信号和界面数据后,在控制信号的控制下,将界面数据按照终端设备界面投影到设备外部,行成与终端设备界面匹配的投影界面。
S220.获取用于表征投影界面的触控对象的触发操作事件的触发信号,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射,触发信号为光学传感器扫描投影界面,在检测到触发投影界面的触控对象的操作后,产生的用于表征触控对象的触发操作的信号。在具体的实施例中,投影界面发声触发操作事件时,投影界面发生触发操作的位置被用户的手指覆盖,形成了阴影,在光学传感器扫描投影界面时,会感知到阴影部分的存在,光学传感器根据扫描的阴影部分的位置,感应相应电位的变化,电位变化信号发送至终端设备,终端设备根据电位变化信号得到投影界面的触控对象的触发操作事件。由于,投影设备将终端设备的界面数据投影至投影界面,故投影界面的触控对象与终端设备的触控对象一一映射。
S230.根据触发操作事件响应与触发操作事件映射的终端设备界面的触发事件。在具体的实施例中,在电位变化信号发送至终端设备后,终端设备根据电位变化信号确定触发操作事件具体坐标位置,将该坐标位置映射至终端设备的界面上,确定触发操作事件发生在终端设备的某一触控对象上,由此,可以响应触发操作事件。
在本实施例中,在获取投影界面的触控对象的触发操作事件时,确定触发操作事件发生的位置坐标,将投影界面划分为多个独立区域;在操作发生时锁定阴影覆盖面积最大的独立区域;确定阴影覆盖面积最大的独立区域的位置坐标为发生触发操作的坐标位置。在用户操作时,除了对界面的点击,可能还存在对界面的滑动的情况,确定滑动位置连续变化的坐标,可以根据阴影覆盖面积最大的独立区域在连续时间内的直线变化确定。
在可选的实施例中,如图4所示,步骤S210还可以包括如下步骤:
S211.将终端设备的界面数据划分为与多个投影装置对应的多个子界面数据,子界面数据的集合遍历终端设备的界面数据。在具体的实施例中,可以将终端设备的界面数据分为多个子界面数据,根据投影设备的分布划分子界面数据,并将划分后各个子界面数据分别发送到对应位置的投影设备,各个子界面数据的集合可以组成终端数据界面数据,在子界面边缘的数据可以有部分重合。各个投影设备在控制投影的控制信号下,分别将接收到的子界面数据投影到终端设备外部,在投影界面组成终端设备的数据界面。各个投影的子界面在组成投影界面是可以部分重合。
S212.发送与多个投影装置对应到的多个控制信号,以控制多个投影装置分别将对应的多个子界面数据投影至终端设备的外部。在具体的实施例中,各个投影设备在控制投影的控制信号下,分别将接收到的子界面数据投影到终端设备外部,在投影界面组成终端设备的数据界面。各个投影的子界面在组成投影界面是可以部分重合。
在可选的实施例中,如图4所示,在步骤S211和步骤S212之间还可以包括:
S213.获取各个子界面数据的投影位置。在具体的实施例中,可以根据各个投影设备的分布位置以及投影角度,确定各个子界面数据的投影位置。
S214.根据投影位置确定各个子界面数据的投影方向,以使各个子界面数据投影后拼接形成投影界面。在具体的实施例中,在确定各个子界面的投影位置后,根据确定的位置,将各个子界面数据发送至各个投影设备,各个投影设备投影各自得到的子界面数据,由于各个子界面数据已经根据投影装置的分布与角度分配好,投影装置投影的各个子界面数据可以拼接形成投影界面。
用户可以通过操作投影装置在终端设备外部,投影形成的与终端设备界面匹配的投影界面,在操作的过程中,光学传感器扫描投影界面,在检测到有操作后,向终端设备发送用于表征触控对象的触发操作的触发信号,终端设备响应与触发操作映射的用户的操作事件。使得用户在对终端设备操作时不需要接触终端设备和触摸屏,从而,减少触摸屏的物理损耗提高终端设备的使用寿命。
本发明实施例还提供了一种终端设备操控装置,如图5所示,该装置包括:
投影模块310,用于发送用于控制投影装置进行投影的控制信号,以控制投影装置将终端设备的界面数据投影至终端设备的外部,以形成与终端设备界面匹配的投影界面;获取模块320,用于获取用于表征投影界面的触控对象的触发操作事件的触发信号,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射,触发信号为光学传感器扫描投影界面,在检测到触发投影界面的触控对象的操作后,产生的用于表征触控对象的触发操作的信号;响应模块330,用于根据触发操作事件响应与触发操作事件映射的终端设备界面的触发事件。
在可选地实施例中,投影模块310包括:划分子模块,用于将终端设备的界面数据划分为与多个投影装置对应的多个子界面数据,子界面数据的集合遍历终端设备的界面数据;投影子模块,用于发送与多个投影装置对应到的多个控制信号,以控制多个投影装置分别将对应的多个子界面数据投影至终端设备的外部。
在可选的实施例中,投影模块310还包括:获取子模块:用于获取各个子界面数据的投影位置;拼接子模块:用于根据投影位置确定各个子界面数据的投影方向,以使各个子界面数据投影后拼接形成投影界面。
通过将终端设备的界面数据投影至终端设备的外部,以形成与终端设备界面匹配的投影界面;获取投影界面的触控对象的触发操作事件,投影界面上的触控对象的触发操作与终端设备界面的触发事件一一映射;根据触发操作事件响应与触发操作事件映射的终端设备界面的触发事件。从而,用户可以在终端设备触摸屏以外的虚拟投影界面上对终端进行操作,用户在对终端操作时不受触摸屏灵敏度的影响,不接触终端设备和触摸屏,进而,减少触摸屏的物理损耗提高终端设备的使用寿命。
本发明实施例还提供了一种终端设备,如图6所示,该终端设备包括:终端设备本体410,上述实施例描述的任意一项终端操控系统420。其中,终端设备本体上安装有终端操控系统420,通过终端操控系统从而可以实现在终端设备本体外对终端设备本体进行操控,减少触摸屏的物理损耗,提高终端设备的寿命。
本发明实施例还提供了一种终端操控设备,如图7所示,该终端操控设备包括:至少一个投影装置510,用于将终端设备的界面投影到终端设备的外部,以形成与终端设备界面匹配的投影界面;至少一个光学传感器520,用于扫描投影界面,检测触发投影界面的触控对象的操作;处理器530,上述实施例任意一项的终端设备操控方法。
通过处理器控制投影设备将终端设备投影到外部形成投影界面,光学传感器扫描投影界面,检测触发操作,从而,可以实现终端设备外对终端设备本体进行操控,减少触摸屏的物理损耗,提高终端设备的寿命。
虽然结合附图描述了本发明的实施方式,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下作出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (8)

1.一种终端操控系统,其特征在于,包括:
至少一个投影装置(20),用于分别设置在终端设备(10)上,用于将所述终端设备(10)的界面投影到所述终端设备(10)的外部,以形成与所述终端设备(10)界面匹配的投影界面,所述投影界面上的触控对象的触发操作与所述终端设备(10)界面的触发事件一一映射;
至少一个光学传感器(30),用于分别设置在所述终端设备(10)上,用于扫描所述投影界面,在检测到触发所述投影界面的触控对象的操作后,向所述终端设备(10)发送用于表征所述触控对象的触发操作的触发信号,以触发所述终端设备(10)响应与所述触发操作映射的触发事件;
所述至少一个投影装置(20)分别投影所述终端设备(10)的至少部分界面,各所述至少部分界面的集合遍历所述终端设备(10)的界面,
各个所述部分界面在组成所述投影界面时,其拼接部分以部分重合地组成一个完整的所述终端设备(10)的界面,或者,其拼接部分以不重合地组成一个完整的所述终端设备(10)的界面。
2.如权利要求1所述的终端操控系统,其特征在于,所述至少一个光学传感器(30)以固定频率扫描所述投影界面。
3.如权利要求1所述的终端操控系统,其特征在于,所述投影界面划分为多个独立区域,所述至少一个光学传感器(30)用于检测被触发的独立区域的坐标,以确定被触发的触控对象。
4.如权利要求1-3任意一项所述的终端操控系统,其特征在于,还包括:
气体屏幕发生装置,用于在所述终端设备外制造气流,以形成用于呈现所述投影界面的悬浮屏幕。
5.一种终端设备操控方法,其特征在于,包括:
发送用于控制投影装置进行投影的控制信号,以控制所述投影装置将终端设备的界面数据投影至所述终端设备的外部,以形成与所述终端设备界面匹配的投影界面,其中,所述投影装置设置在所述终端设备上;
获取用于表征所述投影界面的触控对象的触发操作事件的触发信号,所述投影界面上的触控对象的触发操作与所述终端设备界面的触发事件一一映射,所述触发信号为光学传感器扫描投影界面,在检测到触发所述投影界面的触控对象的操作后,产生的用于表征所述触控对象的触发操作的信号;
根据所述触发操作事件响应与所述触发操作事件映射的所述终端设备界面的触发事件;
所述发送用于控制投影装置进行投影的控制信号,包括:
将所述终端设备的界面数据划分为与多个所述投影装置对应的多个子界面数据,所述子界面数据的集合遍历所述终端设备的界面数据;
发送与多个所述投影装置对应到的多个控制信号,以控制多个所述投影装置分别将对应的多个子界面数据投影至所述终端设备的外部;
在所述将所述终端设备的界面数据划分为与多个所述投影装置对应的多个子界面数据和所述发送与多个所述投影装置对应到的多个控制信号,包括;
获取各个所述子界面数据的投影位置;
根据所述投影位置确定各个所述子界面数据的投影方向,以使各个所述子界面数据投影后拼接形成所述投影界面;
各个所述子界面数据在组成所述投影界面时,其拼接部分以部分重合地组成一个完整的所述终端设备(10)的界面,或者,其拼接部分以不重合地组成一个完整的所述终端设备(10)的界面。
6.一种终端设备操控装置,其特征在于,包括:
投影模块,用于发送用于控制投影装置进行投影的控制信号,以控制所述投影装置将终端设备的界面数据投影至所述终端设备的外部,以形成与所述终端设备界面匹配的投影界面,其中,所述投影装置设置在所述终端设备上;
获取模块,用于获取用于表征所述投影界面的触控对象的触发操作事件的触发信号,所述投影界面上的触控对象的触发操作与所述终端设备界面的触发事件一一映射,所述触发信号为光学传感器扫描投影界面,在检测到触发所述投影界面的触控对象的操作后,产生的用于表征所述触控对象的触发操作的信号;
响应模块,用于根据所述触发操作事件响应与所述触发操作事件映射的所述终端设备界面的触发事件;
所述投影模块包括:
划分子模块,用于将所述终端设备的界面数据划分为与多个所述投影装置对应的多个子界面数据,所述子界面数据的集合遍历所述终端设备的界面数据;
投影子模块,用于发送与多个所述投影装置对应到的多个控制信号,以控制多个所述投影装置分别将对应的多个子界面数据投影至所述终端设备的外部;
获取子模块:用于获取各个所述子界面数据的投影位置;
拼接子模块:用于根据所述投影位置确定各个所述子界面数据的投影方向,以使各个所述子界面数据投影后拼接形成所述投影界面;
各个所述子界面数据在组成所述投影界面时,其拼接部分以部分重合地组成一个完整的所述终端设备(10)的界面,或者,其拼接部分以不重合地组成一个完整的所述终端设备(10)的界面。
7.一种终端设备,其特征在于,包括:
终端设备本体;
如权利要求1-4任意一项所述的终端操控系统。
8.一种终端操控设备,其特征在于,包括:
至少一个投影装置,用于将所述终端设备的界面投影到所述终端设备的外部,以形成与所述终端设备界面匹配的投影界面;
至少一个光学传感器,用于扫描所述投影界面,检测触发所述投影界面的触控对象的操作;
处理器,执行如权利要求5所述的终端设备操控方法。
CN201610997761.8A 2016-11-11 2016-11-11 终端设备及其操控系统、操控方法和装置 Active CN106648263B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610997761.8A CN106648263B (zh) 2016-11-11 2016-11-11 终端设备及其操控系统、操控方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610997761.8A CN106648263B (zh) 2016-11-11 2016-11-11 终端设备及其操控系统、操控方法和装置

Publications (2)

Publication Number Publication Date
CN106648263A CN106648263A (zh) 2017-05-10
CN106648263B true CN106648263B (zh) 2022-01-04

Family

ID=58806453

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610997761.8A Active CN106648263B (zh) 2016-11-11 2016-11-11 终端设备及其操控系统、操控方法和装置

Country Status (1)

Country Link
CN (1) CN106648263B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107421008B (zh) * 2017-07-18 2020-02-28 广东美的制冷设备有限公司 空调器
CN111028494B (zh) * 2019-11-04 2021-01-29 珠海格力电器股份有限公司 一种电器设备的虚拟遥控方法、计算机可读存储介质及智能家电

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103955316A (zh) * 2014-04-28 2014-07-30 清华大学 一种指尖触碰检测系统及方法
CN104076914A (zh) * 2013-03-28 2014-10-01 联想(北京)有限公司 一种电子设备和投影显示方法
CN104090689A (zh) * 2014-06-27 2014-10-08 深圳市中兴移动通信有限公司 一种移动终端及其交互式投影的方法和系统
CN104714751A (zh) * 2015-03-25 2015-06-17 魅族科技(中国)有限公司 一种投影方法及移动终端
CN104978077A (zh) * 2014-04-08 2015-10-14 联想(北京)有限公司 一种交互方法及系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4041450B2 (ja) * 2003-10-23 2008-01-30 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 通信端末装置および通信方法
CN101539804A (zh) * 2009-03-11 2009-09-23 上海大学 基于增强虚拟现实与异型屏的实时人机互动方法及系统
CN102467298A (zh) * 2010-11-18 2012-05-23 西安龙飞软件有限公司 一种虚拟手机键盘的实现方式
CN103295387B (zh) * 2012-02-29 2016-03-30 联想(北京)有限公司 一种电子设备、投影遥控器及其实现方法
CN202907018U (zh) * 2012-11-01 2013-04-24 神画科技(深圳)有限公司 一种投影互动手机
CN103150013A (zh) * 2012-12-20 2013-06-12 天津三星光电子有限公司 一种移动终端
CN203930785U (zh) * 2014-02-24 2014-11-05 联想(北京)有限公司 电子设备
CN103929599B (zh) * 2014-04-30 2017-01-25 哈尔滨工程大学 一种基于fpga的数字视频图像实时缩放处理方法
CN105094675B (zh) * 2015-07-28 2019-04-02 中国联合网络通信集团有限公司 一种人机交互方法及触屏可穿戴设备
CN105739937B (zh) * 2016-01-27 2020-03-17 努比亚技术有限公司 一种移动终端投影方法、终端设备及系统
CN106095309A (zh) * 2016-06-03 2016-11-09 广东欧珀移动通信有限公司 终端的操作控制方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104076914A (zh) * 2013-03-28 2014-10-01 联想(北京)有限公司 一种电子设备和投影显示方法
CN104978077A (zh) * 2014-04-08 2015-10-14 联想(北京)有限公司 一种交互方法及系统
CN103955316A (zh) * 2014-04-28 2014-07-30 清华大学 一种指尖触碰检测系统及方法
CN104090689A (zh) * 2014-06-27 2014-10-08 深圳市中兴移动通信有限公司 一种移动终端及其交互式投影的方法和系统
CN104714751A (zh) * 2015-03-25 2015-06-17 魅族科技(中国)有限公司 一种投影方法及移动终端

Also Published As

Publication number Publication date
CN106648263A (zh) 2017-05-10

Similar Documents

Publication Publication Date Title
EP2966555B1 (en) Three-dimensional operation control method and device for touchscreen, and mobile terminal thereof
US8692792B2 (en) Bounding box gesture recognition on a touch detecting interactive display
US20200319737A1 (en) Dynamic assignment of possible channels in a touch sensor
US20130038548A1 (en) Touch system
KR101019254B1 (ko) 공간 투영 및 공간 터치 기능이 구비된 단말 장치 및 그 제어 방법
US20150301577A1 (en) Device and method for operating at mitigated sensitivity in a touch sensitive device
KR20100083764A (ko) 대화형 입력 시스템, 이를 위한 컨트롤러 및 어플라이언스를 제어하는 방법
KR102061863B1 (ko) 터치 감지 장치 및 그의 구동 방법
US20160196034A1 (en) Touchscreen Control Method and Terminal Device
US10282087B2 (en) Multi-touch based drawing input method and apparatus
CN104881238A (zh) 一种触控显示装置及其触控方法
CN106648263B (zh) 终端设备及其操控系统、操控方法和装置
JP5732172B2 (ja) タッチパネルシステム及び電子情報機器
KR101019255B1 (ko) 깊이 센서 방식의 공간 터치 무선단말기, 이의 데이터 처리방법 및 스크린장치
JP2014115876A (ja) 3次元タッチパネルを用いた被操作端末の遠隔操作方法
EP2975503A2 (en) Touch device and corresponding touch method
KR101986660B1 (ko) 터치 센서가 구비된 곡면 디스플레이 장치
KR102169236B1 (ko) 터치스크린 장치 및 그 제어방법 그리고 디스플레이 장치
JP2013109538A (ja) 入力方法及び入力装置
JP2018063555A (ja) 情報処理装置、情報処理方法及びプログラム
EP2606412A1 (en) Method and apparatus for determining contact areas within a touch sensing region
US10489262B1 (en) Multi-touch detection in moisture
JP2012027532A (ja) 情報処理装置および情報処理方法
CN105426111A (zh) 一种浮动软键盘的控制系统及其方法
US20160026283A1 (en) Capacitive finger navigation device with hybrid mode and operating method thereof

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant