CN107357415A - 双向显示及控制系统及其方法、电子装置及显示控制方法 - Google Patents
双向显示及控制系统及其方法、电子装置及显示控制方法 Download PDFInfo
- Publication number
- CN107357415A CN107357415A CN201610303097.2A CN201610303097A CN107357415A CN 107357415 A CN107357415 A CN 107357415A CN 201610303097 A CN201610303097 A CN 201610303097A CN 107357415 A CN107357415 A CN 107357415A
- Authority
- CN
- China
- Prior art keywords
- electronic installation
- control signal
- electronic device
- display
- action
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Position Input By Displaying (AREA)
Abstract
一种电子装置,包括:通信单元,用于识别且与另一电子装置建立连接;显示单元,用于与该另一电子装置同步显示信息,从而使得该显示单元复制被另一电子装置所显示的信息;传感器,用于侦测在显示单元上的交互动作;处理器,与该通信单元、该显示单元及该传感器连接。该处理器用于控制该另一电子装置来执行如同在该电子装置中的动作。本发明还提供一种双向显示及控制系统及其方法,及一种显示控制方法,可实现电子装置之间的双向显示及控制。
Description
技术领域
本发明涉及一种双向显示及控制系统及其方法、具有显示及控制功能的电子装置及其方法。
背景技术
电子装置之间通过网络或其他媒体进行信息交换的各种方式受制于通信协定与相关技术规范。在数字系统中,该些规范体现于算法和数据结构上并由独立于作业系统的程序软体来实现。
为了使得该些操作系统及装置可以相互通信,通信协定必须植入在程式代码中。然而,因为该些装置没有共同的存储器,因此必须通过共享的传输介质相互通信。上述通信方式不一定是可靠的,并且各系统可能使用不同的硬件及/或操作系统,使得装置间的相互通信不易实现。
为了实现网络协议,需要使协定软体与作业系统在同一架构下进行信息交换。为人所知的架构包括TCP/IP模型和OSI模型。层级式结构为操作系统设计师提供成功的设计方法,并且在程序设计语言和通信协议之间提供共同点,以及作为建构通信协定的基础。
手机和计算机可配置有数据线缆,如通用串行总线线缆,来允许手机和计算机相互连接,允许手机和计算机之间如电子邮件的同步。原本,具有多功能用途的手机主要用于在用户离开他们的电脑时,可用手机来接收邮件。
手机也可作为调制解调器。即,计算机可与手机共享网络,来为计算机提供网络连接。
目前手机的功能已经十分强大,可当作全功能的计算装置。具有高移动性的手机可能因受限的屏幕尺寸使得使用上产生限制,而另一具有大屏幕尺寸的电子装置却可能缺乏充分的计算功能。整合上述两类型电子装置的优点将使得延伸应用更为广泛,如扩展/额外的显示及通过另一电子装置额外的输入/控制功能。通过通用串行总线(USB)或者高清晰多媒体接口线缆(HDMI)连接第一装置,如手机,与第二装置,如触摸显示装置,可实现扩展/额外的显示。上述连接也可通过无线连接方式来完成。额外的输入/控制装置可包括键盘、鼠标等等,通过有线或无线方式连接电子装置。为了该些电子装置连接来允许额外的显示及控制能力,采用附加的硬件(Dongle)来配对是必要的。
第二电子装置可显示第一电子装置的内容但是不具有能力来控制第一电子装置,例如作为一延伸的显示器。或者第二电子装置可通过鼠标或者其他输入装置控制第一电子装置,却不显示第一电子装置上的信息。
一般达到双向显示或者控制的设计多半要求第一电子装置和第二电子装置都在同一个计算机系统,且具有一个完整的操作系统。如果第二电子装置没有包括完整的操作系统,操纵显示和控制的软件或者驱动程序需要从第一电子装置获得管理权限,而可能会危害到第一电子装置的信息安全。在这些情况下,第二电子装置可能仅获得第一电子装置有限的控制。
人机接口设备(HID)是一种支持双向通信的协议,该协议用于使计算机装置可与人直接交互与交换信息。在该人机接口设备协议中有两种实体,为主设备和从设备。该从设备,如键盘、鼠标或显示器,是一种与人直接交互的实体。该主设备与该从设备通信并从该从设备根据人所执行的行为接收输入数据。
因此,有必要提供一种解决上面问题的方法,来使得第二电子装置能够取得第一电子装置的授权并进一步控制第一电子装置。
发明内容
鉴于以上内容,有必要提供一种双向显示及控制系统及其方法、电子装置及显示控制方法,可实现电子装置之间的双向显示及控制。
一种双向显示及控制系统,包括:第一电子装置包括:第一显示单元;第一通信单元;及第一处理器,与该第一显示单元与该第一通信单元连接;及第二电子装置包括:第二通信单元用于识别该第一通信单元并与该第一通信单元建立连接;第二显示单元,用于与该第一显示单元同步显示信息,使得该第二显示单元复制被该第一显示单元显示的信息;传感器,用于侦测在该第二显示单元的交互动作;第二处理器,与该第二通信单元、该第二显示单元及该传感器连接,该第二处理器用于根据在该第二显示单元上的交互动作控制该第一处理器来执行如同在该第二电子装置中的动作。
较佳的,该第一通信单元及该第二通信单元形成第一传输路线,该同步信息通过该第一传输路线从该第一电子装置提供至该第二电子装置。
较佳的,该第一通信单元及该第二通信单元还形成第二传输路线,该第二电子装置通过该第二传输路线控制该第一电子装置。
较佳的,该第一传输路线和该第二传输路线不同。
较佳的,将在该第二显示单元上的交互动作转换成控制信号;将该控制信号模拟成该第一电子装置接受的用于控制该第一电子装置的外部鼠标控制信号;及通过该第二传输路线将该外部鼠标控制信号传送至该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
较佳的,该第二处理器还用于将该交互动作转换成控制信号,并通过该第二传输路线将该控制信号传送至该第一电子装置;及该第一处理器还用于将该控制信号模拟成该第一电子装置接收的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
较佳的,该控制信号为人机交互设备控制信号,用于控制该第一电子装置来执行对应的动作,如同在该第二电子装置中的动作。
较佳的,该第一电子装置和该第二电子装置之间的连接是通过有线连接。
较佳的,该第一电子装置和该第二电子装置之间的连接是通过无线连接。
较佳的,该第二处理器还用于:获得该第二电子装置的一个或多个坐标;考虑到该第二电子装置的第二显示单元的尺寸将该第二电子装置的一个或多个坐标转换成包括该第一电子装置的坐标的控制信号;隐藏游标,并将预设的外部鼠标控制信号传送至该第一电子装置,来将该第一电子装置的游标移回原点;将来自该第二电子装置的该第二电子装置所转换的控制信号模拟成外部鼠标控制信号;通过该第二电子装置和该第一电子装置之间的连接,将该模拟的外部鼠标控制信号传送至该第一电子装置;及将该第一电子装置的游标根据该外部鼠标控制信号移动至该第一电子装置的一个或多个新坐标。
较佳的,该交互动作由在该第二电子装置上交互的一个或多个位置组成。
较佳的,该第二处理器所获得的该第二电子装置的一个或多个坐标为在该第二电子装置所交互的一个或多个位置的坐标。
较佳的,该交互动作由同时发生在该第二显示单元上的手势信息组成。
较佳的,该第二处理器所获得的该第二电子装置的一个或多个坐标是通过应用该第二电子装置的一个或多个算法确定的基本在该手势信息的两个交互位置中心的坐标。
一种双向显示及控制方法,包括:
识别该第一电子装置和该第二电子装置之间的授权关系;
在该第一电子装置和该第二电子装置之间建立连接;
使得信息在该第一电子装置和该第二电子装置之间同步显示,从而该第二电子装置复制被该第一电子装置所显示的信息;
侦测该第二电子装置上一个或多个交互动作;及
根据在该第二电子装置上的一个或多个交互动作来控制该第一电子装置来执行如同在该第二电子装置中的动作。
较佳的,该第一电子装置和该第二电子装置形成第一传输路线,该同步信息通过该第一传输路线从该第一电子装置提供至该第二电子装置。
较佳的,该第一电子装置和该第二电子装置还形成第二传输路线,该第二电子装置通过该第二传输路线控制该第一电子装置。
较佳的,该第一传输路线与该第二传输路线不同。
较佳的,将在该第二电子装置上的一个或多个交互动作转换成一个或多个控制信号;将该一个或多个控制信号模拟成该第一电子装置接受的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该第一电子装置;及通过该第二传输路线将该一个或多个外部鼠标控制信号传送至该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
较佳的,将该第二电子装置上一个或多个交互动作转换成一个或多个控制信号;通过该第二传输路线将该转换的一个或多个控制信号传送至该第一电子装置;及将该一个或多个控制信号模拟成该第一电子装置接收的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
较佳的,该第一电子装置和该第二电子装置之间的连接通过有线连接的方式建立。
较佳的,该第一电子装置和该第二电子装置之间的连接通过无线连接的方式建立。
较佳的,获得该第二电子装置的一个或多个坐标;考虑到该第二电子装置的显示单元的尺寸将该第二电子装置的一个或多个坐标转换成包括该第一电子装置的坐标的控制信号;隐藏游标,并将预设的外部鼠标控制信号传送至该第一电子装置,来将该第一电子装置的游标移回原点;将来自该第二电子装置的该第二电子装置所转换的控制信号模拟成外部鼠标控制信号;通过该第二电子装置和该第一电子装置之间的连接,将该模拟的外部鼠标控制信号传送至该第一电子装置;及根据该外部鼠标控制信号,将该第一电子装置的游标移动至该第一电子装置的一个或多个新坐标。
较佳的,该交互动作由在该第二电子装置上交互的一个或多个位置组成。
较佳的,该交互动作由同时发生在该第二显示单元上的手势信息组成。
一种电子装置,包括:
通信单元,用于识别且与另一电子装置建立连接;
显示单元,用于与该另一电子装置同步显示信息,从而使得该显示单元复制被另一电子装置所显示的信息;
传感器,用于侦测在该显示单元上的交互动作;
处理器,与该通信单元、该显示单元及该传感器连接,该处理器用于控制该另一电子装置来执行如同在该电子装置中的动作。
较佳的,该通信单元与该另一电子装置形成第一传输路线,该同步信息通过该第一传输路线从其他电子装置提供至该电子装置。
较佳的,该通信单元与该另一电子装置形成第二传输路线,该电子装置通过该第二传输路线控制该另一电子装置。
较佳的,该第一传输路线与该第二传输路线不同。
较佳的,将在该第二电子装置上的交互动作转换成控制信号;将该控制信号模拟成另一电子装置接受的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该另一电子装置;及通过该第二传输路线将该一个或多个外部鼠标控制信号传送至该另一电子装置,因此该另一电子装置执行该外部鼠标控制信号所对应的动作,如同在该电子装置中的动作。
较佳的,该控制信号为人机交互设备控制信号,用于控制另一电子装置来执行对应的动作,如同在该电子装置中的动作。
较佳的,该电子装置与该另一电子装置之间的连接是通过有线连接方式建立的。
较佳的,该电子装置与该另一电子装置之间的连接是通过无线连接方式建立的。
较佳的,该处理器还用于:获得该电子装置的一个或多个坐标;考虑到该电子装置的显示单元的尺寸将该电子装置的一个或多个坐标转换成包括该电子装置的坐标的控制信号;隐藏游标,并将预设的外部鼠标控制信号传送至该另一电子装置,来将该另一电子装置的游标移回原点;将来自该电子装置的该电子装置所转换的控制信号模拟成外部鼠标控制信号;通过该电子装置和该另一电子装置之间的连接,将该模拟的外部鼠标控制信号传送至该另一电子装置;及根据该外部鼠标控制信号,将该另一电子装置的游标移动至该另一电子装置的一个或多个新坐标。
较佳的,该交互动作由在该显示单元上交互的一个或多个位置组成。
较佳的,该交互动作由同时发生在该显示单元上的手势信息组成。
一种显示控制方法,包括:
识别电子装置和另一电子装置之间的授权关系;
在该电子装置和另一电子装置之间建立连接;
使得信息在该电子装置和该另一电子装置之间同步显示,从而该电子装置复制被该另一电子装置所显示的信息;
侦测该电子装置上的交互动作;及
根据在该电子装置上的交互动作来控制该另一电子装置来执行如同在该电子装置中的动作。
较佳的,该电子装置与该另一电子装置的连接通过有线连接方式建立。
较佳的,该电子装置与该另一电子装置之间的连接通过无线连接方式建立。
较佳的,该电子装置与该另一电子装置形成第一传输路线,该同步信息通过该第一传输路线从该另一电子装置提供至该电子装置。
较佳的,该电子装置与该另一电子装置还形成第二传输路线,该电子装置通过该第二传输路线控制该另一电子装置。
较佳的,将在该电子装置上的交互动作转换成控制信号;将该控制信号模拟成该另一电子装置接受的用于控制该另一电子装置的外部鼠标控制信号;及通过该第二传输路线将该外部鼠标控制信号传送至该另一电子装置,因此该另一电子装置执行该外部鼠标控制信号所对应的动作,如同在该电子装置中的动作。
本发明通过第二电子装置与该第一电子装置同步显示信息,并且通过在该第二电子装置上的交互动作来控制该第一电子装置,从而实现该第一电子装置和该第二电子装置之间的双向显示及控制。
附图说明
图1是本发明一较佳实施例的计算装置和电子装置结合的方框图。
图2是本发明一较佳实施例的模拟在电子装置上的点击动作为在计算装置上的点击动作的流程图。
图3是本发明一较佳实施例的模拟在电子装置上的缩小/放大操作为在计算装置上的缩小/放大操作的流程图。
图4是本发明第一实施例的智能手机与具有集成触摸模块的大显示器监控器结合的示意图。
图5是本发明第二实施例的智能手机与用于会议的触摸面板结合的示意图。
图6是本发明第三实施例的智能手机与娱乐系统结合的示意图。
主要元件符号说明
计算装置 | 100 |
电子装置 | 110 |
第一处理器 | 101 |
第一存储器 | 102 |
第一通信单元 | 103 |
第一显示单元 | 104 |
第一电池单元 | 105 |
移动模块 | 106 |
相机模块 | 107 |
全球定位系统模块 | 108 |
音频编码解码器 | 109 |
第二处理器 | 111 |
第二存储器 | 112 |
第二显示单元 | 113 |
触摸板传感器 | 114 |
触摸人机接口设备控制板 | 115 |
第二通信单元 | 116 |
第二电池单元 | 117 |
点击动作模拟方法 | 200 |
缩小/放大动作模拟方法 | 300 |
智能手机 | 401 |
大显示器监控器 | 402 |
结合 | 400 |
智能手机 | 501 |
大尺寸的触摸板 | 502 |
结合 | 500 |
智能手机 | 601 |
娱乐系统 | 602 |
结合 | 600 |
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
本发明应用于计算装置与电子装置结合工作,其中,该计算装置及该电子装置分别具有他们自己的电子元件及/或他们自己的操作系统,且分别可构建部分或完整的用户环境。该计算装置可包括处理器、完整的操作系统及通信单元。该电子装置可为具有触摸感应和显示器的装置,该装置包括处理器、存储器、触摸人机接口设备控制板,及通信单元。该计算装置的处理器和该电子装置的处理器可包括显示功能,如无线显示、车联网、移动终端高清影音标准接口、数字生活网络联盟、无线显示、无线千兆比特联盟及无线播放。该计算装置的通信单元和该电子装置的通信单元可包括有线和无线传输能力,如Wi-Fi(Wireless-Fidelity,无线网)、蓝牙、USB(Universal Serial Bus,通用串行总线)、高清晰多媒体接口(High Definition Multimedia Interface,HDMI®)、近距离无线通信技术(Near Field Communication,NFC)及以太网。
以下将结合附图对本发明作进一步的详细说明。
图1是本发明一较佳实施例的计算装置100和电子装置110结合的方框图。该计算装置100可包括第一处理器101、第一存储器102、第一通信单元103、第一显示单元104及第一电池单元105。该第一处理器101可以是中央处理器、数字处理器或者单一芯片等等。该第一处理器101与该第一存储器102、第一通信单元103、第一显示单元104及第一电池单元105连接。该第一存储器102可以包括,但是不仅局限于,随机存取存储器、只读存储器、可擦可编程只读存储器、电可擦只读存储器、闪存或者其他固态存储技术。该第一存储器102可存储有该计算装置100的信息及可被该第一处理器101执行的计算程序。该第一通信单元103可用于使得该计算装置100能与该电子装置110通信。该第一显示单元104可为液晶显示器或有机发光二极管等。该第一电池单元105可用于为该计算装置100提供电能。在本实施方式中,该计算装置100可为智能手机,该智能手机还可进一步包括移动模块106、相机模块107、全球定位系统模块108、音频编码解码器109来获得电信或其他的能力。在其他实施方式中,该计算装置100还可为平板或智能手表等等。
该电子装置110,在另一方面,可包括具有第二存储器112的第二处理器111、第二显示单元113、触摸板传感器114、触摸人机接口设备控制板115、第二通信单元116及第二电池单元117。显然,在其他实施方式中,该第二存储器112可独立于该第二处理器111。在本实施方式中,该第二处理器111可以为中央处理器、数字处理器或者单一芯片等等。该第二处理器111可以与该第二存储器112、第二显示单元113、触摸板传感器114、触摸人机接口设备控制板115、第二通信单元116及第二电池单元117连接。该第二存储器112可以包括,但是不仅局限于,随机存取存储器、只读存储器、可擦可编程只读存储器、电可擦只读存储器、闪存或者其他固体状态存储技术。该第二存储器112可存储有可被该第二处理器111执行的计算程序。该第二显示单元113可为液晶显示器或有机发光二极管等。该第二显示单元113用于显示信息。该触摸板传感器114用于侦测在第二显示单元113上的交互动作。该交互动作可通过手指、笔或者其他可将第二显示单元113上的触摸点发送到触摸板传感器114的任意类型的装置。显然,该触摸板传感器114还可被替换为其他类型的传感器,如被替换为可以侦测指示器、鼠标、键盘或者其他任意合适装置与第二显示单元113交互的传感器。该触摸人机接口设备控制板115可为固定于电子装置110的电路。该触摸人机接口设备控制板115可用于处理任意感应的交互动作。该第二电池单元117可用于为该电子装置110提供电能。
当该电子装置110在该计算装置100的侦测范围内时,该计算装置100可侦测被该电子装置110传输的信号,或者直接与该计算装置100连接。计算装置100和电子装置110认证程序后完成影像和触摸/控制信号的同步,显示参数(如LCD解析度)可从该计算装置100的第一通信单元103发送至该电子装置110的第二通信单元116。该电子装置110然后可相应调整该电子装置110的解析度,且与该第一显示单元104同步显示从该计算装置100通过第一传输路线,如USB或者Wi-Fi,所传送的信息。该电子装置110的第二显示单元113可复制被该第一显示单元104所显示的信息。该计算装置100,在另一方面,可通过第二传输路线,如蓝牙,连接在该电子装置110中的触摸人机接口设备控制板115或者第二处理器111,并且使得该电子装置110来控制该计算装置100。在本实施方式中,该第二传输路线可与该第一传输路线相同或者不同。
该计算装置100与该电子装置110之间的结合过程可能因为信号路线的不同而不同。如果该电子装置110显示该计算装置100通过Wi-Fi所传输的信息时,该计算装置100可通过Wi-Fi直连搜索该电子装置110作为无线显示装置。该Wi-Fi直连是一种无线标准,使得该些装置可不必透过无线网络基地台相互连接。一旦该电子装置110被搜索,该电子装置110将通过动态主机配置协议将所需要的Wi-Fi参数传送至计算装置100。到该计算装置100和该电子装置110通过Wi-Fi无线连接的时候,该计算装置100可通过描述的路线传送信息到该电子装置110。
该计算装置100和该电子装置110可通过有线集成。例如,该计算装置100可为支持移动终端高清影音标准接口或者车联网的智能手机,且与该电子装置110通过USB连接。为了实现这样的连接,该电子装置110可配置有有线通信单元,如高清晰多媒体接口和USB连接器。从计算装置100的信息可通过微型USB转高清晰多媒体接口数据线。如果该电子装置110的有线通信单元集成有USB转高清晰多媒体接口数据转换功能,该计算装置100和该电子装置110可通过微型USB转USB数据线结合。
当触摸人机接口设备控制信号通过蓝牙从电子装置110被传送至计算装置100,该能力可能被受限于需要计算装置100的管理权限。避免该受限的方法是将来自电子装置110的触摸人机接口控制信号伪装成被计算装置100授权的人机接口设备控制信号。例如,如果该计算装置100接收来自外部鼠标的人机接口设备控制信号,该电子装置110的触摸人机接口设备控制板115或者该第二处理器111然后将触摸人机接口设备控制信号转换成该计算装置100认为是外部鼠标人机接口设备信号的信号。
图2是本发明一较佳实施例的模拟流程图,将电子装置上的点击动作模拟为在计算装置上的点击动作。在电子装置上的点击动作可为通过手指或其他工具在该电子装置上触摸的一个或多个位置。虽然该第二处理器所返回的触摸坐标是绝对坐标,然而,外部人机交互设备,如外部鼠标,会将该交互动作的绝对坐标映射成相对坐标。该点击动作模拟方法200将电子装置上的点击动作模拟为在计算装置上的点击动作。
该点击动作模拟方法200具有很多不同的途径来执行该方法。在本实施例中,如下所描述的点击动作模拟方法200可通过图1所示意的结构来执行。图2所示的每个步骤代表一个或多个程序、方法或者在该点击动作模拟方法200中执行的子程序。此外,所示意的步骤的次序只做为例子,并且该些步骤的次序可根据本发明进行改变。额外的步骤可被增加或者较少的步骤可被利用,而没有脱离本发明所公开的内容。该点击动作模拟方法200从步骤201开始。
在步骤201中,当电子装置在计算装置的侦测范围内时,计算装置侦测该电子装置所传输的信号,或者直接与该计算装置连接。
在步骤202中,认证程序后通过有线或无线方式建立连接,并且该电子装置和该计算装置之间的影像和触摸/控制同步可达到。
在步骤203中,交互动作,例如点击动作,及因此在该电子装置上的坐标被获得。
在步骤204中,考虑到电子装置的第二显示单元的尺寸,该电子装置上的交互动作的坐标被转换成包括计算装置的坐标的人机接口设备控制信号。
在步骤205中,游标被隐藏,并且预设的外部鼠标控制信号,例如该电子装置的人机接口设备控制信号被传送至该计算装置,来移动该计算装置的游标回到原点。
在步骤206中,在步骤204中转换成的人机接口设备控制信号被模拟成外部鼠标人机接口设备控制信号。
在步骤207中,通过该电子装置与该计算装置之间的连接,该外部鼠标人机接口设备控制信号被传送至该计算装置。
在步骤208中,根据该外部鼠标人机接口设备控制信号,该计算装置的游标被移动至该计算装置上的一个或多个新坐标,其中,该计算装置的鼠标可被依序移动至该计算装置的一个或多个新坐标。
在步骤209中,在步骤203中所描述的点击动作可被模拟成外部鼠标的点击信号,且该点击信号被传送至该计算装置。
在步骤210中,该点击动作在该计算装置上被执行。
图3是本发明一较佳实施例的模拟流程图,将电子装置上的缩小/放大动作模拟为在计算装置上的缩小/放大动作。该缩小/放大动作模拟方法300通过将触摸人机接口设备控制信号模拟为外部鼠标人机接口设备控制信号来操作计算装置。
该缩小/放大动作模拟方法300有很多不同的途径来执行该方法。在本实施例中,如下所描述的缩小/放大动作模拟方法300可通过图1所示意的结构来执行。图3所示的每个步骤代表一个或多个程序、方法或者在该点击动作模拟方法中执行的子程序。此外,所示意的步骤的次序只做为例子,并且该些步骤的次序可根据本发明进行改变。额外的步骤可被增加或者较少的步骤可被利用,而没有脱离本发明所公开的内容。该缩小/放大动作模拟方法300从步骤301开始。
在步骤301中,当该电子装置在该计算装置的侦测范围内时,该计算装置侦测该电子装置所传输的信号,或者直接与该计算装置连接。
在步骤302中,认证程序后通过有线或无线方式建立连接,并且该电子装置和该计算装置之间的影像和触摸/控制同步可达到。
在步骤303中,该电子装置的缩小/放大动作被获得,该缩小/放大动作包括关于同时发生在该电子装置的第二显示单元上的手势信息。
在步骤304中,该电子装置的一个或多个算法被应用来确定基本在该两个相关位置的中心的坐标。
在步骤305中,考虑到该电子装置的第二显示单元的尺寸,该确定的电子装置的坐标被转换成包括该计算装置的坐标的人机接口设备控制信号。
在步骤306中,游标被隐藏,并且该电子装置的预设的外部鼠标人机接口设备控制信号被传送至该计算装置,来移动该计算装置的游标回原点。
在步骤307中,在步骤305中转换成的电子装置的人机接口设备控制信号被模拟成第一外部鼠标人机接口设备控制信号。
在步骤308中,通过该电子装置与该计算装置之间的连接,该第一外部鼠标人机接口设备控制信号被传送至该计算装置。
在步骤309中,根据该第一外部鼠标人机接口设备控制信号,该计算装置的鼠标被移动至该计算装置上的新坐标。
在步骤310中,在步骤303中所记录的该电子装置的缩小/放大动作被模拟成第二外部鼠标人机接口设备控制信号,且该模拟的第二外部鼠标人机接口设备控制信号被传送至该计算装置。
在步骤311中,该计算装置执行该缩小/放大动作。
该第二外部鼠标人机接口设备信号可为该计算装置通过在外部鼠标的滚轮所产生的缩小/放大信号。如果通过滚轮产生缩小/放大信号不被支持,该计算装置可应用预先安装的应用程序,来将第二外部鼠标人机接口设备信号转换成被两个手指在该电子装置的第二显示单元上执行的缩小/放大动作,并且该计算装置相应的执行该缩小/放大动作。
为了示意的目的,该第一处理器的具体处理过程和该第二处理器的具体处理过程参考图1被示意和描述,但是该第一处理器和该第二处理器的任意合适的变化的处理过程可被提供。例如,该第二处理器可将该交互动作转换为控制信号,并通过该第二传输路线将该控制信号传送至该第一处理器,该第一处理器可相应将该控制信号转换成该计算装置可接收的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该计算装置。因此控制该计算装置来执行该外部鼠标控制信号相应的动作,如同在该电子装置中的动作。
图4为第一实施方式的智能手机401与具有集成触摸模块的大显示器监控器402结合400的示意图。在本实施方式中,人机交互设备控制信号的模拟实现了智能手机401与集成触摸模块的大显示器监控器的结合。该大显示器监控器402可显示被该智能手机401显示的内容,且通过该集成的触摸模块控制该智能手机401。来自该智能手机401的信息通过有线连接,如USB,被传送至该大显示器监控器402,而该控制信号通过蓝牙从该大显示器监控器402被传送至该智能手机401。
图5为第二实施方式的智能手机501与用于会议的大尺寸的触摸板502结合500的示意图。适用模拟人机交互设备控制信号的实施例包括用于会议的大尺寸的触摸板502及智能手机501。该大尺寸的触摸板502显示该智能手机501的内容,并且在该大尺寸的触摸板502上用触摸或指示棒功能控制该智能手机501。该来自智能手机501的信息通过无线连接,如Wi-Fi,被传送至大尺寸的触摸板502,而该控制信号通过蓝牙从该大尺寸的触摸板502传送至该智能手机501。
图6为第三实施方式的智能手机601与汽车的娱乐系统602结合600的示意图。在本实施方式中,触摸人机交互设备控制信号的模拟实现了智能手机601与汽车的娱乐系统602的结合。认证程序后完成影像信号的同步,显示参数(如LCD解析度)可从该智能手机601的通信单元被传送至该汽车的娱乐系统602的通信单元。为了让娱乐系统602获得对该智能手机601的使用权,从该娱乐系统602通过蓝牙所传送的触摸人机交互设备控制信号可先被模拟成人机交互设备控制信号,其中,该人机互动设备控制信号被该智能手机601授权。一旦该智能手机601与该娱乐系统602的连接完成,使用者可通过该娱乐系统602的触摸板接听电话或者使用GPS导航应用。
最后所应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。
Claims (42)
1.一种双向显示及控制系统,包括:
第一电子装置包括:
第一显示单元;
第一通信单元;及
第一处理器,与该第一显示单元与该第一通信单元连接;及
第二电子装置包括:
第二通信单元用于识别该第一通信单元并与该第一通信单元建立连接;
第二显示单元,用于与该第一显示单元同步显示信息,使得该第二显示单元复制被该第一显示单元显示的信息;
传感器,用于侦测在该第二显示单元的交互动作;
第二处理器,与该第二通信单元、该第二显示单元及该传感器连接,该第二处理器用于根据在该第二显示单元上的交互动作控制该第一处理器来执行如同在该第二电子装置中的动作。
2.如权利要求1所述的双向显示及控制系统,其特征在于:
该第一通信单元及该第二通信单元形成第一传输路线,该同步信息通过该第一传输路线从该第一电子装置提供至该第二电子装置。
3.如权利要求2所述的双向显示及控制系统,其特征在于:
该第一通信单元及该第二通信单元还形成第二传输路线,该第二电子装置通过该第二传输路线控制该第一电子装置。
4.如权利要求3所述的双向显示及控制系统,其特征在于:
该第一传输路线和该第二传输路线不同。
5.如权利要求3所述的双向显示及控制系统,其特征在于:
将在该第二显示单元上的交互动作转换成控制信号;
将该控制信号模拟成该第一电子装置接受的用于控制该第一电子装置的外部鼠标控制信号;及
通过该第二传输路线将该外部鼠标控制信号传送至该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
6.如权利要求3所述的双向显示及控制系统,其特征在于:
该第二处理器还用于将该交互动作转换成控制信号,并通过该第二传输路线将该控制信号传送至该第一电子装置;及
该第一处理器还用于将该控制信号模拟成该第一电子装置接收的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
7.如权利要求1所述的双向显示及控制系统,其特征在于:
该控制信号为人机交互设备控制信号,用于控制该第一电子装置来执行对应的动作,如同在该第二电子装置中的动作。
8.如权利要求1所述的双向显示及控制系统,其特征在于:
该第一电子装置和该第二电子装置之间的连接是通过有线连接。
9.如权利要求1所述的双向显示及控制系统,其特征在于:
该第一电子装置和该第二电子装置之间的连接是通过无线连接。
10.如权利要求1所述的双向显示及控制系统,其特征在于,该第二处理器还用于:
获得该第二电子装置的一个或多个坐标;
考虑到该第二电子装置的第二显示单元的尺寸,将该第二电子装置的一个或多个坐标转换成包括该第一电子装置的坐标的控制信号;
隐藏游标,并将预设的外部鼠标控制信号传送至该第一电子装置,来将该第一电子装置的游标移回原点;
将来自该第二电子装置的该第二电子装置所转换的控制信号模拟成外部鼠标控制信号;
通过该第二电子装置和该第一电子装置之间的连接,将该模拟的外部鼠标控制信号传送至该第一电子装置;及
将该第一电子装置的游标根据该外部鼠标控制信号移动至该第一电子装置的一个或多个新坐标。
11.如权利要求10所述的系统,其特征在于:
该交互动作由在该第二电子装置上交互的一个或多个位置组成。
12.如权利要求11所述的系统,其特征在于:
该第二处理器所获得的该第二电子装置的一个或多个坐标为在该第二电子装置所交互的一个或多个位置的坐标。
13.如权利要求10所述的系统,其特征在于:
该交互动作由同时发生在该第二显示单元上的手势信息组成。
14.如权利要求13所述的系统,其特征在于:
该第二处理器所获得的该第二电子装置的一个或多个坐标是通过应用该第二电子装置的一个或多个算法确定的基本在该手势信息的两个交互位置中心的坐标。
15.一种双向显示及控制方法,包括:
识别该第一电子装置和该第二电子装置之间的授权关系;
在该第一电子装置和该第二电子装置之间建立连接;
使得信息在该第一电子装置和该第二电子装置之间同步显示,从而该第二电子装置复制被该第一电子装置所显示的信息;
侦测该第二电子装置上一个或多个交互动作;及
根据在该第二电子装置上的一个或多个交互动作来控制该第一电子装置来执行如同在该第二电子装置中的动作。
16.如权利要求15所述的双向显示及控制方法,其特征在于:
该第一电子装置和该第二电子装置形成第一传输路线,该同步信息通过该第一传输路线从该第一电子装置提供至该第二电子装置。
17.如权利要求16所述的双向显示及控制方法,其特征在于:
该第一电子装置和该第二电子装置还形成第二传输路线,该第二电子装置通过该第二传输路线控制该第一电子装置。
18.如权利要求17所述的双向显示及控制方法,其特征在于:
该第一传输路线与该第二传输路线不同。
19.如权利要求17所述的双向显示及控制方法,其特征在于:
将在该第二电子装置上的一个或多个交互动作转换成一个或多个控制信号;
将该一个或多个控制信号模拟成该第一电子装置接受的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该第一电子装置;及
通过该第二传输路线将该一个或多个外部鼠标控制信号传送至该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
20.如权利要求17所述的双向显示及控制方法,其特征在于,该方法还包括:
将该第二电子装置上一个或多个交互动作转换成一个或多个控制信号;
通过该第二传输路线将该转换的一个或多个控制信号传送至该第一电子装置;及
将该一个或多个控制信号模拟成该第一电子装置接收的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该第一电子装置,因此该第一电子装置执行该外部鼠标控制信号所对应的动作,如同在该第二电子装置中的动作。
21.如权利要求15所述的双向显示及控制方法,其特征在于:
该第一电子装置和该第二电子装置之间的连接通过有线连接的方式建立。
22.如权利要求15所述的双向显示及控制方法,其特征在于:
该第一电子装置和该第二电子装置之间的连接通过无线连接的方式建立。
23.如权利要求15所述的双向显示及控制方法,其特征在于,该方法还包括:
获得该第二电子装置的一个或多个坐标;
考虑到该第二电子装置的显示单元的尺寸,将该第二电子装置的一个或多个坐标转换成包括该第一电子装置的坐标的控制信号;
隐藏游标,并将预设的外部鼠标控制信号传送至该第一电子装置,来将该第一电子装置的游标移回原点;
将来自该第二电子装置的该第二电子装置所转换的控制信号模拟成外部鼠标控制信号;
通过该第二电子装置和该第一电子装置之间的连接,将该模拟的外部鼠标控制信号传送至该第一电子装置;及
根据该外部鼠标控制信号,将该第一电子装置的游标移动至该第一电子装置的一个或多个新坐标。
24.如权利要求23所述的双向显示及控制方法,其特征在于:
该交互动作由在该第二电子装置上交互的一个或多个位置组成。
25.如权利要求23所述的双向显示及控制方法,其特征在于:
该交互动作由同时发生在该第二显示单元上的手势信息组成。
26.一种电子装置,包括:
通信单元,用于识别且与另一电子装置建立连接;
显示单元,用于与该另一电子装置同步显示信息,从而使得该显示单元复制被另一电子装置所显示的信息;
传感器,用于侦测在该显示单元上的交互动作;
处理器,与该通信单元、该显示单元及该传感器连接,该处理器用于控制该另一电子装置来执行如同在该电子装置中的动作。
27.如权利要求26所述的电子装置,其特征在于:
该通信单元与该另一电子装置形成第一传输路线,该同步信息通过该第一传输路线从其他电子装置提供至该电子装置。
28.如权利要求27所述的电子装置,其特征在于:
该通信单元与该另一电子装置形成第二传输路线,该电子装置通过该第二传输路线控制该另一电子装置。
29.如权利要求28所述的电子装置,其特征在于:
该第一传输路线与该第二传输路线不同。
30.如权利要求28所述的电子装置,其特征在于,该处理器还用于:
将在该第二电子装置上的交互动作转换成控制信号;
将该控制信号模拟成另一电子装置接受的外部鼠标控制信号,其中,该外部鼠标控制信号用于控制该另一电子装置;及
通过该第二传输路线将该一个或多个外部鼠标控制信号传送至该另一电子装置,因此该另一电子装置执行该外部鼠标控制信号所对应的动作,如同在该电子装置中的动作。
31.如权利要求26所述的电子装置,其特征在于:该控制信号为人机交互设备控制信号,用于控制另一电子装置来执行对应的动作,如同在该电子装置中的动作。
32.如权利要求26所述的电子装置,其特征在于:该电子装置与该另一电子装置之间的连接是通过有线连接方式建立的。
33.如权利要求26所述的电子装置,其特征在于:该电子装置与该另一电子装置之间的连接是通过无线连接方式建立的。
34.如权利要求26所述的电子装置,其特征在于,该处理器还用于:
获得该电子装置的一个或多个坐标;
考虑到该电子装置的显示单元的尺寸将该电子装置的一个或多个坐标转换成包括该电子装置的坐标的控制信号;
隐藏游标,并将预设的外部鼠标控制信号传送至该另一电子装置,来将该另一电子装置的游标移回原点;
将来自该电子装置的该电子装置所转换的控制信号模拟成外部鼠标控制信号;
通过该电子装置和该另一电子装置之间的连接,将该模拟的外部鼠标控制信号传送至该另一电子装置;及
根据该外部鼠标控制信号,将该另一电子装置的游标移动至该另一电子装置的一个或多个新坐标。
35.如权利要求34所述的电子装置,其特征在于:该交互动作由在该显示单元上交互的一个或多个位置组成。
36.如权利要求34所述的电子装置,其特征在于:该交互动作由同时发生在该显示单元上的手势信息组成。
37.一种显示控制方法,包括:
识别电子装置和另一电子装置之间的授权关系;
在该电子装置和另一电子装置之间建立连接;
使得信息在该电子装置和该另一电子装置之间同步显示,从而该电子装置复制被该另一电子装置所显示的信息;
侦测该电子装置上的交互动作;及
根据在该电子装置上的交互动作来控制该另一电子装置来执行如同在该电子装置中的动作。
38.如权利要求37所述的显示控制方法,其特征在于:
该电子装置与该另一电子装置的连接通过有线连接方式建立。
39.如权利要求37所述的显示控制方法,其特征在于:
该电子装置与该另一电子装置之间的连接通过无线连接方式建立。
40.如权利要求37所述的显示控制方法,其特征在于:
该电子装置与该另一电子装置形成第一传输路线,该同步信息通过该第一传输路线从该另一电子装置提供至该电子装置。
41.如权利要求37所述的显示控制方法,其特征在于:
该电子装置与该另一电子装置还形成第二传输路线,该电子装置通过该第二传输路线控制该另一电子装置。
42.如权利要求41所述的显示控制方法,其特征在于,该方法还包括:
将在该电子装置上的交互动作转换成控制信号;
将该控制信号模拟成该另一电子装置接受的用于控制该另一电子装置的外部鼠标控制信号;及
通过该第二传输路线将该外部鼠标控制信号传送至该另一电子装置,因此该另一电子装置执行该外部鼠标控制信号所对应的动作,如同在该电子装置中的动作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610303097.2A CN107357415A (zh) | 2016-05-10 | 2016-05-10 | 双向显示及控制系统及其方法、电子装置及显示控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610303097.2A CN107357415A (zh) | 2016-05-10 | 2016-05-10 | 双向显示及控制系统及其方法、电子装置及显示控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107357415A true CN107357415A (zh) | 2017-11-17 |
Family
ID=60271018
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610303097.2A Pending CN107357415A (zh) | 2016-05-10 | 2016-05-10 | 双向显示及控制系统及其方法、电子装置及显示控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107357415A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109408013A (zh) * | 2018-09-30 | 2019-03-01 | 联想(北京)有限公司 | 一种显示控制方法及装置、设备 |
CN112003928A (zh) * | 2020-08-21 | 2020-11-27 | 深圳市康冠智能科技有限公司 | 多功能屏幕同步控制方法、装置及设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020118168A1 (en) * | 2001-02-26 | 2002-08-29 | Hinckley Kenneth P. | Positional scrolling |
US20050028112A1 (en) * | 2003-07-30 | 2005-02-03 | Canon Kabushiki Kaisha | Reduced image production method and apparatus |
CN101587396A (zh) * | 2008-05-21 | 2009-11-25 | 深圳富泰宏精密工业有限公司 | 触控输入输出同步系统及方法 |
US20120162536A1 (en) * | 2010-12-22 | 2012-06-28 | General Instrument Corporation | Remote control device and method for controlling operation of a media display system |
CN103023964A (zh) * | 2012-10-31 | 2013-04-03 | 惠州市德赛西威汽车电子有限公司 | 一种车载信息共享娱乐系统 |
-
2016
- 2016-05-10 CN CN201610303097.2A patent/CN107357415A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020118168A1 (en) * | 2001-02-26 | 2002-08-29 | Hinckley Kenneth P. | Positional scrolling |
US20050028112A1 (en) * | 2003-07-30 | 2005-02-03 | Canon Kabushiki Kaisha | Reduced image production method and apparatus |
CN101587396A (zh) * | 2008-05-21 | 2009-11-25 | 深圳富泰宏精密工业有限公司 | 触控输入输出同步系统及方法 |
US20120162536A1 (en) * | 2010-12-22 | 2012-06-28 | General Instrument Corporation | Remote control device and method for controlling operation of a media display system |
CN103023964A (zh) * | 2012-10-31 | 2013-04-03 | 惠州市德赛西威汽车电子有限公司 | 一种车载信息共享娱乐系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109408013A (zh) * | 2018-09-30 | 2019-03-01 | 联想(北京)有限公司 | 一种显示控制方法及装置、设备 |
US11150854B2 (en) | 2018-09-30 | 2021-10-19 | Lenovo (Beijing) Co., Ltd. | Display control method, apparatus, and electronic device |
CN112003928A (zh) * | 2020-08-21 | 2020-11-27 | 深圳市康冠智能科技有限公司 | 多功能屏幕同步控制方法、装置及设备 |
CN112003928B (zh) * | 2020-08-21 | 2021-06-25 | 深圳市康冠智能科技有限公司 | 多功能屏幕同步控制方法、装置及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102495712B (zh) | 一种基于多个显示终端的地图拼接显示方法 | |
CN106104434B (zh) | 使用触摸屏设备确定用户利手和定向 | |
CN107465997A (zh) | 蓝牙连接方法、装置、终端及计算机可读存储介质 | |
CN104598048A (zh) | 数位笔书写控制方法及系统 | |
CN107451439A (zh) | 用于计算设备的多功能按钮 | |
EP4050563A1 (en) | Electronic device for providing indoor positioning and method therefor | |
CN104899361A (zh) | 一种远程操控方法及装置 | |
KR20150092962A (ko) | 입력 처리 방법 및 그 전자 장치 | |
US20160329029A1 (en) | Apparatus and method for integrating a smart mobile device and a touch device | |
CN107357415A (zh) | 双向显示及控制系统及其方法、电子装置及显示控制方法 | |
CN101470544A (zh) | 模拟鼠标系统及方法 | |
CN102222008B (zh) | 界面管理系统及其方法 | |
CN103702152A (zh) | 一种机顶盒与移动终端共享触摸屏的方法和系统 | |
CN104834458A (zh) | 基于触摸屏的设备配对方法及装置 | |
CN103631406A (zh) | 无线触摸屏控制系统及其动态生成菜单的方法 | |
CN102799373B (zh) | 电子设备、生成输入区域的方法和终端设备 | |
CN105578313B (zh) | 远程控制方法,系统,远控执行方法,系统及移动终端 | |
CN111290689B (zh) | 电子设备及其主控装置、控制方法、触控共享系统 | |
CN103853470B (zh) | 数据处理和显示方法及设备 | |
CN103309491A (zh) | 触控指令整合方法及触控系统 | |
JP2012177998A (ja) | 車載端末装置 | |
CN105373242A (zh) | 一种体感手机鼠标控制系统及其控制方法 | |
CN103677430B (zh) | 一种触摸设备 | |
KR20150123022A (ko) | 점자를 입출력하는 장치 및 방법 | |
CN104102332A (zh) | 显示设备及其控制系统和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20171117 |