CN105392037A - 三维空中鼠标以及与其一起使用的显示器 - Google Patents

三维空中鼠标以及与其一起使用的显示器 Download PDF

Info

Publication number
CN105392037A
CN105392037A CN201510542367.0A CN201510542367A CN105392037A CN 105392037 A CN105392037 A CN 105392037A CN 201510542367 A CN201510542367 A CN 201510542367A CN 105392037 A CN105392037 A CN 105392037A
Authority
CN
China
Prior art keywords
mouse
ultrasonic
signal
ultrasonic signal
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510542367.0A
Other languages
English (en)
Inventor
Y·赵
M·孙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Memsic Inc
Original Assignee
Memsic Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Memsic Inc filed Critical Memsic Inc
Publication of CN105392037A publication Critical patent/CN105392037A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0386—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542—Light pens for emitting or receiving light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42221—Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Position Input By Displaying (AREA)
  • Computer Hardware Design (AREA)

Abstract

描述了一种空中鼠标系统。空中鼠标被配置为定期发射RF信号，以便触发布置在电视机上的多个超声发射机。当被来自RF触发器的RF信号触发时，所述超声发射机发射超声信号。超声接收机接收所述超声信号。处理器基于由所述超声发射机发射的所述超声信号到达所述超声接收机的时间差来计算所述空中鼠标相对于所述超声发射机的位置。一系列的空中鼠标位置形成所述空中鼠标的运动轨迹，并且所述空中鼠标无线地将所述运动轨迹发射到所述电视机。所述电视机将所述运动轨迹投影为电视机屏幕上的光标轨迹，以依靠所述空中鼠标的运动来对电视机屏幕上的光标进行控制。

Description

三维空中鼠标以及与其一起使用的显示器
背景技术
各种实施例总体上涉及智能电视机系统、方法、设备以及计算机程序，并且更具体地，涉及人机交互接口以及运动远程控制。
本部分是要提供背景或上下文。描述可能包括可以追求的，但未必是之前已经设想的或追求的概念。除非另作指定，本部分所描述的内容不被视为说明书和权利要求的现有技术，并且也不因为包含在本部分中而被承认为现有技术。
随着电视机网络功能的不断改进以及向智能电视机时代的逐渐转变，新型人机接口和远程控制器一直被引导着不断发展。
与网络功能一起持续增长的服务给列表选择带来了更多的复杂性，以上、下、左、右功能，以及OK按钮为特征的传统菜单对正常使用而言已经变得过时，但是提供过于复杂的菜单可能导致远程控制器操作中的麻烦和缓慢。目前，在多家电视机制造商和品牌的共同努力下，已经出现了三种通用的人机接口解决方案：语音识别、姿态识别以及运动感应。
就语音识别而言，增加语音识别功能对电视机产品的多样性具有显著的影响，而其原因在于，在各种不同地区中存在着大量的复杂方言和地方口音。
至于姿态识别，游戏机已经证明：姿态识别在商业上是可行的，然而，对于许多网页而言，姿态控制是不合适的，尤其是对于那些需要精细和准确的鼠标运动的网页。此外，姿态识别并不被认为是良好的人体工学设计，这表明疲劳可能影响手臂的伸展能力和姿势。此外，姿态识别中的运动一般由布置在电视机前的摄像头捕获，而许多人不愿意在他们每天观看的电视机前，尤其是在可以连接到互联网的电视机上安装摄像头。
运动捕获，也被称为远程指向(remotepoint)，被认为是当前正在快速发展中的一项技术。并且出于在涉及到计算机的使用时，计算机鼠标、触摸板或Wii-类型的控制器已经广泛地被消费者所接受和熟悉的原因，将其应用到电视机上的障碍可能是最小的。然而，这些运动捕获(远程指向)设备还是比普通远程控制器贵得多，这使它们的高成本变成了其广泛应用的主要障碍。
需要的是克服现有方案所面对的例如成本、隐私关注等问题的人机接口和远程控制器。
发明内容
以下概述仅是代表性的而不是限制性的。
通过使用各种实施例，能够克服上述问题，并且可以意识到其他的优点。
被视为远程指向中的一种，根据各种实施例的空中鼠标不仅可以解决传统远程控制器中存在的成本问题，还可以提供更加简单并且容易的操作。此外，空中鼠标适用于二维和三维(3D)智能电视机显示系统二者，并且还被赋予了空间定向功能。
总体上，各种实施例提供了空中鼠标。超声发射机阵列被固定安装(例如在显示器周围)并且发射超声信号。超声信号到达空中鼠标上的超声接收机的时间基于空中鼠标与发射机的相对位置。基于超声信号到达空中鼠标的时间来确定空中鼠标的位置。可替换地，空中鼠标可以发射由超声接收机阵列接收的超声信号。
在第一个方面中，实施例提供了控制光标的方法。所述方法包括：响应于触发信号，发射一个或多个超声信号(例如，从空中鼠标)。接收所述一个或多个超声信号(例如，当电视机发射由触发信号触发的超声信号时，在鼠标处接收)。所述方法包括基于每一个超声信号传播的距离来确定鼠标的位置。所述方法还包括至少部分地基于所述鼠标的位置来在屏幕上显示光标。
在进一步的方面中，实施例提供了用于控制光标的鼠标。所述鼠标包括：射频发射机，被配置为发射触发信号；一个或多个超声接收机，被配置为接收多个超声信号；一个或多个处理器；以及存储计算机程序代码的一个或多个存储器。所述一个或多个存储器和所述计算机程序代码被配置为与所述一个或多个处理器一起使得装置执行动作。所述动作包括：在第一时间发射触发信号；接收多个超声信号，每一个超声信号具有相关联的到达时间；以及针对接收到的每一个超声信号，基于所述第一时间和所述相关联的到达时间之间的差，来确定该超声信号传播的距离。所述动作还包括基于每一个超声信号传播的距离来确定鼠标的位置；以及发射与所述鼠标的位置有关的位置信息(例如，发射到电视机，使得其可以显示光标)。
在另一个方面中，实施例提供了用于控制光标的电视机，所述电视机包括：屏幕，被配置为显示光标；射频接收机，被配置为从鼠标接收触发信号；一个或多个超声发射机，被配置为发射多个超声信号；一个或多个处理器；以及存储计算机程序代码的一个或多个存储器。所述一个或多个存储器和所述计算机程序代码被配置为与所述一个或多个处理器一起使得装置执行动作。所述动作包括：在第一时间接收触发信号；以及响应于接收触发信号，在近似相同的时间发射多个超声信号。所述动作还可以包括：接收与所述鼠标的位置有关的位置信息；将与所述鼠标的位置有关的位置信息转换为光标的显示位置；以及在所述显示位置显示所述光标。
附图说明
当结合附图阅读以下说明时，所描述的实施例的方面将更加显而易见。
图1是示出了根据第一实施例的3D空中鼠标的示意图。
图2是示出了根据第二实施例的3D空中鼠标的示意图。
图3示出了适合用于实现各种实施例的设备的框图。
图4示出了适合用于实现各种实施例的另一设备的框图。
图5示出了根据另一实施例的被显示在第一位置的光标。
图6示出了根据另一实施例的被显示在第二位置的光标。
图7是示出了适合用于实现各种实施例的TV附属设备的示意图。
图8是示出了适合用于实现各种实施例的具有内置设备的TV的示意图。
图9是示出了根据实施例的方法，以及实现在存储器上的计算机程序指令的执行结果的逻辑流程图。
具体实施方式
根据35U.S.C§119(e)的规定，本发明申请要求2014年9月1日提交的美国临时专利申请No.:62/044,329的优先权，该临时申请的公开内容以引用方式全部并入在本文中。
各种实施例的特征、好处和优点之一是提供使用空中鼠标来控制光标的技术。在结合附图研读以下的具体实施方式之后，额外的目的、特征以及优点将变得显而易见。
根据一个实施例，提供了空中鼠标，其包括被配置用于发射RF信号的射频(RF)触发器。这些RF信号可以用于定期地触发布置在电视机上的多个超声发射机。当被来自RF触发器的RF信号触发时，超声发射机发射超声信号。超声接收机接收由布置在电视机上的超声发射机所发射的超声信号。处理器基于由超声发射机发射的超声信号到达超声接收机的时间来计算空中鼠标相对于超声发射机的位置。一系列空中鼠标的位置可以用于形成空中鼠标的运动轨迹。空中鼠标将运动轨迹无线地发射到电视机，并且电视机将该运动轨迹投影为电视机屏幕上的光标轨迹。
在进一步的实施例中，空中鼠标可以包括在相同或不同频率上操作的至少两个超声接收机。所述至少两个超声接收机分开一定的距离。根据对超声接收机的不同轨迹的计算，例如通过单独地使用布置在电视机上的至少三个超声发射机来计算每一个超声接收机的3D位置，可以推断出鼠标的旋转。使用该信息，可以确定鼠标的方向。
在另一个可替换的实施例中，电视机上可以布置有至少三个超声发射机。RF触发器以相同或不同的频率发射RF信号，并且单独的超声发射机可以通过这些RF信号进行触发。RF信号的传播速度比超声信号的传播速度更快。由此，被发射到不同位置的RF信号的时间差相对于被发射到不同位置的超声波信号的时间差是可忽略的。可以假定由空中鼠标发射的RF信号同时到达不同的超声发射机，例如，超声发射机在同一时间被触发。
空中鼠标可以是智能电话的一部分，例如，空中鼠标由智能电话所替换。空中鼠标的运动情况和运动轨迹信息都被转换成屏幕光标的运动和轨迹，以便对光标进行远程控制。
空中鼠标还可以由具有超声发射和接收功能的设备构成。超声波由空中鼠标进行发射并且随后通过布置在智能屏幕周围的有源或无源超声反射器进行反射。通过计算由不同反射器反射的超声波的时间差来推导出空中鼠标的空间位置，由此，以相同的方式，实现了依靠空中鼠标来对光标进行控制的目标。
根据另一个实施例，具有空中鼠标的电视机系统包括固定安装在电视机屏幕周围的多个超声接收机。该系统还电气地连接到电视机，例如在接收到超声信号时，向电视机输出电信号。空中鼠标同步并且定期地发射RF信号和超声信号。当超声接收机接收到由空中鼠标发射的超声波时，智能电视机被RF信号触发，开始从安装在电视机屏幕周围的超声接收机来接收电信号。电视机上的处理器基于超声波被不同超声接收机检测到的时间来计算空中鼠标的位置。一系列空中鼠标的位置形成了空中鼠标的运动轨迹，该运动轨迹然后可以被显示在电视机屏幕上。
第一实施例
图1是示出了根据第一实施例的3D空中鼠标的示意图。系统100包括鼠标110，其能够定期地发射RF超声触发信号并且同时地接收超声信号。超声发射机120、122、124、126被放置在电视机屏幕115周围。光标140显示在电视机屏幕115上。根据本实施例，鼠标110的位置用于确定在何处显示光标140。空中鼠标的运动情况和运动轨迹信息被转换为屏幕光标的运动和轨迹，以便对光标进行远程控制。
在一个非限制性的修改中，将接收功能添加到被布置在智能屏幕115周围的超声发射机120、122、124、126，并且将反射功能添加到空中鼠标110。以那样的方式，通过控制不同的超声发射机在不同时间发射超声信号，创建出具有不同相位的超声信号来对空间进行扫描。系统100根据反射强度的变化来对空中鼠标110进行定位，并且随后经由反馈系统来获取对空中鼠标110的跟踪。
RF信号的传播速度比超声波的传输速度更快，并且RF信号和超声信号二者由空中鼠标110同时发射。因此，在电视机从空中鼠标110接收到RF信号时，可以在电视机上设置针对空中鼠标110发射/接收超声波的起始时间。
在一个非限制性的实施例中，鼠标110是3D空中鼠标。3D空中鼠标110完成以下步骤：
1)三个或更多个超声发射机120、122、124、126固定地安装在电视机屏幕115周围。每一个超声发射机120、122、124、126由RF信号触发以发射超声信号。
2)空中鼠标110具有定期发射RF信号的RF触发器，以及从超声发射机120、122、124、126接收超声信号的超声接收机。RF信号的传播速度比超声信号的传播速度更快。由此，被发射到不同位置的RF信号的时间差相对于被发射到不同位置的超声波信号的时间差是可忽略的。也就是说，可以假定由空中鼠标110发射的RF信号同时到达不同的超声发射机120、122、124、126，例如，超声发射机被同时触发。
3)空中鼠标110在其运动时定期地发射RF信号以触发超声发射机120、122、124、126。由此，在每一个RF信号被发射后，空中鼠标110接收到一组超声信号。根据超声信号到达空中鼠标110的时间，可以计算出在该时刻空中鼠标110相对于这些超声发射机120、122、124、126的位置。基于一系列空中鼠标110的连续位置，生成空中鼠标110的运动轨迹。
4)将空中鼠标110的运动轨迹无线地发射到智能电视机。
5)智能电视机将运动轨迹投影为电视机屏幕115上的光标轨迹。这允许用户依靠空中鼠标110的运动来对电视机屏幕上的光标140进行控制。
在本实施例的一个变形中，空中鼠标110上固定有两个超声接收机。这些接收机分开一定的距离。这允许系统基于两个超声接收机的不同轨迹来推断空中鼠标110的旋转。
在本实施例的另一个变形中，空中鼠标110可以具有超声发射和接收功能二者。具有不同频率的超声波被空中鼠标110发射，并且随后被布置在智能屏幕周围的有源或无源超声反射器(替换或补充发射机120、122、124、126)反射。通过计算被不同反射器反射的超声波的时间来推导出空中鼠标110的空间位置；由此，依靠改变空中鼠标110的位置来对光标140进行控制。
提供了一种用于基于超声接收机阵列120、122、124、126在固定位置接收由鼠标110发射的超声信号的时间来计算鼠标110的空间位置的方法。由于超声波以相同的速度传播，因此可以基于超声信号到达鼠标110所花费的时间来计算鼠标110到每一个接收机120、122、124、126的距离。使用该信息，可以几何地确定鼠标110的位置，例如，通过使用三边测量技术。随后可以将鼠标位置转换成光标140的位置。鼠标位置的相对变化可以随后被转换成光标140的位置的类似变化，例如，向左侧移动鼠标110一英尺可以被转换成光标140向屏幕115左侧的移动(同样的距离或某种调整过的距离)。
第二实施例
图2是示出了根据第二实施例的系统200的示意图。系统200包括能够定期发射RF信号和超声信号的鼠标210。接收机220、222、224、226被配置为从鼠标210接收超声信号，并且被放置在电视机屏幕215的周围。接收机220、222、224、226还被配置为将从超声信号转换成的电信号发射到控制器，例如，该电视机和/或机顶盒。光标240显示在电视机屏幕215上。根据本实施例，使用鼠标210的位置来确定在何处显示光标240。
在本实施例中提供的3D空中鼠标210完成以下步骤：
1)三个或更多个超声接收机220、222、224、226被固定地安装在电视机屏幕215的周围，与电视机电气连接。在接收到超声信号时，超声接收机220、222、224、226向电视机输出电信号。
2)空中鼠标215同步地发射RF信号和超声信号二者。智能电视机由RF信号触发，开始从布置在电视机屏幕115周围的超声接收机220、222、224、226接收电信号。该电信号在超声接收机220、222、224、226接收到由空中鼠标210发射的超声波时生成。
3)RF信号的传播速度比超声波的传播速度更快，并且空中鼠标210同时发射RF信号和超声信号。因此，在电视机从空中鼠标210接收到RF信号时，可以在电视机上设置针对空中鼠标210发射超声波的起始时间。
4)不同位置的超声接收机220、222、224、226接收到由空中鼠标210发射的超声信号的时间是不同的。同时，将超声波传换成电信号以及将电信号传送到电视机的时间相对于超声波的传送时间是可忽略的。电视机从不同的超声接收机220、222、224、226接收电信号的时间差近似等于超声接收机220、222、224、226接收到由空中鼠标210发射的超声信号的时间差。
5)来自不同超声接收机220、222、224、226的电信号的时间差等于接收到由空中鼠标210发射的超声信号的时间差。由此，可以推断出鼠标210的位置。
6)可以通过接收由运动中的空中鼠标210定期发射的RF信号和超声信号来计算空中鼠标210的运动轨迹。
7)电视机将空中鼠标210的运动情况和运动轨迹转换为屏幕光标240的运动和轨迹，以便能够依靠空中鼠标210的运动来对电视机屏幕215上的光标240进行控制。
在一个实施例中，将发射功能添加到布置在智能屏幕215周围的超声接收机220、222、224、226，并且将超声反射功能添加到空中鼠标210。以这种方式，通过控制不同超声发射机在不同时间发射超声信号来创建具有不同相位的超声信号以对空间进行扫描。取决于反射强度的变化来对空中鼠标210进行定位，并且随后经由反馈系统来实现对鼠标210的跟踪。
3D空中鼠标210由RF触发的超声设备以及超声接收设备构成。布置在智能屏幕215(电视机屏幕、平板显示屏幕等)附近的阵列超声发射机220、222、224、226被来自鼠标210的RF信号同步地触发。通过计算接收到由阵列超声接收机220、222、224、226发射的超声波的时间差来推断鼠标210的位置。运动中的鼠标210不断触发超声波，从而可以获取鼠标210的运动情况和3D运动轨迹，并且鼠标210的运动情况和运动轨迹信息经由屏幕的光标214被反映在智能屏幕上。这使得能够依靠鼠标210的3D运动来控制智能屏幕215的光标240。该3D空中鼠标210不仅适用于3D光标控制，例如，鼠标210还可以用于2D显示(例如，通过忽略y轴)。
分开一定距离的不同频率的两个RF发射机可以固定在鼠标210上，并且鼠标210的旋转随后可以通过计算这两个触发器的不同轨迹来推断出。
鼠标210还可以由具有超声发射和接收功能的设备组成。不同频率的超声波被鼠标210发射并且随后被布置在智能屏幕215附近的有源或无源超声反射器(替换或补充接收机220、222、224、226)来进行反射。在鼠标210进行发射之后，通过计算所接收的不同反射器超声波的时间差来推导出鼠标210的空间位置，由此以相同的方式，实现了依靠鼠标210来对光标240进行控制的目的。
空中鼠标210的运动情况和运动轨迹信息被转换成屏幕光标240的运动和轨迹，以便对光标240进行远程控制。
在一个非限制性的实施例中，将发射功能添加到布置在智能屏幕215周围的超声接收机220、222、224、226，并且将超声反射功能添加到空中鼠标210。以这种方式，通过控制不同的超声发射机在不同时间发射超声信号，来创建具有不同相位的超声信号以对空间进行扫描。取决于反射强度的变化，由系统来对空中鼠标210进行定位，并且随后经由反馈系统来实现对空中鼠标210的追踪。
图3示出了适合用于实现各种实施例的设备的框图。鼠标310包括控制器(例如，数据处理器(DP)312)、被实现为存储有诸如程序(PROG)315等的计算机指令的存储器(MEM)314的计算机可读介质、以及合适的无线通信接口，例如，超声接收机316和发射机/接收机318。鼠标310还可以包括按键319和/或专用处理器，例如，位置确定芯片313。
图4示出了适合用于实现各种实施例的系统400的框图。系统400包含机顶单元410以及各种发射机/接收机420、422。机顶单元410包括诸如数据处理器(DP)412等的控制器、被实现为存储有诸如程序(PROG)415等的计算机指令的存储器(MEM)414的计算机可读介质、以及合适的无线通信接口，例如RF接收机416。机顶单元410还与发射机/接收机420、422协作以便接收/发送无线信号(例如超声信号)。机顶单元410还可以包括专用处理器，例如，鼠标位置确定芯片413。
发射机/接收机420、422可以被实现在显示单元(例如电视机)中、实现在机顶单元410中、和/或实现在位于显示单元外部的传感器中。尽管示出了两个发射机/接收机420、422，但是系统400可以包含额外的发射机/接收机。
程序315、415可以包括程序指令，当由相关联的DP312、412执行时，所述程序指令使得鼠标310和机顶单元410根据实施例进行操作。即，不同的实施例可以至少部分地通过由鼠标310的DP312、机顶单元410的DP412可执行的计算机软件、通过鼠标310/机顶单元410的硬件、或通过软件和硬件的组合来实施。
一般地，鼠标310的各种实施例可以包括电视机远程控制器、电缆盒远程控制器、蜂窝电话、平板电脑、游戏设备、音乐播放器、以及包含这些功能的组合的其他设备。
一般地，机顶单元410的各种实施例可以包括实现在电视机、电缆盒、游戏系统、以及包含这些功能的组合的其他设备中的处理单元。
MEM314、414可以是适合于本地技术环境的任何类型，并且可以使用任何合适的数据存储技术来实现，例如，磁性存储器设备、基于半导体的存储器设备、闪速存储器、光学存储器设备、固定存储器以及可移除存储器。DP312、412可以是适合于本地技术环境的任何类型，并且可以包括通用计算机、专用计算机、微处理器以及多核处理器，作为非限制性的示例。无线通信接口(例如，发射机/接收机318、RF接收机416等)可以是适合于本地技术环境的任何类型，并且可以使用任何合适的通信技术实现，例如，RF系统，包括使用诸如红外系统和/或光学扫描系统等的光通信系统、RF通信系统、或这些部件的组合。此外，通信接口可以是使用发射机、接收机、和/或收发机的双向接口，或者，如适合于实施例的，可以是单向接口。
图5示出了根据另一实施例的显示在第一位置的光标。如所示出的，鼠标和显示器处于第一系统状态500。鼠标位于相对于屏幕515的第一鼠标位置510。发射机520分别产生超声信号530、532、534、536。这些信号530、532、534、536随后在鼠标处被接收并且第一鼠标位置510被确定。基于确定的第一鼠标位置510，光标被显示在第一光标位置540处。
在一个非限制性实施例中，可以确定每一个超声信号530、532、534、536从相关联的发射机520传播到鼠标所花费的时间量。该信息然后可以用于确定第一鼠标位置510和相关联的发射机520之间的距离。例如，基于第一信号530在鼠标处被接收的时间，可以使用超声信号的已知速度计算出第一鼠标位置510和相关联的发射机520之间的距离。结合针对每一个超声信号530、532、534、536的距离信息能够在3D环境中确定第一鼠标位置510。
图6示出了根据另一实施例的显示在第二位置的光标。如在第二系统状态600中示出的，鼠标已经从第一鼠标位置510被移动到第二鼠标位置610。这被突出显示为鼠标位置变化612。
在第二鼠标位置610上，鼠标从相关联的发射机520接收每一个超声信号630、632、634、636。由于鼠标位置612的变化，超声信号630、632、634、636以不同的时间延迟到达。如前所述，该信息被用于确定第二鼠标位置610。该信息随后被用于在第二光标位置640处显示光标，所述光标从第一光标位置540移动了光标位置变化642。
在一个非限制性的实施例中，基于乘数将鼠标位置变化612被转换为光标位置变化642。例如，移动鼠标一英尺可以被转换成在屏幕515上移动10英寸或转换为显示区域的百分比(例如，沿x轴移动相当于屏幕尺寸的50％)。可替换地，乘数可以是基于鼠标位置的，例如，与当鼠标比较接近屏幕515时的乘数相比，当鼠标沿y轴距离屏幕515较远时乘数可以较大。这允许光标位置在视觉上更加接近用户可以在其视野中看到的鼠标位置。
在另一个非限制性的实施例中，鼠标可以包括额外的传感电路。尽管可以基于位置的变化来确定移动速度，然而鼠标可以包括额外的速度或移动检测传感器。例如，鼠标可以包括检测鼠标何时开始移动的加速度计。可以使用该信息以便点亮鼠标上的按钮和/或向发射机520发送RF信号以便触发超声信号的发射，从而使得可以确定鼠标的位置。加速度计可以相对简单，以便避免例如游戏远程控制中使用的传感器的更灵敏的传感器的高成本。
如上所见，鼠标可以包括多个超声接收机、发射机或反射器，使得还可以确定鼠标的方向和旋转。可以使用该数据来改变光标的图像，例如以反映出鼠标的方向/旋转。可替换地，可以使用该信息来改变鼠标的功能，例如，在被垂直地持有时，移动鼠标可以被解释为光标位置未变化，使得用户可以重新放置鼠标。如另一个非限制性示例，扭动鼠标可以是选择选项和/或返回到之前的屏幕/菜单的命令。
图7是示出了适合用于实现各种实施例的系统700的示意图。系统700包括位于显示器外壳730内的屏幕715。位于显示器外壳730外部的是显示器外壳730上方的第一传感器外壳740，以及显示器外壳730下方的第二传感器外壳742。每一个传感器外壳740、742包括一个或多个发射机/接收机720。在示出的非限制性实施例中，第一传感器外壳740具有两个发射机/接收机720，并且第二传感器外壳742具有一个发射机/接收机720。传感器外壳740、742被连接到机顶处理单元710。使用所述至少三个发射机/接收机720，机顶处理单元710能够在3D中确定鼠标的位置。
在进一步的非限制性实施例中，系统700可以包括额外的发射机/接收机720。该额外的发射机/接收机720可以被包括在传感器外壳740、742中和/或被提供在额外的传感器外壳中。可替换地，单个传感器外壳可以实现传感器外壳740、742二者。
在额外的非限制性实施例中，传感器外壳740、742可以位于不同的布置中，例如，第二传感器外壳740、742中的一个或二者可以沿显示器外壳730的侧面放置。可替换地，传感器740、742可以被放置为远离显示器外壳730，例如，嵌入在壁中或包含在扬声器系统中。
在进一步的非限制性实施例中，机顶处理单元710可以实现在显示器外壳730中、远程设备(例如视频记录器或电缆盒)中、或传感器外壳740、742中的一个或二者内。
如上文描述，鼠标可以发送RF信号以便触发来自发射机/接收机720的超声信号。在一个非限制性的实施例中，机顶处理单元710接收如下指示：RF信号(来自发射机/接收机720中的任何一个或来自额外的传感器)。机顶处理单元710随后可以通知发射机/接收机720开始超声信号的发射。
可替换地，每一个发射机/接收机720可以包括在接收到RF信号后自动开始发射超声信号的电路。当发射机/接收机720做出响应的延迟足够短时，可以认为超声信号与RF信号同时发射。在那样的情况下，可以将超声信号在发射机/接收机720与鼠标之间传递(或传播)所花费的时间确定为鼠标发射RF信号的时间与鼠标接收超声信号的时间之间的差。
在进一步的可替换实施例中，鼠标可以被配置为发射另一个、相对高速的信号以便触发相对低速度的超声信号；例如，鼠标可以发射红外(IR)触发信号。
图8是示出了适合用于实现各种实施例的系统800的示意图。在本实施例中，系统800是具有内置发射机/接收机820的TV。发射机/接收机820位于显示器外壳830内并且被布置在屏幕815周围。如所示的，发射机/接收机820与屏幕815邻近。在进一步的实施例中，发射机/接收机820和屏幕815可以部分或整个地重叠，例如，发射机/接收机820中的一个或多个可以完全位于屏幕815之后。
如上文描述，各种实施例提供了使用3D运动来控制光标的方法、装置以及计算机程序。
图9是示出了根据各种实施例的方法，以及计算机程序指令的执行结果的逻辑流程图。根据实施例，在框910，方法执行响应于触发信号，发射至少一个超声信号的步骤。在框920，所述至少一个超声信号被接收。在框930，方法执行针对所述至少一个超声信号中的每一个，基于该超声信号传播的距离来确定鼠标位置的步骤。在框940，该方法还执行至少部分地基于鼠标位置来在屏幕上显示光标的步骤。
图9中示出的各种框可以被视为方法步骤、被视为使用计算机程序代码所产生的操作、和/或被视为被构建为实施相关联的功能的一个或多个逻辑电路元件。
实施例提供了使用3D运动来控制光标的鼠标。该鼠标包括RF发射机，其被配置为定期地将RF信号发射到布置在电视机上的多个超声发射机。当被RF信号触发时，超声发射机发射超声信号。鼠标还包括超声接收机，其被配置为接收超声信号。处理器基于超声信号何时到达超声接收机来计算空中鼠标相对于超声发射机的位置。一系列空中鼠标的位置形成空中鼠标的运动轨迹。空中鼠标无线地将运动轨迹发送给电视机，并且该运动轨迹被投影为电视机屏幕上的光标轨迹。
在以上鼠标的进一步的实施例中，空中鼠标包括具有不同频率的至少两个超声接收机。这些超声接收机分开一定的距离，并且可以根据对超声接收机的不同轨迹的计算来推导出鼠标的旋转。
在以上鼠标的任何一个的另一个实施例中，存在至少两个超声发射机。
在以上鼠标的任何一个的进一步的实施例中，RF发射机发射具有不同频率的RF信号。超声发射机可以被具有不同频率的RF信号触发。例如，处于第一频率的一个RF信号触发单个超声发射机(或一组超声发射机)，并且处于第二频率的第二RF信号触发不同的超声发射机(或一组不同的超声发射机)。
在以上鼠标的任何一个的另一个实施例中，RF信号的传播速率比超声信号的传播速率更快。由此，RF信号到达不同位置时的到达时间相对于超声波信号到达不同位置时的到达时间是可忽略的。也就是说，可以假定由空中鼠标发射的RF信号同时到达不同的超声发射机，使得超声发射机被认为是同时被触发的。
在以上鼠标的任何一个的进一步的实施例中，空中鼠标可以是智能电话的一部分，例如，该空中鼠标可以由智能电话替换。
在以上鼠标的任何一个的另一个实施例中，空中鼠标的运动和运动轨迹信息被转换成屏幕光标的运动和轨迹，以便对光标进行远程控制。
额外的实施例提供了使用3D运动来控制光标的鼠标。该鼠标被配置为提供超声发射和接收功能。具有不同频率的超声波由空中鼠标进行发射并且随后被布置在智能屏幕周围的有源或无源超声反射器进行反射。通过计算被不同反射器反射的超声波的通过时间来推导空中鼠标的空间位置。该信息随后被用来确定鼠标位置并且相应地控制光标。由此，可以依靠空中鼠标来对光标进行控制。
进一步的实施例提供了使用空中鼠标的3D运动来控制光标的电视机系统。该系统包括固定地安装在电视机屏幕周围并且与电视机电气连接的多个超声接收机。该超声接收机被配置为在接收到超声信号时向电视机输出电信号。该系统还包括空中鼠标，其被配置为同步并且定期地发射RF信号和超声信号。智能电视机被RF信号触发，开始从安装在电视机屏幕周围的超声接收机接收电信号。该电信号在超声接收机接收到由空中鼠标发射的超声波时被生成。电视机上的处理器基于来自不同超声接收机的电信号(例如基于处理器何时接收到电信号)来计算空中鼠标的位置。一系列的空中鼠标的位置形成了空中鼠标的运动轨迹。
在以上的电视机系统的另一个实施例中，空中鼠标的运动和运动轨迹信息被转换为屏幕光标的位置和运动轨迹，以便对光标进行远程控制。
在以上的电视机系统中的任何一个的进一步的实施例中，超声接收机还包括发射功能。例如，鼠标提供超声反射功能，而不是超声信号发射功能。相应地，具有不同相位的超声信号由超声发射机生成以对空间进行扫描。超声信号被鼠标反射并且随后被超声接收机接收。基于反射强度的变化来确定空中鼠标的位置。
在以上的电视机系统中的任何一个的另一个实施例中，RF信号的传播速率比超声波的传播速率更快。RF信号和超声信号被空中鼠标同时发射。因此，在接收到超声信号之前电视机从空中鼠标接收到RF信号。可以在电视机上设置针对空中鼠标发射超声波的起始时间，使得RF信号的接收时间与超声信号的接收时间之间的差与超声信号从鼠标传播到超声接收机所花费的时间量实际上一致。
在以上的电视机系统的任何一个的进一步的实施例中，基于由鼠标发射的、由位于固定位置的超声接收机阵列接收的超声信号的到达时间来对鼠标的空间位置进行计算。
在以上的电视机系统中的任何一个的另一个实施例中，空中鼠标可以是智能电话的一部分，例如，该空中鼠标被智能电话替换。
以上描述的各种操作纯粹是示例性的并且没有暗示特定的顺序。此外，在合适时，可以以任何顺序使用并且可以部分地使用这些操作。在考虑上述实施例的情况下，应该理解的是，额外的实施例可以采用涉及在计算机系统中传送或存储的数据的各种计算机实现的操作。这些操作可以是要求对物理量进行物理操纵的那些操作。通常，尽管是非必须的，这些物理量表现为电、磁或光信号的形式，这些信号能够被存储、传送、组合、比较、以及以其他方式操纵。
所描述的形成当前公开的实施例的一部分的任何操作可以是有用的机器操作。各种实施例还涉及用于执行这些操作的设备或装置。所述装置可以出于所需的目的被特别构建，或者所述装置可以是由存储在计算机中的计算机程序可选择地激活或配置的通用计算机。特别地，如下文描述的，采用耦合到一个或多个计算机可读介质的一个或多个处理器的各种通用机器可以与根据本文的教导而写的计算机程序一起使用，或者可以更方便地构建更专门的装置来执行所需的操作。
本文描述的程序、过程、和/或模块可以被实现在硬件、软件、被实现为具有程序指令的计算机可读介质、固件、或其组合中。例如，本文描述的功能可以由执行在存储器或其他存储设备之外的程序指令的处理器来执行。
上文的描述针对特定实施例。然而，可以对描述的实施例进行其他的变形和修改，以获得它们的一些或全部的优点。本领域的普通技术人员还将意识到的是，可以对上文描述的系统和方法进行修改，而不偏离本文公开的概念。因此，本发明不应该被视为由公开的实施例进行限制。此外，公开的实施例的各种特征可以在没有相应地使用其他特征的情况下被使用。由此，这些描述应该被理解为仅对各种原理进行说明，而非对本发明进行限制。

Claims (20)

1.一种用于控制光标的方法，所述方法包括：
响应于触发信号，发射至少一个超声信号；
接收所述至少一个超声信号；
针对所述至少一个超声信号中的每一个，基于该超声信号传播的距离来确定鼠标的位置；以及
至少部分地基于所述鼠标的位置来在屏幕上显示光标。
2.根据权利要求1所述的方法，还包括：
将所述触发信号从所述鼠标发射到多个超声发射机；
其中，所述多个超声发射机中的每一个被配置为接收所述触发信号并且响应于接收到所述触发信号来发射所述超声信号。
3.根据权利要求1所述的方法，其中，所述鼠标被配置为接收多个超声信号，其中，每一个超声信号由单独的超声发射机进行发射。
4.根据权利要求1所述的方法，其中，确定所述鼠标的位置包括：
针对所述至少一个超声信号的每一次接收，确定所接收的超声信号的通过时间，其中，所述通过时间是所述超声信号被发射的时间与所述超声信号被接收的时间之间的差；
针对所述至少一个超声信号中的每一个，至少部分地基于所述超声信号的通过时间以及所述超声信号的速度来确定所述超声信号传播的距离；以及
基于所述超声信号传播的距离使用三边测量来计算所述鼠标的位置。
5.根据权利要求1所述的方法，还包括：
定期地发射所述触发信号；以及
基于所述鼠标的多个位置来确定运动轨迹。
6.根据权利要求1所述的方法，其中，所述触发信号为射频触发信号，并且射频信号具有比超声信号的传播速度更大的传播速度。
7.根据权利要求1所述的方法，还包括：
从所述鼠标发射所述触发信号；以及
响应于发射所述触发信号，发射所述至少一个超声信号，其中，所述触发信号和所述至少一个超声信号在近似相同的时间被发射。
8.根据权利要求7所述的方法，其中，接收所述至少一个超声信号包括使用布置在所述屏幕周围的多个超声发射机来接收所述至少一个超声信号。
9.根据权利要求7所述的方法，其中，接收所述至少一个超声信号包括在所述鼠标处，从布置在所述屏幕周围的多个超声反射器接收所述至少一个超声信号的反射。
10.根据权利要求1所述的方法，还包括从所述鼠标发射所述触发信号，
其中，发射所述至少一个超声信号包括：响应于接收到所述触发信号，每次从布置在所述屏幕周围的多个超声发射机中的不同超声发射机发射多个超声信号，使得所述触发信号和所述至少一个超声信号被认为在近似相同的时间被发射。
11.根据权利要求10所述的方法，其中，接收所述至少一个超声信号包括在所述鼠标处接收所述多个超声信号。
12.根据权利要求10所述的方法，其中，接收所述至少一个超声信号包括在所述多个超声发射机处，从所述鼠标中的至少一个超声反射器接收所述至少一个超声信号的反射。
13.根据权利要求1所述的方法，还包括将与所述鼠标的位置有关的位置信息从所述鼠标发射到所述电视机。
14.根据权利要求13所述的方法，其中，位置信息包括以下中的至少一个：在给定时间确定的所述鼠标的位置；在给定时间针对所述多个超声信号中的每一个确定的通过时间；以及表示在多个时间所述鼠标的多个位置的运动轨迹。
15.一种用于控制光标的鼠标，所述鼠标包括：
射频发射机，其被配置为发射触发信号；
至少一个超声接收机，其被配置为接收多个超声信号；
至少一个处理器；以及
至少一个存储器，其包括计算机程序代码，
其中，所述至少一个存储器和所述计算机程序代码被配置为，与所述至少一个处理器一起，使所述鼠标至少执行以下的内容，包括：
在第一时间发射所述触发信号；
接收所述多个超声信号，每一个超声信号具有相关联的到达时间；
针对接收到的每一个超声信号，基于所述第一时间和所述相关联的到达时间的差来确定该超声信号传播的距离；
基于每一个超声信号传播的距离来确定鼠标的位置；以及
发射与所述鼠标的位置有关的位置信息。
16.根据权利要求15所述的鼠标，其中，所述至少一个超声接收机包括第一超声接收机和第二超声接收机；以及
所述方法还包括基于所述第一超声接收机的位置和所述第二超声接收机的位置来确定所述鼠标的方向。
17.根据权利要求15所述的鼠标，其中，所述鼠标被体现在智能电话中。
18.一种用于控制光标的电视机，所述电视机包括：
屏幕，其被配置为显示光标；
射频接收机，其被配置为从鼠标接收触发信号；
至少一个超声发射机，其被配置为发射多个超声信号；
至少一个处理器；以及
至少一个存储器，其包括计算机程序代码，
其中，所述至少一个存储器和所述计算机程序代码被配置为，与所述至少一个处理器一起，使所述电视机至少执行以下的内容，包括：
在第一时间接收所述触发信号；
响应于接收到所述触发信号，在近似相同的时间发射所述多个超声信号；
接收与所述鼠标的位置有关的位置信息；
将与所述鼠标的位置有关的位置信息转换为所述光标的显示位置；以及
在所述显示位置处显示所述光标。
19.根据权利要求18所述的电视机，其中，位置信息包括以下中的至少一项：在给定时间确定的所述鼠标的位置；在给定时间针对所述多个超声信号中的每一个确定的通过时间；以及表示在多个时间所述鼠标的多个位置的运动轨迹。
20.根据权利要求18所述的电视机，其中，所述显示器是三维显示器，并且其中，将与所述鼠标的位置有关的位置信息转换为所述光标的显示位置包括将与所述鼠标的位置有关的位置信息转换成所述光标的三维显示位置。
CN201510542367.0A 2014-09-01 2015-08-28 三维空中鼠标以及与其一起使用的显示器 Pending CN105392037A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201462044329P 2014-09-01 2014-09-01
US62/044,329 2014-09-01
US14/631,058 2015-02-25
US14/631,058 US20160062488A1 (en) 2014-09-01 2015-02-25 Three-dimensional air mouse and display used together therewith

Publications (1)

Publication Number Publication Date
CN105392037A true CN105392037A (zh) 2016-03-09

Family

ID=55402449

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510542367.0A Pending CN105392037A (zh) 2014-09-01 2015-08-28 三维空中鼠标以及与其一起使用的显示器

Country Status (3)

Country Link
US (1) US20160062488A1 (zh)
CN (1) CN105392037A (zh)
TW (1) TW201621553A (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016176116A1 (en) * 2015-04-30 2016-11-03 Board Of Regents, The University Of Texas System Utilizing a mobile device as a motion-based controller
CN106297229B (zh) 2015-06-25 2019-08-02 北京智谷睿拓技术服务有限公司 交互方法及通信设备
CN107025780B (zh) * 2015-06-25 2020-09-01 北京智谷睿拓技术服务有限公司 交互方法及通信设备
CN106297230B (zh) * 2015-06-25 2019-07-26 北京智谷睿拓技术服务有限公司 交互方法及通信设备
CN108241141B (zh) * 2016-12-26 2021-03-16 宏达国际电子股份有限公司 定位系统及方法
CN107544803B (zh) * 2017-08-31 2020-08-21 努比亚技术有限公司 基于超声波的亮灭屏控制方法、装置及可读存储介质
KR102523266B1 (ko) * 2018-01-16 2023-04-21 삼성전자주식회사 디스플레이 장치, 디스플레이 시스템 및 그 제어방법
CN110688021B (zh) * 2019-09-24 2023-08-25 上海创功通讯技术有限公司 一种无线鼠标归位方法及无线鼠标归位系统
WO2021249612A1 (en) * 2020-06-08 2021-12-16 Vestel Elektronic Sanayi Ve Ticaret A.S. System and method for controlling smart devices with a remote controller

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0233472A1 (de) * 1986-01-23 1987-08-26 Zellweger Uster Ag Vorrichtung zur Bestimmung der Position eines beweglichen Objekts
US5999167A (en) * 1996-11-08 1999-12-07 Stephen A. Marsh Cursor control device
CN202210265U (zh) * 2011-08-23 2012-05-02 北京京东方光电科技有限公司 一种计算机设备及其输入装置
CN202694279U (zh) * 2012-05-29 2013-01-23 卢旺 一种三维鼠标定位器
CN103109539A (zh) * 2010-06-28 2013-05-15 Pnf有限公司 三维立体图像显示系统及利用此系统的三维立体图像显示方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5724106A (en) * 1995-07-17 1998-03-03 Gateway 2000, Inc. Hand held remote control device with trigger button
EP1714207A2 (en) * 2004-01-30 2006-10-25 Koninklijke Philips Electronics N.V. 3-d cursor control system
KR100621078B1 (ko) * 2004-09-23 2006-09-19 삼성전자주식회사 공기 품질을 개선하는 방법 및 공기 조화 시스템
US9019209B2 (en) * 2005-06-08 2015-04-28 3M Innovative Properties Company Touch location determination involving multiple touch location processes
US20070109527A1 (en) * 2005-11-14 2007-05-17 Wenstrand John S System and method for generating position information
WO2011013418A1 (ja) * 2009-07-31 2011-02-03 日本電気株式会社 位置検出装置、位置検出方法、移動体およびレシーバ
US20120287090A1 (en) * 2009-12-29 2012-11-15 Sanford, L.P. Interactive Whiteboard with Wireless Remote Control
US8814363B2 (en) * 2010-04-08 2014-08-26 Disney Enterprises, Inc. Trackable projection surfaces using hidden marker tracking
US9576033B2 (en) * 2010-07-12 2017-02-21 Thomson Licensing System, method and user interface for content search

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0233472A1 (de) * 1986-01-23 1987-08-26 Zellweger Uster Ag Vorrichtung zur Bestimmung der Position eines beweglichen Objekts
US5999167A (en) * 1996-11-08 1999-12-07 Stephen A. Marsh Cursor control device
CN103109539A (zh) * 2010-06-28 2013-05-15 Pnf有限公司 三维立体图像显示系统及利用此系统的三维立体图像显示方法
CN202210265U (zh) * 2011-08-23 2012-05-02 北京京东方光电科技有限公司 一种计算机设备及其输入装置
CN202694279U (zh) * 2012-05-29 2013-01-23 卢旺 一种三维鼠标定位器

Also Published As

Publication number Publication date
TW201621553A (zh) 2016-06-16
US20160062488A1 (en) 2016-03-03

Similar Documents

Publication Publication Date Title
CN105392037A (zh) 三维空中鼠标以及与其一起使用的显示器
CN104994414B (zh) 用于控制光标的方法、遥控器以及智能电视
US9779734B2 (en) Speech recognition system and method for recognizing a command to control a target
EP2895911B1 (en) Apparatus and method of providing user interface on head mounted display and head mounted display thereof
CN106489080B (zh) 基于雷达的手势感测和数据传输
US10101874B2 (en) Apparatus and method for controlling user interface to select object within image and image input device
US11989355B2 (en) Interacting with a smart device using a pointing controller
KR101618783B1 (ko) 이동 단말기, 이동 단말기의 제어방법, 그리고, 이동 단말기를 포함하는 제어시스템
KR20190082612A (ko) 가상 모델하우스 제공 시스템
KR20160147555A (ko) 이동 단말기 및 그 제어 방법
CN104765443A (zh) 影像式虚拟互动装置及其实施方法
WO2023284418A1 (zh) 定位方法、装置、电子设备以及计算机可读存储介质
CN103520921B (zh) 一种光标控制方法、系统及控制装置
KR102381989B1 (ko) 기기 간 무선 연결 방법 및 그 디바이스
KR20170043911A (ko) 전자 장치 및 그 제어 방법
KR20180010666A (ko) 전자 장치 및 그 제어 방법
WO2016095641A1 (zh) 数据交互方法及系统、移动终端
WO2014196072A1 (ja) 端末装置およびリモート制御方法
JP2009194447A (ja) リモートコントローラ位置検出装置、リモートコントローラ位置検出システム、リモートコントローラ位置検出方法及びプログラム
CN105204645A (zh) 易穿戴式手势识别装置
US10506290B2 (en) Image information projection device and projection device control method
KR102578695B1 (ko) 복수의 디바이스들을 관리하는 방법 및 전자 디바이스
KR101632220B1 (ko) 이동 단말기, 이동 단말기의 제어방법, 그리고, 제어시스템과 그 제어방법
CN104182052A (zh) 多媒体设备有效空间范围内快速交互方法
KR101549027B1 (ko) 이동 단말기 및 이동 단말기의 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160309

WD01 Invention patent application deemed withdrawn after publication