CN104685461A - 使用来自被控制的设备的输入模式数据的输入设备 - Google Patents

使用来自被控制的设备的输入模式数据的输入设备 Download PDF

Info

Publication number
CN104685461A
CN104685461A CN201380050254.8A CN201380050254A CN104685461A CN 104685461 A CN104685461 A CN 104685461A CN 201380050254 A CN201380050254 A CN 201380050254A CN 104685461 A CN104685461 A CN 104685461A
Authority
CN
China
Prior art keywords
input
equipment
input pattern
pattern
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380050254.8A
Other languages
English (en)
Inventor
皮埃尔-伊夫·拉利冈
阿洛克·尚德尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN104685461A publication Critical patent/CN104685461A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H04N21/42209—Display device provided on the remote control for displaying non-command information, e.g. electronic program guide [EPG], e-mail, messages or a second television channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42226—Reprogrammable remote control devices
    • H04N21/42227—Reprogrammable remote control devices the keys being reprogrammable, e.g. soft keys
    • H04N21/42228—Reprogrammable remote control devices the keys being reprogrammable, e.g. soft keys the reprogrammable keys being displayed on a display screen in order to reduce the number of keys on the remote control device itself
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221—Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q2209/00—Arrangements in telecontrol or telemetry systems
    • H04Q2209/40—Arrangements in telecontrol or telemetry systems using a wireless architecture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)
  • Details Of Television Systems (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

用于确定用于输入设备的输入模式的系统和方法可以基于从被控制的设备传输的输入模式数据。输入模式数据可以与由被控制的设备显示的第一视觉内容相关联，并且可以提供用户可以与输入设备交互的适当输入模式。基于与输入设备的用户交互和相关联的输入模式，第二视觉内容可以由被控制的设备显示，并且第二输入模式数据可以被传输至输入设备。第二输入模式数据可以基于用户可以与输入设备交互的第二视觉内容，提供第二不同输入模式。

Description

使用来自被控制的设备的输入模式数据的输入设备
技术领域
本文描述的主题总体上涉及用于控制被控制的设备的输入设备的领域。
背景技术
某些被控制的设备，诸如电视、立体声设备、游戏系统、机顶盒等，利用诸如遥控、控制器等的输入设备来控制该被控制的设备。这些输入设备可以包括按钮、切换键、开关等，其可以被配置成控制被控制的设备的一个或多个特征(例如，通过使用频道上或下按钮改变频道)。某些输入设备允许用户将输入设备从第一模式手动切换至第二模式，从而激活或去激活按钮、切换键、开关等的一个或多个。
发明内容
本文描述基于由被控制的设备提供的输入模式数据，用于切换输入设备的输入模式的装置、系统和方法的实施方式。
一种实施方式涉及一种处理与输入设备的用户交互的计算机化方法。该方法可以包括将代表第一视觉内容的第一显示数据从被控制的设备发送至显示器；接收多个输入模式数据的第一输入模式数据，其中，每个输入模式数据对应于输入模式，并且该多个输入模式包括具有方向输入(directional input)按钮的方向输入模式、具有字母按钮的文本录入模式以及指向设备界面模式，并且其中，第一输入模式数据与第一视觉内容相关联；将第一输入模式数据传输至输入设备，以确定用于该输入设备的第一输入模式；以及在该被控制的设备处接收代表经由输入设备的第一输入模式与第一视觉内容的第一用户交互的数据。
另一实施方式包括用于适配输入设备以与被控制的设备一起使用的系统，该输入设备具有处理电路，该处理电路可操作以：从该被控制的设备接收第一输入数据，该第一输入数据与由该被控制的设备产生的第一视觉内容相关联；基于第一输入数据确定多个输入模式的第一输入模式，其中，所述多个输入模式包括方向输入模式、文本录入模式和指向设备界面模式；将第一用户交互传输至与在关联于被控制的设备的显示器上显示的第一视觉内容相关联的被控制的设备；接收与被控制的设备所产生的第二视觉内容相关联的第二输入模式数据；以及基于第二输入模式数据确定第二输入模式，其中，所述第二输入模式是文本录入模式、指向设备界面模式、电视模式、方向板模式以及数字小键盘模式之一。
一种进一步的实施方式包括一种系统，该系统具有输入设备，所述输入设备具有输入特征、定位特征和第一处理电路和具有第二处理电路的被控制的设备。所述第一处理电路可操作以：从被控制的设备接收第一输入模式数据；基于所述第一输入模式数据从多个输入模式确定第一输入模式，其中，所述多个输入模式包括方向输入模式、文本录入模式和指向设备界面模式；以及将第一用户交互传输至该被控制的设备，其中，所述第一用户交互来自输入特征和定位特征之一。第二处理电路可操作以产生用于显示的代表第一视觉内容的显示数据，将该第一输入模式数据传输至输入设备，并且从该输入设备接收第一用户交互。
附图说明
在附图和下文描述中解释一个或多个实施方式的细节。从该描述、附图以及权利要求中，本公开的其他特征、方面和优势将是显而易见的，其中：
图1是根据说明性实施方式的与被控制的设备和输入设备相关联的环境的框图；
图2是根据说明性实施方式的具有物理按钮的输入设备的图；
图3是根据说明性实施方式的具有触摸屏并且以第一输入模式示出的输入设备的图；
图4是根据说明性实施方式的以第二输入模式示出的图3的输入设备的图；
图5是根据说明性实施方式的以第三输入模式示出的图3的输入设备的图；
图6是根据说明性实施方式的以第四输入模式示出的图3的输入设备的图；
图7是根据说明性实施方式的以第五实施模式示出的图3的输入设备的图；
图8是根据说明性实施方式的用于适配输入设备的输入模式的处理的流程图。
在各个附图中的同样附图标记和命名指代同样的元素。
具体实施方式
I.概况
一种输入设备可以允许用户控制或以其他方式与被控制的设备交互。例如，电视可以具有可以控制电视的一个或多个特征的与电视相关联的电视遥控器。这种输入设备可以包括用于电视模式的预编程的物理按钮或软按钮(例如，在设备的触摸屏上显示的用户可以触摸以使得该输入设备与被控制的设备交互的按钮)，用户可以利用所述物理按钮或软按钮便利控制或者与该被控制的设备的其他交互。例如，用于电视的某些输入设备可以包括频道改变输入按钮、音量改变输入按钮、向导输入按钮、菜单输入按钮等。
在某些情形下，指向设备界面或其他空间导航模式(例如，与计算机鼠标类似)对于在网页上导航可能是有用的。这种指向设备界面模式可以通过经由陀螺仪传输该输入设备的定位数据或者通过用户与在该输入设备上的触摸敏感区域(例如，触摸板)的交互，来控制在被控制的设备上的光标。
在进一步的情形下，文本录入模式对于允许用户输入文本以与被控制的设备交互可能是有用的。例如，对于具有允许用户搜索或以其他方式访问互联网的互联网功能的电视，用于提供QWERTY或其他键盘的输入设备的文本录入模式对于文本录入可能是有用的。这种键盘可以被提供为预编程物理键盘或者软键盘(例如，在设备的触摸屏上显示的键盘，用户可以利用其触摸键的对应的图像)。
在又一情形中，方向板输入(“D-pad”)模式对于浏览电视优化的应用可能是有用的。例如，当浏览用于选择先前记录的电视剧或电影的应用时，D-pad界面可能是有用的。
另外，数字键盘模式对于用于被控制的设备而键入PIN或其他数字录入可能是有用的。当然，输入设备可以包括控制被控制的设备的其他模式。
根据本公开的某些方面，被控制的设备和输入设备可以彼此通信。例如，被控制的设备可以传输代表被控制的设备的状态、被控制的设备所显示的应用的状态、被控制的设备所显示的所选择的部分的状态等的数据。类似的是，输入设备可以传输数据以与被控制的设备交互或者以其他方式控制被控制的设备。利用输入设备和被控制的设备之间的双向通信，被控制的设备可以传输输入模式数据或以其他方式通知输入设备对于给定状态、应用等与被控制的设备一起使用的输入模式。例如，具有模态键的输入设备(例如，键表面可以由于照明效果而改变的键)可以在具有与用于电视的普通控制相关联的电视界面的键的电视模式和具有QWERTY或用于文本输入界面的其他键盘的文本录入模式之间适当切换。因此，输入设备可以从被控制的设备接收输入模式数据，以确定用于用户的适当输入模式和/或界面。
根据本公开的某些方面，输入设备可以由在移动设备(例如，电话、平板电脑、膝上型电脑)上运行的应用组成。因此，输入模式可以对应于应用的状态。例如，在具有触摸屏的电话上，可以显示软键盘用于文本录入模式，显示触摸板区用于指向设备界面模式等。
II.输入设备和被控制的设备的概况
参考图1，示出了根据说明性实施方式的与输入设备102和被控制的设备104相关联的环境100的框图。被控制的设备104可以是直接或经由网络106被输入设备102所控制的电子设备。例如，被控制的设备104可以是电视、智能电视、游戏控制台、数字视频记录器、家庭娱乐服务器、DVD播放器、FTP服务器、文件共享服务器、web服务器等的一个或多个。被控制的设备104可以包括处理器118、存储器120和显示器122。处理器118和存储器120可以形成处理电路。存储器120可以存储机器指令，当由处理器118执行时，使处理器118执行一个或多个操作。例如，存储器120可以存储用于处理器118在显示器122上显示互联网浏览器的机器指令。处理器118可以包括微处理器、ASIC、FPGA等或者它们的组合。存储器120可以包括，但不限于，电子、光学、磁性或能够为处理器118提供程序指令的任何其他存储或传输设备。存储器120可以包括软盘、CD-ROM、DVD、磁盘、存储器芯片、ROM、RAM、EEPREOM、EPROM、闪存、光学介质或者处理器118可以从其读取指令的任何其他适当存储器。这些指令可以包括来自任何适当计算机编程语言的代码，诸如，但不限于，C、C++、C#、Java、JavaScript、Perl、HTML、XML、Python和VisualBasic。
被控制的设备104的显示器122可以包括将视觉信息传送至用户的任何电子设备(例如，电视屏幕、监视器等)。根据各种实施方式，显示器122可以在被控制的设备104的壳体内部(例如，在智能电视的电视屏幕上等)，或者在被控制的设备104的壳体外部(例如，连接至被控制的设备104的监视器等)。显示器122可以包括触摸屏、LCD显示器、等离子显示器、投影仪等。
输入设备102经由网络106与诸如被控制的设备104的其他设备通信。网络106可以是在输入设备102、被控制的设备104和/或其他设备之间中继信息的任何形式网络。例如，网络106可以包括互联网和/或其他类型的数据网络，诸如局域网(LAN)、广域网(WAN)、蜂窝网络、卫星网络或其他类型的数据网络。网络106也可以包括被配置成在网络106内接收/传输数据的任何数目的计算设备(例如，计算机、服务器、路由器、网络交换机等)。网络106可以进一步包括任何数目的硬线和/或无线连接。例如，输入设备102可以与通过硬线(例如，经由光纤光缆、CAT5线缆等)连至网络106中的其他设备的收发器无线通信(例如，经由WiFi、蜂窝、无线电、红外等)。在示出的实施方式中，输入设备102经由网络106与被控制的设备104通信。在某些实施方式中，在没有网络106的情况下，输入设备102直接与被控制的设备104通信。例如，输入设备102和被控制的设备104可以每个包括收发器以在输入设备102和被控制的设备104之间接收和传输数据。虽然图1描绘了一个被控制的设备104，但在某些实施方式中，不止一个被控制的设备104可以被使用并且与输入设备102通信。此外，不止一个输入设备102也可以与一个或多个被控制的设备104一起使用。
输入设备102可以是被配置成与被控制的设备104通信的任何数目不同类型的用户电子设备(例如，专用控制器；诸如智能电话、平板电脑、膝上型电脑的移动设备；台式电脑；或它们的组合等)。本示例的输入设备102包括处理器108、存储器110、显示器112、输入特征114和定位特征116。处理器108和存储器110可以形成处理电路。存储器110可以存储机器指令，当由处理器108执行时，使处理器108执行本文所描述的一个或多个操作。处理器108可以包括微处理器、ASIC、FPGA等，或者它们的组合。存储器110可以包括，但不限于，电子、光学、磁性或能够为处理器108提供程序指令的任何其他存储或传输设备。存储器110可以包括软盘、CD-ROM、DVD、磁盘、存储器芯片、ROM、RAM、EEPROM、EPROM、闪存、光学介质或处理器108能够从其读取指令的任何其他适当的存储器。这些指令可以包括来自任何适当计算机编程语言的代码，诸如，但不限于，C、C++、C#、Java、JavaScript、Perl、HTML、XML、Python和Visual Basic。
输入设备102可以包括一个或多个用户界面特征，诸如在图1中所示的显示器112、输入特征114和定位特征116。用户界面特征可以是任何电子特征(或独立设备)，其通过产生感觉信息(例如，在显示器112上的视觉化、一个或多个声音等)将数据传送给用户，和/或将从用户接收的感觉信息转换成电子信号(例如，键盘、鼠标、指向设备、触摸屏显示器、麦克风等)。根据各种实施方式，该一个或多个用户界面特征可以在输入设备102壳体的内部(例如，内置式显示器112、用于定位特征116的陀螺仪、麦克风等)，或者在输入设备102壳体的外部(例如，连接至输入设备102的监视器、连接至输入设备102的扬声器等)。输入设备102的显示器112可以包括电子显示器(例如，触摸屏、LCD、等离子显示器等)，或者可以是与用户的任何其他视觉界面(例如，LED指示器等)。在某些实施方式中，显示器112可以从输入设备102省略。
输入设备102也可包括输入特征114。在某些实施方式中，输入特征114可以包括用户可以与输入设备102交互的物理按钮、切换键、开关等。简单地参考图2，示例输入设备200可以包括电源输入按钮202、模式输入按钮204和一个或多个其他输入按钮206。在某些实施方式中，输入按钮206可以包括对应于数字0-9的按下按钮和/或增或减被控制的设备104的音量或频道的按钮。这些按钮202、204、206可以被编程为固定功能，例如，对应于数字“1”被按下的输入按钮206，或者对应于电源开/关指令的输入按钮202。在其他实施方式中，输入按钮202、204、206可以包括显示器112和输入特征114的那些方面。例如，输入按钮202、204、206可以是模态键(例如，其表面可以由于光照效果而改变的键)或者其他可变按钮。输入按钮206可以包括显示器，诸如嵌入式LCD屏、一个或多个LED和/或其他显示器，以便输入按钮206的视觉指示器或表示可以被改变。当输入按钮206的基础功能被更改时，输入按钮206的视觉指示器可以改变。例如，在第一输入模式中，输入按钮206可以显示数字“1”，并且可以具有对应的功能，以便按下输入按钮206导致对应于用户输入数字“1”的数据被传输至被控制的设备104(例如，对于在电视上的直接频道选择)。在第二输入模式中，输入按钮206可以显示指示播放功能的符号，并且可以具有对应的功能，以便按下输入按钮206导致对应于用户输入回放功能的数据被传输至被控制的设备104。当然，对于输入设备200，用于输入按钮206的进一步显示和对应的功能可以被实施。
在某些实施方式中，代表由输入按钮206显示的一个或多个视觉指示器的数据可以被存储在输入设备102的存储器110中。在其他实施方式中，代表由输入按钮206显示的一个或多个视觉显示器的数据可以被存储在被控制的设备104的存储器120上，并且在输入设备102被设置成对应的输入模式之前、同时和/或之后，该数据可以被传输至输入设备102。例如，代表用于数字0-9的一组输入按钮206的视觉指示器的数据可以被存储在被控制的设备104的存储器120中，并且当输入设备102被切换至利用具有那些视觉指示器的输入按钮的输入模式时，被传输至输入设备102。在某些实施方式中，代表至输入设备102的视觉指示器的数据的传输可以作为从被控制的设备104至提供输入模式数据的输入设备102的传输的部分出现，如下文将更具体描述的。此外，对应的输入按钮206的基础功能也可以被存储在输入设备102的存储器110并且/或者可以被存储在被控制的设备104的存储器120中，并且被传输至输入设备102。这些功能可以类似地从被控制的设备104被传输至输入设备102，作为从被控制的设备104至提供输入模式数据的输入设备102的传输的部分，如下文将更具体描述的。在另外的实施方式中，代表由输入按钮206显示的视觉指示器的数据和/或基础功能可以被第三方源存储，并且经由网络106被传输至输入设备102、被控制的设备104等。
在其他实施方式中，经由触摸屏可以实施输入设备102的输入特征114和显示器112。触摸屏可以显示软按钮(例如，在用户可以触摸或以其他方式与之交互的输入设备102的触摸屏上显示的按钮)，其使得输入设备102与被控制的设备104交互。例如，短暂参考图3，示例输入设备300可以包括触摸屏302，该触摸屏302具有在该触摸屏302上显示的一个或多个软按钮310。在某些实施方式中，触摸屏302可以包括电容触摸屏、电阻触摸屏等。在图3所示的示例中，与各个电视特定功能对应的多个输入按钮310(例如，向导、菜单、直播、音量增减、频道增减等)被显示在触摸屏302上，虽然这些仅是示例。当用户触摸与输入按钮310对应的触摸屏302的部分时，例如，与向导输入按钮310对应的触摸屏302的部分，该交互导致对应于向导功能的用户输入的数据从输入设备300被传输至被控制的设备104。同样，图4-7描绘了具有触摸屏302的输入设备300，虽然显示了不同用户界面，如下文将更具体描述的。
应理解的是，对于输入设备200、300的前文描述仅是可以与被控制的设备104一起使用的输入设备102的示例，并且其他输入设备102可以与被控制的设备104一起使用。
参考图1，输入设备102进一步包括定位特征116。定位特征116是可操作的，以提供指示相对于预定参考点的位置或期望运动的数据。根据各种实施方式，定位特征116可以在输入设备102的壳体内部(例如，内置式陀螺仪、触摸板等)，或者在输入输入设备102的壳体外部(例如，可以与输入设备102无关地被移动或者以其他方式交互的独立设备)。在某些版本中，定位特征116可以包括封装在输入设备102内部的内置式陀螺仪。陀螺仪可以追踪相对于预定参考点的输入设备102的移动，以便输入设备102可以将指示输入设备102的移动的数据传回被控制的设备104。然后，被控制的设备104可以处理该数据并且经由在显示器122上显示的指示器的移动，反应输入设备102的移动。在某些实施方式中，通过耦接至被控制的设备104的设备，可以追踪输入设备102的定位特征116。例如，定位特征116可以包括指示器(例如，物理标记、电子信号等)，其可以由耦接至被控制的设备104的设备检测到。在又一种实施方式中，定位特征116可以被从输入设备102省略，并且通过耦接至被控制的设备104的设备，可以追踪输入设备102和/或用户的移动(例如，通过视频和/或运动捕获)。
在某些实施方式中，定位特征116可以包括触摸板。例如，短暂地参考图4，当输入设备300处于鼠标模式时，具有触摸屏302的输入设备300可以显示触摸板320。然后，经由触摸屏302，用户可以与触摸板320交互，并且该交互导致对应于期望的移动的数据从输入设备300被传输至被控制的设备104。然后，被控制的设备104可以处理该数据，并且经由在显示器122上示出的指示器的移动，反映期望的移动。当然，前文的定位特征116仅是示例，并且可以实施用于输入设备102的其他定位特征116。
III.输入模式示例
利用可以包括多种功能的被控制的设备104，用于输入设备102的多种输入模式可以被提供给用户以与被控制的设备104交互。例如，在某些实施方式中，当用户正在显示器122上观看电视时，用于输入设备102的电视模式可以与被控制的设备104一起使用。在图3中示出了用于输入设备300的这种电视模式的示例，所述输入设备300具有显示一个或多个软按钮310的触摸屏。输入按钮310可以对应于各种电视特定功能，诸如向导、菜单、直播、音量增减、频道增减等。当用户触摸对应于输入按钮310的触摸屏302的部分时，例如，对应于向导输入按钮310的触摸屏302的部分，该交互导致对应于输入按钮310的选择功能的用户输入的数据从输入设备300被传输至被控制的设备104，诸如响应于向导按钮的选择的向导功能。当然，在图3中所示的输入按钮310的显示、定向、大小、定位等仅是示例并且可以提供用于输入设备102的电视模式的其他配置和/或用户界面。
类似的是，在某些实施方式中，当用户正在导航被控制的设备的显示器122上显示的网页时，输入设备102的指向设备界面模式可以与被控制的设备104一起使用。图4中示出了这种指向设备界面模式用于输入设备300的示例，所述输入设备300具有在触摸屏302上显示的触摸板。然后，该用户可以经由触摸屏302与触摸板320交互，并且该交互导致对应于期望的移动的数据从输入设备300被传输至被控制的设备104。然后，被控制的设备104可以处理该数据，并且经由在显示器122上示出的指示器的移动反应期望的移动。在某些实施方式中，触摸板320可以包括滚动区域322，其可以与用户交互，以导致与在物理鼠标上的滚轮用途类似的滚动运动，虽然这仅是选择性的。在某些其它实施方式中，可以提供两个滚动区域，一个垂直，并且一个水平。
在某些实施方式中，指向设备界面模式可以使得输入设备102与测量输入设备102的位置和/或定向的陀螺仪或与输入设备102相关联的其他设备交互。陀螺仪可以追踪相对于预定参考点的输入设备102的移动，以便输入设备102可以将指示输入设备102的移动的数据传回被控制的设备104。然后，被控制的设备104可以处理该数据并且经由在显示器122上显示的指示器的移动反应输入设备102的移动。在某些实施方式中，指向设备界面模式可以激活耦接至被控制的设备104的设备，以追踪与输入设备102相关联的指示器(例如，物理标记、电子信号等)、输入设备102本身和/或用户的移动(例如，通过视频和/或运动捕获)。当然，应理解的是，可以提供用于输入设备102的鼠标模式的其他用户界面和/或实施方式。
在某些实施方式中，当用户正在录入文本(例如，录入网址、发送电子邮件或消息等)时，用于输入设备102的文本录入模式可以与被控制的设备104一起使用。在图5中示出了用于具有触摸屏302的输入设备300的这种文本录入模式的一个示例。本示例的触摸屏302显示用户可以与之交互以录入对应的文本的QWERTY键盘330。例如，用户通过触摸对应于显示的“A”键的触摸屏302的部分选择用于“A”的显示键，并且输入设备300可以将数据传输至被控制的设备104，以指示用户已经录入了字母“A”的文本。在触摸屏302上显示的键盘330可以被用于录入用于与被控制的设备104交互的文本串等。当然，可以提供用于输入设备102的用于键盘330、文本录入模式和/或用于文本录入模式的用户界面的其他配置。
在其他实施方式中，当用户导航或选择在被控制的设备104的显示器122上显示的目标时，用于输入设备102的方向板输入模式可以与被控制的设备104一起使用。例如，如在图6中所示，用于输入设备300的方向板输入模式可以在触摸屏302上显示方向板(D-pad)340。方向板340包括选择按钮342和方向按钮344、346、348、350。当用户触摸对应于方向输入按钮344、346、348、350的触摸屏302的部分时，例如，对应于上方向输入按钮344的触摸屏302的部分，该交互导致对应于用于被控制的设备104的显示器122上指示器的指定方向移动的用户输入的数据从输入设备300被传输至被控制的设备104。例如，在电视优化应用中，诸如电影或电视选择应用，与方向输入按钮344、346、348、350的用户交互可以导致指示器以指示的方向移动到下一目标。例如，指示器可以包括目标的高亮、光标的视觉表示等。当用户触摸对应于选择输入按钮342的触摸屏302的部分时，该交互导致对应于用于选择被控制的设备104的显示器122上的指示目标的用户输入的数据从输入设备300被传输至被控制的设备104。当然，方向板340仅是示例，并且可以提供用于输入设备102的方向板模式的其他用户界面。
在另一实施方式中，当用户向需要数字的录入的字段(例如，PIN录入字段、生日字段等)录入数字时，可以为输入设备102提供的数字小键盘模式可以与被控制的设备104一起使用。例如，如图7中所示，用于输入设备300的数字小键盘模式可以在触摸屏302上显示数字小键盘板360。数字小键盘板360包括用于数字0-9、录入和删除的多个输入按钮362，虽然这些仅是示例，并且可以显示其他输入按钮362。当用户触摸对应于输入按钮362的触摸屏302的部分时，例如，对应于用于数字9的输入按钮362的触摸屏302的部分，该交互导致对应于期望数字、录入或删除的用户输入的数据从输入设备300被传输至被控制的设备104。当然，数字小键盘360仅是示例，并且可以提供用于输入设备102的数字小键盘模式的其他用户界面。
虽然前文已经描述了用于输入设备102、300的输入模式的某些示例，但可以提供其他输入模式。此外，应理解的是，前文的输入模式的示例不限于通过触摸屏显示的那些。的确，在某些实施方式中，通过模态键可以提供前述输入模式，诸如上文参考图2的输入设备200所描述的那些。此外，应理解的是，前文输入模式的任何一个的特征可以与其他输入模式的特征组合。例如，指向设备界面模式和文本录入模式可以被组合，以提供触摸板320和键盘330。在其他实施方式中，输入模式的特征可以从前述示例中省略。例如，当用户观看电影时，用于向导、直播、回看(recall)、取消和频道增减的输入按钮310可以从显示的用户界面省略。
应理解的时，使用物理按钮可以实施前述输入模式的任何一个或所有。仅通过示例，与图6所述的方向板类似，输入设备可以包括具有选择按钮和方向按钮的物理方向板。在某些模式中，这种物理方向按钮可以被配置成作为上、下、左、右方向控制。在其他模式中，这些方向按钮可以作为滚动按钮、上/下页按钮和/或其他。在不同模式中，选择按钮可以作为OK或选择按钮。当然，应理解的是，参考图2-7所描述的其他输入模式的任何一个或所有可以利用物理按钮实施，以便触摸屏可以从输入设备200、300省略。输入设备200、300可以还具有利用物理按钮或经由触摸屏302所实施的其他配置和/或输入模式。在进一步的实施方式中，物理或机械按钮每个可以具有示出指示每个按钮的功能的图标的指示器光。响应于输入设备的模式改变，图标可以改变颜色或形式或形状，以向用户传达按钮将执行的功能和/或输入设备所处的模式。
IV.输入模式数据和与被控制的设备的输入设备交互
参考图8，示出了用于改变输入设备的输入模式的示例处理400。一般而言，处理400使得输入设备能够基于通过来自被控制的设备的输入模式数据所指示的输入模式而改变。通过用于输入设备和/或被控制的设备的任何数目的设备，可以实施处理400。例如，处理400可以通过图1中所示的输入设备102和被控制的设备104实施。在另一示例中，处理400可以通过输入设备200(图2中所示)或输入设备300(图3-7中所示)实施。在某些实施方式中，处理400可以被并入具有物理按钮的设备中，如下文将描述的。
处理400可以包括在被控制的设备的电子显示器上显示第一视觉内容(块402)。例如，被控制的设备可以是具有显示器122的被控制的设备104。被控制的设备104可以被提供显示数据，以显示来自多个源的第一视觉内容，诸如卫星或有线电视盒、网络、第三方服务器等。在某些实施方式中，被控制的设备104可以产生代表第一视觉内容的显示数据(例如，被控制的设备104可以是机顶盒)。在某些实施方式中，显示数据可以被本地存储在被控制的设备104的存储器120中。例如，应用可以被预先存储或下载到智能电视并且存储在存储器120中。该数据可以由被控制的设备104的处理器118处理，并且显示数据可以被输出到显示器122，以在显示器122上视觉地显示第一视觉内容。这种显示数据和内容的一些示例包括示出了网站的web浏览器、电视节目、电影和电子邮件应用、视频游戏、消息传送应用、电视优化应用或它们的组合等。在将用作解释处理400的示例的一个示例中，第一视觉内容可以是用于选择并观看电视节目或电影的电视优化应用，并且第二视觉内容可以是电视节目或电影，虽然这些仅是示例。
处理400可以包括将第一输入模式数据传输至输入设备(块404)。代表通过被控制的设备的显示器显示的第一视觉内容的显示数据可以包括可被传输至输入设备的输入模式数据。输入模式数据可以从被控制的设备传输至输入设备，以通知输入设备用于该输入设备的对应的输入模式。再次参考图1，输入模式数据可以经由网络106被传输到输入设备102，或者在某些实施方式中，在没有网络106的情况下，输入模式数据可以被直接从被控制的设备104传输至输入设备102。输入模式数据的一个示例可以是“input_mode＝4”，其中，可变input_mode的值被映射到用于输入设备的第一输入模式，如下文将描述的。输入模式数据的另一示例可以包括指示被控制的设备104的状态的数据，诸如指示在被控制的设备104上运行的特定应用、被控制的设备104是否接收电视节目、电影(来自耦接至被控制的设备104的设备、通过互联网的流传送或其他方式)是否正在播放等的数据。输入模式数据的另一示例包括先前用户交互，例如，如果用户先前选择web浏览器或者选择待播放的音乐，则输入模式数据可以包括指示用户的选择的数据。当然，可以利用其他输入模式数据，包括表示或者关联于在显示器上显示的视觉内容的所有或部分和/或被控制的设备104的状态的数据。在某些实施方式中，输入模式数据可以与来自内容源的显示数据一起被包括。例如，如果在被控制的设备104的显示器122上显示电视优化应用，用于该应用的显示数据可以包括可以被传输至输入设备102以指示待用于该应用的第一输入模式的输入模式数据。在其他实施方式中，显示数据可以被提供给被控制的设备104，并且被控制的设备104可以基于接收的显示数据确定适当的输入模式数据。在又另一实施方式中，输入模式数据可以被单独地从除了被控制的设备104的设备传输至输入设备102。例如，诸如第三方服务器的第三方源可以将显示数据传输至被控制的设备104，并且将输入模式数据传输至输入设备102。
处理400可以包括确定用于输入设备的第一输入模式(块406)。如上文所指出的，在某些实施方式中，输入模式数据可以具有诸如“input_mode＝4”的形式，其中，可变input_mode的值被映射到第一输入模式和/或用于该输入设备的用户界面。在其他实施方式中，如果输入模式数据包括指示被控制的设备104的状态的数据，诸如指示在被控制的设备104上运行的特定应用、被控制的设备104是否接收电视节目，电影(来自耦接至被控制的设备104的设备、通过互联网的流传送或其他方式)是否正在播放等的数据，则输入设备102可以接收这种输入模式数据并且从多个输入模式中确定用于输入设备102的输入模式。在其他实施方式中，如果输入模式数据包括先前用户交互，诸如用户先前选择web浏览器或者选择待播放的音乐，则输入设备102可以接收这种输入模式数据并且从多个输入模式中确定用于输入设备102的输入模式。可以与电视优化应用一起使用的第一输入模式的一个示例可以是参考图6示出并描述的方向板输入模式。图6的输入设备300可以从被控制的设备104接收输入模式数据，并且在输入设备300的触摸屏302上显示方向板340。类似的是，可以提供其他输入模式数据(例如，input_mode的其他值等)，以显示各种输入模式，诸如上文参考图3-7所描述的那些等。在某些实施方式中，输入模式数据可以包括对于特定特征和/或显示这些特征的位置的引用。例如，输入模式数据可以包括将各个按钮映射到触摸屏的各个坐标或者各种模态键的指令。因此，输入模式数据可能不限于预定输入模式，而是可以用于利用一个或多个按钮和/或按钮模板，定制输入模式。在其他实施方式中，可以为用户提供重写，以选择期望的输入模式。例如，如在图2中所示的，模式按钮204可以被用于在输入模式中循环和/或显示具有模态键按钮206的各种输入模式的菜单，虽然这仅是可选的。
处理400可以包括经由第一输入模式接收与第一视觉内容的第一用户交互(块408)。利用显示第一输入模式的输入设备，用户可以与输入设备交互，诸如选择显示的按钮等。例如，用户可以触摸图6中所示的方向板340的上方向输入按钮344。在某些实施方式中，触笔或其他设备可以被用户用于与输入设备300交互。在其他实施方式中，诸如利用具有物理输入按钮202、204、206的图2的输入设备200，用户可以按下对应的输入按钮202、204、206以与输入设备200交互。被控制的设备可以从输入设备接收用于第一视觉内容的第一用户交互(直接或通过网络)。然后，被控制的设备可以执行期望的功能。例如，用户与图6中所示的方向板340的上方向输入按钮344的交互可以导致在显示器122上显示的当前选择的录入上的录入被高亮显示或以其他方式被指示。
处理400可以包括在被控制的设备的电子显示器上显示第二视觉内容(块410)。在某些实施方式中，第一用户交互可以导致第二视觉内容由被控制的设备104的显示器122所显示。例如，当在显示器122上的指示器正在高亮显示电子邮件消息时，用户可以触摸图6中所示的方向板340的选择输入按钮342，以便电子邮件消息和/或文本录入框的第二视觉内容出现在显示器122上。在其他实例中，当在被控制的设备104的显示器122上的指示符正在高亮显示来自电视优化应用的电视节目或电影时，用户可以触摸方向板340的选择输入按钮342。这可能导致对应的电视节目或电影的第二视觉内容出现在显示器122上。当然，可以提供进一步的第二视觉内容。
处理400可以包括将第二输入模式数据传输至输入设备(块412)。在上文所描述的示例中，随着响应于第一用户交互播放对应的电视节目或电影，被控制的设备104可以将第二输入模式数据传输至输入设备300。例如，输入模式数据可以是“input_mode＝3”，其中，可变input_mode的值被映射到不同于第一输入模式的用于输入设备的第二输入模式。当然，输入模式数据可以具有其他形式，诸如上文所描述的那些等。在某些实施方式中，第二输入模式数据可以与来自内容源的显示数据一起被包括。例如，如果在被控制的设备104的显示器122上显示电视节目或电影，用于该电视节目或电影的显示数据可以包含待被传输至输入设备102以指示待利用的第二输入模式的第二输入模式数据。在其他实施方式中，显示数据可以被提供给被控制的设备104，并且被控制的设备104可以基于接收的显示数据，确定适当的第二输入模式数据。在另一实施方式中，第二输入模式数据可以从除了被控制的设备104的设备单独传输至输入设备300。例如，诸如第三方服务器的第三方源可以将显示数据传输至被控制的设备104，并且将第二输入模式数据发送至输入设备300。
处理400可以包括确定用于输入设备的第二输入模式(块414)。在当前示例中，在被控制的设备104的显示器122上的视频显示可以导致第二输入模式数据被传输至输入设备102，该数据指示第二输入模式被用于第二视觉内容。这种第二输入模式数据可以包括此处所描述的输入模式数据的任何一个和/或为其他输入模式数据。可以与显示器122所显示的视频一起使用的第二输入模式的一个示例可以是电视模式，诸如参考图3所示出并描述的。应理解的是，输入按钮310的一个或多个可以被去掉、替换、添加、移动、重新配置等。例如，可以仅显示重放输入按钮310(播放、暂停、停止、后退、前进、录制等)。输入设备300可以从被控制的设备104接收输入模式数据，并且在输入设备300的触摸屏302上显示输入按钮310。在某些实施方式中，可以为用户提供重写，以选择期望的第二输入模式。例如，如在图2中所示的，可以将模式按钮204用于在输入模式中循环和/或显示具有模态键按钮206的各种输入模式的菜单，虽然这仅是可选的。
处理400可以包括经由第二输入模式接收与第二视觉内容的第二用户交互(块416)。随着输入设备显示第二输入模式，用户可以与输入设备交互，诸如选择显示的输入按钮等。例如，用户可以触摸对应于暂停输入按钮的输入按钮310，诸如在图3中所示的。在某些实施方式中，触笔或其他设备可以被用户用于与输入设备300交互。在其他实施方式中，诸如利用具有物理输入按钮202、204、206的图2的输入设备200，用户可以按下对应的输入按钮202、204、206以与输入设备200交互。被控制的设备可以从输入设备接收用于第二视觉内容的第二用户交互(直接或通过网络)。然后，被控制的设备可以执行期望的功能，诸如暂停该电视节目或电影。当然，可以提供进一步的输入模式、输入模式数据、视觉内容、用户交互、用户界面等。在某些实施方式中，处理400可以重复块402、404、406、408、410、412、414、416的一个或多个。例如，被控制的设备可以将代表第三视觉内容的第三显示数据传输至显示器并将第三输入模式数据传输至输入设备。然后，输入设备可以从该第三输入模式数据确定第三输入模式。经由输入设备的第三输入模式，可以接收与第三视觉内容的第三用户交互。
在某些实施方式中，处理400可以由在电子设备上运行的应用执行。例如，移动应用可以在移动设备(例如，智能电话、平板、膝上型电脑等)上执行处理400并且可以通过WiFi连接、蓝牙连接、无线电连接、蜂窝网络、红外等从被控制的设备104接收输入模式数据。
在其他实施方式中，处理400可以在具有基于接收的输入模式数据可以改变功能的物理按钮的输入设备上得以实施。例如，如上文所述，输入设备可以包含类似于图6中所示的方向板的物理方向板。物理方向板可以包含选择按钮和方向按钮。当输入设备处于第一输入模式和/或当输入设备接收第一输入模式数据时，这种物理方向按钮可以被配置成作为上、下、左或右方向控制。当输入设备处于第二输入模式和/或接收第二输入模式数据时，这些方向按钮可以作为侧滚动按钮和/或上/下页按钮。类似的是，选择按钮当输入设备处于第一模式时，可以作为OK按钮，并且当输入设备处于第二输入模式时，可以作为鼠标点击。当然，应理解的是，可以以与具有物理按钮的参考图2-7所描述的其他输入模式的任何一个或所有类似方式实施处理400，以便从输入设备200、300省略触摸屏。因此，虽然输入设备的配置可能在两个输入模式之间保持不能区分(例如，输入设备具有相同物理布局)，与物理按钮相关联的功能可以基于由输入设备所接收的输入模式数据而改变。
在某些实施方式中，除了显示的全部视觉内容以外，或者作为其替代，输入模式数据可以对应于活动(例如，文本录入、浏览等)。例如，被控制的设备104可以确定在屏幕上的相关目标(例如，文本框等)是活动的，并且将适当的输入模式数据传输至输入设备102。在其他实施方式中，输入模式数据可以包括一系列活动。例如，用于搜索的输入模式数据可以初始与文本录入模式关联，并且一旦文本被提交，可以与用于浏览的指向设备界面模式关联。因此，单一输入模式数据可以被传输至输入设备102，用于一系列活动。当然，可以为输入模式数据提供进一步的实施方式。在进一步的实施方式中，输入模式数据可以被提供给第三方，以并入第三方应用等，以便第三方可以定义用于第三方应用等的适当输入模式数据。
应理解的是，虽然以一个示例的顺序描述了处理400，但块402、404、406、408、410、412、414、416的一个或多个可以被省略、重新布置等。
本说明书中所描述的主题和操作的实施方式可以通过数字电子电路实施，或者通过包括在说明书中公开的结构及其等效结构的在有形介质上实施的计算机软件、固件或硬件或者通过它们的一个或多个的组合来实施。在本说明书中所描述的主题的实施方式可以实施为在有形介质上实施的一个或多个计算机程序，即，一个或多个计算机程序指令模块，其被编码在一个或多个计算机存储媒介上，由数据处理装置执行或者控制其操作。计算机存储介质可以是，或者被包含在，计算机可读存储设备、计算机可读存储基板、随机或串行访问存储器阵列或设备、它们的一个或多个的组合中。计算机存储介质也可以是，或者被包含在，一个或多个独立组件或媒介中(例如，多个CD、盘或其他存储设备)。计算机存储介质可以是有形的并且非临时的。
在本说明中所描述的操作可以被实施为由数据处理装置对于在一个或多个计算机可读存储设备上存储的或者从其他源接收的数据所执行的操作。
术语“客户端”或“服务器”包括用于处理数据的各种装置、设备和机器，例如，包括可编程处理器、计算机、芯片上系统或前述的多个或组合。该装置可以包括特殊用途逻辑电路，例如，FPGA(现场可编程门阵列)或者ASIC(专用集成电路)。除了硬件以外，该装置也可以包括在有形介质上实施的代码，其生成了用于所讨论的计算机程序的执行环境，例如，组成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行期环境、虚拟机器或者它们的一个或多个的组合的代码。该装置和执行环境可以实现各种不同计算模型基础设施，诸如web服务、分布式计算和网格计算基础设施。
计算机程序(也称为程序、软件、软件应用、脚本或代码)可以以任何形式的编程语言编写，包括编译或解释语言、声明或程序语言，并且可以通过任何形式被部署，包括作为独立程序或模块、组件、子例程、对象或适合用于计算机环境的其他单元。计算机程序可以但不必然对应于文件系统中的文件。程序可以存储在包含其他程序或数据的文件的部分中(例如，在标记语言文档中存储的一个或多个脚本)，在专用于所讨论的程序的单一文件中，或者在多个协同文件中(例如，存储一个或多个模块、子程序或代码的部分的多个文件)。计算机程序可以被部署为在一个计算机上或在位于一处或分布在多处并且通过通信网络互连的多个计算机上执行。
本说明书中所描述的处理和逻辑流可以由一个或多个可编程处理器执行，其执行一个或多个计算机程序，以通过对于输入数据操作和产生输入，而执行动作。该处理和逻辑流也可以由特殊用途逻辑电路执行，并且该装置可以被实施为特殊用途逻辑电路，该特殊用途逻辑电路例如，FPGA(现场可编程门阵列)或者ASIC(专用集成电路)。
适合于执行计算机程序的处理器包括，例如，一般和特殊用途微处理器，以及任何种类数字计算机的任何一个或多个处理器。一般而言，处理器将从只读存储器或随机存取存储器或二者接收指令和数据。计算机的基本元件是用于根据指令执行动作的处理器和用于存储指令和数据的一个或多个存储器设备。一般而言，计算机也可以包括或者被可操作地耦接，以从用于存储数据的一个或多个大容量存储设备接收数据或向其传输数据，或者二者，所述大容量存储设备例如，磁盘、磁光盘或光盘。然而，计算机不需要具有这些设备。而且，计算机可以被嵌入在另一设备中，例如，移动电话、个人数字助理(PDA)、移动音频或视频播放器、游戏控制台、全球定位系统(GPS)接收器或者便携式存储设备(例如，通用串行总线(USB)闪存驱动器)等。适用于存储计算机程序指令和数据的设备包括各种形式的非易失性存储器、媒介和存储器设备，例如，包括半导体存储器设备，例如，EPROM、EEPROM和闪存设备；磁盘，例如内部硬盘或可移动硬盘；磁光盘；以及CD-ROM和DVD-ROM盘。处理器和存储器可以补充有特殊用途电路，或者被并入其中。
为了提供与用户交互，本说明书中所描述的主题的实施方式可以在具有显示设备的计算机上实施，例如CRT(阴极射线管)、LCD(液晶显示器)、OLED(有机发光二极管)、TFT(薄膜晶体管)、等离子体、其他柔性配置或者用于向用户显示信息的任何其他监视器和键盘、指向设备，例如，鼠标、轨迹球等，或者触摸屏、触摸板等，通过这些，用户可以对计算机提供输入。其他种类的设备也可以被用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的感觉反馈，例如，视觉反馈、听觉反馈或者触觉反馈；并且来自用户的输入可以以任何形式接收，包括声学、语言或触摸输入。此外，计算机可以通过向用户所使用的设备发送文档或从其接收文档而与用户交互；例如，通过将网页发送至用户客户端设备上的网络web浏览器以响应从该web浏览器接收的请求。
在本说明书中描述的主题的实施方式可以计算机系统的形式实施，其包括后端组件，例如作为数据服务器；或者包括中间件组件，例如，应用服务器；或者包括前端组件，例如，具有用户通过其与本说明书所描述的主题的实施方式交互的图形用户界面或web浏览器的客户端计算机；或者一个或多个这种后端、中间件或前端组件的任何组合。系统的组件可以通过任何形式或介质的数字数据通信互联，例如，通信网络。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、互连网络(例如，互联网)以及点对点网络(例如，自组织点对点网络)。
此处公开的特征可以在智能电视模块上实施(或者连接电视模块、混合电视模块等)，其可以包括被配置成将互联网连接与多个传统电视节目源(例如，经由有线、卫星、无线或其他信号接收的)集成的处理电路。智能电视模块可以被物理地合并到电视机中，或者可以包括独立的设备，诸如，机顶盒、蓝光或其他数字媒体播放器、游戏控制台、宾馆电视系统以及其他配套设备。智能电视模块可以被配置成，允许观众搜索并发现在web上，在本地有线电视频道上，在卫星电视频道上或者存储在本地硬驱动器上的视频、电影、照片和其他内容。机顶盒(STB)或机顶单元(STU)可以包括信息电器设备，其可以含有调谐器并且连接至电视机和外部信号源，将信号转换成然后在电视屏幕或其他显示设备上显示的内容。智能电视模块可以被配置成，提供包括用于多个不同应用的图标的主页屏或顶级屏，诸如web浏览器和多个流媒体服务、连接线缆或卫星媒体源、其他web“频道”等。智能电视模块可以被进一步配置成向用户提供电子节目指南。智能电视模块的配套应用可以在移动计算设备上操作，以向用户提供关于可用程序的另外信息，以允许用户控制该智能电视模块等。在可选实施方式中，这些特征可以被实施在膝上型计算机或其他个人计算机、智能电话、其他移动电话、手持计算机、平板PC或其他计算设备上。
虽然本说明书含有许多特定实施方式细节，但这些不应被理解是对于任何发明或要求保护的内容的范围的限制，而是作为对于具体发明的具体实施方式所特定的特征的描述。在单独实施方式的上下文中在本说明书中描述的某些特征也可以在单一实施方式中以组合实施。相反，在单一实施方式的上下文中描述的各个特征也可以通过多种实施方式独立或以任何适当的子组合方式实施。而且，虽然上文将特征描述为在某些组合中起作用，并且甚至初始如此请求保护，但来自所述请求保护的组合的一个或多个特征在某些情形下可以从该组合中去除，并且所请求保护的组合可以指向子组合或子组合的变形。
类似的是，虽然以具体顺序在附图中描述了操作，但这不应被理解为需要这些操作以所示的具体顺序或相继顺序执行，或者所有图示的操作应被执行，以获得期望的结果。在某些情形下，多任务和并行处理可能是有利的。而且，在上文所描述的实施方式中的各个系统组件的分离不应被理解为在所有实施方式中需要这种操作，并且应理解的是，一般而言，所描述的程序组件和系统可以一并被集成在单一软件产品中或封装到多个软件产品中。
因此，已经描述了主题的具体实施方式。其他实施方式在下文权利要求范围内。在某些情形下，在权利要求中所叙述的动作可以以不同顺序被执行并且仍然获得期望的结果。此外，在附图中描述的处理不一定需要所示的具体顺序或相继顺序以实现期望的结果。在某些实施方式中，可以使用多任务或并行处理。

Claims (20)

1.一种处理与输入设备的用户交互的计算机化方法，所述方法包括：
将代表第一视觉内容的第一显示数据从被控制的设备发送至显示器；
接收多个输入模式数据的第一输入模式数据，其中，所述多个输入模式数据的每个输入模式数据对应于多个输入模式中的一个输入模式，其中，所述多个输入模式包括：
具有多个方向输入按钮的方向输入模式，
具有多个字母输入按钮的文本录入模式，以及
指向设备界面模式，
其中，所述第一输入模式与所述第一视觉内容相关联；
将所述第一输入模式数据传输至输入设备，其中，所述第一输入模式数据至少部分地决定了用于所述输入设备的第一输入模式；以及
在所述被控制的设备的处理电路处接收代表与所述第一视觉内容相关联的第一用户交互的数据，其中，当所述输入设备处于所述第一输入模式时，通过所述输入设备接收所述第一用户交互。
2.根据权利要求1所述的方法，其中，所述第一输入模式数据对应于第一输入模式，所述第一输入模式是以下至少一个：所述文本录入模式、所述指向设备界面模式、包括频道改变输入按钮的电视模式、方向板模式和包括多个数字输入按钮的数字小键盘模式。
3.根据权利要求1所述的方法，包括：
将代表第二视觉内容的第二显示数据从被控制的设备发送至显示器；
接收所述多个输入模式数据中的第二输入模式，其中，所述第二输入模式与所述第二视觉内容相关联；
将所述第二输入模式数据传输至所述输入设备，其中，所述第二输入模式数据至少部分地决定了用于所述输入设备的第二输入模式。
4.根据权利要求2所述的方法，其中，所述第二输入模式数据对应于第二输入模式，所述第二输入模式是以下至少一个：所述文本录入模式、所述指向设备界面模式、包括频道改变输入按钮的电视模式、方向板模式和包括多个数字输入按钮的数字小键盘模式。
5.根据权利要求1所述的方法，其中，所述输入设备是移动设备。
6.根据权利要求1所述的方法，其中，所述被控制的设备是智能电视。
7.根据权利要求1所述的方法，其中，所述第一输入模式数据是从第三方源接收的。
8.根据权利要求1所述的方法，其中，所述输入设备包括触摸屏。
9.根据权利要求8所述的方法，包括：
在所述被控制的设备的处理电路处接收代表所述第一视觉内容的所述第一显示数据；以及
基于代表所述第一视觉内容的所述第一显示数据，在所述被控制的设备的处理电路处确定所述第一输入模式数据。
10.一种用于适配输入设备以与被控制的设备一起使用的系统，所述输入设备包括处理电路，所述处理电路可操作以：
从被控制的设备接收第一输入模式数据，其中，所述第一输入模式数据与由所述被控制的设备产生的第一视觉内容相关联；
至少部分地基于所述第一输入模式数据从多个输入模式确定第一输入模式，其中，所述多个输入模式包括：
具有多个方向输入按钮的方向输入模式，
具有多个字母输入按钮的文本录入模式，以及
指向设备界面模式；
将第一用户交互传输至所述被控制的设备，其中，所述第一用户交互与在与所述被控制的设备相关联的显示器上显示的所述第一视觉内容的至少部分相关联；
接收第二输入模式数据，其中，所述第二输入模式数据至少部地分基于由所述被控制的设备产生的第二视觉内容；以及
至少部分地基于所述第二输入模式数据从所述多个输入模式确定第二输入模式，其中，所述第二输入模式数据对应于第二输入模式，所述第二输入模式是以下至少一个：所述文本录入模式、所述指向设备界面模式、包括信道改变输入按钮的电视模式、方向板模式和包括多个数字输入按钮的数字小键盘模式。
11.根据权利要求10所述的系统，其中，所述第一输入模式数据与关联于所述第一视觉内容的活动相关联。
12.根据权利要求10所述的系统，其中，所述处理电路进一步可操作以将第二用户交互传输至所述被控制的设备。
13.根据权利要求10所述的系统，其中，所述第一输入模式数据和所述第二输入模式数据是由第三方源定义的。
14.根据权利要求10所述的系统，其中，所述处理电路进一步可操作以：
接收第三输入模式数据，其中，所述第三输入模式数据至少部分地基于由所述被控制的设备所产生的第三视觉内容；以及
至少部分地基于所述第三输入模式数据从所述多个输入模式确定第三输入模式，其中，所述第三输入模式数据对应于第三输入模式，所述第三输入模式是以下至少一个：所述文本录入模式、所述指向设备界面模式、所述电视模式、所述方向板模式和所述数字小键盘模式；
其中，所述第一输入模式、第二输入模式和第三输入模式每个都是从所述多个输入模式选择的不同输入模式。
15.根据权利要求10所述的系统，其中，所述被控制的设备是智能电视，并且其中所述输入设备是移动设备。
16.根据权利要求10所述的系统，其中，所述输入设备包括模态键。
17.一种系统，包括：
输入设备，所述输入设备包括：
输入特征，
定位特征，以及
第一处理电路；以及
被控制的设备，所述被控制的设备包括：
第二处理电路；
其中，所述输入设备的所述第一处理电路可操作以：
从所述被控制的设备接收第一输入模式数据，
至少部分地基于所述第一输入模式数据从多个输入模式确定第一输入模式，其中，所述多个输入模式包括：
具有多个方向输入按钮的方向输入模式，
具有多个字母输入按钮的文本录入模式，以及
指向设备界面模式，以及
将第一用户交互传输至所述被控制的设备，其中，所述第一用户交互是从所述输入特征和所述定位特征中的至少一个接收的，
其中，所述第二处理电路可操作以：
产生用于显示的代表第一视觉内容的显示数据，
将所述第一输入模式数据传输至所述输入设备，以及
从所述输入设备接收所述第一用户交互。
18.根据权利要求17所述的系统，其中，所述输入设备包括移动设备，并且所述定位特征包括陀螺仪。
19.根据权利要求18所述的系统，其中，所述被控制的设备包括智能电视。
20.根据权利要求19所述的系统，其中，所述第一输入模式是以下至少一个：所述文本录入模式、所述定位设备界面模式、包括频道改变输入按钮的电视模式、方向板模式和包括多个数字输入按钮的数字小键盘模式。
CN201380050254.8A 2012-08-14 2013-07-17 使用来自被控制的设备的输入模式数据的输入设备 Pending CN104685461A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261683065P 2012-08-14 2012-08-14
US61/683,065 2012-08-14
US13/652,243 2012-10-15
US13/652,243 US20140049467A1 (en) 2012-08-14 2012-10-15 Input device using input mode data from a controlled device
PCT/US2013/050898 WO2014028160A1 (en) 2012-08-14 2013-07-17 Input device using input mode data from a controlled device

Publications (1)

Publication Number Publication Date
CN104685461A true CN104685461A (zh) 2015-06-03

Family

ID=50099716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380050254.8A Pending CN104685461A (zh) 2012-08-14 2013-07-17 使用来自被控制的设备的输入模式数据的输入设备

Country Status (5)

Country Link
US (1) US20140049467A1 (zh)
EP (1) EP2885694A1 (zh)
KR (1) KR102222380B1 (zh)
CN (1) CN104685461A (zh)
WO (1) WO2014028160A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107071541A (zh) * 2015-12-31 2017-08-18 耐瑞唯信有限公司 用于外围上下文管理的方法和设备
CN113407241A (zh) * 2020-03-16 2021-09-17 阿里巴巴集团控股有限公司 交互配置方法、装置、系统及电子设备

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9261985B2 (en) * 2013-03-11 2016-02-16 Barnes & Noble College Booksellers, Llc Stylus-based touch-sensitive area for UI control of computing device
US9946365B2 (en) 2013-03-11 2018-04-17 Barnes & Noble College Booksellers, Llc Stylus-based pressure-sensitive area for UI control of computing device
US9766723B2 (en) 2013-03-11 2017-09-19 Barnes & Noble College Booksellers, Llc Stylus sensitive device with hover over stylus control functionality
US9785259B2 (en) * 2013-03-11 2017-10-10 Barnes & Noble College Booksellers, Llc Stylus-based slider functionality for UI control of computing device
USD777739S1 (en) * 2014-02-21 2017-01-31 Lenovo (Beijing) Co., Ltd. Display screen or portion thereof with graphical user interface
USD784373S1 (en) * 2014-02-21 2017-04-18 Lenovo (Beijing) Co., Ltd. Display screen or portion thereof with graphical user interface
KR20150101703A (ko) * 2014-02-27 2015-09-04 삼성전자주식회사 디스플레이 장치 및 제스처 입력 처리 방법
CN105338009B (zh) * 2014-06-19 2020-02-18 腾讯科技（深圳）有限公司 一种电子设备的控制方法及相关设备、系统
CN105812940B (zh) * 2014-12-31 2019-02-12 深圳Tcl数字技术有限公司 主页间切换的方法及显示设备
CN104866110A (zh) * 2015-06-10 2015-08-26 深圳市腾讯计算机系统有限公司 一种手势控制方法,移动终端及系统
US10671261B2 (en) 2017-01-17 2020-06-02 Opentv, Inc. Application dependent remote control
KR20240072734A (ko) * 2022-11-17 2024-05-24 삼성전자주식회사 그래픽 유저 인터페이스를 네비게이팅 하기 위한 디스플레이 장치 및 그 방법

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080303787A1 (en) * 2005-10-21 2008-12-11 Zheng Yu Brian Touch Screen Apparatus And Methods
US20090102983A1 (en) * 2007-10-23 2009-04-23 Sling Media Inc. Systems and methods for controlling media devices
US20100073287A1 (en) * 2008-06-25 2010-03-25 Ji Hyung Park System for controlling devices and information on network by using hand gestures
CN101766022A (zh) * 2007-09-20 2010-06-30 三星电子株式会社 输入用户命令的方法以及使用该方法的视频设备和输入设备
CN101964141A (zh) * 2009-06-02 2011-02-02 义隆电子股份有限公司 多功能触控板遥控器及其操控方法
US20110167456A1 (en) * 2010-01-07 2011-07-07 Kokenos Danae M Offering Items Identified in a Media Stream
US20120159372A1 (en) * 2010-12-17 2012-06-21 Verizon Patent And Licensing, Inc. Remote Control Emulation Methods and Systems

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7076734B2 (en) * 2001-06-22 2006-07-11 Microsoft Corporation Systems and methods for providing a dynamically controllable user interface that embraces a variety of media
US7401300B2 (en) * 2004-01-09 2008-07-15 Nokia Corporation Adaptive user interface input device
US20070180461A1 (en) * 2006-02-02 2007-08-02 Ice, L.L.C. Multiplexed Telecommunication and Commerce Exchange Multimedia Tool
US20100299710A1 (en) * 2007-09-20 2010-11-25 Samsung Electronics Co. Ltd. Method for inputting user command and video apparatus and input apparatus employing the same
DE102008035623A1 (de) * 2008-07-31 2010-02-04 Evonik Degussa Gmbh Verfahren zur Herstellung von Organosilanen
JP2010134629A (ja) * 2008-12-03 2010-06-17 Sony Corp 情報処理装置および情報処理方法
US20100302190A1 (en) * 2009-06-02 2010-12-02 Elan Microelectronics Corporation Multi-functional touchpad remote controller
KR101779858B1 (ko) * 2010-04-28 2017-09-19 엘지전자 주식회사 원격제어장치 및 그 동작 제어방법
KR101409951B1 (ko) * 2010-08-17 2014-07-02 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 원격 디스플레이 제어
KR101738167B1 (ko) * 2010-11-08 2017-05-19 엘지전자 주식회사 가상 키보드 제공 장치 및 방법
GB2486238A (en) * 2010-12-08 2012-06-13 Wolfson Microelectronics Plc A user interface for controlling a device using an icon
US8918719B2 (en) * 2011-02-14 2014-12-23 Universal Electronics Inc. Graphical user interface and data transfer methods in a controlling device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080303787A1 (en) * 2005-10-21 2008-12-11 Zheng Yu Brian Touch Screen Apparatus And Methods
CN101766022A (zh) * 2007-09-20 2010-06-30 三星电子株式会社 输入用户命令的方法以及使用该方法的视频设备和输入设备
US20090102983A1 (en) * 2007-10-23 2009-04-23 Sling Media Inc. Systems and methods for controlling media devices
US20100073287A1 (en) * 2008-06-25 2010-03-25 Ji Hyung Park System for controlling devices and information on network by using hand gestures
CN101964141A (zh) * 2009-06-02 2011-02-02 义隆电子股份有限公司 多功能触控板遥控器及其操控方法
US20110167456A1 (en) * 2010-01-07 2011-07-07 Kokenos Danae M Offering Items Identified in a Media Stream
US20120159372A1 (en) * 2010-12-17 2012-06-21 Verizon Patent And Licensing, Inc. Remote Control Emulation Methods and Systems

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107071541A (zh) * 2015-12-31 2017-08-18 耐瑞唯信有限公司 用于外围上下文管理的方法和设备
CN107071541B (zh) * 2015-12-31 2021-12-14 耐瑞唯信有限公司 用于外围上下文管理的方法和设备
CN113407241A (zh) * 2020-03-16 2021-09-17 阿里巴巴集团控股有限公司 交互配置方法、装置、系统及电子设备

Also Published As

Publication number Publication date
US20140049467A1 (en) 2014-02-20
KR102222380B1 (ko) 2021-03-02
EP2885694A1 (en) 2015-06-24
WO2014028160A1 (en) 2014-02-20
KR20150043422A (ko) 2015-04-22

Similar Documents

Publication Publication Date Title
CN104685461A (zh) 使用来自被控制的设备的输入模式数据的输入设备
CN102549539B (zh) 网格导航的装置和方法
US20130176244A1 (en) Electronic apparatus and display control method
US20150193036A1 (en) User terminal apparatus and control method thereof
US9720567B2 (en) Multitasking and full screen menu contexts
CN108235086A (zh) 视频播放控制方法、装置及相应的终端
KR102102157B1 (ko) 복수 어플리케이션을 실행하는 디스플레이 장치 및 그 제어 방법
US20140055682A1 (en) Information processing apparatus, information processing method, program, control target device, and information processing system
US10768782B2 (en) Apparatus and method for presenting information associated with icons on a display screen
US11934624B2 (en) Electronic apparatus, control method thereof, and computer readable recording medium for providing a control command to an external apparatus
CN107318036A (zh) 歌曲搜索方法、智能电视及存储介质
CN102346623A (zh) 操控具有显示功能的主机的方法及其系统
US10386932B2 (en) Display apparatus and control method thereof
US10467031B2 (en) Controlling a display apparatus via a GUI executed on a separate mobile device
KR20150055528A (ko) 디스플레이 장치 및 그 제어 방법
US9584849B2 (en) Touch user interface method and imaging apparatus
US20160062646A1 (en) Device for Displaying a Received User Interface
WO2022083554A1 (zh) 用户界面的布局、交互方法及三维显示设备
CN113797527B (zh) 一种游戏处理方法、装置、设备、介质及程序产品
WO2014014278A1 (ko) 터치 유저 인터페이스 방법 및 영상 장치
KR20140131165A (ko) 디스플레이 장치 및 제어 방법
EP2782334A2 (en) Display apparatus, remote controller and control method thereof
US20160173563A1 (en) Rotation Control of an External Display Device
US20150208012A1 (en) Multi-purpose handheld electronic command and control device with ergonomic features
KR20160139376A (ko) 디스플레이 장치 및 이의 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: American California

Applicant after: Google limited liability company

Address before: American California

Applicant before: Google Inc.

CB02 Change of applicant information
RJ01 Rejection of invention patent application after publication

Application publication date: 20150603

RJ01 Rejection of invention patent application after publication