CN102947772A - 用于确定输入的方法和装置 - Google Patents

Abstract

本发明公开了一种装置，包括：处理器；包括计算机程序代码的存储器，存储器和计算机程序代码被配置成与处理器一起工作，以使装置至少执行以下操作：接收第一图像；识别第一图像的至少一部分作为命令接收器；识别第一图像的至少一部分作为输入物品；确定输入物品的至少一部分与命令接收器的至少一部分相关联；并且引起显示与命令接收器相关联的向导。

Description

用于确定输入的方法和装置

技术领域

本申请总体上涉及确定输入。

背景技术

电子设备已经取得了巨大市场增长。许多电子设备可以用各种方式接收输入。

发明内容

在权利要求书中阐述了本发明的示例的各个方面。

公开了一种装置，包括：处理器；包括计算机程序代码的存储器，存储器和计算机程序代码被配置成与处理器一起工作以使装置至少执行以下操作：接收第一图像；识别第一图像的至少一部分作为命令接收器；识别第一图像的至少一部分作为输入物品(article)；确定输入物品的至少一部分与命令接收器的至少一部分相关联；并且引起显示与命令接收器相关联的向导。

公开了一种方法，包括：接收第一图像；识别第一图像的至少一部分作为命令接收器；识别第一图像的至少一部分作为输入物品；确定输入物品的至少一部分与命令接收器的至少一部分相关联；并且引起显示与命令接收器相关联的向导。

公开了一种编码有指令的计算机可读介质，指令在由计算机执行时，执行：接收第一图像；识别第一图像的至少一部分作为命令接收器；识别第一图像的至少一部分作为输入物品；确定输入物品的至少一部分与命令接收器的至少一部分相关联；并且引起显示与命令接收器相关联的向导。

附图说明

为了更完整理解本发明的实施方式，结合以下附图对以下描述进行参考：

图1A至图1C是图示了其中用户可以从一个或者多个示例实施方式中受益的境况的示例的示图。

图2A至图2I是根据至少一个示例实施方式的命令接收器、输入物品和/或向导的示例的示图；

图3是示出了根据至少一个示例实施方式的用于确定输入的操作集的流程图；

图4是示出了根据至少一个示例实施方式的用于确定输入的另一操作集的流程图；以及

图5是示出了根据至少一个示例实施方式的装置(诸如，电子设备10)的框图。

具体实施方式

通过参考附图的图1至图5理解本发明的实施方式及其潜在优点。

图1A至图1C是图示了其中用户和可以从一个或者多个示例实施方式中受益的境况的示例的示图。图1A至图1C的示例仅为示例并且未限制权利要求书的范围。例如，布置、位置、尺寸、定向等可以关于相机、用户、显示器、投影仪、对象等变化。

存在其中在用户与计算机之间的交互跨越大区域的许多境况。例如，计算机普遍用于呈现、组交互、会议、广告等。此外，增强现实提供世界本身作为计算机交互区域。在这样的境况之下，从计算机呈现信息可以包括诸如呈现屏幕、大屏幕监视器之类的大表面。

在一个示例实施方式中，用户通过向计算机提供指示从而使得指示与由计算机向用户提供的元素相关联来调用计算机动作。动作可以涉及计算机选择对象、运行程序、编辑信息、提供设置、调用计算机程序功能等。例如，用户可以向计算机提供如下指示：用户期望对程序执行操作，诸如运行程序。在这样的示例中，用户可以指向与程序相关联的图标以指示希望运行程序。

在一个示例实施方式中，计算机利用相机(诸如图5的相机模块36)以获取用于输入的用户信息。例如，相机可以获得与用户执行输入相关联的一个或者多个图像。在这样的境况之下，用户可以关于计算机识别的诸如对象、图像之类的信息执行输入。计算机可以利用相机以接收指示用户输入的一个或者多个图像、视频等。与参考图5的设备10描述的内容相似，相机可以是计算机的一部分、在计算机外部等。另外，装置可以利用一个或者多个相机。

相机可以被定位成使得其可以捕获由计算机(诸如在显示器、投影屏幕等上)呈现的信息。相机可以被定位成使得其可以捕获并未由计算机呈现的诸如建筑物、海报、地标等信息。相机还可以被定位成使得其可以捕获用户的诸如指向、移动等动作。

图1A图示了根据一个示例实施方式的与投影相关联的用户交互的示例。在图1A的示例中，装置101包括相机(诸如图5的相机模块36)和投影仪(诸如，图5的投影仪99)。然而，在其他实施方式中，相机和/或投影仪可以在装置外部。在图1A的示例中，装置使用投影仪以向投影表面102上投影信息来使得显示信息。投影表面可以涉及能够充分反射投影以允许看见投影的表面，诸如墙壁、屏幕、板等。装置可以从相机接收图像，该图像关于用户与投影的信息的交互，这与参考图2A至图2I描述的内容相似。

图1B图示了根据一个示例实施方式的与显示器相关联的用户交互。在图1B的示例中，装置111包括相机(诸如图5的相机模块36)。然而，在其他实施方式中，相机可以在装置外部。在图1B的示例中，装置使得在显示器112上显示信息。显示器可以涉及电视、监视器等。装置可以从相机接收图像，该图像关于用户与显示的信息的交互，这与参考图2A至图2I描述的内容相似。

图1C图示了根据一个示例实施方式的与增强现实相关联的用户交互。在图1C的示例中，装置121包括显示器(诸如图5的显示器28)和相机(诸如图5的相机模块36)。在图1C的示例中，装置使得在显示器上显示信息。显示器可以被直接定向于用户的眼睛前面。显示器可以不透明，从而使得遮蔽用户的超出显示器的视野，或者非不透明，从而用户可以同时查看显示器和超出显示器的对象。在图1C的示例中，装置接收用户周围的对象的一个或者多个图像以及一个或者多个关于用户与显示的信息的交互的图像，这与参考图2A至图2I描述的内容相似。

图2A至图2I是图示了根据至少一个示例实施方式的命令接收器、输入物品和/或向导的示例的示图。图2A至图2I的示例仅为示例并且未限制权利要求书的范围。例如，命令接收器、向导、输入物品等可以变化。

在一个示例实施方式中，计算机向用户提供命令接收器以有助于交互。命令接收器涉及元素、可视化、表示等，用户可以将该元素、可视化、表示等与操作、文件、结构、程序、信息等相关联。用户可以执行与命令接收器相关联的输入以启动对计算机的动作，这与参考图1A至图1C描述的内容相似。例如，命令接收器可以涉及装置使得其被显示的图像。在另一示例中，命令接收器可以涉及装置将其与命令接收器相关联的对象(诸如地标)。

在一个示例实施方式中，用户通过使用输入物品来传达与命令接收器相关联的输入。输入物品可以涉及手部、指向手势、指向器、激光指向器的反射、臂部等。在一个示例实施方式中，装置接收图像，该图像包括输入物品的图像。装置可以识别输入物品并且关联输入物品与命令接收器。

用户的基于相机的与计算机的交互可能存在不准确。例如，用户可能摇晃、可能难以准确传达位置、可能难以准确传达运动等。在另一示例中，计算机可能难以解译输入位置、输入运动等。因此，可能存在其中装置可能不适当地执行与命令接收器相关联的动作的境况。在这样的境况之下，装置可以利用验证以减少这样的不恰当动作的可能性。

装置可以通过增加与命令接收器动作相关联的输入的复杂性来减少不恰当命令接收器动作的可能性。然而，用户可能遭遇难以执行和/或记忆复杂性增加的输入。在这样的境况之下，装置可以提供用于关联输入与命令接收器动作的向导。向导可以涉及一个或者多个图像、动画等。向导可以涉及修改使得被显示的信息，诸如修改一个或者多个命令接收器、修改背景等。另外，用户可以受益于装置使向导的显示被限于其中向导更可能有帮助的境况。例如，用户可以受益于限制向导的显示以使得当装置已经确定输入物品的至少一部分与命令接收器的至少一部分相关联时示出向导。

装置可以通过确定输入物品的位置与命令接收器的位置的至少一部分对应来确定输入物品的至少一部分与命令接收器的至少一部分相关联。例如，装置可以识别图像的至少一部分为命令接收器并且识别图像的至少一部分为输入物品，该输入物品具有与命令接收器至少一部分重合或者基本上接近的位置。确定输入物品与命令接收器基本上接近可以涉及确定输入物品在距命令接收器的阈值距离内、输入物品与不同命令接收器相比与该命令接收器更接近等。在一个示例实施方式中，这样的确定包括确定输入物品的位置和/或命令接收器的位置。

在一个示例实施方式中，装置存储与输入物品相关联的历史信息。在这样的示例中，装置可以利用历史信息以确定输入物品的至少一部分与命令接收器的至少一部分相关联。例如，装置可以利用与输入物品相关联的历史信息以标识与命令接收器相关联的手势。这样的手势可以涉及输入物品保持于一个位置超过阈值时间、输入物品执行预定移动等。

在一个示例实施方式中，装置在用户根据向导执行输入时向用户提供反馈。例如，装置可以在用户执行与向导的至少一部分对应的输入时修改向导。

在一个示例实施方式中，装置至少部分基于与命令接收器的显示相关联的信息识别第一图像的至少一部分作为命令接收器。例如，装置可以诸如通过使用预解析显示信息来利用与其对装置引起显示的命令接收器的相对定位的了解有关的信息。在另一示例中，装置可以将图像的至少一部分与装置引起与命令接收器相关联地显示的图像进行比较。

在一个示例实施方式中，装置至少部分基于与命令接收器的显示相关联的信息来确定输入物品的至少一部分与命令接收器的至少一部分相关联。例如，装置可以利用对装置引起与命令接收器相关联地显示的图像的了解确定输入物品的至少一部分改变和/或遮蔽与命令接收器相关联的图像的至少一部分。

在一个示例实施方式中，装置利用有限状态机确定是否执行与命令接收器相关联的动作、是否修改向导、是否终止显示向导等。例如，装置可以利用有限状态机，从而使得正确接收多输入向导，这与参考图2C至图2F描述的内容相似。装置可以基于从命令接收器的重大偏差、从向导的重大偏差等终止显示向导。重大偏差可以涉及超出阈值距离的位置偏差、超出阈值偏差的从手势的偏差等。装置可以至少部分基于时间的流逝终止显示向导。例如，装置可以基于确定输入物品在阈值时间内尚未执行与向导相关联的输入来终止显示向导。在另一示例中，装置可以至少部分基于确定输入物品在阈值时间内尚未推进执行与向导相关联的输入的执行来终止显示向导。

图2A图示了根据一个示例实施方式的命令接收器的示例。在图2A的示例中，命令接收器201-205可以涉及图标、图像、图像的部分等。

图2B图示了根据一个示例实施方式的命令接收器的更多示例。在图2B的示例中，命令接收器211和命令接收器212可以涉及图标、图像、图像的部分等。在增强现实装置中，命令接收器211和命令接收器212可以涉及由装置识别为与命令接收器相关联的建筑物，诸如装置可以能够针对这些建筑物提供诸如附加图像、历史信息等信息的建筑物。

图2C至图2F图示了根据一个示例实施方式的与命令接收器221相关联的输入物品222和向导。在图2C至图2F的示例中，向导涉及三个位置。图2C至图2F的个别图可以涉及相继图像。相继图像可以涉及单独捕获的图像和/或来自视频的图像。即使图2C至图2F的示例示范与终止显示向导的至少一部分有关的向导修改，但是向导的修改可以变化。例如，可以基于尺寸、颜色、透明度、阴影等修改向导。在一个示例实施方式中，修改指示输入物品与向导的至少一部分对应。

图2C图示了根据一个示例实施方式的与命令接收器221相关联的输入物品222和向导。在图2C的示例中，向导包括位置指示符223-225。即使位置指示符通过有向指示来暗示依次顺序，但是位置指示符可以诸如通过表示数值顺序、动画、字母顺序等在依次暗示上变化。装置可以响应于确定输入物品的至少一部分与命令接收器的至少一部分对应来引起显示向导。

图2D图示了根据一个示例实施方式的与命令接收器221相关联的输入物品222和修改的向导。在图2D的示例中，输入物品222的位置与向导的一部分(位置指示符223)对应。图2D示例图示了装置通过终止显示位置指示符223来修改向导。装置可以响应于确定输入物品的至少一部分与位置指示符223的至少一部分对应来修改向导。

图2E图示了根据一个示例实施方式的与命令接收器221相关联的输入物品222和又一修改的向导。在图2E的示例中，输入物品222的位置与向导的一部分(位置指示符224)对应。图2E的示例图示了装置通过终止显示位置指示符224来修改向导。装置可以响应于确定输入物品的至少一部分与位置指示符224的至少一部分对应来修改向导。

图2F图示了根据一个示例实施方式的与命令接收器221相关联的输入物品222和又一修改的向导。在图2F的示例中，输入物品222的位置与向导的一部分(位置指示符225)对应。图2F的示例图示了装置通过终止显示位置指示符225来修改向导。装置可以响应于确定输入物品的至少一部分与位置指示符225的至少一部分对应来修改向导。在完成与向导对应的输入时，装置可以执行与命令接收器相关联的动作。

图2G至图2I图示了根据一个示例实施方式的与命令接收器261相关联的向导和输入物品262。在图2G至图2I的示例中，向导涉及三个位置。图2G至图2I的个别图可以涉及相继图像。相继图像可以涉及单独捕获的图像和/或来自视频的图像。即使图2G至图2I的示例示范与改变向导的至少一部分的厚度和阴影图案有关的向导修改，但是向导的修改可以变化。例如，可以基于尺寸、颜色、透明度、阴影等修改向导，从而使得该修改指示输入物品与向导的至少一部分对应。

图2G图示了根据一个示例实施方式的与命令接收器261相关联的向导263和输入物品262。在图2G的示例中，向导涉及移动输入物品。即使由向导263指示的移动穿越本身并且基本上包含命令接收器261的宽度和高度，但是向导可以按照尺寸、形状、定向等变化。装置可以响应于确定输入物品的至少一部分与命令接收器的至少一部分对应来引起显示向导。

图2H图示了根据一个示例实施方式的与命令接收器261相关联的输入物品262和修改的向导。修改的向导包括：向导264，该向导指示向导的与输入物品执行的移动对应的部分；以及向导265，该向导指示输入物品将执行的移动。在图2H的示例中，输入物品262的位置对应于向导的通过在向导264与向导265之间的转变来表示的部分。装置可以响应于确定输入物品的至少一部分与向导的至少一部分对应来修改向导。

图2I图示了根据一个示例实施方式的与命令接收器261相关联的修改的向导266和输入物品262。修改的向导266指示输入物品执行与向导相关联的输入。在图2I的示例中，输入物品262的位置与向导266的部分对应。装置可以响应于确定输入物品的至少一部分与向导的至少一部分对应来修改向导。在完成与向导对应的输入时，装置可以执行与命令接收器相关联的动作。

图3是示出了根据至少一个示例实施方式的用于确定输入的操作集300的流程图。装置(例如，图5的电子设备10或者其部分)可以利用操作集300。装置可以包括用于执行图3的操作中的所有或者部分操作的如下装置，该装置例如包括图5的处理器20。在一个示例实施方式中，通过具有存储器(例如，图5的存储器42)来变换装置(例如，图5的设备10)，该存储器包括计算机代码，该计算机代码被配置成与处理器(例如，图5的处理器20)一起工作以使装置执行操作集300。

在块301，装置从相机接收第一图像。该接收、第一图像和相机可以与参考图1A至图1C描述的内容相似。

在块302，装置识别第一图像的至少一部分作为命令接收器。识别和命令接收器可以与参考图2A至图2I描述的内容相似。

在块303，装置识别第一图像的至少一部分作为输入物品。该识别和输入物品可以与参考图2A至图2I描述的内容相似。

在块304，装置确定输入物品的至少一部分与命令接收器的至少一部分相关联。该确定和相关联可以与参考图2A至图2I描述的内容相似。

在块305，装置引起显示与命令接收器相关联的向导。该引起显示可以与参考图1A至图1C和图2A至图2I描述的内容相似。该向导可以与参考图2A至图2I描述的内容相似。

图4是示出了根据至少一个示例实施方式的用于确定输入的操作集400的流程图。装置(例如，图5的电子设备10或者其部分)可以利用操作集400。装置可以包括用于执行图4的操作中的所有或者部分操作的如下装置，该装置例如包括图5的处理器20。在一个示例实施方式中，通过具有存储器(例如，图5的存储器42)来变换装置(例如，图5的设备10)，该存储器包括计算机代码，该计算机代码被配置成与处理器(例如，图5的处理器20)一起工作以使得装置执行操作集400。

在块401，装置引起显示命令接收器，这与参考图1A至图1C和图2A至图2I描述的内容相似。

在块402，装置从相机接收第一图像，这与参考图3的块301描述的内容相似。

在块403，装置识别第一图像的至少一部分作为命令接收器，这与参考图3的块302描述的内容相似。

在块404，装置识别第一图像的至少一部分作为输入物品，这与参考图3的块303描述的内容相似。

在块405，装置确定输入物品的至少一部分与命令接收器的至少一部分相关联，这与参考图3的块304描述的内容相似。

在块406，装置引起显示与命令接收器相关联的向导，这与参考图3的块305描述的内容相似。

在块407，装置接收至少第二图像。该接收和第二图像与参考图1A至图1C和图2A至图2I描述的内容相似。

在块408，装置识别第二图像的至少一部分作为输入物品，这与参考图2A至图2I描述的内容相似。

在块409，装置确定输入物品与向导的至少一部分对应。该确定与参考图2A至图2I描述的内容相似。

在块410，装置修改向导以指示输入物品与向导的至少一部分对应，这与参考图2A至图2I描述的内容相似。

在块411，装置响应于确定输入物品与向导的至少一部分对应来执行与命令接收器相关联的动作，这与参考图1A至图1C和图2A至图2I描述的内容相似。

图5是示出了根据至少一个示例实施方式的装置(诸如电子设备10)的框图。然而，应当理解，如图所示和下文描述的电子设备仅举例说明可以从本发明的实施方式中受益的电子设备，因此不应被解读为限制本发明的范围。尽管出于示例的目的而图示了并且下文将描述电子设备10的一个实施方式，但是其他类型的电子设备(诸如但不限于，便携数字助理(PDA)、寻呼机、移动计算机、台式计算机、电视、游戏设备、膝上型计算机、媒体播放器、相机、视频记录器、全球定位系统(GPS)设备)和其他类型的电子系统可以容易运用本发明的实施方式。另外，一个示例实施方式的装置无需是整个电子设备而是可以在其他示例实施方式中是电子设备的一个部件或者一组部件。

另外，设备无论其提供移动性的意图如何都可以容易运用本发明的实施方式。就这一点而言，即使结合移动通信应用描述本发明的实施方式，也应当理解可以在移动通信业内和在移动通信业以外结合多种其他应用利用本发明的实施方式。

电子设备10可以包括与发射器14和接收器16可操作地通信的一个天线(或者多个天线)、有线连接器等。电子设备10还可以包括分别向发射器14提供信号以及从接收器16接收信号的处理器20或者其他处理电路。信号可以包括根据通信接口标准的信令信息、用户话音、接收的数据、用户生成的数据等。电子设备10可以用一个或者多个接口标准、通信协议、调制类型和接入类型操作。举例而言，电子设备10可以根据多个第一通信协议、第二通信协议、第三通信协议和/或第四代通信协议等中的任何通信协议操作。例如，电子设备10可以根据有线协议(诸如，以太网、数字用户线(DSL)、异步传送模式(ATM)、第二代(2G)无线通信协议IS-56(时分多址(TDMA))、全球移动通信系统(GSM)和IS-95(码分多址(CDMA)))以及根据第三代(3G)无线通信协议(诸如，通用移动电信系统(UMTS)、CDMA2000、宽带CDMA(WCDMA)和时分-同步CDMA(TD-SCDMA)，或者根据第四代(4G)无线通信协议、无线联网协议(诸如802.11)、近程无线协议(诸如，蓝牙等)操作。

如在本申请中所用，术语“电路”指代所有以下各项：仅硬件的实施方式(诸如，在仅模拟和/或数字电路中的实施方式)；以及电路与软件和/或固件的组合(诸如，处理器或者处理器的一部分/软件的组合)，该组合包括一起工作以使装置(诸如，移动电话或者服务器)执行各种功能的数字信号处理器、软件和存储器；以及如下电路(诸如，微处理器或者微处理器的一部分)，这些电路需要软件或者固件用于操作，即使该软件或者固件未在物理上存在。“电路”的这一定义适用于这一术语在本申请中、包括在任何权利要求中的所有使用。作为又一示例，如在本申请中所用，术语“电路”也将覆盖如下实施方式，该实施方式仅为一个处理器、多个处理器或者处理器的一部分及其附带软件和/或固件。术语“电路”也将例如覆盖基带集成电路或者用于移动电话的应用处理器集成电路或者在蜂窝网络设备或者其他网络设备中的相似集成电路。

处理器20可以包括用于实施音频、视频、通信、导航、逻辑功能等以及用于实施本发明的实施方式(例如，包括结合图1至图5描述的功能中的一个或者多个功能)的装置(诸如，电路)。例如，处理器20可以包括用于执行各种功能(例如，包括结合图1至图5描述的功能中的一个或者多个功能)的装置(诸如，数字信号处理器设备、微处理器设备、各种模数转换器、数模转换器、处理电路和其他支持电路)。装置可以在这些设备之中根据其相应的能力执行电子设备10的控制和信号处理功能。处理器20因此可以包括用于在调制和发送之前编码并且交织消息和数据的功能。处理器20还可以包括内部音码器并且可以包括内部数据调制器。另外，处理器20可以包括用于操作一个或者多个软件程序的功能，该软件程序可以存储于存储器中并且此外可以使处理器20实施至少一个实施方式(例如，包括结合图1至图5描述的功能中的一个或者多个功能)。例如，处理器20可以操作连通程序(诸如，常规因特网浏览器)。连通程序可以允许电子设备10例如根据传输控制协议(TCP)、网际协议(IP)、用户数据报协议(UDP)、因特网消息访问协议(IMAP)、邮局协议(OPO)、简单邮件传送协议(SMTP)、无线应用协议(WAP)、超文本传送协议(HTTP)等发送和接收因特网内容(诸如，基于位置的内容和/或其他网页内容)。

电子设备10可以包括用于提供输出和/或接收输入的用户接口。电子设备10可以包括耦合到处理器20的输出设备(诸如，振铃器、常规耳机和/或扬声器24、麦克风26、显示器28)和/或用户输入接口。允许电子设备10接收数据的用户输入接口可以包括诸如可以允许电子设备10接收数据的一个或者多个设备之类的装置，诸如，小键盘30，以及例如在显示器28包括触摸能力时的触摸显示器等。在包括触摸显示器的一个实施方式中，触摸显示器可以被配置成从单个接触点、多个接触点等接收输入。在这样的实施方式中，触摸显示器和/或处理器可以至少部分基于位置、运动、速度、接触区域等确定输入。

电子设备10可以包括多种触摸显示器，其包括配置成通过电阻、电容、红外线、应变仪、表面波、光学成像、扩散信号技术、声学脉冲识别或者其他技术中的任何技术实现触摸识别，并且继而提供指示与触摸相关联的位置和其他参数的信号的触摸显示器的任何触摸显示器。此外，触摸显示器可以被配置成以触摸事件的形式接收输入的指示，该触摸事件可以被限定为在选择对象(例如，手指、触笔、钢笔、铅笔或者其他指向设备)与触摸显示器之间的实际物理接触。备选地，触摸事件可以被限定为将选择对象带到触摸显示器附近、悬停于显示的对象之上或者在预定义距离内逼近对象，即使未与触摸显示器产生物理接触。这样，触摸输入可以包括触摸显示器检测到的任何输入，该输入包括涉及到实际物理接触的触摸时间和未涉及到物理接触、但是触摸显示器以别的方式——(诸如选择对象与触摸显示器邻近的结果)检测的触摸事件。触摸显示器可以能够接收关于触摸输入与向触摸屏幕施加的力相关联的信息。例如，触摸屏幕可以区分重按压触摸输入和轻按压触摸输入。显示器28可以显示二维信息、三维信息等。

在包括小键盘30的实施方式中，小键盘30可以包括用于操作电子设备10的数字(例如，0-9)键、符号键(例如，#、*)、字母数字键等。例如，小键盘30可以包括常规QWERTY小键盘布置。小键盘30也可以包括具有相关联功能的各种软键。附加地或者备选地，电子设备10可以包括接口设备，诸如操纵杆或者其他用户输入接口。电子设备10还包括用于对为了操作电子设备10而需要的各种电路供电以及可选地提供机械振动作为可检测的输出的电池34(诸如，振动电池包)。

在一个示例实施方式中，电子设备10包括与处理器20通信的媒体捕获单元(诸如，相机、视频和/或音频模块)。媒体捕获单元可以是用于捕获图像、视频和/或音频以用于存储、显示或者传输的任何装置。例如，在其中媒体捕获单元是相机模块36的一个示例实施方式中，相机模块36可以包括可以根据捕获的图像形成数字图像文件的数字相机。这样，相机模块36可以包括为了根据捕获的图像创建数字图像文件而必需的硬件，诸如透镜或者其他光学部件和/或软件。备选地，相机模块36可以仅包括用于查看图像的硬件，而电子设备10的存储器设备以用于根据捕获的图像创建数字图像文件的软件这一形式存储用于由处理器20执行的指令。在一个示例实施方式中，相机模块36还可以包括辅助处理器20处理图像数据的处理单元(诸如，协同处理器)以及用于压缩和/或解压图像数据的编码器和/或解码。编码器和/或解码器可以根据标准格式(例如，联合图片专家组(JPEG)标准格式)编码和/或解码。

电子设备10可以包括一个或者多个用户标识模块(UIM)38。UIM可以包括存储于电子设备10的存储器、电子设备10的一部分、与电子设备10耦合的设备中的信息等。UIM 38可以包括具有内置处理器的存储器设备。UIM 38可以例如包括用户标识模块(SIM)、通用集成电路卡(UICC)、通用用户标识模块(USIM)、可拆卸用户标识模块(R-UIM)等。UIM 38可以存储与用户、操作者、用户账户等有关的信元。例如，UIM 38可以存储用户信息、消息信息、来联系人信息、安全信息、程序信息等。可以启用和/或禁用一个或者多个UIM 38的使用。例如，电子设备10可以启用第一UIM的使用而禁用第二UIM的使用。

在一个示例实施方式中，电子设备10包括单个UIM 38。在这样的实施方式中，用户信息的至少一部分可以存储于UIM 38上。

在另一示例实施方式中，电子设备10包括多个UIM 38。例如，电子设备10可以包括两个UIM 38块。在这样的示例中，电子设备10可以在一些境况之下利用第一UIM 38的用户信息的一部分而在其他境况之下利用第二UIM 38的用户信息的一部分。例如，电子设备10可以启用第一UIM 38的使用而禁用第二UIM 38的使用。在另一示例中，电子设备10可以禁用第一UIM 38的使用而启用第二UIM38的使用。在又一示例中，电子设备10可以利用来自第一UIM 38和第二UIM 38的用户信息。

电子设备10可以包括存储器设备，该存储器设备在一个实施方式中包括易失性存储器40(诸如，易失性随机存取存储器(RAM))，该RAM包括用于暂时存储数据的高速缓存区。电子设备10也可以包括其他存储器，例如，非易失性存储器42，该存储器可以是嵌入的和/或可以是可拆卸的。非易失性存储器42可以包括EEPROM、闪存等。存储器可以存储多条信息和数据中的任何信息和数据。信息和数据可以由电子设备10用来实施电子设备10的一个或者多个功能(诸如，结合图1至图5描述的功能)。例如，存储器可以包括可以唯一地标识电子设备10的标识符(诸如，国际移动设备标识(IMEI)代码)。

电子设备10可以包括一个或者多个传感器37。传感器37可以包括光传感器、邻近传感器、运动传感器、位置传感器等。例如，传感器37可以包括在设备上的各种位置的一个或者多个光传感器。在这样的示例中，传感器37可以提供传感器信息，该信息指示一个或者多个光传感器感知的光数量。这样的光传感器可以包括光电元件、光柱元件、电荷耦合器件(CCD)等。在另一示例中，传感器37可以包括在设备上的各种位置的一个或者多个邻近传感器。在这样的示例中，传感器37可以提供传感器信息，该信息指示对象、用户、用户的一部分等与一个或者多个邻近传感器的邻近。这样的邻近传感器可以包括电容测量、声纳测量、雷达测量等。

电子设备10可以包括投影仪99。投影仪可以包括视频投影仪、电影投影仪、幻灯片投影仪、高架投影仪。如果电子设备10包括显示器和投影仪，则可以使用投影仪取代显示器、可以与显示器结合使用投影仪、投影仪可以用来引起显示与显示器不同的信息等。

虽然图5图示了可以利用本发明实施方式(包括例如在图1至图5中描述并且描绘的实施方式)的电子设备的示例，但是图5的电子设备10仅为可以利用本发明实施方式的设备的示例。

可以用软件、硬件、应用逻辑或者软件、硬件和应用逻辑的组合实施本发明的实施方式。软件、应用逻辑和/或硬件可以驻留于装置、一个单独设备或者多个单独设备上。如果希望，则软件、应用逻辑和/或硬件的一部分可以驻留于装置上，软件、应用逻辑和/或硬件的一部分可以驻留于一个单独设备上，而软件、应用逻辑和/或硬件的一部分可以驻留于多个单独设备上。在一个示例实施方式中，在各种常规计算机可读介质中的任何介质上维护应用逻辑、软件或者指令集。在本文的上下文中，“计算机可读介质”可以是任何可以包含或者存储用于由指令执行系统、装置或者设备、诸如计算机(在图5中描述并且描绘了计算机的一个示例)使用或者与指令执行系统、装置或者设备结合使用的指令的有形介质或者装置。计算机可读介质可以包括如下计算机可读存储介质，该计算机可读存储介质可以是任何可以包含或者存储用于由指令执行系统、装置或者设备，诸如计算机使用或者与指令执行系统、装置或者设备结合使用的有形介质或者装置。

如果需要，则可以按不同顺序和/或相互并行执行这里讨论的不同功能。另外，如果需要，则上文描述的功能中的一个或者多个功能可以是可选的或者可以被组合。

虽然在独立权利要求中阐述本发明的各种方面，但是本发明的其他方面包括来自描述的实施方式和/或从属权利要求的特征与独立权利要求的特征的其他组合而不是仅包括在权利要求中明确阐述的组合。

这里还应当注意尽管上文描述本发明的示例实施方式，但是不应在限制意义上看待这些描述。实际上，存在可以在不脱离如在所附权利要求书中限定的本发明范围时进行变化和修改。

Claims (20)

1.一种装置，包括：

处理器；

包括计算机程序代码的存储器，所述存储器和所述计算机程序代码被配置成与所述处理器一起工作，以使所述装置至少执行以下操作：

接收第一图像；

识别所述第一图像的至少一部分作为命令接收器；

识别所述第一图像的至少一部分作为输入物品；

确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联；并且

引起显示与所述命令接收器相关联的向导。

2.根据权利要求1所述的装置，其中所述向导涉及至少一个位置。

3.根据权利要求1所述的装置，其中所述向导涉及移动。

4.根据权利要求1所述的装置，其中所述存储器和所述计算机程序代码还被配置成与所述处理器一起工作，以使所述装置执行：接收至少第二图像；识别所述第二图像的至少一部分作为输入物品；并且确定所述输入物品的至少一部分与所述向导的至少一部分对应。

5.根据权利要求4所述的装置，其中所述存储器和所述计算机程序代码还被配置成与所述处理器一起工作，以使所述装置执行：修改所述向导以指示所述输入物品与所述向导的至少一部分对应。

6.根据权利要求4所述的装置，其中所述至少第二图像涉及视频。

7.根据权利要求1所述的装置，其中确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联包括确定与所述输入物品相关联的位置。

8.根据权利要求1所述的装置，其中确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联包括确定所述输入物品的所述位置与所述命令接收器的至少一部分对应。

9.根据权利要求1所述的装置，其中所述存储器和所述计算机程序代码还被配置成与所述处理器一起工作，以使所述装置引起显示所述命令接收器。

10.根据权利要求9所述的装置，其中识别所述第一图像的至少一部分作为命令接收器至少部分基于与所述命令接收器的所述显示相关联的信息。

11.根据权利要求9所述的装置，其中确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联至少部分基于与所述命令接收器的所述显示相关联的信息。

12.根据权利要求1所述的装置，还包括相机，其中从所述相机接收所述第一图像。

13.根据权利要求1所述的装置，还包括投影仪，并且所述引起显示涉及所述投影仪的投影。

14.根据权利要求1所述的装置，还包括显示器，其中所述引起显示涉及所述显示器。

15.根据权利要求1所述的装置，其中所述存储器和所述计算机程序代码还被配置成与所述处理器一起工作，以使所述装置响应于确定所述输入物品与所述向导的至少一部分对应来执行与所述命令接收器相关联的动作。

16.根据权利要求1所述的装置，其中所述装置是移动设备。

17.根据权利要求1所述的装置，其中确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联包括利用历史输入物品信息。

18.一种装置，包括：

用于接收第一图像的装置；

用于识别所述第一图像的至少一部分作为命令接收器的装置；

用于识别所述第一图像的至少一部分作为输入物品的装置；

用于确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联的装置；以及

用于引起显示与所述命令接收器相关联的向导的装置。

19.一种方法，包括：

接收第一图像；

使用处理器识别所述第一图像的至少一部分作为命令接收器；

识别所述第一图像的至少一部分作为输入物品；

确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联；并且

引起显示与所述命令接收器相关联的向导。

20.一种用指令编码的计算机可读介质，所述指令在由计算机执行时，执行：

接收第一图像；

使用处理器识别所述第一图像的至少一部分作为命令接收器；

识别所述第一图像的至少一部分作为输入物品；

确定所述输入物品的至少一部分与所述命令接收器的至少一部分相关联；并且

引起显示与所述命令接收器相关联的向导。

Images