CN104038715A - 图像投影装置、系统以及图像投影方法 - Google Patents

Abstract

本发明提供一种图像投影装置、系统以及图像投影方法。所述图像投影装置包括：投影单元，用于将图像投影到投影目标上；识别单元，用于识别用于投影单元所投影的图像的指令动作；存储控制单元，用于存储对应信息，在所述对应信息中，对于存储设备中的图像的每种类型，多个指令动作分别与图像输出控制相关联；确定单元，用于基于投影单元正在投影的图像的类型来确定用于图像输出控制的对应信息；以及投影控制单元，用于基于由确定单元确定的对应信息以及由识别单元识别的指令动作，来执行与指令动作相关联的图像输出控制相对应的图像投影控制。

Description

图像投影装置、系统以及图像投影方法

技术领域

本发明涉及图像投影装置、系统以及图像投影方法。

背景技术

存在这样已知的传统技术，直接接触由诸如投影仪的图像投影装置投影在投影目标（例如墙壁）上的图像，作为指令动作，图像如同被接触的接触面板一样，或者对投影的图像进行一些指令动作（诸如移动手的动作），以便执行分配给指令动作的指令（输出控制），（例如，参见日本专利申请特开No.2003-233452）。

近来的图像投影装置除了静止图像以外还能够投影视频图像，并因此几乎不存在对于静止图像和视频图像公共的指令动作。因为这个原因，用户必须根据图像类型记住指令动作，并且，此外，由于识别指令动作的精确度受限，所以如果指令动作的类型数量增加，则错误识别率也增加。因此，较佳的是能够使用很小数量的指令动作来执行许多指令，但是至今没有系统能够实现这一点。

因此需要提供一种能够消除用户记住多种指令动作的需要的图像投影装置、系统以及图像投影方法指令动作。

发明内容

本发明的目的是至少部分解决传统技术中的问题。

根据实施例，提供了一种图像投影装置，包括投影单元，用于将图像投影在投影目标上；识别单元，用于识别用于由投影单元所投影的图像的指令动作；存储控制单元，用于存储的对应信息，在所述对应信息中，对于存储设备中的图像的每种类型，多个指令动作分别与图像输出控制相关联；确定单元，用于基于投影单元正在投影的图像类型来确定用于图像输出控制的对应信息；以及投影控制单元，用于基于由确定单元所确定的对应信息和识别单元识别的指令动作，来执行与指令动作相关联的图像输出控制相对应的图像投影控制。

根据另一实施例，提供了一种系统，包括图像投影装置，用于将图像投影在投影目标上；以及服务器设备，用于生成图像。图像投影装置包括投影单元，用于将图像投影在投影目标上；识别单元，用于识别用于投影单元正在投影的图像的指令动作；存储控制单元，用于存储对应信息，在所述对应信息中，对于存储设备中的图像的每种类型，多种指令动作分别与图像输出控制相关联；确定单元，用于基于投影单元正在投影的图像类型来确定用于图像输出控制的对应信息；以及投影控制单元，用于基于由确定单元所确定的对应信息和识别单元识别的指令动作，来执行对应于与指令动作相关联的图像输出控制的图像投影控制。

根据再一实施例，提供了一种图像投影方法，包括识别用于投影单元正在投影到投影目标上的图像的指令动作；存储对应信息，在所述对应信息中，对存储设备中图像的每种类型，多个指令动作分别与图像输出控制相关联；基于投影单元正在投影的图像类型，确定用于图像输出控制的对应信息；以及基于所确定的对应信息以及所识别的指令动作，执行与指令动作相关联的图像输出控制相对应的图像投影控制。

通过阅读以下对本发明当前优选实施例的详细描述，当与附图结合考虑时，将更好地理解本发明的以上和其他目的、特征、优点以及技术和产业上的重要性。

附图说明

图1是描述根据实施例的系统的概览的示意图；

图2是从一个侧面观看根据实施例的系统的概览的示意图；

图3是根据实施例的系统的示例性配置的框图；

图4是根据第一实施例的投影仪的示例性功能配置的框图；

图5是投影仪的俯视示意性视图；

图6是示意性显示由成像传感器捕获的图像的示意图；

图7是描述计算投影区域尺寸的方法的示意图；

图8是服务器设备的示例性功能配置的框图；

图9是根据第一实施例的存储在词典信息存储单元中的示例性信息的示意图；

图10是投影仪从开始到确定指令区域的示例性操作的流程图；

图11是当投影仪从服务器接收图像时，投影仪执行的示例性操作的流程图；

图12是当确定了指令区域时，并且从服务器设备接收的图像已经被投影到投影目标上，用户做出指令动作的状态下，投影仪执行的示例性操作的流程图；

图13是描述确定在指令区域内是否存在目标对象的方法的示意图；

图14是根据实施例的投影仪的示例性硬件配置的示意图；

图15是根据第二实施例的存储在词典信息存储单元中的示例性信息的示意图；

图16是根据第二实施例的投影仪的示例性功能配置的框图；

图17是根据第二实施例的变型的投影仪的示例性功能配置的框图；

图18是根据变型的示例性数据结构信息的示意图；

图19是根据变型的投影目标图像的示例性投影的示意图；

图20是根据变型的投影目标图像的示例性投影的示意图；

图21是根据第三实施例的投影仪的示例性功能配置的框图；

图22是根据第三实施例的存储在词典信息存储单元中的示例性信息的示意图；

图23是描述关于向用户通知由第二确定单元确定的、能够识别词典信息的信息的示例性控制的示意图。

具体实施方式

以下参照附图将详细描述本发明的图像投影装置、系统、图像投影方法以及程序的实施例。以下给出的描述使用超短焦距投影仪作为应用本发明的示例性图像投影装置。然而，替选地，短焦距投影仪或者长焦距投影仪可以被用作应用本发明的图像投影装置。

这里“焦距（focus）”与表示从投影平面到光学位置的距离（例如，从发射投影光的投影口到图像被投影到的投影对象）的投影距离含义相同。超短焦距投影仪的投影距离比短焦距投影仪的投影距离更短，并且短焦距投影仪的投影距离比长焦距投影仪的投影距离更短。例如，超短焦距投影仪的投影距离、短焦距投影仪的投影距离、以及长焦距投影仪的投影距离可以被分别设置为“11.7cm至24.9cm”、“0.7m至14.6m”、以及“1.3m至32.4m”。

第一实施例

图1是描述根据实施例的系统的概览的示意图。图2是从一侧看到的、根据实施例的系统的概览的示意图。如图1和图2所示，根据实施例的投影仪1被布置得靠近图像被投影到的投影目标（在该示例中为墙壁）2。将成像传感器100和发射投影光的投影口5提供在投影仪1顶部的不同位置。成像传感器100是捕获目标空间的图像的装置，所述目标空间是指对应于投影仪1所投影的图像的空间。在该示例中，目标空间是投影仪1上方的空间，并且从投影目标2内开始，包括至少投影区域3的上端，所述投影区域3是指将图像投影到的区域。在实施例中，通过使用摄像机来配置成像传感器100。替选地，例如诸如红外摄像机或立体摄像机的设备可以被用于成像传感器100。简而言之，如果成像传感器100是能够捕获以上描述的目标空间的图像并且能够测量从目标空间内到用户做出指令动作的指令区域4中的对象的距离，就是符合要求的。

如下描述的，在实施例中，在目标空间内，将不干涉从投影仪1发出的投影光并且与投影区域3相对的区域确定为指令区域4，可以在所述指令区域4中做出与要求被输出的内容相对应的指令动作。从指令区域4内开始，与投影区域3相对的平面的尺寸可以但不必须等于投影区域3的尺寸。例如，指令区域4的尺寸可以被设置为根据要显示的内容而变化。

图3是根据实施例的系统11的示例性示意配置的示意图。如图3所示，根据实施例的系统11包括投影仪1和服务器设备12。投影仪1和服务器设备12可以经由诸如LAN（局域网）、内联网或互联网的网络13互相连接。在该示例中，服务器设备12生成将要被投影仪1所投影的图像（投影目标图像数据）并将该图像提供给投影仪1。例如，当用户在指令区域4中做出指令动作时，投影仪1根据指令动作确定图像输出控制，并将指示所确定的图像输出控制的信息传输给服务器设备12。服务器设备12基于来自投影仪1的信息生成图像，并将生成的图像传输给投影仪1。当投影仪1从服务器设备接收图像时，投影仪1将将要被投影到投影目标2上的图像转换为所接收到的图像。

图4是投影仪1的示例性功能配置的框图。如图4中所示，投影仪1包括成像传感器100、控制单元200以及图像投影仪300。

控制单元200包括检测器201、识别单元202、第一计算器203、第二计算器204、第一确定单元205、决定单元206、通信单元207、第二确定单元209、词典信息存储单元208、存储控制器211以及投影控制器210。在本示例中，包括CPU、ROM、RAM等的通常计算机设备的硬件配置被用于控制单元200的硬件配置。通过由CPU执行存储在ROM等中的程序来实现控制单元200的每个单元的功能（检测器201、识别单元202、第一计算器203、第二计算器205、第一确定单元205、决定单元206、通信单元207、存储控制器211、第二确定单元209以及投影控制器210）。替选地，通过使用专用硬件电路可以至少部分实现上述单元的功能。此外，通过使用RAM、ROM或诸如HDD的辅助存储设备可以实现词典信息存储单元。

检测器201检测目标空间中存在的目标对象（例如用户的手）。在第一实施例中，检测器201获取由成像传感器100执行图像捕获而获得的图像数据，并且然后基于所获取的图像数据检测目标对象。

识别单元202识别用于由图像投影仪300投影的图像的指令动作（诸如移动手的动作）。在第一实施例中，基于由检测器201执行的目标对象的检测，识别单元202识别用于由图像投影仪300投影的图像的指令动作。例如，各种已知的技术可以被用作识别诸如移动手的动作的方法。识别单元202将指示所识别的指令动作的信息传输给以下将进行描述的决定单元206。该信息可以包含在三维空间中的目标对象的坐标等。

第一计算器203基于成像传感器100执行的图像捕获所获取的图像数据来计算投影仪1和投影目标2之间的距离。以下将描述由第一计算器203执行的距离计算方法。图5是投影仪1的俯视示意性视图。在图5的示例中，将投影口5提供在投影仪1的右侧，并且将成像传感器100提供在投影仪1的左侧。图6是示意性显示通过成像传感器（在该情况中为摄像机）100执行的图像捕获所获取的图像数据的示意图。在该实施例中，将投影口5和成像传感器100提供在投影仪1的顶部、水平地彼此分离。因此，如果投影仪1与投影目标2分离，如图6中所示，那么图像数据中的投影区域在摄像机视野中朝左移动。通过移动的量（移动量），可以计算投影仪1与投影目标2之间的距离。还可以理解的是，第一计算器203根据由成像传感器100执行的图像捕获而获取的图像数据中的投影区域的位置，来计算投影仪1和投影目标2之间的距离。

这里，通过回到图4进行参考，将继续描述。第二计算器204基于由第一计算器203计算的距离来计算投影区域的尺寸。以下将描述由第二计算器204执行的投影区域尺寸计算方法。图7是描述计算投影区域尺寸的方法的示意图。图7是从一侧看到的投影仪1的示意图。如同从图7中可以理解的，投影区域的高度h可以由以下等式（1）来表示：

h=D×（a2×a1）+b2×b1 （1）其中，D表示投影仪1和投影目标2之间的距离；a2表示入射在投影区域上端的投影光的角度；a1表示入射在投影区域下端的投影光的角度；b1表示对应于在从投影目标2侧的投影目标2的投影仪1的端面开始、与投影目标2平行地向上延伸的线K与表示来自投影口5并且入射在投影区域下端上的投影光的线之间的交叉点的截距；b2表示对应于图7中所示的线K与指示来自投影口5并入射在投影区域上端上的投影光的线之间的交叉点的截距。a1、a2、b1和b2的值是根据投影仪1中使用的反射镜6的特性而预先确定的。

可以通过屏幕高宽比来计算投影区域的宽度。如上所述，第二计算器204计算投影区域的高度和宽度，借此计算投影区域的尺寸（=高×宽）。

此处回到图4进行参考，将继续描述。第一确定单元205在目标空间内，确定与来自投影仪1的投影光不干涉并且与投影区域相对的区域，作为可以做出对应于要求输出的内容的指令动作的指令区域。在第一实施例中，如图1和图2中所示，第一确定单元205确定在投影目标2的通常方向中占据特定区域的长方体区域作为指令区域，所述长方体区域时在投影仪1上方的长方体的区域，并且不干涉投影光，并且与投影区域3相对。然而，指令区域4的形状不限于此，并且可以任意变化。为了用户知道指令区域的大概位置，例如，可以标注投影仪1的顶部或下表面（如果信息能够表示指令区域的大致位置就是符合要求的）。

决定单元206决定识别单元202所识别的指令动作是否是在第一确定单元205所确定的指令区域4中做出的。当决定单元206决定已经在由第一确定单元205所确定的指令区域4中做出由识别单元202所识别的指令动作时，决定单元206将表示指令动作的信息输出给投影控制器210。

通信单元207具有与服务器设备12进行通信的功能。在第一实施例中，通信单元207具有在投影控制器210控制下，将表示图像输出控制的信息传输给服务器设备12的功能。通信单元207还具有接收从服务器设备12传输的图像（投影目标图像数据）的功能。

这里参照图8将对服务器设备12的功能进行描述。图8是服务器设备12的示例性功能配置的示意图。如图8中所示，服务器设备12包括接收器14、生成器15和传输器16。

接收器14从投影仪1接收表示图像输出控制（以下将描述的第二信息）的信息。生成器15基于由接收器14接收到的信息（第二信息）生成将要被投影的图像（投影目标图像）。传输器16将生成器15生成的图像（图像数据）传输给投影仪1。在该实例中，包括CPU、ROM、RAM等的通常计算机设备的硬件配置被用作服务器设备12的硬件配置。通过CPU执行存储在ROM等中的程序来实现服务器设备12的每个单元（接收器14、生成器15和传输器15）的功能。替选地，通过使用专用硬件电路可以实现至少一些上述单元的功能。

这里回到图4进行参照，将继续描述。存储控制器211根据每个图像类型将对应信息（此后适当地称为“词典信息”）存储在词典信息存储单元208中，在所述对应信息中，多个指令动作中的每一个与对应于指令动作的图像输出控制相关联。在第一实施例中，词典信息存储单元208预先注册词典信息，其中，与表示图像类型的第三信息相关联地，多条第一信息（每条信息表示指令动作）分别与多条第二信息（每条信息表示图像输出控制）相关联。在该示例中，第三信息包含表示用于生成文档数据的应用类型的信息（例如诸如PowerPoint（微软公司的产品）、PDF和WORD（微软公司产品）的文档生成应用）、表示视频数据格式的信息以及表示音频数据格式的信息等。换句话说，在本实例中，可以将第三信息看作表示数据格式的信息。

在图9的示例中，词典信息存储单元208将表示PowerPoint的第三信息与PowerPoint词典信息相关联地进行存储。词典信息存储单元208还将表示PDF的第三信息与PDF词典信息相关联地进行存储。此外，词典信息存储单元208将表示WORD的第三信息与WORD词典信息相关联地进行存储。

图9中所示的PowerPoint词典信息包含第一信息和第二信息的四个组合。第一行中的组合是表示顺从右向左移动目标对象的指令动作的第一信息（例如第一信息表示向左轻弹）和表示朝下一页滚动的第二信息之间的关联（联系）。第二行中的组合是表示从左向右移动目标对象的指令动作的第一信息（例如，第一信息表示向右轻弹）与表示滚动回到上一页的第二信息之间的关联。第三行中的组合是表示从上向下移动目标对象的指令动作的第一信息与表示缩小当前投影的页面的第二信息之间的关联。第四行中的组合是表示从下向上移动目标对象的指令动作的第一信息与表示放大当前投影的页面的第二信息之间的关联。PowerPoint词典信息的内容不限于此，并且可以任意变化。

在第一实施例中，在两条或多条关联信息（词典信息）之间，与公共指令动作（第一信息）相关联的输出控制（第二信息）根据对应信息而不同。例如，当PowerPoint词典信息与PDF词典信息中的每一个都包含表示从右向左移动目标对象的指令动作的第一信息的同时，在PowerPoint词典信息和PDF词典信息之中，与第一信息相关联的第二信息不同。例如，在PowerPoint词典信息中，表示从右向左移动目标对象的指令动作的第一信息与表示向下一页滚动的第二信息相关联的同时，在PDF词典信息中，表示从右向左移动目标对象的指令动作的第一信息可以与表示仅以90度顺时针旋转当前投影的页面的第二信息相关联。以这种方式，可以为特定指令动作设定多种类型的输出控制（另一方面的命令）。

这里回到图4进行参照，将继续描述。基于被投影到投影目标2上的图像的类型，第二确定单元209确定用于控制图像输出的对应信息（词典信息）。在第一实施例中，当通信单元207接收到由服务器设备12生成的图像时，第二确定单元209确定所接收到的图像的数据格式。在该示例中，第二确定单元209具有确定从服务器设备12接收到的图像的数据格式的功能。替选地，例如，投影仪1（通信单元207）在除了接收投影目标图像以外，还可以接收表示来自服务器设备12的图像的数据格式的信息。第二确定单元209从存储在词典存储单元208中的多种类型的词典信息中确定对应于表示接收到的图像的数据类型的第三信息的词典信息，作为用于图像输出控制的词典信息。第二确定单元209将确定的词典信息通知给投影控制器210。

基于第二确定单元209确定的对应信息（词典信息）和识别单元202识别的指令动作，投影控制器210执行对应于与指令动作相关联的输出控制的图像投影控制。在第一实施例中，投影控制器210执行对应于第二信息所表示的输出控制相对应的控制（图像投影控制），其中所述第二信息对应于识别单元202所识别的表示指令动作的第一信息相关联，（在该示例中，由从决定单元206输出的信息表示指令动作）。例如，当第二确定单元209所确定的词典信息为PowerPoint词典信息，并且识别单元202所识别的指令动作为用于从右向左移动目标对象（例如向左轻弹）的指令信息时，投影控制器210在PowerPoint词典信息范围内，控制对与表示从右向左移动目标对象的第一信息相关联的第二信息（在图9的示例中，第二信息表示朝向下一页滚动）的识别，并且控制所识别的第二信息经由通信单元207向服务器设备12的传输。

每次通信单元207接收服务器设备12生成的图像，投影控制器210都控制将将要被投影到投影目标2的图像转换为所接收的图像。具体来说，每次通信单元207接收由服务器设备12生成的图像时，投影控制器210将接收到的图像提供给图像投影仪300。图像投影仪300将从投影控制器210提供的图像投影到投影目标2上。因此，每次从服务器设备12传输了新图像时，将要被投影到投影目标2上的图像就被转换为新图像。在第一实施例中，服务器设备12根据第二信息生成图像。替选地，例如投影仪1（例如投影控制器210）可以根据所识别的第二信息生成图像。

以下将描述投影仪1从开始到确定指令区域4的示例性操作。图10是投影仪从开始到确定指令区域4的示例性操作的流程图。如图10中所示，首先，第一计算器203基于检测器201获取的图像数据来计算投影仪1和投影目标2之间的距离（步骤S1）。第二计算器204随后基于在步骤S1计算的距离来计算投影区域的尺寸（步骤S2）。第一确定单元205基于在步骤S2计算的投影区域的尺寸来确定指令区域的尺寸（步骤S3），并且随后确定指令区域。识别单元202在指令动作识别就绪状态中准备就绪，直到断开电源或关闭手势功能（步骤S4）。如上所述，由于投影区域的尺寸根据投影仪1和投影目标2之间的距离而变化，所以指令区域4也根据投影仪1和投影目标2之间的距离而变化。例如，对于在投影仪1中的何处安装检测投影仪1的移动的传感器的配置中，当传感器检测到投影仪1的移动时，可以再次执行步骤S1至步骤S3的处理。

这里将描述当投影仪1从服务器设备12接收图像时，投影仪1执行的示例性操作。图11是在这种情况下投影仪1的示例性操作的流程图。首先，通信单元207从服务器设备12接收（获取）图像（步骤S11）。随后第二确定单元209确定在步骤S11接收到的图像的数据格式（步骤S12）。随后，第二确定单元209确定对应于表示在步骤S12确定的数据格式的第三信息的词典信息，作为用于图像输出控制的词典信息（步骤S13）。如上所述，第二确定单元209向投影控制器210通知所确定的词典信息。投影控制器210控制将在步骤S11接收到的图像投影到投影目标2上的投影和显示（步骤S14）。如上所述，在该示例中，每次通信单元207接收服务器设备12生成的图像时，投影控制器210控制将将要被投影到投影目标2上的图像转换为所接收到的图像。步骤S12到S14的顺序可以任意变化。

下面将描述在已经确定了指令区域4并且从服务器设备12接收到的图像被投影到投影目标2上的状态下，当用户做出指令动作时，投影仪1执行的示例性操作。图12是在这种情况下投影仪1的示例性操作的流程图。如图12中所示，识别单元202执行处理以识别用户做出的指令动作（步骤S20）。在第一实施例中，在指令动作识别就绪状态下，目标对象被成像在由摄像机捕获的图像数据中，并且因此，当检测器201检测目标对象时，识别单元202识别由用户做出的指令动作。换句话说，在每次检测器201检测目标对象时，都执行识别单元202执行的识别处理。当识别单元202识别出用户做出的指令动作时（步骤S21中的是），决定单元206基于来自识别单元202的信息来决定目标对象的坐标是否在由第一确定单元205所确定的指令区域4内（步骤S22）。

还可以认为是：决定单元206决定是否已经在指令区域4中做出由识别单元202所识别的指令动作。

图13是描述确定在指令区域4内是否存在目标对象的方法的示意图。摄像机（成像传感器100）可以测量目标对象在摄像机的垂直上方的位置（角度）和摄像机到目标对象的距离。如果知道这两者，通过第二计算器204计算的投影区域的位置和第一确定单元205确定的指令区域4的深度（正常方向上投影目标2的尺寸），可以确定在指令区域4中是否存在目标对象。在该示例中，目标对象在摄像机的垂直上方的位置（角度）和表示摄像机到目标对象的距离的信息被包含在来自识别单元202的信息中。决定单元206从第二计算器204接收表示投影区域的位置的信息并且从第一确定单元205接收表示指令区域4的深度的信息。基于这样的信息，决定单元206可以随后决定在指令区域4中是否存在目标对象。

这里回到图12进行参照，将继续描述。在步骤S22，当决定了目标对象的坐标不在第一确定单元205确定的指令区域4中时（步骤S22处为否），处理返回到步骤S20。相反地，当决定了目标对象的坐标在第一确定单元205确定的指令区域4内时（步骤S22处为是），投影控制器210从词典信息存储单元208读取词典信息（由第二确定单元209所通知的最新词典信息）（替选地，例如，可以从第二确定单元209接收到词典信息），并且投影控制器210执行所读取的词典信息中包含的多条第二信息中，与表示在步骤S21识别的指令动作的第一信息相关联的第二信息所表示的输出控制相对应的控制（步骤S23）。

以下将描述根据实施例的投影仪1的示例性硬件配置。图14是投影仪1的示例性硬件配置的框图。如图14所示，投影仪1包括CPU10、存储器控制器20、主存储器30以及主机-PCI桥（host-PCI bridge）40。存储器控制器20经由主机总线110，被连接至CPU10、主存储器30和主机-PCI桥40。

CPU10执行投影仪1的一般控制。存储器控制器20控制关于主存储器30的读/写。主存储器30是用作存储程序和数据的存储器、用于加载程序和数据的存储器、用于存储图画的存储器等的系统存储器。

主机-PCI桥40是用于使用PCI（外围组件互联）设备50连接外围设备的桥。经由HDD I/F120将主机-PCI桥40连接到存储卡60。经由PCI总线130和PCI插槽140将主机-PCI桥40连接到通信卡70、无线通信卡80、视频卡90等。

存储器卡60被用作引导OS的设备。通信卡70和无线通信卡80被用于连接到诸如LAN的网络或通信线。视频卡90被用于将图像和输出视频信号投影到显示输出。根据第一实施例的投影仪1所执行的控制程序是通过预先安装在主存储器30的存储记忆器中等而提供的。

如上所述，第一实施例的词典信息存储单元208预先与多条第三信息（每条信息表示数据格式）相关联地注册多种词典信息。在多种词典信息中，多条第一信息分别与多条第二信息相关联，所述第一信息中的每条都表示指令动作，所述第二信息中的每条表示图像输出控制。一旦接收到服务器设备12生成的图像（投影目标图像数据），第一实施例的投影仪1确定对应于表示所接收到的图像的数据格式的第三信息的词典信息，作为用于图像输出控制的词典信息。在第一实施例中，由于在两条或多条系中的、与公共第一信息相关联的第二信息根据每条词典信息而不同，所以可以为指令动作设置多种输出控制（来自不同视角的命令）。因此，第一实施例引起的有益效果在于：可以以小数量的指令动作执行许多命令。

此外，在第一实施例中，由于（在表示投影仪1上方空间的目标空间内）将与来自投影仪1的投射光不干涉并且与投影区域相对的区域确定为可以做出与要求输出的内容相对应的指令动作的指令区域，所以在投影的图像中并不成像操作者的阴影，并且，此外，由于操作者在与被投影到投影目标上的图像相对的区域内做出指令动作，所以操作者可以直观地理解他/她的操作和所投影的图像之间的对应。因此，第一实施例导致这样的独特效果：可以保证所投影图像的可见并且可以提供直观和简单的操作。

这里，作为与第一实施例可比较的示例，假设这样的配置：通过诸如摄像头的成像传感器捕获投影区域的图像来检测用户的动作，并且将投影区域用作触摸板（在日本专利申请特开No.2003-233452中所公开的配置）。例如，如果将具有60°水平视角和50°竖直视角的摄像头用作成像传感器，用于捕获投影区域的图像，并且从竖直操作平面到摄像头的水平距离为85cm，满足了以下等式：虚拟操作平面的水平宽度×竖直宽度=100cm×100cm。该尺寸覆盖了投影屏幕尺寸（用于48英寸的100cm×60cm）并且因此可以使用便宜的摄像机。然而，对于超短焦距投影仪来说，例如如上所述的投影距离为“11.7cm至24.9cm”，并且相应地，在超短焦距投影仪中安装的摄像机与虚拟操作平面（在可比较的示例中，可以将其看作投影区域）之间的距离与上述情况相比大幅减少；所以，摄像机所捕获的虚拟操作平面的尺寸不能够在投影屏幕区域内。因此，当可比较示例的技术被应用在投影距离低于参考值（例如85cm）的投影仪时（诸如超短焦距投影仪），必须使用具有更大的观看角度（视角）的摄像机，这导致了成本的增加。

与此相对的，在第一实施例中，在投影仪1中安装的成像传感器100的所需功能仅仅是捕获表示（表示投影仪1上方空间的目标空间内）与来自投影仪的投影光不干涉，并且与投影区域相对的区域的指令区域的图像（即，不要求捕获整个投影区域的图像，而可比较实施例要求这样）。因此，即便对于超短焦距投影仪来说，在可以将便宜的摄像机用作投影仪内安装的成像传感器100的有点之外，还可以实现以上所述的独特效果。相应地，例如，当应用在具有投影距离少于给定参考值（诸如超短焦距投影仪）时，本发明是特别有益的。替选地，本发明还可以应用在具有投影距离等于或大于给定参考值的投影仪上，并且更不必说，即便在这种情况下，也可以实现上述的独特效果。

确定目标空间和指令区域4的方法不限于上述实施例的内容，并且是任意的。

第二实施例

以下将描述第二实施例。在第二实施例中确定词典信息的方法与第一实施例中的不同。以下将详细描述这一点。当适当时，将省略对于那些与第一实施例中相同的部分的描述。

如上所述，第三信息包含表示用于生成数据（例如，诸如PowerPoint、PDF或WORD的文档生成应用）的应用类型的信息、表示视频数据格式的信息以及表示音频数据格式的信息等。图15是根据第二实施例的存储在词典信息存储单元208中的示例性信息的示意图。在图15的示例中，除了图9所示的信息以外，词典信息存储单元208还存储表示与视频词典信息相关联的视频数据格式的第三信息，并且存储表示与音频词典信息相关联的音频数据格式的第三信息。视频词典信息和音频词典信息是在文档词典信息上的不同类型的词典信息（例如，PowerPoint的词典信息、PDF词典信息以及WORD的词典信息）。此外，如同在第一实施例的情况中，例如，关于文档词典信息、视频信息和音频词典信息，根据每种类型的词典信息，将与公共第一次信息相关联的第二词典信息设置得不同。

图16是根据第二是实施例的投影仪101的示例性配置的框图。如图16中所示，投影仪101包括成像传感器100、控制单元220和图像投影仪300。控制单元220具有与第一实施例的控制单元不同的功能。

如图16中所示，控制单元220与第一实施例的控制单元的不同在于控制单元220还包括第二决定单元221和第一选择器222。第二决定单元221具有这样的功能，当通信单元207接收由服务器设备12所生成的图像时，所述第二决定单元221确定所接收到的图像的数据格式并且确定所接收到的图像是否包含与所识别的数据格式不同的数据格式的数据。例如，当从服务器设备12所接收到的图像的数据格式是PowerPoint时，第二决定单元221决定图像是否包含不同于PowerPoint数据格式的数据（例如WORD数据、视频数据或者音频数据）。

例如，当第二决定单元221决定从服务器设备12所接收到的图像（投影目标图像）包含与图像的数据格式不同的数据格式的数据时，第一选择器222选择任一数据格式来响应用户的输入。由用户所使用的用于选择想要的数据格式的方法是任意的。

例如，对于多种数据格式来说，从服务器设备12接收到的图像可能包含UI图像，该UI图像表示用于选择数据格式的操作按钮，使得用户能够向想要的数据格式相对应的UI图像做出伸出手（手指）的指令动作，以便选择对应于UI图像的数据格式。在这种情况下，例如，服务器设备12可以向投影仪1传输由生成器15生成的图像和表示图像中包含的每个UI图像的位置的UI信息。基于由识别单元202所识别的指令动作和从服务器设备12所接收到的UI信息，第一选择器222确定用户做出的指令动作指定哪个UI图像。基于判断结果，第一选择器222可以选择与用户所指定的UI图像相对应的数据格式。

第二确定单元209确定与表示第一选择器222从存储在词典信息存储单元208中的多条词典信息中选择的数据格式的第三信息相对应的词典信息，作为用于执行图像输出控制的词典信息。相对的，例如，当用户没有做出用于选择数据格式的指定UI图像的指令动作时（如果第一选择器222没有做出任何选择），或者当服务器设备12接收到的图像不包含任何与图像数据格式不同的数据格式的数据时，第二确定单元209确定与表示从服务器设备12接收到的图像的数据格式的第三信息相对应的词典信息，作为用于执行图像输出控制的词典信息。

在第二实施例中，当确定了投影目标图像包含（多种数据格式中的）分别用于选择数据格式的UI图像，并且投影目标图像包含与图像的数据格式不同的数据格式的数据时，第一选择器222选择与用户的指令动作所指定的UI图像相对应的数据格式。替选地，例如，控制单元还可以包括识别单元，当确定了投影目标图像包含与图像的数据格式不同的数据格式的数据时，识别单元基于数据结构信息来识别与投影区域中目标对象（诸如用户的手）的坐标相对应的数据格式，其中，投影目标图像中包含的多种数据格式与该数据格式的数据的坐标相关联，并且第一选择单元（第一选择器222）可以根据识别单元所执行的识别来选择数据格式。将在以下描述该改进（第二实施例的改进）。

图17是根据该改进的投影仪101的示例性配置的框图。如图17所示，控制单元220与图16中所示的不同配置在于控制单元220还包括第三决定单元250。第三决定单元250可以被称为识别单元。基于投影目标图像中包含的多种数据格式与该数据格式的数据的坐标相关联的数据格式信息，第三决定单元250识别与投影区域中的目标对象的坐标相对应的数据格式。下面将给出细节。

在该示例中，当检测器201基于从成像传感器100获取的图像数据而检测目标对象时，第三决定单元250基于图像数据和第二计算器204计算的投影区域的尺寸来计算投影区域中的目标对象的坐标。当第二决定单元221决定了投影目标图像包含与图像的数据格式不同的数据格式的数据时，第三决定单元250从存储器（未示出）中读取投影目标图像上的数据结构信息，并且，基于读取的数据结构信息，第三决定单元识别与投影区域中的目标对象的坐标相对应的数据格式。图18是根据该改进的投影目标图像上的示例性数据结构的示意图。可以向投影仪101或诸如服务器设备12的外部设备提供存储数据结构信息的存储器（未示出）。

第一选择器222根据由第三决定单元250所执行的识别来选择数据格式。第二确定单元209随后确定与表示第一选择器222从存储在词典信息存储单元208中的多条词典信息中选择的数据格式的第三信息相对应的词典信息，作为用于执行图像输出控制的词典信息。

图19和图20是根据改进的投影目标图像的示例性投影的示意图。如图20所示，例如，当投影区域中的目标对象的坐标在对应于“视频”的坐标区域内时，确定与目标对象的坐标相对应的数据格式为“视频”，并且相应地选择对应于“视频”的词典信息。例如，当投影区域中目标对象的坐标在对应于“PowerPoint”的坐标区域内时，确定与目标对象的坐标相对应的数据格式为“PowerPoint”，并且相应地选择对应于“PowerPoint”的词典信息。

简而言之，当投影目标图像包含与图像的数据格式不同的数据格式的数据时，如果第一选择器222具有基于由检测器201所执行的对目标对象的检测而选择任一数据格式的功能，就是符合要求的。

如上所述的，在第二实施例中，当从服务器设备12所接收到的图像数据包含与图像的数据格式不同的数据格式的数据时，选择任一数据来响应用户的输入。对应于表示所选数据格式的第三信息的词典信息随后被确定为用于执行图像输出控制的词典信息。因此，用户可以根据将要被投影的图像中包含的数据来使用不同的词典信息，这导致了改善用户的便捷的有益效果。

第三实施例

以下将描述第三实施例。在第三实施例中确定词典信息的方法与第一和第二实施例中的不同。以下将详细描述。当适当时，将省略第三实施例与第一和第二实施例之间的共同内容。

图21是根据第三实施例的投影仪111的示例性配置的框图。如图21中所示，投影仪111包括成像传感器100、控制单元230和图像投影仪300。控制单元230具有与第一和第二实施例的控制单元不同的功能。

如图21所示，控制单元230与第一实施例的控制单元的不同在于还包括文件图像存储单元231和第二选择器232。文件图像存储单元231存储多个文件图像，每个图像包含多组页面，每个页面表示将要被投影到投影对象2上的数据。在该示例中，通信单元207接收（获取）由服务器设备12所生成的文件图像，并且文件图像存储单元231预先注册由通信单元207所接收到的文件图像。

第二选择器232具有响应于用户的输入，在存储在文件图像存储单元231中的多个文件图像中选择任一个的功能。由用户所执行的用于选择想要的文件图像的方法是任意的。第二选择器232将所选的文件图像传给投影控制器210并将表示选择结果的信息通知给第二确定单元209。

每次从第二选择器232接收文件图像，投影控制器210控制将所接收到的文件图像投影到投影目标2上。在该实例中，一旦从第二选择器232接收到文件图像，投影控制器210控制将接收到的文件图像的首页投影到投影目标2上。对已后面的页面，投影控制器210基于由识别单元202所识别的指令动作（在该实例中，由从决定单元206输出的信息所表示的指令动作），控制将后续页面投影到投影目标2上，并且第二确定单元209确定词典信息。在该示例中，投影控制器210具有将表示页面当前正在被投影在投影目标2上的页面信息通知给第二确定单元209的功能。

在第三实施例中，存储控制器211存储多条页面信息，每条页面信息表示与多条词典信息相关联的至少一个页面的预先指定的范围（在所述词典信息中，多条第一信息与多条第二信息分别相关联）。图22是根据第三实施例的存储在词典信息存储单元208中的示例性信息的示意图。图22示出了与表示“演讲文件”的文件图像绑定的示例性信息。同样可以将此应用在其他文件图像上。

在图22的示例中，模式1词典信息与表示“第一到第三页”的页面信息相关联。模式2词典信息与表示“第四页”的页面信息相关联。此外，模式3词典信息与表示“第五页”的页面信息相关联。如同第一实施例的情况中，例如，在以上所述的文档词典信息（PowerPoint词典信息）中，模式1词典信息、模式2词典信息和模式3词典信息，根据每条词典信息将与公共第一信息相关联的第二信息设定得不同。

这里回到图21进行参考，将继续描述。第二确定单元209确定包含第二选择器232所选择的文件图像的多个页面中、将要被投影到投影目标2上的页面组的页面信息相对应的词典信息。在第三实施例中，基于第二选择器232所通知的选择结果以及投影控制器210所通知的页面信息，第二确定单元209可以指定在第二选择器232所选择的文件页面中包含的多个页面中，投影哪个页面。第二确定单元209随后确定这样的词典信息作为用于执行图像输出控制的词典信息，在所述词典信息中，第二选择器232所选择的文件图像与存储在词典信息存储单元208中的多条词典信息中，表示所指定的页面的页面信息相关联。第二确定单元209随后将所确定的词典信息通知给投影控制器210。基于由识别单元202所识别的指令动作以及由第二确定单元209所确定的词典信息，投影控制器210控制将第二选择器23所选择的文件图像中包含的每个页面投影在投影目标2上。

如上所述，根据第三实施例，可以做出设定，使得根据将要投影的页面而转换词典信息。换句话说，用户可以根据将要被投影的内容使用不同的词典信息，这导致用户便捷性提高的有益效果。

以上已经描述了本发明的实施例，但是仅将它们提供为示例并且不意欲限定本发明的范围。本发明不限于以上描述的实施例，当通过在本发明范围内修改组件而实施时，可以得到体现。此外，通过使用实施例中公开的组件中适当的组合，可以形成各种发明。例如，实施例中所示的组件可以部分省略。

在每个以上描述的实施例中，投影控制器210可以控制向用户通知能够识别第二确定单元209所确定的词典信息的信息。例如，在第三实施例中，当第二确定单元209确定了图22中所示的“模式1词典信息”时，投影控制器210可以控制能够识别“模式1词典信息”的图像240的投影和显示。

例如，已经将投影仪1包括成像传感器100的配置（将投影仪1和成像传感器100进行集成的配置）作为示例而描述了每个实施例。替选地，成像传感器100可以被提供为独立于投影仪1。

例如，控制单元（20、220或230）的功能可以被安装在与投影仪相连接的信息处理装置中。简而言之，可以将本发明应用在信息处理装置上。根据本发明的信息处理装置可以至少包括识别单元、存储控制器、确定单元以及投影控制器。识别单元识别用于由将图像投影到投影目标上的投影单元（例如，图像投影仪300）所投影的图像的指令动作。存储控制器为每个图像类型存储对应信息，其中多个指令动作与对应于存储设备中的每个指令动作的图像输出控制相关联。基于投影单元所投影的图像的类型，确定单元确定用于执行图像输出控制的对应信息。基于确定单元所确定的对应信息和识别单元所识别的说明操作，投影控制器执行与指令动作相关联的输出控制相对应的图像投影控制。

此外，可以将投影仪1的单元的功能分散地安装在投影仪和与投影仪相连接的信息处理装置中。简而言之，可以将本发明应用在包括投影仪和与投影仪相连接的信息处理装置的系统上。如果根据本发明的系统包括投影单元、识别单元、存储控制器、确定单元以及投影控制单元，就是符合要求的。投影单元将图像投影到投影目标上。识别单元识别用于投影单元所投影的图像的指令动作。存储控制单元对每个图像类型存储对应信息，其中多个指令动作与在存储设备中的指令动作相对应的图像输出控制相关联。基于由投影单元投影的图像的类型，确定单元确定用于执行图像输出控制的对应信息。基于由确定单元所确定的对应信息以及由识别单元所识别的指令动作，投影控制单元执行与指令动作相关联的输出控制相对应的图像投影控制。

可以将投影仪1或服务器设备12所执行的程序配置为在诸如CD-ROM、软盘（FD）、CD-R、DVD（数字化多用途光盘）的计算机可读存储介质中的可安装格式或可执行格式文件中记录并提供。

此外，可以将投影仪或服务器设备12执行的程序存储在与连接有诸如互联网的网络的计算机中，并经由网络下载，以便提供或分散。

根据实施例，可以提供消除用户记住各种指令动作的需要的图像投影装置、系统以及图像投影方法。

尽管为了完全清晰的公开，已经结合特定实施例描述了本发明，但是所附权利要求并不以此而被限定，而是被构建为体现对于本领域技术人员来说，可以发生的所有改变和变型构造都落入本文阐述的基本教导中。

Claims (15)

1.一种图像投影装置，包括：

投影单元，用于将图像投影到投影目标上；

识别单元，用于识别用于投影单元正在投影的图像的指令动作；

存储控制单元，用于存储对应信息，在所述对应信息中，对于存储器中的每种图像类型，多个指令动作分别与图像输出控制相关联；

确定单元，用于基于投影单元正在投影的图像类型，确定用于图像输出控制的对应信息；以及

投影控制单元，用于基于由确定单元所确定的对应信息以及由识别单元所识别的指令动作，执行与指令动作相关联的图像输出控制相对应的图像投影控制。

2.根据权利要求1所述的图像投影装置，其中在两条或多条对应信息中，与公共指令动作相关联的输出控制根据对应信息而不同。

3.根据权利要求1或2所述的图像投影装置，还包括：

检测单元，用于检测与正在被投影到投影目标上的图像相对应的目标空间内的目标对象；以及

第一选择单元，用于在投影目标图像包含与图像的数据格式不同的数据格式的数据时，基于检测单元所执行的目标对象的检测来选择数据格式，

其中，确定单元用于确定与第一选择单元所选的数据格式相对应的对应信息，作为用于执行图像输出控制的对应信息。

4.根据权利要求3所述的图像投影装置，其中

识别单元用于基于由检测单元所执行的目标对象的检测来识别指令动作，

投影目标图像包含分别对应于多个数据格式的UI图像以选择数据格式，并且

第一选择单元用于选择与指令动作所指定的UI图像相对应的数据格式。

5.根据权利要求3所述的图像投影装置，还包括：

识别单元，用于基于数据结构信息来识别与投影区域中投影目标的坐标相对应的数据格式，在所述数据结构信息中，多个投影目标图像中包含的数据格式预先分别与该数据格式的数据的多组坐标相关联，

其中，第一选择单元用于根据由识别单元所执行的识别来选择数据格式。

6.根据权利要求1或2所述的图像投影装置，还包括：

文件图像存储单元，用于在其中存储多个文件图像，每个文件图像包括多组页面，每个页面表示将要被投影在投影目标上的数据的单元；以及

第二选择单元，用于响应于用户的输入，选择存储在文件图像存储单元中的文件图像中的一个，

其中，存储控制单元用于存储多条页面信息以及用于存储设备中的每个文件图像的多条对应信息，以便多条页面信息与多条对应信息分别相关联，每条页面信息表示预先指定的至少一个页面的范围，以及

确定单元，用于确定对应于包含第二选择单元所选择的文件图像的多个页面中、将要被投影到投影目标上的页面的一条页面信息的一条对应信息，作为一条进行图像输出控制的对应信息。

7.根据权利要求1或2所述的图像投影装置，其中，投影控制单元用于控制向用户通知用于由识别确定单元所确定的对应信息的信息。

8.一种系统，包括

图像投影装置，用于将图像投影到投影目标上；以及

服务器装置，用于生成图像，

其中

图像投影装置包括

投影单元，用于将图像投影到投影目标上；

识别单元，用于识别用于投影单元正在投影的图像的指令动作；

存储控制单元，用于存储对应信息，在所述对应信息中，对于存储器中的每种图像类型，多个指令动作分别与图像输出控制相关联；

确定单元，用于基于投影单元正在投影的图像类型，确定用于图像输出控制的对应信息；以及

投影控制单元，用于基于由确定单元所确定的对应信息以及由识别单元识别的指令动作，确定对应于与指令动作相关联的图像输出控制的图像投影控制。

9.根据权利要求8所述的系统，其中在两条或多条对应信息中，与公共指令动作相关联的输出控制根据对应信息而不同。

10.根据权利要求8或9所述的系统，其中

图像投影装置还包括

检测单元，用于检测与被投影在投影目标上的图像相对应的目标空间内的目标对象；以及

第一选择单元，用于当投影目标图像包含与图像的数据格式不同的数据格式的数据时，基于检测单元所执行的目标对象的检测选择数据格式，以及

确定单元用于确定与第一选择单元所选择的数据格式相对应的对应信息，作为用于执行图像输出控制的对应信息。

11.根据权利要求10所述的系统，其中

识别单元，用于基于由检测单元所执行的目标对象的检测来识别指令动作，

投影目标图像包含分别对应于多个数据格式的UI图像以选择数据格式，并且

第一选择单元，用于选择与指令动作所指定的UI图像相对应的数据格式。

12.根据权利要求10所述的系统，还包括

识别单元，用于基于数据格式信息来识别与投影区域中目标对象的坐标相对应的数据格式，在所述数据格式信息中，投影目标图像中包含的多个数据格式预先分别与该数据格式的数据的多组坐标相关联。

13.根据权利要求8或9所述的系统，还包括：

文件图像存储单元，用于在其中存储多个文件图像，每个文件图像包括多组页面，每个文件图像表示将要被投影到投影目标上的数据的单元；以及

第二选择单元，用于响应于用户的输入，选择存储在文件图像存储单元中的一个文件图像，

其中，存储控制单元用于存储多条页面信息以及用于存储设备中的每个文件图像的多条对应信息，以便多条页面信息与多条对应信息分别相关联，每条页面信息表示预先指定的至少一个页面的范围，并且

确定单元，用于确定与包含在第二选择单元选择的文件图像的多个页面中、将要被投影到投影目标上的页面的一条页面信息相对应的一条对应信息，作为进行图像输出控制的对应信息。

14.根据权利要求8或9所述的系统，其中，投影控制单元用于控制向用户通知用于由识别确定单元所确定的对应信息的信息。

15.一种图像投影方法，包括：

识别用于投影单元正在投影到投影目标上的图像的指令动作；

存储对应信息，在所述对应信息中，对于存储其中的每种图像类型，多个指令动作分别与图像输出控制相关联；

基于投影单元正在投影的图像类型，确定用于图像输出控制的对应信息；以及

基于所确定的对应信息以及所识别的指令动作，执行与指令动作相关联的图像输出控制相对应的图像投影控制。