CN100407760C - 控制系统和适合于该系统的被控制装置以及遥控器 - Google Patents

Abstract

通过设置在遥控器上的摄像单元对液晶电视的外形进行摄像，当将摄像图像搭载在控制信号中从控制信号投射部提供给液晶电视时，在液晶电视侧根据与该摄像图像相关的梯形失真的程度算出遥控器(因此是视听者)相对于液晶电视的相对位置，调节左右的扬声器的音量平衡并使发声的指向性朝着视听者，以便适合于所算出的相对位置。另外，通过设置在遥控器上的相对位置检测单元检测遥控器的位置或移动轨迹，根据其模式来判断用户，选择适合于该用户的液晶电视的内容。

Description

控制系统和适合于该系统的被控制装置以及遥控器

技术领域

本发明涉及由作为被控制装置的例如电视接收机和与其对应的作为遥控器的例如遥控器等构成的控制系统、以及适合于该系统的被控制装置和遥控器。

背景技术

已经提出了很多如下所述的技术：使遥控器多功能化，为使用者提供由遥控器和通过该遥控器远程操作的设备等所构成的系统的操作上的各种便利。

例如，在日本特开2004-166193号公报中，提出了如下的技术：在遥控器中利用GPS用算法等，根据来自3个电波发送源的电波接收和接收时刻检测自己的位置，通过将所检测出的位置与预先准备的各设备的位置信息进行对照来确定离自己最近的设备，从该设备取得用于定义遥控器信号的信息和用于构建操作用图像的信息，在显示部上显示所确定的设备的操作用图像，根据用户操作来确定遥控器信号，在遥控器信号发送控制部中进行发送的控制，从而不用增加用户的按钮操作数，就能使用户更准确地指定希望控制的设备并控制该设备。

另外，在日本特开2004-187052号公报中，提出了如下的图像处理系统：在利用遥控器来操作投影仪的系统中，在投影仪侧，由自己的接收部接收具有摄像元件的遥控器所取得的投影区域摄像信息和方位信息，基于该接收的信息选择在查询表中预先准备的梯形失真校正值，根据该校正值来校正梯形失真。

另外，在日本特开2001-236181号公报中，提出了如下的技术：在利用激光笔来指示显示画面上的任意点的指示设备中，利用在遥控器侧所具有的CCD摄像机对包括从遥控器投射的激光点在内的显示画面进行摄像，根据通过该摄像得到的图像的光栅扫描等算出上述激光点的坐标，以无线方式将表示该坐标的数据从遥控器侧传输到电视机侧并在画面上映出指示点，从而能够从各种角度进行指示。

针对上述日本特开2001-236181号公报的提案，在日本特开2003-208260号公报中提出了如下的技术：根据由遥控器侧所具有的摄像装置所拍摄的光栅上的图像显示面的3个角的位置坐标和实际的图像显示面的3个角的位置坐标之间的比较，算出摄像图像的光栅中央坐标对应于实际画面的哪处的坐标，从而不需要从遥控器侧投射激光点等即可进行显示画面上的指示。

从可以选择内容或者调节音响效果以适应持有遥控器的使用者的位置的观点来看，上述的现有技术还留有下述的各种课题。即，在日本特开2004-166193号公报的技术中，理论上必须预先设置3个电波发送源以作为位置检测用的基准，因而很难利用比较简单的结构以相应的准确度来选择适合使用者的期望的设备作为控制对象。另外，在该特开2004-166193号公报的提案中，构成为无条件地将离遥控器(即持有该遥控器的使用者)的位置最近的某个设备选定为控制对象，所以不一定是使用者本来所希望的设备被选择。因此，当实际使用时，使用者自己必须接近设备，而不能期望按字义自动地选择意图操作的控制对象。

另外，在日本特开2004-187052号公报中所提出的技术中，只是在需要校正投影仪中的梯形失真的情况下取得遥控器的方位信息，并根据该取得的方位信息来执行梯形失真的校正，对于从与设备主体的相对关系的角度来识别遥控器(因此是使用者)并选择内容或调节音响效果以便适合于该识别的技术则没有任何启发性的教示。

并且，在特开2001-236181号公报的提案中，一直由遥控器侧的摄像单元对包括所投影的激光点在内的显示画面进行摄像，根据通过该摄像获得的影像信号的光栅扫描来取得激光点的位置坐标的数据，其宗旨与从与设备主体的相对关系的角度来识别遥控器的位置并选择内容或调节音响效果以便适合于该识别的技术不同。

另一方面，日本特开2003-208260号公报的提案如日本特开2001-236181号公报那样，仅限于不用从遥控器侧投射激光点等就能够进行在显示画面上的指示，既没有解决日本特开2001-236181号公报所记载的技术中的课题的意图，也没有关于从与设备主体的相对关系的角度来识别遥控器的位置并选择内容或调节音响效果以便适合于该识别的技术的提案。

另一方面，上述的任一专利文献所记载的技术也没有在如下的观点上提供有益的启发：能够根据遥控器的移动轨迹的特征来估计使用遥控器的使用者(作为被控制装置的影像音响装置的视听者)以选择与其相适应的内容，或者估计在与遥控器所存在的位置大概一致的位置处的可能性高的视听者的位置，以调节音响效果使得适合于遥控器(因此，是持有该遥控器的使用者)的位置。

发明内容

本发明是着眼于上述的现有技术中的课题而提出的，其目的是提供一种控制系统和适合于该系统的被控制装置以及遥控器，该控制系统可以进行以如下动作为一个例子的自动响应动作：能够使用设置在遥控器侧的摄像单元，从与被控制装置的相对关系的角度来识别遥控器的位置，并且在被控制装置中选择内容或调节音响效果以适合于该识别。

另外，本发明的目的还在于提供一种控制系统和适合于该系统的被控制装置以及遥控器，该控制系统可以进行如下动作：在遥控器侧设置以非接触的方式检测自己位置的相对变化的所谓陀螺仪等为一例的相对位置检测单元，能够根据该相对位置检测单元的检测输出来识别遥控器的移动轨迹和当前位置，并且根据该识别为有关装置的操作提供各种便利，例如在被控制装置中选择内容或调节音响效果以适合于所识别出的当前位置。

本发明从广义来说提供一种控制系统和适合于该控制系统的被控制装置以及遥控器，其根据遥控器相对于被控制装置的相对位置来控制被控制装置。在包括被控制装置和遥控器的控制系统中，可认为所述遥控器的位置数据代表了使用者的位置。遥控器根据该数据控制被控制装置。

根据本发明的一个方面，提供了一种包括遥控器和能被该遥控器控制的被控制装置而构成的控制系统，其特征在于，所述遥控器具有：独立于所述被控制装置而构成的壳体；摄像单元，其被设置在该壳体上，当朝向所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；信息传输单元，其将由所述摄像单元生成的图像信息传输到所述被控制装置侧，所述被控制装置具有：信息接收单元，其能够接收从所述遥控器的信息传输单元传输来的图像信息；相对位置计算单元，其根据由所述信息接收单元接收的图像信息计算该被控制装置与所述遥控器的相对位置。

本发明的针对改进的控制系统的上述至少一些实施方式的益处在于：利用设置在遥控器侧的摄像单元以包含被控制装置的摄像视野来进行摄像，将通过该摄像所取得的图像信息传输给被控制装置，从而在通过信息接收单元接收到所传输的图像信息的被控制装置侧，可以算出遥控器与被控制装置的相对位置。在识别了该算出的遥控器位置的被控制装置侧，能够进行适合于该识别的方式的动作。

根据本发明的另一方面，提供了一种能够被独立于自己而构成的预定的遥控器控制的被控制装置，其特征在于，具有：信息接收单元，其在从所述遥控器侧传输来由设置在所述遥控器上的摄像单元生成的包含有助于识别该被控制装置与所述遥控器的相对位置的信息的图像信息时，能够接收该传输的图像信息；以及相对位置计算单元，其根据通过所述信息接收单元所接收的图像信息来算出该被控制装置与所述遥控器的相对位置。

本发明的针对改进的被控制装置的上述至少一些实施方式的益处在于：当从所述遥控器侧传输来包含有助于识别该被控制装置与所述遥控器的相对位置的信息的图像信息时，通过自己的信息接收单元接收该传输来的图像信息，由相对位置计算单元根据所接收的图像信息算出该被控制装置与所述遥控器的相对位置。可以识别该算出的遥控器的位置而进行适合于该识别的方式的动作。

根据本发明的另一方面，提供了一种能够对被控制装置进行预定的控制、并独立于所述被控制装置而构成的遥控器，其特征在于，具有：摄像单元，其被设置在该遥控器自己的壳体上，当向着所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；信息传输单元，其将由所述摄像单元生成的图像信息传输给所述被控制装置侧。

本发明的针对改进的遥控器的上述至少一些实施方式的益处在于：能够利用自己的摄像单元以包含被控制装置的摄像视野来进行摄像，通过信息传输单元将通过该摄像所取得的图像信息传输给被控制装置。在接收到所传输的图像信息的被控制装置侧，可以从与被控制装置的相对关系的角度来计算遥控器的位置并识别该算出的遥控器的位置，从而进行适合于该识别的方式的动作。

根据本发明的另一方面，提供了一种包括遥控器和能够被该遥控器控制的被控制装置而构成的控制系统，其特征在于，所述遥控器具有：独立于所述被控制装置而构成的壳体；摄像单元，其被设置在该壳体上，当向着所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；与外部的信息处理装置进行通信的通信单元；信息取得传输单元，其将由所述摄像单元生成的图像信息通过所述通信单元转送给该信息处理装置，并取得作为对该转送的响应而从所述信息处理装置供给的关于所述被控制装置的关联信息，传输给所述被控制装置侧，所述被控制装置具有：信息接收单元，其能够接收由所述遥控器的信息取得传输单元传输来的该关联信息；相对位置识别单元，其利用由所述信息接收单元接收的该关联信息来识别该被控制装置与所述遥控器的相对位置；调节单元，其根据所述相对位置识别单元的识别进行预定的调节动作。

本发明的针对改进的控制系统的上述至少一些实施方式的益处在于：在所述遥控器中，通过通信单元将通过摄像取得的关于所述被控制装置的图像信息提供给外部的信息处理装置，通过利用该信息处理装置的高度的信息处理能力，在不过度增大自己的负担的情况下取得关于所述被控制装置的足够内容的关联信息，通过信息取得传输单元传输给所述被控制装置侧。在所述被控制装置侧，能够利用该传输的该关联信息来识别该被控制装置与所述遥控器的相对位置，根据该识别进行正确方式的动作。

根据本发明的另一方面，提供了一种构成为能够被独立于自己而构成的预定的遥控器控制的被控制装置，其特征在于，具有：信息接收单元，其能够通过自己的通信单元将所述遥控器通过其摄像单元生成的图像信息转送给外部的信息处理装置，并接收作为对该转送的响应而从该信息处理装置取得的关于所述被控制装置的关联信息；相对位置识别单元，其利用由所述信息接收单元接收的该关联信息来识别该被控制装置与所述遥控器的相对位置；以及调节单元，其根据所述相对位置识别单元的识别来进行预定的调节动作。

本发明的针对改进的被控制装置的上述至少一些实施方式的益处在于：能够通过自己的信息接收单元接收在所述遥控器中通过与具有比较高的信息取得处理能力的外部信息处理装置的联络而取得的关于该被控制装置的足够内容的关联信息，通过该接收的关于该被控制装置的足够内容的关联信息来识别与所述遥控器的相对位置，根据该识别来进行正确方式的动作。

根据本发明的另一方面，提供了一种能够对被控制装置进行预定的控制、独立于所述被控制装置而构成的遥控器，其特征在于，具有：摄像单元，其被设置在该遥控器自己的壳体上，当向着所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；与外部的信息处理装置进行通信的通信单元；信息取得传输单元，其将由所述摄像单元生成的图像信息通过所述通信单元转送给该信息处理装置，并取得作为对该转送的响应而从所述信息处理装置供给的关于所述被控制装置的关联信息，传输给所述被控制装置侧。

本发明的针对改进的控制系统的上述至少一些实施方式的益处在于：通过通信单元将通过自己的摄像单元的摄像而取得的关于所述被控制装置的图像信息提供给外部的信息处理装置，通过利用该信息处理装置的高度的信息取得处理能力，在不过度增大自己的负担的情况下取得关于所述被控制装置的足够内容的关联信息，通过信息取得传输单元传输给所述被控制装置侧。在所述被控制装置侧，能够利用该传输的该关联信息来识别该被控制装置与所述遥控器的相对位置，根据该识别进行正确方式的动作。

根据本发明的另一方面，提供了一种包括遥控器和能够被该遥控器控制的被控制装置而构成的控制系统，其特征在于，所述遥控器具有：独立于所述被控制装置而构成的壳体；摄像单元，其被设置在该壳体上，当向着所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；外形信息保存单元，其保存关于被预定为控制对象的一个以上的被控制装置的外形的信息；控制对象辨别单元，其根据由所述摄像单元取得的图像信息和在所述外形信息保存单元中保存的信息的相关度，来辨别作为控制对象的被控制装置；相对位置计算单元，其利用在所述外形信息保存单元中保存的关于被所述控制对象辨别单元辨别为被控制装置的装置的外形的信息、和由所述摄像单元取得的图像信息，算出所述被控制装置与该遥控器的相对位置；信息传输单元，其将由所述相对位置计算单元算出的表示所述被控制装置与该遥控器的相对位置的信息传输给所述被控制装置，所述被控制装置具有：信息接收单元，其能够接收从所述遥控器的信息传输单元传输的表示所述被控制装置与该遥控器的相对位置的信息；调节单元，其根据所述信息接收单元接收的信息执行预定的调节动作。

本发明的针对改进的控制系统的上述至少一些实施方式的益处在于：利用设置在遥控器侧的摄像单元以包含被控制装置在内的摄像视野来进行摄像，通过由该摄像所取得的图像信息与预先在自己的外形信息保存单元中保存的关于一个以上的被控制装置的外形的信息的对比来辨别作为控制对象的被控制装置，利用与对应于该辨别结果的被控制装置相关的外形等的信息和通过所述摄像而取得的图像信息来算出所述被控制装置与遥控器的相对位置，将所算出的表示所述被控制装置与遥控器的相对位置的信息传输给被控制装置，从而在通过信息接收单元接收到所传输的表示该相对位置的信息的被控制装置侧，能够进行适合于所述被控制装置与遥控器的相对位置的方式的调节动作。

根据本发明的另一方面，提供了一种能够对被控制装置进行预定的控制、并独立于所述被控制装置而构成的遥控器，其特征在于，具有：摄像单元，其被设置在该遥控器自己的壳体上，当向着所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；外形信息保存单元，其保存关于被预定为控制对象的一个以上的被控制装置的外形的信息；控制对象辨别单元，其根据由所述摄像单元取得的图像信息和在所述外形信息保存单元中保存的信息的相关度，来辨别作为控制对象的被控制装置；相对位置计算单元，其利用在所述外形信息保存单元中保存的关于被所述控制对象辨别单元辨别为被控制装置的装置的外形的信息、和由所述摄像单元取得的图像信息，算出所述被控制装置与该遥控器的相对位置；信息传输单元，其将由所述相对位置计算单元算出的表示所述被控制装置与该遥控器的相对位置的信息传输给所述被控制装置。

本发明的针对改进的遥控器的上述至少一些实施方式的益处在于：能够利用自己的摄像单元以包含被控制装置在内的摄像视野来进行摄像，通过由该摄像所取得的图像信息与预先在自己的外形信息保存单元中保存的关于一个以上的被控制装置的外形的信息的对比来辨别作为控制对象的被控制装置，利用与对应于该辨别结果的被控制装置相关的外形等的信息和通过所述摄像而取得的图像信息来算出所述被控制装置与遥控器的相对位置，将所算出的表示所述被控制装置与遥控器的相对位置的信息传输给被控制装置。所以在通过信息接收单元接收到所传输的表示该相对位置的信息的被控制装置侧，能够进行适合于所述被控制装置与遥控器的相对位置的方式的调节动作。

根据本发明的另一方面，提供了一种包括遥控器和能够被该遥控器控制的被控制装置而构成的控制系统，其特征在于，所述遥控器具有：独立于所述被控制装置而构成的壳体；相对位置检测单元，其被设置在该壳体上，以非接触的方式来检测自己的位置的相对变化；当前位置计算单元，其根据所述相对位置检测单元的检测输出，从与所述被控制设备的位置的相对关系的角度来算出该遥控器的当前位置，生成表示该位置的当前位置信息；信息传输单元，其将通过所述当前位置计算单元生成的当前位置信息传输到外部，所述被控制装置具有：信息接收单元，其接收从所述遥控器的信息传输单元传输的当前位置信息；工作模式选择单元，其根据由所述信息接收单元接收的当前位置信息进行工作模式的选择。

本发明的针对改进的控制系统的上述至少一些实施方式的益处在于：被控制装置侧能够根据从遥控器侧传输来的当前位置信息，从与自己的位置的相对关系的角度来识别该遥控器的位置，能够根据所识别的位置进行与占据该位置的可能性高的该控制系统的利用者(影像音响系统的情况下是视听者)相对应的工作模式的选择(影像音响系统的情况下是内容的选定或音响效果的调节等)。

根据本发明的另一方面，提供了一种能够被独立于自己而构成的预定的遥控器控制的被控制装置，其特征在于，具有：信息接收单元，其在所述遥控器依据自己的相对位置检测单元的检测输出从与该被控制装置的位置的相对关系的角度来算出该遥控器的当前位置、并将表示该位置的位置信息作为当前位置信息传输到外部时，接收该当前位置信息；工作模式选择单元，其根据由所述信息接收单元所接收的当前位置信息来进行工作模式的选择。

本发明的针对改进的被控制装置的上述至少一些实施方式的益处在于：可以根据从遥控器侧传输来的当前位置信息，从与自己的位置的相对关系的角度来识别该遥控器的位置，能够根据所识别的位置来进行与占据该位置的可能性高的该控制系统的利用者(在影像音响系统的情况下是视听者)相对应的工作模式的选择(在影像音响系统的情况下是内容的选定或音响效果的调节等)。

根据本发明的另一方面，提供了一种能够对被控制装置进行预定的控制并且具有独立于所述被控制装置的壳体的遥控器，其特征在于，具有：相对位置检测单元，其被设置在该壳体上，以非接触的方式来检测自己的位置的相对变化；当前位置计算单元，其根据所述相对位置检测单元的检测输出，从与所述被控制设备的位置的相对关系的角度来算出该遥控器的当前位置，生成表示该位置的当前位置信息；信息传输单元，其将通过所述当前位置计算单元生成的当前位置信息传输到外部。

本发明的针对改进的遥控器的上述至少一些实施方式的益处在于：可以根据相对位置检测单元的检测输出，从与被控制设备的位置的相对关系的角度来算出该遥控器的当前位置，生成表示该位置的当前位置信息，并提供给被控制装置，所以在接收到该当前位置信息的被控制设备侧，能够从与自己的位置的相对关系的角度来识别该遥控器的位置，根据所识别的位置进行与占据该位置的可能性高的该控制系统的利用者(影像音响系统的情况下是视听者)相对应的工作模式的选择(影像音响系统的情况下是内容的选定或音响效果的调节等)。

附图说明

虽然上述说明总结了用于特别指出并清楚阐明本发明的主题的发明特征，但相信通过下面的与附图联系起来的描述，本发明将变得更易于理解。

图1是表示作为本发明的实施方式的控制系统(液晶电视接收机系统)的示意图。

图2是表示图1的控制系统中的液晶电视机的电路结构的方框图。

图3是表示图1的控制系统中的遥控器的电路结构的方框图。

图4是用于说明在本发明的实施方式中使用的相对位置计算原理的示意图。

图5是表示作为本发明的实施方式的控制系统(液晶电视系统)的动作的概要的流程图。

图6是表示在本发明的另一实施方式中，在被控制装置(液晶电视)的显示画面上，放映出在计算遥控器相对于液晶电视的相对位置时的标识中所使用的位置标记的状态的示意图。

图7是表示在与图1(以及图14)的控制系统大致相同的控制系统中，遥控器通过通信单元进行与外部的信息处理装置的联络动作的实施方式的示意图。

图8是表示作为使用遥控器的通信单元来利用外部信息处理装置的功能的实施方式的控制系统的动作概要的流程图。

图9是表示作为使用遥控器的通信单元来利用外部信息处理装置的功能的另一实施方式的控制系统的动作概要的流程图。

图10是表示将本发明应用于水族馆的自动解说装置的实施方式的示意图。

图11是用于说明将本发明应用于空调遥控操作系统的实施方式的示意图。

图12是表示图11的空调遥控操作系统的动作概要的流程图。

图13是表示与图12的空调遥控操作系统相比减轻了遥控器侧的负担的空调遥控操作系统的动作概要的流程图。

图14是表示作为本发明的实施方式的控制系统(液晶电视系统)的示意图。

图15是表示图14的控制系统中的液晶电视的电路结构的方框图。

图16是表示图14的控制系统中的遥控器的电路结构的方框图。

图17是表示作为本发明的实施方式的控制系统的动作概要的流程图。

图18是表示作为本发明的另一实施方式的控制系统(液晶电视系统)的动作概要的流程图。

图19是用于说明在本发明的另一实施方式中，自动判定携带遥控器移动的用户的方法的图。

图20是表示作为本发明的另一实施方式的控制系统的动作概要的流程图。

图21是表示作为本发明的另一实施方式的控制系统的动作概要的流程图。

图22是用于说明用户拿着作为本发明实施方式的遥控器，对于预定的作为控制对象的被控制装置进行特定的举动从而使该遥控器识别被控制装置的状况的示意图。

图23是表示本发明的另一实施方式的动作的流程图。

图24是表示作为本发明的另一实施方式的控制系统(液晶电视系统)的动作概要的流程图。

图25是表示作为本发明的另一实施方式的控制系统(液晶电视系统)的动作的概要的流程图。

图26是表示本发明的另一实施方式的动作的流程图。

图27是表示将本发明应用于水族馆的自动解说装置的实施方式的示意图。

图28是表示本发明的另一实施方式的动作的流程图。

具体实施方式

本说明特别针对构成基于本发明的装置的一部分的要素或更直接地与基于本发明的装置相协作的要素。可以理解的是那些没有被特别示出或说明的要素可采用各种本领域的技术人员所熟知的形式。

在下面的说明中，通用的术语“装置(注：被控制装置被简称成“装置”。这里，其意思被定义成“被控制装置”)”被用作包括在遥控器的命令下接受控制的装置(例如，TV接收机或显示板设备)。下面，参照附图说明本发明的实施方式。

另外，在下面所参照的附图中，为了方便起见，作为发明的主题的主要部分适当夸大，而对于主要部分以外则适当简化乃至省略。

图1是表示包括被控制装置(液晶电视接收机主体)和遥控器(与该液晶电视接收机主体对应的遥控器)而构成的作为本发明的实施方式的控制系统(液晶电视接收机系统)的示意图。在图1中，作为被控制装置的液晶电视接收机主体(以下称为液晶电视)100能够从与其对应的遥控器200接收红外线等的控制信号，从而控制其动作。

液晶电视100在其壳体101上具有：放映影像的屏幕102；在比该屏幕102的底边更低的位置处构成立体声式音响装置的左侧扬声器103和右侧扬声器104；以及在该屏幕102的底边的右下方接收来自遥控器200的红外线等的控制信号Sc(利用双点划线来图示)的受光窗105。

另一方面，遥控器200具有能够配置在与液晶电视100(其壳体101)相分离的位置处的独立的壳体201，在壳体201上设置有：摄像单元210，在朝向液晶电视100侧进行摄像时能够生成包含有助于识别作为被控制装置的液晶电视100(其壳体101)和自己的壳体201的相对位置的信息(后述)的图像信息；控制信号投射部220，其具有对液晶电视100发出红外线等的控制信号Sc的红外LED等的发光元件。

并且，包括上述的液晶电视100和遥控器200而构成本发明的控制系统(液晶电视系统)100+200。并且，在红外线等的控制信号Sc中，除了表示用于根据操作者的任意操作而控制液晶电视100的信息本身的信号之外，还包括表示后述的图像信息的信号。

图2是表示图1的液晶电视100的电路结构的方框图。在解调/滤波部120中对由天线110接收的广播波进行解调，抽出传输流，进行用于取得视听者(用户)所选择的频道的影像和声音以及节目信息的滤波。将解调/滤波部120的影像输出提供给影像处理部130，将声音输出提供给声音处理部140，将节目信息提供给OSD部150。

根据影像处理部130的输出经由液晶驱动部131在液晶显示器160上放映出影像。另外根据OSD部150的输出在液晶显示器160的画面上以与上述影像相重叠的方式或占据画面内的一个区域的方式来显示节目信息和其它信息。另一方面，将声音处理部140的输出经由左右的放大器141、142提供给各对应的左右扬声器143、144，以发出立体声音。

设置对包括上述的解调/滤波部120和声音处理部140以及OSD部150的液晶电视100在内的系统整体进行统一控制的系统控制器170。向该系统控制器170供给包括接受视听者(用户)的操作的操作键等而构成的操作部171的输出，另外，以可访问的方式与存储器172连接，在需要的时候执行数据(信息)的存储和读出。

另一方面，进行连接使得如参照图1所述设置在上述的受光窗105的背后以接收控制信号Sc的受光元件181的输出经由包括信号放大电路等而构成的受光电路182被提供给系统控制器170。上述的左右放大器141、142被供给来自系统控制器170的控制信号，通过调整放大率来进行立体声音的均衡调节，但在本例中，如后面详细叙述的那样，可以根据遥控器(拿着遥控器的视听者)的所在(位置/方向)来适当地进行该均衡调节。

在上面的叙述中，构成了：位置标记放映单元，其包括对液晶电视100的系统整体进行统一控制的系统控制器170的相应功能部和OSD部150，在屏幕102上放映出后面参照图6所详细叙述的位置标记1021、1022、1023、1024；编码信息图案(pattern)放映单元，其在屏幕102上放映出以QR码(注册商标)等二维条形码为例的编码信息图案1025。

图3是表示遥控器200的电路结构的方框图。包括参照图1所说明的发出红外线等的控制信号Sc的红外LED等发光元件在内的控制信号投射部220与系统控制器230连接，该系统控制器230对遥控器200的电路系统进行统一控制，作为主要构成要素包含执行各种运算的微处理器，上述控制信号投射部220根据来自该系统控制器230的指令发出所需控制信号Sc。

另外，设置有作为参照图1所说明的摄像单元210的摄像元件211和摄像电路212。该摄像电路212在系统控制器230的控制下驱动摄像元件211进行摄像，读出通过该摄像而取得的图像信号并进行所需的信号转换，将生成的图像数据提供给系统控制器230。

向系统控制器230输入来自设置在遥控器200的壳体201上的用于进行频道切换操作等的操作键231的操作信号，并且，能够对存储器232进行访问以进行数据的收发。系统控制器230还与用于进行与个人计算机这样的外部信息处理装置进行通信的外部设备接口240连接。

图4是用于说明利用摄像单元(摄像机)对方形的电视接收机的画面或其外侧的壳体等形状/尺寸已知的被摄体进行摄像，根据通过该摄像所取得的图像的状态来确定该被摄体与摄像机的相对位置这样的在本发明的实施方式中使用的相对位置计算原理的示意图。在图4中，假定利用摄像机20对作为已知被摄体的电视接收机的画面10进行摄像，通过该摄像生成由图像数据表示的图像30。

电视接收机的画面10的水平方向的尺寸为W，垂直方向的尺寸为H分别是已知的。通过摄像机20的镜头21使该画面10在摄像元件的摄像面22上成像，作为光电转换后的输出得到由图像数据表示的图像30。如果摄像机20的位置正对着作为被摄体的电视接收机的画面10的中央，则图像30的形状与实际的画面10具有相似的关系，但如果位于偏离这样的正对位置的位置处，则作为摄像结果的图像30的形状如图所示变为梯形，产生所谓梯形失真。

现在，已知作为被摄体的画面10的水平方向的尺寸为W，垂直方向的尺寸为H，设作为通过摄像机20的摄像而取得的图像信息(由图像数据表示的图像30)的图像的梯形失真的梯形像的各尺寸是长边为a，短边为b，高为c。从摄像机20到作为被摄体的画面10的距离D可以根据摄像倍率(镜头21的焦距)和像上述的W和c的关系那样的各对应部分间的尺寸关系算出，或者也可以利用在小型摄像机等中经常使用的基于三角测距原理的众所周知的自动对焦(active AF)的方法来简单地算出。

因此，根据上述的表示画面10的水平方向的尺寸W、垂直方向的尺寸H、梯形像的高度c、长边a、短边b、距离D的数据的关系，算出摄像机偏离正对作为被摄体的画面10的中央的位置(法线方向)的程度，作为角度θ。即，如果准备好了上述各数据，则能够根据这些数据算出被控制装置(电视接收机)与遥控器的相对位置。

在实际的装置中，在根据上述原理计算被控制装置(电视接收机)与遥控器的相对位置的情况下，对于上述W、H、c、a、b、D，将表示它们在实用范围内可能取得的值之间的关系的数据集中到查询表中。在由电视接收机100算出上述相对位置的实施方式的情况下，在图2结构的存储器172中预先存储用于保持这样的数据的查询表，系统控制器170在需要的时刻，参照该查询表来算出角度θ。

另外，如后面参照图11和图12所说明的实施方式中那样，在遥控器200侧计算上述相对位置的情况下，同样在图3结构的存储器232中预先存储用于保持这样的数据的查询表，系统控制器230在需要的时刻，参照该查询表来算出角度θ。这种情况下，因为在遥控器200侧算出上述相对位置，所以在电视接收机100侧，可以从遥控器200侧接收作为计算结果的相对位置信息，进行适当的调整动作。

并且，也可以采用下面的方法来取代如上述那样通过参照预先在存储器中准备的查询表来计算被控制装置(电视接收机)与遥控器的相对位置的方法，即：利用例如系统控制器的相应功能部来构成梯形失真运算单元，该梯形失真运算单元使用在被控制装置侧通过其信息接收单元所接收的图像信息中的有助于识别该被控制装置与所述遥控器的相对位置的信息(例如，表示在已知大小的方形的四个角处设置在相应位置上的特定位置标记的标记信息等)来执行求出梯形失真的运算，使用这样的梯形失真运算单元的运算结果和预先准备的可利用的与该被控制装置的外形尺寸有关的信息，来算出该被控制装置和所述遥控器的相对位置。

图5是表示包括上述的液晶电视100和遥控器200而构成的作为本发明的实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。下面，适当参照该流程图和上述的各图，对本发明的实施方式进行更详细的描述。并且，将图5的流程图抽象表现为可以在多种变形例中共用的相应程度。

在图5中，首先，在具有图3的结构的遥控器200侧，在动作开始后，进行其摄像单元210(摄像元件211+摄像电路212)的摄像(S201)。接着，在S201中所取得的图像数据通过作为信息传输单元的系统控制器230(其相应的功能部)和控制信号投射部220转换成红外线等的控制信号Sc来进行投射，从而被传输(S202)，该被投射的信号Sc被图2的液晶电视100的受光元件181接收，通过受光电路182进行预定的信号转换，并提供给系统控制器170(S101)。由受光元件181和受光电路182以及系统控制器170(其相应的功能部)构成信息接收单元。

接着，在液晶电视100的作为相对位置计算单元的系统控制器170中，使用所接收的表示图像的信息(与信号Sc对应的图像数据)，执行基于参照图4所说明的原理的处理，算出作为被控制装置的液晶电视100与遥控器200的相对位置(S102)。在液晶电视100侧(图2)，根据这样算出的自己100与遥控器200的相对位置，从系统控制器170发出指令，通过调节左右放大器141、142的放大率，调节左右扬声器143、144的音量，来调整发声的指向方向(S103)，使得在遥控器200的所在位置(将该位置附近推测为视听者的所在位置)能进行最佳的视听，最后结束一系列的动作。

根据上述的控制系统，利用设置在遥控器(遥控器200)侧的摄像单元，以包含被控制装置(液晶电视100)在内的摄像视野来进行摄像，将通过该摄像所取得的图像信息传输给被控制装置，从而在通过信息接收单元接收到所传输的图像信息的被控制装置侧，能够算出遥控器与被控制装置的相对位置。在识别出该算出的遥控器位置的被控制装置侧，能够进行适合于该识别的方式的动作。

这里，所谓识别出遥控器的位置后的适合于该识别的方式的动作，例如是指如下的动作：调节左右扬声器143、144的发声的指向方向使其沿着遥控器200(因此，是指拿着该遥控器200，或者处于接近遥控器200的位置处的视听者)的方向的音量均衡调节，或者优先选择放映适合于在该位置处的可能性高的特定视听者(例如，如果是液晶电视100的画面侧面的位置则是一家之主，如果是正对中央的位置则是夫人，如果是它们的中间位置则是小孩等)的内容等动作。

在参照图5的流程图所说明的实施方式的一个变形例中，在遥控器200侧，在还发挥外形信息保存单元的功能的存储器232中预先保存关于被预定为控制对象的一个以上的被控制装置的外形的信息，利用构成为还发挥控制对象辨别单元的功能的系统控制器230，根据摄像单元所拍摄的图像信息与存储器232中所保存的关于被控制装置的外形的信息的相关度来辨别应作为控制对象的被控制装置。

如果这样构成遥控器200侧，则遥控器200自己通过自己的控制对象辨别单元来辨别应作为控制对象的被控制装置，所以能够识别适合于所辨别出的被控制装置的控制指令的编码体系和规格以进行精确的控制。更具体地说，在步骤S202的图像信息的传输中，能够将在S201中取得的图像数据转换成适合于上述编码体系的红光外等的控制信号Sc，并投射到液晶电视100上，所以对于控制指令的编码体系不同的多个被控制装置能够共同使用一个遥控器200。

在上述的变形例中，也可以在遥控器200侧的存储器232中，保存由合适的摄像单元预先摄像而取得的与预定为所述控制对象的一个以上的被控制装置的外形相关的图像。这样，在遥控器200通过自己的控制对象辨别单元(系统控制器230)来辨别应作为控制对象的被控制装置时，可以将与预定为控制对象的被控制装置本身的外形相关的图像提供为该辨别的基准，进行控制对象的正确的辨别。

图6是在本发明的另一实施方式中，在作为被控制装置的液晶电视100的显示画面(屏幕102)上放映出当根据参照图4所说明的梯形失真来计算遥控器200相对于液晶电视100的相对位置时的标识中所使用的位置标记的状态的示意图。在图6的例子中，在屏幕102内，如图所示，放映出相互的水平方向距离为W、垂直方向距离为H的4个位置标记1021、1022、1023、1024。

在如图6所示放映出位置标记的系统中，可以将该标记信息的水平方向距离W、垂直方向距离H作为参照图4所说明的各已知值W、H来使用，从而算出被控制装置(液晶电视100)与遥控器(遥控器200)的相对位置。通常，可将这样具有单纯形状的亮点的影像从摄像图像中作为不同的图案而容易地抽出，应用被准确抽出的信息，根据作为梯形失真运算单元来发挥功能的系统控制器230的梯形失真运算来算出上述的相对位置。

在图6的实施方式中，放映出了被控制装置(液晶电视100)的上述4点的位置标记1021、1022、1023、1024，但除此之外还放映出了在遥控器(遥控器200)侧可识别的编码信息图案1025。该编码信息图案1025是例如QR码(注册商标)等的二维条形码。

在被控制装置侧放映出这样的编码信息图案1025，通过利用该编码信息图案1025来表示例如4点位置标记1021、1022、1023、1024间的水平和垂直方向的间隔、被控制装置自己的规格(合适的控制指令的编码体系)的信息，在遥控器(遥控器200)侧如果以包含这些位置标记1021、1022、1023、1024以及编码信息图案1025在内的摄像视野来进行摄像，则能够容易且准确地获得有助于识别被控制装置(液晶电视100)与所述遥控器(遥控器200)的相对位置的信息。

图7是表示在与参照图1所说明的控制系统(液晶电视系统)100+200大致相同的控制系统中，遥控器(遥控器200)通过通信单元(参照图3所述的外部设备接口240)进行与外部的信息处理装置的联络动作的实施方式的示意图。在图7中与上述的图1相对应部分使用相同符号来表示。

液晶电视100构成为能够接收来自与其对应的遥控器200的红外线等的控制信号以控制其动作。液晶电视100在其壳体101上具有：放映影像的屏幕102；在比该屏幕102的底边更低的位置处构成立体声式音响装置的左侧扬声器103和右侧扬声器104；以及在该屏幕102的底边的右下方、接收来自遥控器200的红外线等的控制信号Sc(利用双点划线表示)的受光窗105。

另一方面，遥控器200具有能被设置在与液晶电视100(其壳体101)相分离的位置处的独立的壳体201，在该壳体201上设置有：摄像单元210，其在朝向液晶电视100侧进行摄像时能够生成包含有助于识别作为被控制装置的液晶电视100(其壳体101)与自己的壳体201的相对位置的信息的图像信息；控制信号投射部220，其具有向液晶电视100发出红外线等的控制信号Sc的红外LED等发光元件。

并且，包括上述的液晶电视100和遥控器200而构成本发明的控制系统(液晶电视系统)100+200。并且，在红外线等的控制信号Sc中，除了表示用于根据操作者的任意操作来控制液晶电视100的信息本身的信号之外，还包括表示后述的图像信息的信号，这一点与参照图1所说明的实施方式相同。

如参照图3所说明的那样，在遥控器200中还具有作为通信单元的外部设备接口240，其与作为外部信息处理装置的个人计算机300进行通信。更严谨地说，由外部设备接口240和与其连接的系统控制器230中的相应功能部等构成通信单元。由于个人计算机300还与接口400连接，所以除了自己所保存的数据之外，还能够通过接口400取得并使用各种数据。

根据图7的控制系统，除了图1的控制系统的作用之外，通过该通信单元来利用外部的信息处理装置的功能，从而能够以简单的结构来进行更高一层的控制，而不会大幅增加所述遥控器自己的负担。

图8是表示作为使用遥控器的通信单元来利用外部信息处理装置的功能的实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。下面，适当参照该流程图和上述的各图，对本发明的实施方式进行更详细的叙述。并且，也将图8的流程图抽象表现为能够在多种变形例中共用的相应程度。

在图8中，首先，在具有图3的结构的遥控器200侧，在开始动作后，利用其摄像单元210(摄像元件211+摄像电路212)进行摄像(S211)。接着，根据作为外形信息取得单元的系统控制器230的相应功能，通过通信单元(240+230的相应功能部)取得与被预定为控制对象的一个以上的被控制装置的外形相关的信息(S212)。

并且，作为控制对象辨别单元的系统控制器230根据之前在步骤S211中由摄像单元210所取得的在摄像视野内包含了控制对象的图像中的相应控制对象的像与在步骤S212中取得的关于被控制装置的外形的信息之间的相关度，辨别应作为控制对象的被控制装置(S213)。当在步骤S213中辨识出被控制装置时，在遥控器(遥控器200)侧，能够识别适合于被控制装置的控制指令的编码体系和规格以进行正确的控制。

遥控器200使用以适合于上述被控制装置的控制指令的编码体系为基准的方式的码，将在步骤S211中取得的在摄像视野中包含了控制对象的图像传输给作为控制对象的液晶电视100(S214)。在液晶电视100侧，接收这样传送过来的图像信息(S111)，如上所述算出遥控器200与液晶电视100的相对位置(S112)，根据该相对位置调节左右放大器141、142的放大率，调节左右扬声器143、144的音量从而调节发声的指向方向，以便进行最佳的视听(S113)，并结束一系列的动作。

图9是表示使用遥控器的通信单元来利用外部信息处理装置的功能的另一实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。下面，适当参照该流程图和上述的各图对本发明的实施方式进行更详细的叙述。并且，也将图9的流程图抽象表现为能够在多种变形例中共用的相应程度。

在图9中，首先，在具有图3的结构的遥控器200侧，在开始动作后，利用其摄像单元210(摄像元件211+摄像电路212)进行摄像(S221)。接着，将在步骤S221中取得的摄像的图像数据通过通信单元(240+230的相应功能部)传输给作为外部信息处理装置的个人计算机300(S222)。

在个人计算机300侧，当接收到在步骤S222中所传输的图像数据时，适当地使用该图像数据、根据需要经由接口300取得等从而准备好的数据以及运算算法等，来准备与该图像数据相关联的被控制装置的规格和其它数据，并作为关联信息返回给遥控器200，在遥控器200侧通过通信单元(240+230的相应功能部)来取得该关联信息(S223)。遥控器200将在步骤S223中取得的关联信息传输给作为被控制装置的液晶电视100(S224)。

上述中，在步骤S222中将通过摄像所取得的图像数据传输到个人计算机300侧，在步骤S223中通过通信单元取得由于来自个人计算机300侧的响应而供给的该图像数据的关联信息，在步骤S224中将所取得的关联信息传输到液晶电视100侧，上述各功能是由作为信息取得传输单元的系统控制器230和各关联功能部来提供的。

在液晶电视100侧，接收在步骤S224中向自己传送的关联信息(S121)，根据所接收的关联信息由作为相对位置识别单元的系统控制器170识别被控制装置(液晶电视100)与遥控器(遥控器200)的相对位置(S122)，根据该识别调节左右放大器141、142的放大率，调节左右扬声器143、144的音量从而调节发声的指向方向(S123)，并结束一系列的动作。

在参照图9所说明的实施方式中，将在遥控器(遥控器200)中通过摄像所取得的关于被控制装置(液晶电视100)的图像信息通过通信单元提供给外部的信息处理装置(个人计算机300)，通过利用个人计算机300的高度的信息取得处理能力，可以取得关于液晶电视100的足够内容的关联信息并通过信息取得传输单元传输给液晶电视100，而不会过度地增大遥控器200侧的负担。

在被控制装置(液晶电视100)侧，能够利用该传输的相应关联信息来识别被控制装置(液晶电视100)与遥控器(遥控器200)的相对位置，根据该识别来进行正确方式的动作。例如，通过利用外部的信息处理装置(个人计算机300)的高度信息取得处理能力，在该信息处理装置中甚至能够取得表示被控制装置(液晶电视100)与遥控器(遥控器200)的相对位置的信息作为上述关联信息。

这样，可以采用如下的结构：被控制装置(液晶电视100)侧不用等待特别的运算，就可以依据已经求出的作为关联信息的表示相对位置的信息来识别被控制装置(液晶电视100)与遥控器(遥控器200)的相对位置，根据该识别来调节左右放大器141、142的放大率，调节左右扬声器143、144的音量从而调节发声的指向方向，被控制装置(液晶电视100)侧的结构也能够简化。

图10是表示将本发明应用于水族馆的自动解说装置的实施方式的示意图。图示的例子是在适当的时刻针对全景式的巨大回游水缸中的生物自动广播声音解说的系统。在该由亚克力厚板形成的透明屏幕SR的中间标准位置处，以预定的间隔，贴有或通过适当的光学单元投影有以参照图4所说明的4个点为一组的多组标记区域MK1、MK2、…。

另外，沿着屏幕SR的下边在前面一侧形成带状的阶梯并突出，从而形成将电缆类、电路或其它设备进行隐蔽的设备收纳部EM。在形成该设备收纳部EM的阶梯的肩部，按照与多组标记区域MK1、MK2、…大致对应的间隔，设置有红外信号受光部IR1、IR2、…，还与这些红外信号受光部IR1、IR2、…分别相邻接地设置了发出解说声音的扬声器LS1、LS2、…。

各个游客SP1、SP2、…分别携带结构与图3大致相同的具有摄像单元的遥控器RC1、RC2、…。当由各遥控器RC1、RC2、…的摄像单元对标记区域MK1、MK2、…进行摄像时，通过这些摄像所获得的标记区域MK1、MK2、…的图像数据通过红外线的信号被自动传输给红外信号受光部IR1、IR2、…，通过设置在设备收纳部EM内的设备，与参照图4所说明的相同，算出各相应的遥控器RC1、RC2、…的位置，因而确定携带遥控器的观众SP1、SP2、…的位置。

当确定了游客SP1、SP2、…的位置时，从设置在各游客SP1、SP2、…位置附近的扬声器LS1、LS2、…朝着该游客SP1、SP2、…自动广播关于进入或将要进入其视野的生物的解说。即，成为解说对象的水族馆内的生物的位置是例如利用被动声纳的原理探测贴在各生物个体上的超声波标签所产生的信号来确定的，根据基于来自遥控器RC1、RC2、…的信号而确定的游客位置判断位于其视野内的生物并从扬声器LS1、LS2、…广播相应的解说。

如图所示，当位于屏幕SR的左手边的游客SP1使用遥控器RC1通过其摄像单元对标记区域MK1进行摄像时，如上所述确定该游客的位置，从最接近于游客SP1的位置处的扬声器LS1，按照向着游客SP1的指向性，针对正经过游客SP1的视野的巨双髻鲨gh广播如下的解说：“现在，正经过拿着1号遥控器的游客面前的是巨双髻鲨。”“它是真鲨目，双髻鲨科的鱼类，生活在世界上的温带到热带海洋里。有些个体甚至能成长至6米长，是双髻鲨科中的最大的种类。…”。

同样，向着位于屏幕SR的右边正有绿海龟cm来到眼前的游客SP2，从扬声器LS2按照向着游客SP2的指向性广播如下的解说：“现在，来到拿着2号遥控器的游客的正面的是绿海龟。”“它是龟鳖目、海龟科的爬行动物类，生活在热带到温带的海洋中，或者生活在地中海，壳长有80厘米到1米以上的…”。即使同时从扬声器LS1和LS2广播上述的解说，因为分别以合适的指向性来广播关于各自所关注的对象的解说，所以游客SP1、SP2能够进行视听而不会去更多地注意干扰。

另外，上述例子是应用于全景式大型水族箱的例子，而对于将有限种类的生物进行细分来饲养并展示的比较小型的水族箱，如果采用根据游客的位置以最佳的或自适应的指向性来广播与游客的视野相适应的解说的结构，则在一定程度的黑暗和噪声环境下也能够实现非常容易听清的舒适的自动解说系统。

在应用于上面的水族馆的实施方式中，根据情况，也可以将解说显示在设置于遥控器上的显示屏上。另外，在特别小型的水族箱中，因为成为说明对象的生物所移动的范围是有限的，所以可以省略通过被动声纳来捕捉贴在大型水族箱中的各个生物上的超声波标签的信号的设备。

图11是用于说明将本发明应用于空调的遥控操作系统中的实施方式的示意图。图中的示例表示使用可自适应地对应各种控制对象的遥控器MR来遥控操作空调AC的情况。使用者HU手中拿的遥控器MR采用与参照图3所说明的大致相同的具有摄像单元的结构。使用者HU通过该遥控器MR来遥控操作空调AC，但除了任意的手动操作之外还可以进行下面所说明的自动调节。

图12是表示图11的空调的遥控操作系统的动作概要的流程图。在图12中，首先，在具有图3的结构的遥控器MR侧，在动作开始后，通过其摄像单元使空调AC(其室内机，下面称为空调AC)进入摄像视野并对其进行摄像(S221)。接着，根据在作为外形信息保存单元的存储器232中所保存的被预定为控制对象的一个以上的被控制装置的外形与摄像图像中的空调AC的像之间的相关度，来执行被控制装置的辨别(S222)。

当在S222中确定了被控制装置时，接着，从作为规格信息保存单元的存储器232中读出与被控制装置的类型相对应的空调AC的形状尺寸和所应用的控制信号的编码体系等数据(规格信息)(S223)。接着，通过作为相对位置计算单元的系统控制器230的相应功能，根据参照图4所说明的原理算出遥控器MR相对于空调AC的相对位置(S224)。

遥控器MR使用依据在步骤S223中取得的适合于空调AC的控制指令的编码体系的方式的码，将在步骤S224中算出的表示遥控器MR相对于空调AC的相对位置的相对位置信息传输给作为控制对象的空调AC(S224)。在空调AC侧，接收这样传输来的图像信息(S121)。

空调AC根据在步骤S121中接收的表示遥控器MR相对于空调AC的相对位置的相对位置信息，调节设置在吹出温度调节后的空气的空气吹出口处的风向调节用的风叶LV的角度(S122)，结束与风向自动调节相关的一系列动作。空调AC除了上述的自动进行风向调节和温度调节的功能之外，还通过模式切换，利用手动模式由受光窗RW接收来自遥控器MR的红外线指令，并执行合适的调节动作以进行风向调节和温度调节。

图13是表示与图12的示例相比减轻了遥控器侧的负担的空调的遥控操作系统的动作概要的流程图。在图13中，首先，在具有与图3相同的结构的遥控器MR侧，在动作开始后，进行将空调AC包含进摄像视野内的摄像(S231)。接着，根据在作为外形信息保存单元的存储器232中所保存的被预定为控制对象的一个以上的被控制装置的外形与摄像图像中的空调AC的像之间的相关度，来执行用于确定被控制装置的辨别(S232)。

当在步骤S232中确定了被控制装置时，接着，从作为规格信息保存单元的存储器232中读出与被控制装置的类型相对应的空调AC的形状尺寸和所应用的控制信号的编码体系等数据(规格信息)(S233)。通过作为信息传输单元的系统控制器230(其相应的功能部)和控制信号投射部220，将在步骤S231中所取得的图像信息转换成符合步骤S233中所识别的规格信息的红外线等的控制信号Sc进行投射，从而传输图像信息(S234)。

由空调AC的受光窗RW接收该投射的信号Sc(S131)，根据这样所接收的图像信息，通过空调AC侧的作为相对位置计算单元的系统控制器等中的相应功能部和存储部(上述的查询表)，按照参照图4所说明的原理，算出遥控器MR相对于空调AC的相对位置(S132)。

空调AC根据在步骤S132中算出的表示遥控器MR相对于空调AC的相对位置的相对位置信息，使内部的风向调节用伺服机构相应地动作，调节设置在吹出温度调节后的空气的空气吹出口处的风向调节用的风叶LV的角度(S133)，使风向朝着使用者HU，并结束与风向自动调节相关的一系列动作。

图14是表示包括被控制装置(液晶电视接收机主体)和遥控器(与液晶电视接收机主体对应的遥控器)而构成的作为本发明的另一实施方式的控制系统(液晶电视接收机系统)的示意图。在图14中，作为被控制装置的液晶电视接收机主体(下面称为液晶电视)100从与其对应的遥控器200接收红外线等的控制信号，以控制其动作。

液晶电视100在其壳体101上具有：放映影像的屏幕102；在比其屏幕102的底边更低的位置处构成立体声式音响装置的左侧扬声器103和右侧扬声器104；以及在该屏幕102的底边的右下方接收来自遥控器200的红外线等的控制信号Sc(利用双点划线来图示)的受光窗105。

另一方面，遥控器200具有能够设置在与液晶电视100(其壳体101)相分离的位置处的独立的壳体201，在该壳体201内设置有：检测自己的位置的相对变化的相对位置检测单元；控制信号投射部220(图16)，其具有对液晶电视100发出红外线等的控制信号Sc的红外LED等发光元件。

并且，包括上述的液晶电视100和遥控器200而构成本发明的控制系统(液晶电视系统)100+200。并且，在红外线等的控制信号Sc中，除了表示用于根据操作者的任意操作而控制液晶电视100的信息本身的控制信号之外，还包括表示用于进行液晶电视100与遥控器200之间的通信的信息的信号。

在本例中，在液晶电视100的例如向着画面在左侧部附近等的固定位置处设置有用于对遥控器200内的工作电源即二次电池进行充电的电池充电器500，在遥控器200不使用时将其连接到该电池充电器500上，以对内部的二次电池进行充电来使用。如后面所述，遥控器200具有用于检测自己的位置以作为与液晶电视100的位置之间的相对位置的当前位置计算单元，但构成为当连接到该电池充电器500上的时候对与检测位置相关的累积误差进行复位。

当遥控器200不使用时，被放置在该电池充电器500的虚线所图示的位置上，通过未图示的接触部相连接，对内部的二次电池进行充电，当使用时如点划线示意性地示出其移动轨迹那样取下来，使得位置和姿势改变，在对液晶电视100进行遥控操作时前端部对着液晶电视100。作为对本发明实施方式的特征性处理的一例，如后面所述，在最终成为上述的位置/姿势的过程中，经由示意性地由该点划线所示的姿势到达实线所示的最终姿势，或者如空箭头所示，通过在固定位置进行摆动之类的动作等使得该用户被识别或认证。

图15是表示图14的液晶电视100的电路结构的方框图。在解调/滤波部120中对由天线110接收的广播波进行解调，抽出传输流，进行用于取得视听者(用户)所选择的频道的影像和声音以及节目信息的滤波。将解调/滤波部120的影像输出提供给影像处理部130，将声音输出提供给声音处理部140，将节目信息提供给OSD部150。

根据影像处理部130的输出经由液晶驱动部131在液晶显示器160上放映影像。另外根据OSD部150的输出在液晶显示器160的画面上以与上述影像相重叠的方式或占据画面内的一个区域的方式来显示节目信息和其它信息。另外，后述的指示也是通过经由OSD部150在液晶显示器160的画面上的目的位置上显示特定的标记等来进行的。

另一方面，将声音处理部140的输出经由左右的放大器141、142提供给各自对应的左右扬声器143、144，发出立体声音。设置了对包括上述的解调/滤波部120和声音处理部140以及OSD部150在内的液晶电视100的系统整体进行统一控制的、包含微处理器作为主要构成要素的系统控制器170。

该系统控制器170被供给包括接受视听者(用户)的操作的操作键等而构成的操作部171的输出，另外，以可访问的方式与存储器172连接，在需要的时候执行数据(信息)的存储和读出。系统控制器170通过其各相应功能部的工作而发挥作为发明的主要构成要件的各单元的功能。

另一方面，进行连接，使得经由包括信号放大电路等而构成的、将由遥控器信号接收部181所接收的信号转换成适合于系统控制器170的处理的信号的遥控器信号解码部182，将如参照图14所述的设置在上述受光窗105的背后以接收控制信号Sc的遥控器信号接收部181的输出提供给系统控制器170。

上述的左放大器141、右放大器142分别被供给来自系统控制器170的控制信号，以调节放大率，由此进行立体声音的均衡调节，但在本例中，如后面详细叙述的那样，可以根据遥控器(因此是拿着遥控器的视听者)的所在(位置/方向)来合适地进行该均衡调节。

在上面的叙述中，由遥控器信号接收部181和遥控器信号解码部182构成信息接收单元，该信息接收单元接收在遥控器200侧生成并传输的从与被控制设备的位置的相对关系的角度来表示该遥控器的当前位置的当前位置信息，由系统控制器170的相应功能部构成工作模式选择单元，该工作模式选择单元根据由该信息接收单元所接收的当前位置信息来进行工作模式的选择。

图16是表示图14的控制系统中的遥控器200的电路结构的方框图。在参照图14所说明的独立壳体201上设置有由以非接触方式来检测自己位置的相对变化的公知的惯性传感器或所谓陀螺仪等构成的相对位置检测单元261。设置有通过例如滤波处理等来调节该相对位置检测单元261的检测特性的检测特性调节单元262，并连接成将其输出提供给系统控制器230。

系统控制器230对遥控器200的电路系统进行统一控制，并包括执行各种运算的微处理器作为主要构成要素，通过其各相应功能部的工作而发挥作为发明的各主要构成要件的各单元的功能。参照图14所说明的包括发出红外线等的控制信号Sc的红外LED等发光元件在内的控制信号投射部220根据来自上述系统控制器230的指令发出所需的控制信号Sc。

对系统控制器230输入来自设置在遥控器200的壳体201上的具有用于进行频道切换操作等的操作键的操作部231的操作信号，并且，与存储器232连接以便能够进行访问以进行数据的收发，另外，还与用于与个人计算机这样的外部信息处理装置进行通信的外部设备接口240连接。

另外，在该遥控器200上还特别设置了充电连接检测部251，当与参照图14所说明的电池充电器500连接时，其检测出处于连接状态，并连接成将其检测输出输入给系统控制器230。响应于该充电连接检测部251的检测输出而起动参照图14简单说明的关于遥控器200的计算位置的累积误差的复位动作。

图17是表示包括上述的液晶电视100和遥控器200而构成的作为本发明的实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。下面，适当参照该流程图和上述的各图，对本发明的实施方式进行更详细的描述。并且，将图17的流程图抽象表现为可在多种变形例中共用的相应程度。

在图17中，首先，在具有图16的结构的遥控器200侧，在动作开始后，其相对位置检测单元261检测自己位置的相对变化，对该检测输出进行检测特性调节单元262的合适的检测特性调节处理，并提供给系统控制器230，从而由系统控制器230的相应功能部所构成的当前位置计算单元从与被控制设备(液晶电视100)的位置的相对关系的角度来算出该遥控器(遥控器200)的当前位置，生成表示该位置的当前位置信息(S201)。

此处，在检测特性调节处理中，根据位置计算单元的位置运算的目的来调节当前位置计算单元的输出特性，以便适合于所要求的灵敏度特性和响应特性、或滤波程度等的特性。通过该检测特性调节处理获得适当特性的检测输出，并且确保作为遥控器的动作的准确性、精度，确保相应的被控制装置的动作的准确性、精度。

接着，在S201中所生成的当前位置信息通过作为信息传输单元的系统控制器230(其相应的功能部)和控制信号投射部220被转换成红外线等的控制信号Sc进行投射，从而被传输(S202)，该所投射的信号Sc被图15的液晶电视100的遥控器信号接收部181所接收，通过遥控器信号解码部182进行预定的信号转换并被提供给系统控制器170(S101)。

由遥控器信号接收部181、遥控器信号解码部182和系统控制器170(其相应的功能部)构成信息接收单元。如上述那样由信息接收单元所接收的遥控器的当前位置信息被系统控制器170(其相应的功能部)解读(S102)，根据这样所解读的遥控器的当前位置信息，通过系统控制器170(其相应的功能部)所实现的工作模式选择单元，执行例如内容的选择和扬声器143、144的声音指向性选择等工作模式的选择(S103)，并结束预定的一系列处理。

这里，根据遥控器的当前位置来进行内容的选择是指，例如优先选择适合于处于该位置的可能性高的特定视听者(例如，如果是液晶电视100的画面侧面的位置则是一家之主，如果是正对中央的位置则是夫人，如果是它们的中间位置则是小孩等)的内容来进行放映等动作。作为具体的结构，例如在参照图15所说明的液晶电视100的存储器172中将成为这些选择基准的信息预先集中准备在查询表中，可以通过适当地参照该查询表来进行合适的选择。

另外，扬声器143、144的声音指向性选择是如下来进行的：根据遥控器200相对于液晶电视100的相对位置，从系统控制器170发出指令，调节左右放大器141、142的放大率，调节左右扬声器143、144的音量从而来调节发声的指向方向，以便在遥控器200的所在位置(该位置的附近被推测为视听者的所在位置)能进行最佳的视听。

另一方面，在遥控器200侧，在步骤S202中传输了当前位置信息后，结束要一应执行的处理，但根据通常的使用方法，在将遥控器200放回到参照图14所说明的电池充电器500中以连接成对内部的二次电池进行充电的情况下，如参照图16所说明的那样，用于检测连接到电池充电器500的状态的充电连接检测部251的检测输出被输入给系统控制器230。

响应于该连接检测部251的检测输出，通过系统控制器230的作为累积误差复位单元的功能部，对与当前位置计算单元的算出位置相关的累积误差进行复位(S203)。即，在识别到充电连接检测部251的检测输出的时刻，使遥控器200的当前位置的值与电池充电器500所设置的坐标位置一致。从而也结束遥控器侧的处理。

如上所述，由于每当遥控器被放回到作为其固定位置的电池充电器500中以进行用于充电的连接时都能够对与当前位置计算单元的算出位置相关的累积误差进行复位，所以能够维持与当前位置计算单元的算出位置相关的位置信息的准确性，并且将作为遥控器的动作的准确性、精度确保在高标准，将相应的被控制装置的动作的准确性、精度确保在高标准。

图18是表示包括液晶电视100和遥控器200而构成的作为本发明的另一实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。在图18中，首先，在具有图16的结构的遥控器200侧，在动作开始后，与参照图17所说明的相同，由其相对位置检测单元261、检测特性调节单元262和系统控制器230的相应功能部构成的当前位置计算单元算出该遥控器(遥控器200)的当前位置，生成表示该位置的当前位置信息，但在本例中，还通过系统控制器230的相应功能部所实现的移动轨迹信息生成单元生成与遥控器200的移动轨迹相关的移动轨迹信息(S211)。

接着，在步骤S211中所生成的当前位置信息和移动轨迹信息与图17的步骤S202同样，通过信息传输单元被传输给作为被控制装置的液晶电视100(步骤S212)，在液晶电视100侧通过信息接收单元接收这些信息(S111)，根据所接收的移动轨迹信息，通过由系统控制器170(其相应的功能部)构成的用户识别单元来识别用户，并且根据当前位置信息来识别遥控器的当前位置(S112)。用于识别用户的方法有多种，在后面对其例子进行叙述。

根据在步骤S112中所识别的用户与遥控器的当前位置的状况来选择工作模式(内容或声音的指向方向等)(S113)。该步骤S113是在图17的步骤S103中优先选择并放映适合于特定的视听者(对应于S113中的用户)的内容等的动作。作为具体的结构，例如在存储器172中预先集中准备每个用户的嗜好倾向等的信息作为查询表，可以通过适当地对其进行参照来进行合适的选择，但进一步还根据遥控器的当前位置的状况，来进行调节使得音响的指向方向变得合适。

在步骤S112中，根据移动轨迹信息来识别用户是例如按如下所述来进行的。即，在图14中，当用户从与上述的电池充电器500连接的不使用时的固定位置(虚线所示)将遥控器200拿在手里，并经由点划线所示出的轨迹L1所示的移动路径拿到其使用位置(实线所示)时，采用根据该移动轨迹的倾向的特征来判定此时的用户这样的方法来执行。

在遥控器侧的步骤S212的动作之后与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S213)，结束处理。液晶电视侧的动作随着上述步骤S113的执行而结束。另外，可以将遥控器多功能化以便能够以一台遥控器对应多台电视、立体声设备或刻录装置，甚至空调等。

图19是说明遥控器是多功能机且为了进行各种家用电器产品的控制，例如在如家庭那样的多个用户中的一个用户根据时机在家中拿着遥控器移动的情况下，自动地判定该用户的方法的图。现在，在住宅(自家)1000中，设当用户从未图示的二楼的卧室下楼梯1001时经由盥洗室1002，到达设置有液晶电视100的餐厅1003为止的移动路线即移动轨迹为L2。

另外，在到达餐厅1003后，设为了绕过沙发1004的背后而取到放置在液晶电视100的左侧附近的电池充电器500上的遥控器200，而在餐厅1003内移动时的移动路线即移动轨迹为L3。并且，设将遥控器200拿在手中坐到沙发1004的自己的固定位置为止的移动路线即移动轨迹为L4。采用合适的公知的方法让遥控器学习这些移动轨迹L2、L3、L4等的特征，根据实际的移动轨迹与通过学习而累积的特征的相关度，来判定此时的用户。

另外，在如该使用例那样，用户拿着遥控器经由如上述的楼梯1001那样的有特征性的加速度作用的场所而移动的情况下，也可以利用楼梯1001的场所与在该场所通过惯性传感器等所实现的相对位置检测单元261带有显著特征地检测出的与相对位置变化相关的检测输出信号之间的对应关系，在楼梯1001这样的特殊地点进行上述的累积误差的复位，而不是在放置到电池充电器500上连接时进行复位。

另外，建议按照如下那样构成系统，即：关注于从与这样的屋内的特殊地点的相对关系的角度，来正确把握拿着遥控器的用户的当前位置，例如在识别出用户位于二楼的书房(未图示)的情况下，禁止与设置在书房中的控制对象设备以外的设备相关的控制信号的发送动作，在识别出位于餐厅1003中的情况下，禁止设置在其中的设备以外的设备的控制信号的发送动作等，降低违反用户意图的动作和无用的电力消耗的发生。

图20是表示包括液晶电视100和遥控器200而构成的作为本发明的另一实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。在图20中，首先，在具有图16的结构的遥控器200侧，在动作开始后，与参照图18所说明的相同，由其相对位置检测单元261、检测特性调节单元262和系统控制器230的相应功能部构成的当前位置计算单元算出该遥控器(遥控器200)的当前位置，生成表示该位置的当前位置信息，还通过由系统控制器230的相应功能部所实现的移动轨迹信息生成单元生成关于遥控器200的移动轨迹的移动轨迹信息(S221)。

接着，根据在步骤S221中所生成的移动轨迹信息，通过由系统控制器230(其相应的功能部)构成的用户识别单元来识别用户(S222)。与图17的步骤S202同样，将表示在步骤S222中识别出的用户的用户识别信息和在步骤S221中已经生成的当前位置信息，通过信息传输单元传输给作为被控制装置的液晶电视100(步骤S223)，在液晶电视100侧通过信息接收单元接收这些信息(S121)。

接着，在液晶电视100侧根据在步骤S121中所接收的信息来识别用户和遥控器的当前位置(S122)。与图18的步骤S113相同，根据在步骤S122中所识别的用户与遥控器的当前位置的状况来选择工作模式(内容或声音的指向方向等)(S123)。该步骤S123是在图17的步骤S103中优先选择并放映适合于特定的视听者(对应于S113中的用户)的内容等动作。

作为具体的结构，例如在存储器172中预先集中准备每个用户的嗜好倾向等的信息作为查询表，可以通过适当地对其进行参照来进行合适的选择，但进一步还根据遥控器的当前位置的状况，来进行调节使得音响的指向方向变得合适。遥控器侧的步骤S223的动作之后与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S224)，结束处理。液晶电视侧的动作随着上述步骤S123的执行而结束。

图21是表示包括液晶电视100和遥控器200而构成的作为本发明的另一实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。在图21中，首先，在具有图16的结构的遥控器200侧，在动作开始后，与参照图20所说明的相同，由其相对位置检测单元261、检测特性调节单元262和系统控制器230的相应功能部构成的当前位置计算单元算出该遥控器(遥控器200)的当前位置，生成表示该位置的当前位置信息，还通过由系统控制器230的相应功能部所实现的移动轨迹信息生成单元生成关于遥控器200的移动轨迹的移动轨迹信息(S231)。

接着，根据在步骤S231中所生成的移动轨迹信息，当在该信息中包含被预定为与用户的特定举动相对应的特定移动方式信息时，通过由系统控制器230(其相应的功能部)构成的特定移动方式信息抽出单元抽出该特定移动方式信息(S232)。对于这里的用户的特定举动和特定移动方式信息，后面参照附图进行说明。

图22是说明用户拿着遥控器，通过对作为预定的控制对象的被控制装置进行特定的举动使该遥控器识别被控制装置的状况的示意图。图22中的液晶电视100与参照图14所说明的液晶电视相同，在其壳体101上具有：放映影像的屏幕102；在比该屏幕102的底边更低的位置处构成立体声式音响装置的左侧扬声器103和右侧扬声器104；以及在该屏幕102的底边的右下方接收来自遥控器200的红外线等的控制信号的受光窗105。

现在，当未图示的用户拿着遥控器200，有意地进行用于使该遥控器识别被控制装置的状况的特定举动时，生成被预定为与该特定举动相对应的特定移动方式信息。即，进行如下的举动：在距离液晶电视100的屏幕102预定距离(例如合适的视听距离)的位置处将遥控器200从屏幕的左上端向着右下端沿对角线DL例如描画一个来回。

当依据由遥控器200的惯性传感器等构成的相对位置检测单元261、检测特性调节单元262和系统控制器230的相应功能部所构成的当前位置计算单元生成的上述的当前位置信息、系统控制器230的相应功能部的移动轨迹信息生成单元生成的移动轨迹信息，当上述举动对应于被预定为与用户的特定举动相对应的特定移动方式信息时，由系统控制器230的相应功能部所实现的特定移动方式信息抽出单元抽出该特定移动方式信息。作为上述的特定举动，只要在开始的学习时事先分配能够对按照被预定为控制对象的被控制装置的各规格进行严格区别的各个特定方式的动作即可。

回到图21的流程图。当在步骤S232中抽出特定移动方式信息时，接着，识别作为与通过系统控制器230的相应功能部所实现的控制对象识别单元所抽出的特定移动方式相对应的控制对象的被控制装置(S233)，利用与该被控制装置相适应的方式的信号，通过信息传输单元向该被控制装置(本例中是液晶电视100)传输表示控制装置(遥控器)的位置和移动轨迹的信息(S234)。

如上所述，在本实施方式中，能够利用与被识别为作为控制对象的被控制装置的装置相适应的方式的信号向该被控制装置准确地传输例如遥控器的当前位置的信息、用于进行期望的操作的指令等信息。在作为本例的该被控制装置的液晶电视100侧，接收在步骤S234中所传输的信息(S131)，与参照图17、图18或图20所说明的相同，根据该所接收的信息来执行工作模式的选择等(S132)。

遥控器侧的步骤S234的动作之后与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S235)，结束处理。液晶电视侧的动作随着上述步骤S132的执行而结束。

图23是表示本发明的另一实施方式的流程图。遥控器200在框图上的结构与图16相同，作为被控制装置的液晶电视100也与图15相同。由用户对遥控器200的操作部进行用于选择使用目的的类别的操作，由系统控制器230的相应功能部所实现的使用目的识别单元来识别其使用目的(S241)。

其使用目的例如指将该遥控器200用作指示设备，或者用于用户的判定。与在步骤S241中所识别的使用目的相对应的设备有多个。例如，即使是应用于相同的指示对象的电视机，也既有适合于很多人观看的大型液晶电视的情况，也有与其相比为小型的电视机。

因此，用户如参照图22所说明的那样，例如对于意图使用的液晶电视100将遥控器200朝着屏幕102沿其对角线LD进行描画一个来回的特定的举动，与图21的步骤S231～步骤S233相同，使遥控器200确定实际所使用的被控制装置(S242)。在该步骤S242的执行中，由与图21的情况相同的相对位置检测单元、移动轨迹信息生成单元、特定移动方式信息抽出单元和控制对象识别单元来发挥作用。

在遥控器200中，执行控制指令信号(码)的类别、操作部231的操作键的功能的定义等控制的准备动作以便适合于在步骤S242中所确定的被控制装置(该例中为液晶电视100)(S243)。接着，通过检测特性调节单元262(以及系统控制器230的相应功能部)调节由惯性传感器等构成的相对位置检测单元261的检测特性，以便适合于在步骤S242中所确定的被控制装置和在步骤S241中所识别的使用目的(S244)。

根据以步骤S244中调节后的检测特性工作的相对位置检测单元261的检测输出，与上述同样地生成位置信息、移动轨迹信息(S245)，利用通过控制对象识别单元所识别出的适合于作为控制对象的被控制装置的方式的信号，通过信息传输单元将这些信息传输给被控制装置(液晶电视100)(S246)。在液晶电视侧接收所传输的信息(S141)，根据所接收的信息能够正常地执行以指示等为目的的动作(S142)。

遥控器侧的步骤S246的动作之后与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S247)，结束处理。液晶电视侧的动作随着上述步骤S142的执行而结束。根据参照图22所说明的实施方式，可以根据使用目的，来优化例如检测灵敏度特性等的检测特性，这之后根据该方式下的相对位置检测单元的检测输出来进行期望的检测，并且可以利用适合于作为上述识别结果的被控制装置的方式的信号，将例如用于进行希望的操作的指令等信息准确地传输给该被控制装置。

图24是表示包括液晶电视100和遥控器200而构成的作为本发明的另一实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。在图23中，首先，在具有图16的结构的遥控器200侧，在动作开始后，与参照图18所说明的相同，由该相对位置检测单元261、检测特性调节单元262和系统控制器230的相应功能部构成的当前位置计算单元算出该遥控器(遥控器200)的当前位置，生成表示该位置的当前位置信息，还通过由系统控制器230的相应功能部实现的移动轨迹信息生成单元生成与遥控器200的移动轨迹相关的移动轨迹信息(S251)。

接着，根据在步骤S251中所生成的移动轨迹信息，通过由系统控制器230的相应功能部实现的控制对象推测单元来推测作为控制对象的被控制装置(S252)。接着，通过由系统控制器230的相应功能部所实现的准备动作起动信息生成单元，生成使在步骤S252中所推测的作为控制对象的被控制装置起动工作用的准备动作的准备动作起动信息(S253)。

这里，用于进行工作的准备动作是指例如与供给电源或准备内容这样的目的的动作的准备相当的动作。包含在步骤S253中生成的准备动作起动信息的信息通过上述的信息传输单元传输给该被控制装置(本例中是液晶电视100)(S254)。在液晶电视100侧，接收该准备动作起动信息(S151)，响应所接收的准备动作起动信息执行与以供给上述电源或准备内容为目的的动作的准备相当的动作(S152)。

遥控器侧的步骤S254的动作之后与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S255)，结束处理。液晶电视侧的动作随着上述步骤S152的执行而结束。根据参照图23所说明的实施方式，根据例走向着特定被控制装置的用户的沿着移动路线的移动轨迹的移动轨迹信息来推测作为控制对象的被控制装置。

在参照上述的图19所说明的例子中，例如因为移动轨迹L2、L3等是一家之主向餐厅1003的液晶电视100的遥控器的电池充电器500移动时的路线，所以可能存在作为控制对象的被控制装置被推测为液晶电视100这样的情况，因而生成使这样被推测出的被控制装置起动例如用于供给电源或准备内容这样的准备动作的准备动作起动信息。在接收到准备动作起动信息的液晶电视100侧，可以基于此来起动上述的准备动作，可以实现从用户侧来看具有优秀的响应性的系统。

图25是表示包括液晶电视100和遥控器200而构成的作为本发明的另一实施方式的控制系统(液晶电视系统)100+200的动作概要的流程图。在图25中，首先，在具有图16的结构的遥控器200侧，在动作开始后，与参照图18所说明的相同，由该相对位置检测单元261、检测特性调节单元262和系统控制器230的相应功能部构成的当前位置计算单元算出该遥控器(遥控器200)的当前位置，生成表示该位置的当前位置信息，还通过由系统控制器230的相应功能部所实现的移动轨迹信息生成单元生成关于遥控器200的移动轨迹的移动轨迹信息(S261)。

通过由系统控制器230的相应功能部所实现的移动历史保存单元逐一地保存与在步骤S261中获得的信息相关的作为遥控器200的移动位置或移动轨迹在时间序列下的形态的移动历史信息(S262)。在步骤S261中生成的当前位置信息与对应于该位置的被控制装置侧的工作方式之间的关系随时间而不相同，因此两者的关系是一对多的对应关系。

例如，即使遥控器(因此是用户或视听者)位于相同位置，也会出现如下的情况：作为内容，如果时间是平时的早上，则关于天气预报或交通状况的新闻的优先顺序高，如果是休息日夜晚时间段，则关于艺术或娱乐的内容的优先顺序高。

因此，在该实施方式中，根据在步骤S262中所保存的移动历史信息来推测用户，并且通过由系统控制器230的相应功能部所实现的时刻管理单元来进行计时动作以得到时刻信息，考虑所推测的用户的与时刻相对应的行动类型等，通过由系统控制器230的相应功能部所实现的工作方式选择信息生成单元，执行将上述那样处于一对多的对应关系中的当前位置信息与被控制装置侧的工作方式的关系缩减到一对一的关系的处理(S263)。换言之，步骤S263的动作是生成用于规定被控制装置在任意时刻应该采用的工作方式的工作方式选择信息。

通过上述的信息传输单元，将表示通过步骤S263缩减为一对一关系的当前位置信息与被控制装置侧的工作方式之间的关系的工作方式选择信息传输给液晶电视100侧(S264)。液晶电视100侧接收该工作方式选择信息(S161)，根据所接收的工作方式选择信息，执行内容选择等的工作模式的选择(S162)。

遥控器侧的步骤S264的动作之后与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S265)，结束处理。液晶电视侧的动作随着上述步骤S162的执行而结束。根据参照图24所说明的实施方式，通过考虑时刻信息、遥控器(遥控器200)的移动历史信息和遥控器200的当前位置信息的各信息，来选择在某个被管理的时刻(任意时刻)被控制装置(液晶电视100)应采用的工作方式，从而生成工作方式选择信息，并传输给被控制装置侧。在接收到该工作方式选择信息的被控制装置侧能够选择考虑了上述各信息的方式的动作。

图26是表示本发明的另一实施方式的动作的流程图。在该实施方式中，作为遥控装置的遥控器的方框图具有图16所示的结构，具有：指示信息生成单元(系统控制器230的相应功能部)，其根据相对位置检测单元261的检测输出生成用于确定被控制装置(例如液晶电视)的显示画面(屏幕102)上的位置来进行指示的指示信息；移动轨迹信息生成单元(系统控制器230的相应功能部)，其根据上述相对位置检测单元261的检测输出生成关于遥控器200的移动轨迹的移动轨迹信息；用户识别单元(系统控制器230的相应功能部)，其根据由该移动轨迹信息生成单元生成的移动轨迹信息生成用于识别用户并表示该识别的用户识别信息。

并且，还具有模式选择单元(系统控制器230的相应功能部)，其用于选择如下的三种模式中的任意一个模式，即：根据该当前位置计算单元的当前位置信息来检测自己的位置的位置检测模式、根据上述指示信息来确定液晶电视100的屏幕102上的位置以进行指示的指示模式、根据上述用户识别信息来识别用户的用户识别模式。

在动作的开始，该遥控器(遥控器200)判定通过用户对自己的操作部231的操作而被选择操作的工作模式(S271)。当步骤S271中的判定结果是指示模式时，通过检测特性调节单元262对相对位置检测单元261的检测特性进行调节以适合于指示模式(S272)，根据对检测特性进行了这样的调节的相对位置检测单元261的检测输出来执行预定的指示动作(S273)。

当步骤S271中的判定结果是位置检测模式时，通过检测特性调节单元262对相对位置检测单元261的检测特性进行调节以适合于位置检测模式(S274)，根据对检测特性进行了这样的调节的相对位置检测单元261的检测输出来执行预定的位置检测动作(S275)。另一方面，当步骤S271中的判定结果是用户识别模式时，通过检测特性调节单元262对相对位置检测单元261的检测特性进行调节以适合于用户识别模式(S276)，根据对检测特性进行了这样的调节的相对位置检测单元261的检测输出来执行预定的用户识别动作(S277)。

指示动作(S273)、位置检测动作(S275)、用户识别动作(S277)结束后，与参照图17所说明的步骤S203相同，对与当前位置计算单元的算出位置相关的累积误差进行复位(S278)，结束处理。在图25的实施方式中，可以选择性地采用检测自己的位置的位置检测模式、确定相应的被控制装置的显示画面上的位置来进行指示的指示模式、识别用户的用户识别模式的各模式中的任意模式来发挥功能，并且根据所选择的模式来调节相对位置检测单元的检测特性使其变得合适，所以能够将作为遥控器的动作的准确性、精度确保在高水平，并且也将被控制装置侧的动作的准确性、精度确保在高水平。

图27是表示将本发明应用于水族馆的自动解说装置的实施方式的示意图。图示的例子是在适当的时刻针对全景式的巨大回游水族箱中的生物自动广播声音解说的系统。沿着由亚克力厚板形成的透明屏幕SR的下边在前面一侧形成带状的阶梯并突出，从而形成将电缆类、电路或其它设备进行隐蔽的设备收纳部EM。在形成该设备收纳部EM的阶梯的肩部，以适当的间隔，设置有红外信号受光部IR1、IR2、…，还与这些红外信号受光部IR1、IR2、…相邻地设置发出解说声音的扬声器LS1、LS2、…。

各个游客SP1、SP2、…分别携带具有结构与图16大致相同的相对位置检测单元的遥控器RC1、RC2、…。在各遥控器RC1、RC2、…中根据相对位置检测单元的检测输出分别如上所述那样检测当前位置和移动轨迹，利用红外线信号将表示检测出的结果的信息自动传输给红外信号受光部IR1、IR2、…，通过设置在设备收纳部EM内的设备，识别出各相应的遥控器RC1、RC2、…的位置，即携带它们的游客SP1、SP2、…的位置。

当识别出游客SP1、SP2、…(遥控器RC1、RC2、…)的位置时，从分别被设置在各游客SP1、SP2、…的位置附近的扬声器LS1、LS2、…朝着该游客SP1、SP2、…自动广播关于进入或将要进入其视野内的生物的解说。即，成为解说对象的水族箱内的生物的位置是例如利用被动声纳的原理来探测贴在各生物个体上的超声波标签所产生的信号来算出的，根据基于来自遥控器RC1、RC2、…的信号而识别出的游客的位置来判断位于其视野内的生物并从扬声器LS1、LS2、…广播相应的解说。

如图所示，当位于屏幕SR的左手边的游客SP1使用遥控器RC1在希望解说的时刻操作操作部的相应的声音起动要求按钮时，如上所述识别其位置，从最接近于游客SP1的位置处的扬声器LS1，按照向着游客SP1的指向性，针对正经过游客SP1的视野的巨双髻鲨gh广播如下的解说：“现在，正经过拿着1号遥控器的游客面前的是巨双髻鲨。”“它是真鲨目，双髻鲨科的鱼类，生活在世界上的温带到热带海洋里。有些个体甚至能成长至6米长，是双髻鲨科中的最大的种类。……”。

同样，向着位于屏幕SR的右边正有绿海龟cm来到眼前的游客SP2，从扬声器LS2按照向着游客SP2的指向性广播如下的解说：“现在，来到拿着2号遥控器的游客的正面的是绿海龟。”“它是龟鳖目、海龟科的爬行动物类，生活在热带到温带的海洋中，或者生活在地中海，壳长有80厘米到1米以上的……”。即使同时从扬声器LS1和LS2广播上述的解说，因为分别以合适的指向性来广播关于各自所关注的对象的解说，所以游客SP1、SP2能够进行视听而不会去更多地注意干扰。

另外，上述例子是应用于全景式大型水族箱的例子，但对于将有限种类的生物进行细分来饲养并展示的比较小型的水族箱，如果采用根据游客的位置以最佳的或自适应性的指向性来广播与游客的视野相适应的解说的结构，则在某种程度的黑暗和噪声环境下也能够实现能非常容易听清的舒适的自动解说系统。

在应用于上面的水族馆的实施方式中，根据情况，也可以将解说显示在设置于遥控器上的显示屏上。另外，在特别小型的水族箱中，因为成为说明对象的生物所移动的范围是有限的，所以可以省略通过被动声纳来捕捉贴在大型水族箱中的各个生物上的超声波标签的信号的设备。

上述的图7是表示在与参照图14所说明的控制系统(液晶电视系统)100+200大致相同的控制系统中，遥控器(遥控器200)通过通信单元(参照图16所述的外部设备接口240)来进行与外部的信息处理装置的联络动作的实施方式的示意图。图7中与图14的对应部分使用相同符号。

液晶电视100接收来自与其对应的遥控器200的红外线等的控制信号，以控制其动作。液晶电视100在其壳体101上具有：放映影像的屏幕102；在比其屏幕102的底边更低的位置处构成立体声式音响装置的左侧扬声器103和右侧扬声器104；以及在该屏幕102的底边的右下方接收来自遥控器200的红外线等的控制信号Sc(利用双点划线来图示)的受光窗105。

另一方面，遥控器200具有能够设置在与液晶电视100(其壳体101)相分离的位置处的独立的壳体201。其内部结构的方框图与图16相同。并且，包括上述的液晶电视100和遥控器200而构成本发明的控制系统(液晶电视系统)100+200。并且，在红外线等的控制信号Sc中，除了表示用于根据操作者的任意操作来控制液晶电视100的信息本身的信号之外，还包括表示关于液晶电视与遥控器间的通信的各种信息的信号，这一点与参照图14所说明的实施方式相同。

如参照图16所说明的那样，遥控器200中具有作为通信单元的外部设备接口240，其与作为外部信息处理装置的个人计算机300进行通信。更严谨地说，由外部设备接口240和与其连接的系统控制器230中的相应功能部等构成通信单元。

由于个人计算机300还与接口400连接，所以除了自己所保存的数据之外，还能够通过接口400取得并使用各种数据。因此，根据图28的控制系统，除了图14的控制系统的作用之外，通过该通信单元来利用外部的信息处理装置的功能，从而能够以简单的结构来进行更高一层的控制，而不会大幅增加所述遥控器自己的负担。

在遥控器200中，为了进行参照图14～图25所说明的动作，必须预先进行所需的学习，并将其结果存储在存储器231中。另外，在通过改建等变更了如参照图19所说明的房子内部的布局的情况下，或者在即使没有变更房子内部的布局，但改变了液晶电视的设置、其它家具类的设置，从而改变了本系统的预定的用户移动路线的情况下，每次都必须修正学习内容。

在图7的系统中，可以提供对应于这样的变更而进行重新学习的情况下的支援程序，或者可以为用户提供如下的各种便利：针对房子内部的布局属于已定的改建模式等情况，寻求取得与修正后的布局对应的建筑平面图的方法等，通过上述通信单元取得信息，或者接受指导或支援等。

在上述所说明的系统中，在识别(在参照图19的说明中表现为判定，下面称为判定)用户的处理中，虽然说明了根据遥控器的位置或移动轨迹来自动判定的情况，但也可以在该处理中采用对话形式的人机界面的方法。即，虽然图18中的被控制装置(液晶电视100)侧的步骤S112的处理、图20中的控制装置(遥控器200)侧的步骤S222的处理以及图13中的控制装置(遥控器200)侧的步骤S277的处理中的任意一个处理都是进行自动判定，但也可以在其用户判定处理中导入对话形式的方法。

图28是对在用户判定处理中导入对话形式的方法的例子进行说明的流程图。在该流程图中，抽象表现为对应于在控制装置(遥控器200)侧执行用户判定处理的情况和在被控制装置(液晶电视100)侧执行用户判定处理等的情况的双方。当进入该处理时，首先，针对作为控制装置的遥控器200(因此是拿着遥控器的用户)的位置或移动轨迹的信息(下面称为移动轨迹信息)，根据与该移动轨迹信息和用户的对应关系相关的已知信息(在第一次的时候设定合适的所谓默认值的信息)与新检测出的信息的相关性，推测是用户的可能性的从高到低顺序(S281)，显示出可识别实际用户(S282)。

在遥控器200中显示该显示的情况下，设置公知方式的液晶显示部并在其上进行显示，或者向对应的液晶电视传输用于显示的信号并在其屏幕上进行显示。进行待机直至有来自用户的关于对该显示进行视认并判断优先顺序适合与否的响应(S283)，根据响应内容，判断有无来自实际用户的对所显示的优先顺序的变更指示(S284)。

当有来自用户的优先顺序的变更指示时(该情况下，在步骤S282的显示中最高位所显示的用户名不是该实际的用户，实际的用户为了使自己变为最高位而移动光标，通过在相应位置处按下决定按钮等适当的操作而发出变更指示)，更新既定的优先顺序的信息以更新关于判断的正确程度的学习内容(移动轨迹信息与用户的每一个对应关系的发生频率的统计值等)(S285)。

紧接着步骤S285，将更新后的优先顺序为最高位的用户(即，由实际的用户进行了使自己变为最高位的操作的用户)决定为判定对象(S286)。另一方面，当没有来自用户的优先顺序的变更指示时(该情况下，步骤S282的显示中在最高位所显示的用户名与该实际的用户没有不同，实际用户通过按下决定按钮等适当的操作来表示现状的判断是正确)，维持既定的优先顺序的信息，将关于现状的优先顺序的判断的正确性作为高正确性来进行学习(S287)。

在如步骤S285那样更新既定的优先顺序的信息，并且该实际的用户将其优先顺序变更为最高位的情况下，将在该改变后的优先顺序中的最高位的顺序的用户判定为该用户(S286)，另一方面，在如步骤S287那样不更新既定的优先顺序的信息的情况下，将现状下的最高位的优先顺序的用户判定为该用户(S288)，结束用户判定处理。

通过在用户判定处理中采用上述的对话形式的人机界面的方法，使得使用次数越高越能够提高判定的精度，可以实现越使用越能够提高使用性的系统。因此，能够以高精度辨别性情类似的用户并进行正确判定。另外，一旦一个通过学习了特殊的移动(改变遥控器的姿势或摇动等动作)来判定自己的用户被其他用户读取了动作，则通过使本系统学习其它的动作或移动轨迹与用户的不同对应关系，也能够实现隐私的保护。

在上述本发明的各种实施方式中，在上述的遥控器那样的方式的设备中，因为能够识别拿着该设备的用户，或者安装了或附带了该设备的电子设备的位置，所以在像该电子设备是电波的接收装置这样的情况下，考虑依赖于其位置，选择最适合于接收的频带这样的应用。即，作为例子，在利用多种波段来广播相同内容的内容等情况下，根据当前位置的信息来选择应用的波段。或者，在如移动广播那样只能够从南侧的卫星进行接收的情况下，在根据位置或方位信息确认了天线位于南侧的情况的状况下，接收来自卫星的电波，如果不是处于这种状况下则自动切换到来自辅助天线(gap filler)的接收。

在以上的各实施方式中，在装置间的通信中可使用Bluetooth(注册商标)和IEEE802.11b或IEEE802.11g等。另外也可以利用便携电话那样的便携式信息终端作为上述的遥控器，根据表示相对位置的信息切换到利用了无线IP网的通话，或者利用Bluetooth(注册商标)来提供声音信息等。

Claims (8)

1.一种包括遥控器和能被该遥控器控制的被控制装置而构成的控制系统，其特征在于，

所述遥控器具有：独立于所述被控制装置而构成的壳体；摄像单元，其被设置在该壳体上，当朝向所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；以及信息传输单元，其将由所述摄像单元生成的图像信息传输到所述被控制装置侧，

所述被控制装置具有：信息接收单元，其能够接收从所述遥控器的信息传输单元传输来的图像信息；以及相对位置计算单元，其根据由所述信息接收单元接收的图像信息计算该被控制装置与所述遥控器的相对位置，

其中，所述被控制装置的相对位置计算单元构成为：利用由所述信息接收单元接收到的图像信息中的作为有助于识别该被控制装置与所述遥控器的相对位置的信息的表示特定位置标记的标记信息、和预先准备的可利用的关于该被控制装置的外形尺寸的信息，算出该被控制装置与所述遥控器的相对位置。

2.根据权利要求1所述的控制系统，其特征在于，所述被控制装置还具有信息保存单元，其保存所述预先准备的可利用的关于该被控制装置的外形尺寸的信息。

3.根据权利要求1所述的控制系统，其特征在于，所述被控制装置还具有位置标记放映单元，其在所述被控制装置自己的显示部上放映作为有助于识别该被控制装置与所述遥控器的相对位置的信息的特定位置标记。

4.一种包括遥控器和能被该遥控器控制的被控制装置而构成的控制系统，其特征在于，

所述遥控器具有：独立于所述被控制装置而构成的壳体；摄像单元，其被设置在该壳体上，当朝向所述被控制装置侧进行摄像时能够生成包含有助于识别所述被控制装置与该遥控器的相对位置的信息的图像信息；以及信息传输单元，其将由所述摄像单元生成的图像信息传输到所述被控制装置侧，

所述被控制装置具有：信息接收单元，其能够接收从所述遥控器的信息传输单元传输来的图像信息；以及相对位置计算单元，其根据由所述信息接收单元接收的图像信息计算该被控制装置与所述遥控器的相对位置，

其中，所述被控制装置的相对位置计算单元具有梯形失真运算单元，其利用由所述信息接收单元接收到的图像信息中的作为有助于识别该被控制装置与所述遥控器的相对位置的信息的表示特定位置标记的标记信息，执行求出梯形失真的运算，并且所述被控制装置的相对位置计算单元构成为：利用该梯形失真运算单元的运算结果和预先准备的可利用的关于该被控制装置的外形尺寸的信息，算出该被控制装置与所述遥控器的相对位置。

5.一种能够被独立于自己而构成的预定的遥控器控制的被控制装置，其特征在于，具有：信息接收单元，其在从所述遥控器侧传输来由设置在所述遥控器上的摄像单元生成的、包含有助于识别该被控制装置与所述遥控器的相对位置的信息的图像信息时，能够接收该传输来的图像信息；以及相对位置计算单元，其根据由所述信息接收单元接收到的图像信息算出该被控制装置与所述遥控器的相对位置，

所述相对位置计算单元构成为：利用由所述信息接收单元接收到的图像信息中的作为有助于识别该被控制装置与所述遥控器的相对位置的信息的表示特定位置标记的标记信息、和预先准备的可利用的关于该被控制装置的外形尺寸的信息，算出该被控制装置与所述遥控器的相对位置。

6.根据权利要求5所述的被控制装置，其特征在于，还具有信息保存单元，其保存所述预先准备的可利用的关于该被控制装置的外形尺寸的信息。

7.根据权利要求5所述的被控制装置，其特征在于，还具有位置标记放映单元，其在所述被控制装置自己的显示部上放映作为有助于识别该被控制装置与所述遥控器的相对位置的信息的特定位置标记。

8.一种能够被独立于自己而构成的预定的遥控器控制的被控制装置，其特征在于，具有：信息接收单元，其在从所述遥控器侧传输来由设置在所述遥控器上的摄像单元生成的、包含有助于识别该被控制装置与所述遥控器的相对位置的信息的图像信息时，能够接收该传输来的图像信息；以及相对位置计算单元，其根据由所述信息接收单元接收到的图像信息算出该被控制装置与所述遥控器的相对位置，

所述相对位置计算单元具有梯形失真运算单元，其利用由所述信息接收单元接收到的图像信息中的作为有助于识别该被控制装置与所述遥控器的相对位置的信息的表示特定位置标记的标记信息，执行求出梯形失真的运算，并且所述相对位置计算单元构成为：利用该梯形失真运算单元的运算结果和预先准备的可利用的关于该被控制装置的外形尺寸的信息，算出该被控制装置与所述遥控器的相对位置。

Images