CN1713271A - 遥控系统、控制器、向计算机提供控制器功能的程序 - Google Patents

Abstract

本发明提供一种通过简单操作就可以准确地输入作为目标的操作指令，由此可以使用户的方便性飞跃提高的遥控系统。若从遥控终端(200)由声音输入，则声音识别部(107)进行声音识别，提取关键字。以该关键字为基础，由检索式生成部(110)生成检索式，由检索部(111)检索能成为选择候补的控制项目。该控制项目由输出信息生成部(113)显示在电视机画面上。用户将遥控终端(200)用作指示器，可以选择指示所显示的控制项目中、所希望的控制项目。然后，若对操作键的“选择”键进行操作，则取得该控制项目的控制代码，并发送到电视机(300)。

Description

遥控系统、控制器、向计算机提供控制器功能的程序

技术领域

本发明涉及遥控系统、控制器、向计算机提供控制器功能的程序、存储了该程序的存储介质及服务器，尤其适用于远距离操作家电设备之际。

背景技术

一般，相对家电设备的操作指令的输入，大多使用遥控器(remotecontroller)来进行。在使用无线遥控器的情况下，由于可以不选择场所任意输入操作指令，可以提高用户的方便性。

但是，伴随近年的设备的功能化，遥控操作正在复杂化。特别是，在数字电视机等IT设备中，多功能化的进展显著，在操作按钮的细分化的基础上，控制项目也正在层次化。因此，为了输入一个控制项目，烦杂的操作按钮的选择操作成为必要，另外，需要重复操作多个操作按钮直到目标层为止。这样，在数字电视机等IT设备中，遥控器原来的方便性因操作的烦杂而正被削弱。特别是，对高龄者等对IT操作不习惯的人来说，方便性的降低变得显著，

另外，在数字电视机中，由于频道数、节目数庞大，怎么也到达不了目标节目。在节目选择中，虽然在电视机侧准备有种类(genre)选择等功能，但在该情况下，因为各功能正被层次化，所以需要进行多个键操作，直到读出作为目标的功能为止。此外，由于不知道哪个功能分配给哪个键，故为了读出目标功能，需要精读使用说明书(manual)等。

相对于此，在以下所示的专利文献1中，记载有可以通过声音来输入操作指令的控制系统。即，记载有以下功能：比较用EPG接收机构接收的广播节目信息的广播节目名与用声音识别变换部识别出的声音信号，在两者一致时，将该一致的广播节目名和关联的数据、即由广播日期、开始时间、结束时间、广播局组成的数据作为广播节目预约数据。

在该控制系统中，由于可以回避烦杂的按钮操作，故可以提高遥控器的方便性。

【专利文献1】特开2000-316128号公报

但是，由于无法避免声音识别时的误识别，故有在设备中设定错误的控制指令的情况。其结果是，有在录像机中设定错误的节目预约的可能，对应于此，产生用户必须进行预约的消去、再设定等多余操作的不便。

发明内容

因此，本发明提供一种遥控系统，该遥控系统可以解除这种不便，通过简单的操作而准确地输入目标操作指令，由此可以使用户的方便性飞跃地提高。

鉴于上述课题，本发明具有以下特征。

第1发明，是一种遥控系统，其中具有操作终端、根据相对于该操作终端的操作输入而输出设备控制用的控制信息的控制器，其特征在于，具有：用于输入声音信息的声音输入机构；用于选择指示显示在画面上的显示项目的指示输入机构；根据输入到所述声音输入机构的声音信息，生成能成为选择对象的候补项目群的候补生成机构；以由该候补生成机构生成的候补项目群为基础，生成图像信息的图像信息生成机构；使由该图像信息生成机构生成的图像信息显示在画面上的显示机构；判别由该显示机构显示在画面上的候补项目群中、由所述指示输入机构选择指示过的控制项目的判别机构；和输出由该判别机构判别过的控制项目相对应的控制信息的控制信息输出机构。

第2发明，其特征在于，在上述第1发明涉及的遥控系统中，所述候补生成机构具有：将控制项目与关键字对应存储的数据库机构；以输入到所述声音输入机构的声音信息为基础，构成文本数据的文本构成机构；和候补提取机构，其对由该文本构成机构构成的文本数据与存储于所述数据库机构中的各控制项目的关键字进行比较，将包含与该文本中的字符串匹配的关键字的控制项目作为选择对象的候补而提取。

第3发明，其特征在于，在上述第2发明涉及的遥控系统中，所述候补提取机构，按每个所述控制项目检测所述文本中的字符串与所述关键字的匹配程度，从匹配程度大的开始按照顺序提取成为选择对象的候补的控制项目。

第4发明，其特征在于，在上述第3发明涉及的遥控系统中，所述候补提取机构，按每控制项目计数所述文本中的字符串所包含的用语中、与所述关键字匹配的用语个数，从该计数值大的开始按照顺序提取成为选择对象的候补的控制项目。

第5发明，其特征在于，在上述第2～第4发明中的任一发明涉及的遥控系统中，所述文本构成机构包括：对输入到所述声音输入机构的声音信息进行声音识别，以生成文本数据的声音识别机构；将类似度相对所述输入的声音信息高的上位N个(N为自然数)声音识别结果的文本数据群，作为应与所述关键字进行比较的文本数据提示给所述候补提取机构。

第6发明，其特征在于，在上述第1发明涉及的遥控系统中，所述候补生成机构具有：以输入到所述声音输入机构的声音信息为基础，从外部服务器取得可以成为选择对象的候补项目群的候补群取得机构。

第7发明，其特征在于，在上述第1～第6发明中的任一发明涉及的遥控系统中，所述指示输入机构包含通过使所述操作终端面向画面、从而在画面上重叠显示指示位置的指示器。

第8发明，其特征在于，在上述第1发明涉及的遥控系统中，所述候补生成机构具有：将近义词与关键字对应后存储的近义词数据库；将控制项目与关键字对应后存储的控制项目数据库；以输入到所述声音输入机构的声音信息为基础来构成文本数据的文本构成机构；近义词显示机构，其对由该文本构成机构构成的文本数据与存储于所述近义词数据库的近义词的关键字进行比较，将匹配于该文本中的字符串的关键字所对应的近义词作为选择对象候补提取，并将提取出的近义词作为选择对象显示在画面上；候补提取机构，其对由该近义词显示机构显示在画面上的近义词中、被选择指示的近义词与存储于所述控制项目数据库的各控制项目的关键字进行比较，并将包含匹配于该文本中的字符串的关键字的控制项目作为选择对象候补提取。

第9发明，其特征在于，在上述第8发明涉及的遥控系统中，所述候补提取机构除了所述已选择指示的近义词以外，还将所述近义词数据库中该近义词对应的关键字相对应的其他近义词与存储于所述控制项目数据库的各控制项目的关键字进行比较，提取可以作为所述选择对象候补的控制项目。

第10发明，其特征在于，在上述第8或第9发明涉及的遥控系统中，所述文本构成机构包括：对输入到所述声音输入机构的声音信息进行声音识别、以生成文本数据的声音识别机构，将类似度相对所述输入的声音信息高的上位N个(N为自然数)声音识别结果的文本数据群，作为应与所述关键字进行比较的文本数据提示给所述近义词显示机构；所述近义词显示机构针对所述N个声音识别结果提取可以作为所述选择对象候补的近义词，同时将以该近义词与所述声音识别结果双方作为选择对象而包含的图像显示在画面上。

第11发明，其特征在于，在上述第10发明涉及的遥控系统中，所述近义词显示机构，将以所述N个声音识别结果和其中识别顺序为最上位的识别结果相对应的近义词作为选择对象而包含的图像而显示在画面上。

第12发明，其特征在于，在上述第11发明涉及的遥控系统中，所述近义词显示机构在选择指示了所显示的所述N个识别结果中的一个识别结果时，取代显示中的近义词，将所选择指示的识别结果相对应的近义词作为选择候补而显示在画面上。

除此以外，上述各发明涉及的遥控系统的特征，也可以作为构成该系统的控制器或终端装置的任何一个的特征来个别掌握。另外，也可以作为向计算机提供各发明的功能用的程序或存储了该程序的存储介质来掌握。进而，在使外部服务器负担可以成为选择对象的候补项目群的提取功能的情况下，也可以作为该服务器的特征来掌握。

根据本发明，由于在通过声音输入而生成成为选择对象的候补项目群后，从其中选择通过指示输入机构而成为目标的控制项目，故即使控制项目庞大且层次化，也可以简单地集中到候补项目，通过从其中选择所希望的项目，从而可以在设备中准确地设定目标控制内容。

而且，虽然即使在本发明中也会产生声音识别时的误识别，但即使因为该误识别而在候补项目群中包含不恰当的控制项目，通过之后的选择，最终也可以确定为适当的控制项目，因此候补项目群中包含不恰当的控制项目也不会成为问题，当然可以向用户强调仅通过声音输入即可提示候补项目群的操作简便性。

进而，根据第2～第5发明，可以从大量的检索对象项目中有效地集中到候补项目群，特别是，根据第5发明，可以有效地抑制作为目标的控制项目自候补项目群漏掉。

而且，如第6发明所述，也可以构成为从外部服务器取得候补项目群。该情况下，可以减轻系统的处理负担，可以简化系统的处理顺序。

另外，如第7发明所述，也可以将指示输入机构构成为包括指示器。该情况下，由于仅指派操作终端即可指示作为目标的控制项目，故可以提高操作的简便性。

此外，如第8发明所述，在可以显示声音识别结果及其近义词，并从其中选择指示了用户所希望的项目时，若想显示控制项目候补，则即使在不知道如何用关键字进行声音输入才恰当的情况下，首先通过声音输入所想到的关键字，就可以将该关键字相近的词语作为选择候补进行显示，因此可以提高用户的方便性。

再者，根据第9发明，由于不仅可以使用选择指示过的近义词，还可以使用与此相近的关系的词语，故可以适当地扩展控制项目的选择范围。

还有，根据第10～第12发明，可以从大量的检索对象项目中有效地集中到候补项目群，特别是，根据第11及第12发明，即使在作为选择对象的近义词多的情况下，也可以根据识别候补的选择指示，切换相对于该识别候补的近义词的显示，因此可以提高用户的方便性。

除此以外，本发明的特征以及意义，通过以下所示的实施方式的说明可以进一步明白。其中，以下的实施方式是本发明的一个例示方式，本发明甚至各构成要件的用语的意义并未限于以下的实施方式。

附图说明

图1是表示实施方式1涉及的遥控系统的构成的图。

图2是表示遥控终端与控制器的构成的功能框图。

图3是表示电视机控制命令DB的构成例的图。

图4是表示电视机节目检索用DB的构成例的图。

图5是表示控制项目的一览表(directory)结构的图。

图6是表示控制器的动作的流程图。

图7是说明控制项目的检索处理的图。

图8是表示遥控系统的动作例的图。

图9是表示其他实施方式涉及的遥控系统的构成的图。

图10是表示其他实施方式涉及的遥控系统的构成的图。

图11是表示其他实施方式涉及的遥控系统的构成的图。

图12是表示外部服务器的构成的功能框图。

图13是表示遥控系统的动作的流程图。

图14是表示实施方式2涉及的显示画面的构成例的图。

图15是表示实施方式2涉及的遥控终端与控制器的功能框图。

图16是表示实施方式2涉及的近义词DB的数据构成的图。

图17是表示实施方式2涉及的控制器的动作的流程图。

图18是表示实施方式2涉及的声音处理程序(routine)的处理流程图。

图19是表示实施方式2涉及的近义词扩展处理的流程图。

图20是表示实施方式2涉及的键信息处理程序的处理流程图。

图21是表示实施方式2涉及的检索式生成处理的流程图。

图22是表示实施方式2涉及的辅助操作处理的流程图。

图23是表示实施方式2涉及的辅助操作画面的显示例的图。

图24是表示实施方式2涉及的遥控系统的动作例的图。

图中：100—控制器，102—指示位置检测部，103—指示对象判定部，104—键信息处理部，105—操作处理部，106—控制代码发行部，107—声音识别部，108—声音识别辞典，109—声音识别辞典选择部，110—检索式生成部，111—检索部，112—控制项目检索用DB，113—输出信息生成部，120—近义词扩展部，121—显示数据积蓄部，122—近义词DB，123—文本输出部，200—遥控终端，201—指示器，202—麦克风，203—操作键，400—外部接口，601—PC，602—PC，704—数据库统合处理部，705—声音识别辞典DB，706—声音识别处理部，707—检索式生成部，708—数据库选择处理部，709—控制项目检索用DB，710—检索处理部，711—候补项目生成部，712—发送信息生成部。

具体实施方式

(实施方式1)

图1表示有关本实施方式的电光学装置的构成。

如图所示，本控制系统由控制器100、遥控终端200、电视机(数字电视机)300与外部接口400构成。

而且，本控制系统通过遥控终端200远程控制电视机300的功能乃至动作状态。从遥控终端200向控制器100输出对应于操作内容的电波信号。控制器100接收该电波信号，执行对应于操作内容的处理。

在遥控终端200中，除了操作键以外，还配备有麦克风，能够进行声音输入。再者，内置有陀螺仪(gyroscope)，构成为通过上下左右振动，从而输出与此对应的位移信号。这样，遥控终端200除了用作键输入机构以外，还可以用作声音输入机构或指示器。

在本控制系统中，在从麦克风有声音输入的情况下，由控制器100提取与此关联的控制项目，并显示在电视机300上。即，控制器100具备声音识别功能与检索功能，根据声音识别结果检索数据库，并将声音中包含的关键字所关联的控制项目作为控制对象候补进行提取。所提取出的控制项目群显示在电视机300上。

用户将遥控终端200作为指示器进行操作，可以从已显示在显示画面上的控制项目群中指示所希望的控制项目。而且，指示所希望的控制项目后，通过操作遥控终端200上的“选择”键，可以在电视机上设定对应于该控制项目的功能。

而且，在上述控制项目提取时由控制器100参照的数据库，由该电视机功能相关的数据库与广播节目相关的数据库构成。其中，与广播节目相关的数据库通过经外部接口400从外部网络适当取得EPG(电子节目表)等来更新为最新状态。

图2表示控制器100及遥控终端200的功能框图。

在图2中，指示器201如上所述包括陀螺仪，将对应于遥控终端200的位移的信息(指示信息)输出到操作信息发送部204。麦克风202将输入声音转换为声音信息并输出到操作信息发送部204。操作键203将对应于用户的键操作的信息(键信息)输出到操作信息发送部204。操作信息发送部204将从指示器201、麦克风202、操作键203接收到的各信息与表示通过哪一机构输入的识别信息一起作为电波信号输出。而且，也可以取代电波信号而输出红外线信号。

操作信息接收部101接收从遥控终端200发送来的电波信号，取得操作信息，并将取得的信息输出到指示位置检测部102、键信息处理部104、声音识别部107的任一个中。即，若同时接收到的识别信息表示指示器，则从接收信号中取得指示信息，并将其输出到指示位置检测部102。另外，若识别信息表示操作键，则从接收信号中取得键信息，并将其输出到键信息处理部104。进而，若识别信息表示麦克风，则从接收信号中取得声音信息，并将其输出到声音识别部107。

指示位置检测部102以从操作信息接收部101接收到的指示信息为基础，检测画面上的当前指示位置，并将检测结果输出到指示对象判定部103。即，根据指示信息，计算指示位置从显示画面上的基准位置向哪一方向移动，还有以该计算结果为基础，计算当前时刻的指示位置的坐标(显示画面上的坐标)，并将其输出到指示对象判定部103。

指示对象判定部103以从指示位置检测部102接收到的指示位置信息为基础，判断显示在画面上的项目中、当前时刻指示的项目，并将判断结果输出到操作处理部105。即，以输出信息生成部113提供的、将显示在显示画面上的控制项目与该显示区域相对应的对照信息为基础，判断来自指示位置检测部102的指示坐标包含于哪个控制项目的显示区域中，并将指示坐标包含于显示区域内的控制项目作为判断结果输出到操作处理部105。

键信息处理部104解释处理从操作信息接收部101接收到的键信息，向操作处理部105输出表示键操作内容的信息。

操作处理部105根据从指示对象判定部103或键信息处理部104接收到的信息，如下所述，向控制代码发行部106或输出信息生成部113输出指令信息。

即，在从指示对象判定部103接收到的判断结果，一定时间以上指示相同的控制项目的情况下，向输出信息生成部113输出在画面上放大显示该控制项目的指令。另外，根据在该放大显示之后、进而经过了恒定时间的状况，向输出信息生成部113输出使放大显示结束的指令。

此外，操作处理部105，在从键信息处理部104接收到的信息为依据于“选择”键以外的键操作(音量的升高/降低、频道选择等)的信息的情况下，向控制代码发行部106输出使依据于键定义的控制代码输出的指令。进而，在从键信息处理部接收到的信息为“选择”键的情况下，与从指示对象判定部103接收到的表示接收对象的控制项目的信息一起，将输出对应于该控制项目的控制代码的指令输出到控制代码发行部106。

控制代码发行部106，根据来自操作处理部105的指令输入而将控制代码输出到电视机300。而且，关于该控制代码的发行处理，随后一边参照图5的处理流程一边详细说明。

声音识别部107，以从操作信息接收部101接收到的声音信息为基础，进行麦克风输入的声音的声音识别，并将识别结果输出到检索式生成部110。即，以由声音识别辞典选择部109选择过的声音识别辞典为基础，进行相对于输入声音的声音识别处理，从输入声音的字符串提取关键字，并将其文本数据输出到检索式生成部110。

声音识别辞典108是在声音识别处理时由声音识别部107参照的识别辞典，构成为假设用于电视机的功能乃至动作状态的设定的用语以及字符串所对应的声音识别辞典。而且，该声音识别辞典108构成为：根据来自输出信息生成部113的指示信息，可以由声音识别辞典选择部109适当选择设定声音识别部107参照的辞典信息。例如，通过与控制项目相关联而存储各辞典信息，可以仅适当选择与声音识别时必需的控制项目对应的辞典信息。此外，通过将各辞典信息的属性设定多样，从而可以适当选择对应于属性的辞典信息。

声音识别辞典选择部109根据来自输出信息113的指示信息，适当选择设定声音识别部107参照的声音识别辞典。例如，仅选择声音识别辞典108中的辞典信息中、正显示于电视机画面上的控制项目相关联的辞典信息，将其设定为声音识别部107参照的辞典信息。

检索式生成部110以从声音识别部107输入的关键字为基础、生成检索式，并将其输出到检索部111。检索部111参照控制项目(命令)检索用DB112，提取与从声音识别部107输入的关键字匹配的控制项目。另外，经外部接口400取得EPG等节目信息，以此为基础来更新控制项目检索用DB112中的节目信息相关的数据库。

而且，关于控制项目检索用DB112的构成及使用其的控制项目的检索方法，随后将参照图3、图4及图6进行详述。

输出信息生成部113以通过检索部111提取出的控制项目为基础，生成将该控制项目显示在电视机画面上的显示信息，并将其输出到电视机300。另外，如上所述，以该控制项目为基础，生成将显示在显示画面上的控制项目及其显示区域对应了的对照信息，并将其输出到指示对象判定部103。此外，如上所述，向声音识别辞典选择部109输出仅将当前正在显示的控制项目关联的辞典信息作为用声音识别部107参照的辞典信息进行选择设定的指令。

图3及图4中表示控制项目检索用DB112的数据构成。

图3表示电视机控制命令DB(电视机的功能相关的数据库)的构成。如图所示，电视机控制命令DB由：控制项目的ID、控制项目的标题、控制项目给出的关键字、用于将控制项目对应的功能设定在电视机中的控制代码构成的。

而且，在一个控制项目上设定有多个控制代码(代码1、代码2…)，是控制项目的一览表(directory)成为层次性的原因。即，如图5所示，在该控制项目(项目C3)存在于第3层的情况下，在现状的电视机中，若不是将存在于该一览表上的第1层、第2层的控制项目(项目A1、B1)对应的控制代码(代码1、代码2)依序发送到电视机而进行设定后，则无法在电视机上设定作为该控制项目的第3层的控制项目(项目C3)。因此，在图3所示的电视机控制命令DB中，从层次顺序低的开始按顺序描述设定该ID对应的控制项目时所需的控制代码(代码1、代码2…)。由此，通过依序向电视机发送各代码，从而可以在电视机中设定该ID的控制项目。

而且，若通过不搜寻一览表而仅发送最终的控制代码，从而可以在电视机上设定对应于该控制代码的功能，则没有必要如图3所示那样描述多个控制代码。该情况下，相对于一个控制项目，只描述用于设定该控制项目的功能的控制代码即可。

图4是表示电视机节目检索用DB的构成。如图所示，电视机节目检索用DB由节目的ID、标题、副标题、广播日期、开始时间、结束时间、演出者、关联信息、种类、关键字及控制代码(代码1、代码2…)构成的。而且，在1个节目中设定有多个控制代码(代码1、代码2…)的理由，与上述电视机控制命令DB的情况同样。

接着，参照图6说明本控制系统的动作。

若启动控制模式，则首先通过输出信息生成部113在电视机画面上显示初始画面(S101)。在此，在重新进行已经进行过的控制操作的情况下，1个步骤前的画面作为初始画面被显示。该情况下，在电视机画面上直接显示1个步骤前已经显示的显示项目。

在画面上显示有1个步骤前的显示项目的情况下，输出信息生成部113向声音识别辞典选择部109输出仅选择设定该显示项目相关联的辞典信息的指令。接收该指令，声音识别辞典选择部109仅将声音识别辞典108中的辞典信息中、与该显示项目关联的辞典信息作为声音识别部107参照的辞典信息来进行选择设定(S102)。

然后，控制器100判断是否从遥控终端200接收了操作信息(S103)，在接收了的情况下(S103：是)，判断该操作信息是指示器201、麦克风202、操作键203的哪一个进行的(S104、S105)。而且，在是来自麦克风202的声音信息的情况下(S104：是)，以由声音识别辞典选择部109选择设定的辞典信息为基础，由声音识别部107进行声音识别，提取输入声音所包含的用语(关键字)(S109)。将提取出的关键字输入到检索式生成部110。

检索式生成部110以接收到的关键字为基础、生成检索式，并将其输出到检索部111(S110)。检索部111以该检索式为基础，从控制项目检索用DB112中检索匹配于关键字的控制项目(S111)。将检索完的控制项目输出到输出信息生成部113。

输出信息生成部113生成包含接收到的控制项目的显示画面，将其发送到电视机300，以显示在电视机画面上(S112)。同时，输出信息生成部113生成将显示在显示画面上的控制项目与显示区域对应的对照信息，并将其输出到指示对象判定部103。

而且，控制项目的显示以将图3、图4所示的数据库的标题、副标题等作为字符而包含在显示项目中的方式进行。例如，若显示项目显示电视机的功能相关的控制项目，则图3所示的电视机控制命令DB的标题作为字符而包含在显示项目中。另外，若显示项目显示电视机节目相关的控制项目，则图4所示的电视机节目检索用DB的标题、副标题等作为字符而包含在显示项目中。

在从遥控终端200接收到的操作信息为来自指示器201的指示信息的情况下(S104的否，S105的否)，以该指示信息为基础，由指示位置检测部102计算指示位置坐标，并将计算结果输出到指示对象判定部103(S106)。

指示对象判定部103，以接收到的指示位置坐标和从输出信息生成部113接收的对象信息为基础，判定显示项目是否存在于该指示位置(S107)。而且，在显示项目存在的情况下(S107的是)，由输出信息生成部113高亮度显示该显示项目，进而在一定时间以上都显示该显示项目的情况下，放大显示该显示项目(S108)。而且，在该放大显示时，图4所示的信息中的登场人物或关联信息等、通常显示时未包含于显示项目中的信息也作为字符而包含在显示项目中进行显示。

在从遥控终端200接收到的操作信息为来自操作键203的键信息的情况下(S104的否，S105的是)，由键信息处理部104解释该键信息，并将表示键操作内容的信息输出到操作处理部105(S113)。操作处理部105在接收到的信息为对应于“选择”键以外的键操作(音量的升高/降低、频道选择等)的信息的情况下(S114的否)，向控制代码发行部106输出使依据于键定义的控制代码输出的指令。

另一方面，在接收到的信息为“选择”键的情况下(S114的是)，与从指示对象判定部103接收到的表示指示对象的控制项目的信息一起，向控制代码发行部106输出使该控制项目对应的控制代码输出的指令。接收该指令，控制代码发行部106取出该控制项目的控制代码(图3或图4的“代码1”、“代码2”…)，并将其依序输出到电视机300(S116)。

接着，参照图7，对上述S109～S112的动作的详细内容进行说明。

首先，在S109中，从识别顺序高的开始提取到第N个为止的识别结果。而且，在图7中设定为N＝5。接着，在S110中，比较包含于各识别结果中的用语(关键字11、关键字12、…、关键字52)与图3及图4所示的各控制项目的用语，生成检索·提取匹配于这些关键字11、关键字12、…、关键字52的控制项目的检索式。而且，在S111中，一边参照控制项目检索用DB112，一边执行该检索式。

具体而言，如下所述地执行检索处理。首先，比较包含于各控制项目的用语和关键字11、关键字12、…、关键字52，计数关键字11、关键字12、…、关键字52中、匹配(完全一致或部分一致)于各控制项目所包含的用语的关键字的个数(匹配数)。

而且，在控制项目为图3所示的电视机控制命令DB的项目时，计数匹配于控制项目的“标题”及“关键字”的任一个的关键字11、关键字12、…、关键字52的个数。另一方面，在控制项目为图4所示的电视机节目检索用DB的项目时，计数匹配于控制项目的“标题”、“副标题”、“登场人物”、“关联信息”、“种类”及“关键字”的任一个的关键字11、关键字12、…、关键字52的个数。

图7表示关键字11、关键字12、…、关键字52中、关键字11、关键字21、关键字31匹配于比较对象的控制项目中的用语的情况(画阴影线，hatching)。该情况下，该控制项目的匹配数为3。

并且，计算匹配数时，也可以对直到第N个为止的识别结果分别进行识别顺序相对应的加权，以计算匹配数。例如，从最上位开始按照顺序，设定a1、a2、…、an的加权，对最上位的识别结果中的关键字的匹配数乘以a1，以下，对第2位、…、第n位的识别结果中的关键字的匹配数分别乘以a2、…、an，然后统计乘以了加权后的全部匹配数，从而得到该控制项目的匹配数。进而，加权除了根据顺序一律地设定以外，例如也可以设定对应于各识别结果的识别得分(表示声音识别的准确性的值)的加权。

这样，若相对全部的控制项目取得了匹配数，则接着在S112中，对各项目的匹配数进行大小比较，从匹配数大的开始按照顺序排列来构成显示画面。在电视机画面上显示该显示画面，可以向用户提示成为选择对象的控制项目。

而且，匹配数小于规定阈值的控制项目可以从显示对象中除去。另外，在提取出的控制项目是电视机节目相关的项目时，也可以参照该控制项目中的日期、开始时间、结束时间，在该节目在当前时刻没有被广播的情况下，从显示对象中除去该控制项目。

图8表示本遥控系统的动作的具体例。

若用户朝遥控终端200的麦克风202声音输入“以BS数字运动”(图8：上左)，如上所述，则对声音识别该声音输入的结果和控制项目检索用DB112中的各控制项目的用语被比较，并在电视机画面上显示选择对象的控制项目(图8：上右)。

若用户接收该显示，将遥控终端200作为指示器来操作，则显示在显示画面上的显示项目(控制项目)中、由指示器指示的显示项目依次被高亮度显示(图8的下右)。在此，若规定时间以上指示同一显示项目，则该显示项目被放大显示，向用户提示关联信息或登场人物等、与该显示项目相关的更详细的信息。

然后，在指示所希望的显示项目(控制项目)的状态下，若用户操作遥控终端200的“选择”键(图8的下左)，则取得该控制项目的控制代码(代码1、代码2、…)，依次向电视机300发送。由此，在电视机300中设定该控制项目相应的功能。而且，在图8中，在电视机中设定以NHK卫星第一广播的节目“美国棒球超级联赛(league)”的频道。

如上所述，根据本实施方式的遥控系统，通过以声音输入粗略地集中到选择候补，之后一边用指示器指示所希望的项目一边操作“选择”键，从而可以在电视机中设定所希望的控制项目。由此，即使在数字电视机那样的操作功能多彩且节目数庞大的情况下，也可以简单且顺利地在电视机中设定所希望的功能乃至节目，可以提高遥控系统的方便性。

而且，在上述实施方式中，虽然将控制器100的构成作为功能块示出，但控制器100除了如设定顶部箱(set top box)等、可以构成为执行该功能用的专用设备，还可以通过将执行该功能用的程序及数据库安装在个人计算机等通用计算机中而构成。并且，该程序及数据库除了存储在CD-ROM等存储介质中并进行交易的方式以外，还可以采用通过经互联网等的数据通信来进行交易的方式。

另外，在由通用计算机构成控制器100的情况下，例如，如图9所示，可以将上述控制器100的功能分割为LAN连接的2个PC(PersonalComputer)601、602。而且，在图9的情况下，PC602负担图2的功能块中、检索部111与控制项目检索用DB112的功能，而PC601负担其他功能。即，PC601从声音识别处理的结果生成检索式，并将其发送到PC602。PC602接收其后，执行对应于检索式的检索，并将检索结果发送到PC601。此外，在PC中安装上述控制器100的功能的情况下，如图9所示，需要另外准备接收来自遥控终端200的信号用的遥控接收机500。

而且，在所述中，虽然将控制对象设备作为电视机300，但也当然可以将除此以外的设备作为控制对象。进一步发展，也可以构成控制系统，以便统一控制LAN连接的多个设备。

图10表示统一控制连接于家庭网络的多个设备时的系统构成例。该情况下，需要将声音识别辞典108与控制项目检索用DB112变更为对应于多个设备。即，在声音识别辞典108与控制项目检索用DB112中，需要按照每一个连接于家庭网络的设备来构筑声音识别辞典与控制项目数据库(对应于图3、图4)。

该情况下，若对遥控终端200进行声音输入，则设定合并了各设备用的声音识别辞典的识别辞典。而且，以已设定的识别辞典为基础，由声音识别部107执行声音识别处理。进而，以识别结果为基础，由检索式生成部110生成检索式，由检索部111执行该检索式。此时，检索部111比较检索式所包含的识别结果(上述图7所示的关键字11、关键字12、…)与构筑于控制项目检索用DB112中的各设备用的控制项目数据库，如上所述，计数匹配数。而且，由输出信息生成部113从匹配数大的开始按照顺序在电视机画面上显示控制项目。

此外，进行指示器201或操作键203的操作时的动作与上述大致相同。即，由指示器201指示的控制项目被高亮度显示乃至放大显示。进而，若在指示了规定的控制项目的状态下操作操作键203的“选择”键，则可以取得该控制项目的控制代码(代码1、代码2、…)，并向对应设备发送。

而且，控制对象设备的特定，通过将识别对象设备用的信息(和室空调、起居室空调等)与显示在电视机画面上的显示项目(控制项目)合并显示，从而成为可能。

该显示，例如通过将图2所示的功能块变更为以下那样而可以实现。

即，另外准备管理家庭网络上的设备用的设备数据库，将注册在该数据库中的各设备与控制项目检索用DB112上的各设备用的控制项目DB建立关联。具体而言，在控制项目检索用DB112上按“每个设备种类”准备控制项目DB，向各控制项目DB一起提供设备种类信息(产品代码等)。由此，设备数据库上的设备与控制项目DB通过设备种类信息(产品代码等)建立关联。

而且，在设备数据库中按照每台设备存储有注册设备的设备种类信息(控制代码等)。另外，设备的识别信息(设备ID/设备类别/设置场所等)也一起被存储着。

若由检索部111执行检索式，以提取控制项目，则接着检索部111从控制项目检索用DB112取得包含该控制项目的控制项目DB的设备种类信息。并且，参照设备数据库特定(同一设备种类的设备多个连接在家庭网络上的情况下分别特定)对应于该设备种类信息的设备，进而从设备数据库取得特定过的设备的识别信息(设备ID/设备类别＝空调/设置场所＝和室/等)。

将这样取得的设备的识别信息与该提取出的控制项目一起发送到输出信息生成部113。此时，在对一个控制项目取得多个设备的识别信息的情况下，按照每台设备单独构成识别信息与控制项目的组后输出到输出信息生成部113。

输出信息生成部113接收该组，除了该控制项目的标题等以外，在显示项目中还包括该设备的识别信息所包含的设备类别、设置场所等信息，从而生成显示信息。由此，在显示于电视机画面上的显示项目(控制项目)中，识别对象设备用的信息(和室空调、起居室空调等)一并显示。同时，输出信息生成部113，将显示在显示画面上的控制项目、其显示区域、还有将与该控制项目组合的识别信息的设备ID建立对应关系的对照信息发送到指示对象判定部103。

若由用户选择显示于电视机画面上的显示项目的其中一个，则该显示项目的控制项目与设备ID从指示对象判定部103经操作处理部105而输出到控制代码发行部106。控制代码发行部106接收其，并取得该控制项目的控制代码(代码1、代码2、…)，进而比较设备ID与设备数据库，特定该控制代码的发送端设备。而且，将取得的控制代码朝特定过的发送端发送。由此，可以在该设备中设定用户所希望的功能。

并且，在检索部111进行检索时，可以从各设备的当前时刻的动作状态判断控制项目是否适当，从选择候补中除去作为控制项目不适当的项目。即，若检索部111从声音识别结果提取控制项目，则如上所述，以设备信息(产品代码等)为基础来特定对应于各控制项目的设备。而且，检索特定过的设备的当前时刻动作状态，从当前时刻的动作状态判断该控制项目的控制内容是否适当。若适当，则将该控制项目包含于选择候补中，若不适当，则从选择候补中除去该控制项目。

该情况下，以当前时刻的动作状态为基础来判断控制项目是否适当的处理在检索部111中成为必要的。该处理，例如通过另外准备将各控制项目于对应设备的动作状态相对应的表、参照该表而可以实现。

但是，如上所述，在统一控制网络上的各设备的情况下，必须按每台设备来准备声音识别辞典与控制项目DB。然而，在将声音识别部或声音识别辞典、检索部、检索用DB一体化后具备于控制器内的构成的情况下，必须在设想了能连接在网络上的设备的基础上构成声音识别辞典或控制项目DB，因此，声音识别辞典或控制项目DB的尺寸变得非常大，成本增大。另外，在新设备投入市场的情况下，产生声音识别辞典或控制项目DB的修改难、设备的追加困难的问题。

该问题可以通过使连接于互联网等的外部服务器负担声音识别部或声音识别辞典、检索部、检索用DB的功能来解决。

图11表示该情况下的系统构成例。在该构成例中，在从遥控终端200有声音输入的情况下，声音信息与识别连接于家庭网络上的设备用的设备信息从控制器100向外部服务器发送。外部服务器接收该发送，声音识别处理声音信息，检索与其关联的控制项目。而且，将该检索结果发送到控制器100。

图12是表示该情况下的外部服务器的构成的图。在图中，通信处理部701进行相对于互联网的通信处理。设备管理部702管理由用户注册的设备。用户设备DB703是存储注册设备的设备信息(设备ID/设备种类信息/等)的数据库。

数据库统合处理部704以从设备管理部702输入的设备种类信息为基础，合并存储于声音识别辞典DB705中的辞典信息。声音识别辞典DB705是按每个设备种类来存储声音识别辞典的数据库。声音识别处理部706以由数据库统合处理部704合并的识别辞典为基础，对从通信处理部701输入的声音信息进行声音识别处理。检索式生成处理部707以从声音识别处理部706输入的识别结果(关键字)为基础、生成检索式。

数据库选择处理部708以从设备管理部702输入的设备种类信息为基础，选择存储于控制项目检索用DB709中的控制项目数据库。控制项目检索用DB709是按每个设备种类存储控制项目数据库的数据库。

检索处理部710以从检索式生成处理部707输入的检索式为基础来执行检索处理。即，对已由数据库选择处理部708选择的控制项目数据库中的各控制项目和检索式中包含的关键字进行比较，计数匹配数，从匹配数大的开始按照顺序将控制项目作为选择对象项目提取。而且，检索处理的详细内容与上述参照图7说明过的处理同样。进而，检索处理部710比较提取出的控制项目的控制内容与从设备管理部702输入的设备的状态信息，从选择对象项目中除去与设备状态不相称的控制项目。并且，将最终剩下的控制项目输出到候补项目生成部711。

候补项目生成部711，从设备管理部702取得对应于所输入的控制项目的设备ID，将其与控制项目组合，生成候补项目群。发送信息生成部712生成用于将候补项目群发送到对应用户的控制器的发送信息，并将其输出到通信处理部701。

图13表示本系统的处理流程。

若新设备连接到用户的家庭网络上，则控制器100将该设备的设备种类信息(控制代码等)、设备的识别信息(设备ID/设备类别/设置场所/等)注册在设备数据库中，然后将该设备的设备种类信息与设备ID发送到外部服务器(S10)。外部服务器验证接收到的信息，若是来自正规用户的信息，则将其注册在用户设备DB703中(S11)。

另外，若控制器100从家庭网络上的设备接收状态信息，则将其存储在设备数据库中，同时将接收到状态信息与该设备的设备ID发送到外部服务器(S20)。外部服务器验证接收到的信息，若为来自正规用户的相对于适当设备的信息，则将其注册在用户设备DB703中(S21)。

此外，若相对遥控终端200中有声音输入，则遥控终端200将该声音输入相关的声音信息发送到控制器100(S30)。控制器100接收该信息，生成包含该声音信息的检索委托信息，并发送到外部服务器(S31)。

外部服务器接收该信息，首先由设备管理部702从用户设备DB703取得作为该用户的信息而注册的设备群的设备种类信息。接着，由数据库统合处理部704，从声音识别辞典DB提取与所取得的设备种类信息对应的声音识别辞典，将其合并后生成声音识别用辞典(S32)。进而，以生成声音识别用辞典为基础，对从控制器100接收到的声音信息进行声音识别，取得识别结果(关键字)(S33)。而且，以所取得的识别结果为急促，由检索式生成处理部707生成检索文，并将其输出到检索处理部710。

接下来，外部服务器以由设备管理部702取得的设备群的设备种类信息为基础，由数据库选择处理部710将该设备种类信息对应的控制项目数据库群作为检索参照用进行选择设定(S34)。然后，以选择已设定的控制项目数据库群为基础，由检索处理部710执行来自检索式生成处理部707的检索式，提取候补项目群(S35)。而且，从设备管理部702取得与所提取出的控制项目对应的设备ID，将其与控制项目组合，生成候补项目群。再有，以生成的候补项目群为基础，由发送信息生成部712生成向对应用户的控制器发送候补项目群用的发送信息，经通信处理部701发送到控制器100(S36)。

控制器100从接收到的候补项目群取得控制项目与设备ID，其中，以设备ID为基础，从设备数据库取得对应设备的设备类别与设置场所。而且，在电视机画面上显示同时显示控制项目、对应设备的设备类别及设置场所的显示项目。

然后，若遥控终端200被作为指示器操作(S40)，则控制器100将指示对象的显示项目高亮度显示或放大显示(S41)。并且，若操作遥控终端200的“选择”键(S50)，则如上所述，首先特定与指示对象的显示项目对应的设备(S51)，接着取得该控制项目的控制代码，将其发送到通过S51特定的设备(S52)。由此，可以在该设备中设定用户所希望的控制功能。

这样，根据本实施方式，通过使外部服务器负担声音识别处理乃至选择项目的集中处理，从而可以达到控制器的构成简化与成本降低的目的。另外，在新设备种类投放市场的情况下，只要在外部服务器的数据库中追加该设备种类的识别辞典及控制项目数据库即可，并且，即使在家庭网络中新追加了新设备种类的情况下，也可以顺利地执行控制动作。

进而，根据本实施方式，可以构筑使用了外部服务器的新的商务，另外，通过在外部服务器中注册操作权限，从而某个用户可以控制其他用户住所的设备。这样，根据本实施方式，除了可以进行顺利的控制动作以外，还可以达到商业场景乃至服务形态的扩展。

(实施方式2)

在上述实施方式中，在进行了声音输入时，将对应于声音识别结果的控制项目群作为选择候补显示，从其中选择指示了用户所希望的控制项目时，对电视机300发行对应于该控制项目的控制代码。与此相对，在本实施方式中，在进行了声音输入时，首先将声音识别结果与其近义词群作为选择项目显示在显示画面上。然后若从其中选择用户所希望的项目，则将该项目对应的控制项目群作为选择候补显示。而且，在从该控制项目群中选择指示了用户所希望的控制项目时，对电视机300发行与该控制项目对应的控制代码。

图14是说明进行了声音输入时的显示画面的图。

如图所示，若进行声音输入，则识别结果与其近义词作为选择项目显示在显示画面上(主区域)。在该图的例子中，在近义词区域中显示有识别结果第1位(运动)的近义词。在近义词区域中，作为识别结果的近义词，显示与该识别结果对应的项目单词、正规化表现、上位单词及低位单词(详细内容随后说明)。

在该状态下，若选择指示第2位以下的识别结果，则在近义词区域中显示被指示的其他识别结果的近义词。而且，在对应于到规定位次为止的识别结果的近义词个数少，可以将这些全部同时显示在近义词区域的情况下，可以将到该位次为止的近义词同时显示在近义词区域上。

另外，若从该状态选择指示已显示在近义词区域上的近义词群的任一个，则检索对应于该近义词的控制项目，并作为选择候补显示。此时，检索式不仅包括被选择的近义词，还包括其正规化表现而生成。因此，与上述实施方式相比，可以将稍微广泛的控制项目群作为选择候补提示给用户。

除此以外，在本实施方式中，附加有进一步提高操作性用的功能。关于这些，在以下的说明中，每次进行说明。

图15表示本实施方式的控制器100及遥控终端200的功能框图。

本实施方式的控制器100，与上述实施方式相比，指示对象信息判定部103、操作处理部105、检索式生成部110、输出信息生成部113的功能不同。另外，新追加有近义词扩展部120、显示数据积蓄部121、近义词DB(数据库)122及文本输出部123。

指示对象判定部103，以从指示为止检测部102接收到的指示位置信息为基础，判断画面上的项目中、成为指示对象的项目。而且，若指示对象项目是图14所示的近义词区域内的项目或识别区域内的项目，则将判断结果输出到文本输出部123，若指示对象项目为除此以外的项目，则输出到操作处理部105。

操作处理部105与上述实施方式相同，在持续一定时间十年个指示相同的指示对象时，使输出信息生成部113进行强调指示对象项目用的显示(高亮度、放大显示等)。另外，在显示有控制项目群的状态下，从键信息处理部104接收了表示选择键的按压的信息时，使控制代码发行部106输出对应于所指示的控制项目的控制代码。此时，同时操作处理部105使输出信息生成部113输出对应于所发行的控制代码的辅助操作画面。例如，在发行了进行声音切换用的控制代码的情况下，使输出信息生成部113输出用于选择主声音/副声音/主声音+副声音的选择按钮。辅助操作画面相关的处理，随后详细叙述。

进而，操作处理部105以从键信息处理部104接收到的信息为基础，判断显示项目的进一步集中是否可能，在集中可能的情况下，向检索式生成部110或文本输出部123指示集中的执行。操作处理部105，将能用于显示项目的集中的键操作项目与其适用的类型(category)作为表保存，在所输入的键操作信息与表上的键操作项目一致且该键项目的适用类型对应于当前显示中的键项目群的情况下，判断为显示项目的集中是可能的。

在画面上显示有识别结果和近义词项目的状态(图14)下，从键信息处理部104接收了能用于集中的键操作项目的情况下，操作处理部105对文本输出部123进行将显示对象的近义词项目进一步集中的指示。另外，在画面上显示有控制项目的状态下，从键信息处理部104接收了能用于集中的键操作项目的情况下，操作处理部105对检索式生成部110指示将显示对象的控制项目进一步集中用的检索式的生成输出。而且，关于集中是可能的情况下的处理，随后详细叙述。

检索式生成部110，以从文本输出部123接收到的信息(项目单词、正规化表现)及从操作处理部105接收到的键操作项目为基础，生成检索式，并将其输出到检索部111。关于检索式生成部110的处理的详细内容，随后详述。

输出信息生成部113在上述实施方式的功能的基础上，从文本输出部123接收到的声音识别结果及其近义词生成输出画面的布局信息(图14)，并输出到电视机300。另外，生成将包含于该布局中的项目及其显示区域对应的对照信息，并将该信息输出到指示对象判定部103。

近义词扩展部120以从声音识别部107接收到的上位的N个声音识别结果(N最好)为基础，从近义词DB122中提取相对于各识别结果的近义词(项目单词、正规化表现、上位单词、低位单词)，并输出到显示数据积蓄部121。显示数据积蓄部121存储与从近义词扩展部102输入的N最好相对的近义词，同时将这些输出到文本输出部123。

近义词DB122以图16所示的构成存储有近义词信息。如图16所示，近义词信息由项目单词、正规化表现、上位单词与低位单词构成。

项目单词是在检索声音识别结果相对的近义词时与声音识别结果比较的标题单词。正规化表现以概念性包括的表现来表示项目单词。上位单词以上位的类型来表现项目单词。低位单词是由项目单词规定的类型所包含的低位的意思。

而且，近义词DB122将由正规化表现、上位单词、低位单词构成的全部用语作为项目单词来存储。即，在图16的例子中，作为项目单词“运动”的低位单词的“高尔夫”、“足球”、“汽车竞赛”、“棒球”、“网球”、…、可以分别作为项目单词存储在近义词DB122中，与这些项目单词对应，存储有其正规化表现、上位单词、低位单词(如果有的话)。

上述近义词扩展部120，对从声音识别部107接收到的上位的N个声音识别结果(N最好)与近义词DB122内的项目单词进行比较，按每个声音识别结果来提取完全一致的项目单词及其正规化表现、上位单词及低位单词。而且，将这些近义词信息与声音识别结果输出到显示数据积蓄部121。显示数据积蓄部121存储从近义词扩展部120接收到的近义词信息与声音识别结果，同时将这些输出到文本输出部123。

文本输出部123在从显示数据积蓄部121接收了N最好的近义词信息(项目单词、正规化表现、上位单词、低位单词)时，向输出信息生成部113输出这些信息，而且，向输出信息生成部113指示：以这些为基础来生成图14所示的显示画面。

另外，文本输出部123在由指示对象信息判定部103判断出在显示画面上被指示的项目是近义词DB122内的项目单词时，向检索式生成部110指示：生成输出包含该项目单词及其正规化表现的检索式。

此外，文本输出部123，在由指示对象信息判定部103判断出在显示画面上被指示的项目是图14的显示于识别结果区域的项目时，向输出信息生成部113指示：将被指示的声音识别结果对应的近义词与N最好分别显示在近义词区域与识别结果区域上。

进而，文本输出部123在显示画面上显示有识别结果与近义词的状态(图14)，如上所述，在从操作处理部105接收了进行键操作项目的显示项目集中的指示时，以该键操作项目为基础，进行显示数据积蓄部121内的近义词信息(项目单词、正规化表现、上位单词、低位单词)的集中。而且，将集中后的近义词信息输出到输出信息生成部113，并向输出信息生成部113指示显示包含集中后的近义词的显示画面。

并且，该集中，例如通过将键操作项目作为关键字，对显示数据积蓄部121内的近义词信息(项目单词、正规化表现、上位单词、低位单词)进行文本检索而可以进行。即，提取将存储于显示数据积蓄部121内的近义词中的键操作项目作为文本而包含的近义词。此外，也可以通过在近义词DB122中与近义词一起存储各用语的属性信息，提取具有与键操作项目对应的属性信息的近义词而进行集中。

接着，参照图17～图22，对本控制系统的动作进行说明。而且，对与上述实施方式中图6的处理步骤相同的部分付与相同的标记。

若启动控制模式，则首先由输出信息生成部113在电视机画面上显示初始画面(S101)。此时，在本实施方式中，在图14的副区域中显示几次前为止的操作历史。以下，S102～S108的处理步骤与上述实施方式同样进行。但是，在本实施方式中图6的S104置换为S201。

在本实施方式中，在遥控终端20中配置有麦克风开关。在按压麦克风开关的期间内，或者之后的恒定期间内，从麦克风202发送声音信息。在S201中，判断该麦克风开关是否被用户按压。

在键操作部203中配置有麦克风开关的情况下，从遥控终端向控制器100发送表示麦克风开关的按压的键信息。该情况下，S201的判断由操作处理部105来进行。

在麦克风开关成为麦克风202的启动开关的情况下，根据麦克风开关的按压，从操作信息发送部204向操作信息接收部101发送声音信息。该情况下，在图15的构成中追加判断声音信息的接收的功能部。S201的判断可以由该功能部来进行。

若在S201中检测麦克风开关的按压，则在S202中调整电视机300的输出音量。即，在电视机300的输出音量超过阈值水平的情况下，向电视机输出将输出音量减少到阈值水平以下的控制代码。由此，可以抑制来自电视机300的声音作为噪音被输入到麦克风202中。其结果是，可以顺利地识别处理来自用户的输入声音。

这样，调整了电视机300的输出音量后，处理流程移向声音识别程序(图18)。另外，在没有对操作键203进行键输入的情况下，移向键信息处理程序(图20)。在操作了指示器201的情况下，进行S106以后的处理。S106以后的处理与上述实施方式中的图6的处理同样。

图18中表示声音识别程序。

若从图17的S202移向该程序，则开始声音识别处理(S240)，在电视机300的画面上显示“能声音输入”的消息(S241)。而且，在由操作处理部105进行上述S201(图17)的判断的情况下，该显示根据来自操作处理部105的相对于输出信息生成部113的指示来进行。

然后，若由声音识别部107得到声音识别结果，则在近义词扩展部120中进行近义词扩展处理(S243)。即，比较上位的N个声音识别结果(N最好)与近义词DB122内的项目单词，按照每个声音识别结果提取完全一致的项目单词及其正规化表现、上位单词与低位单词。而且，将所提取的近义词信息输出到显示数据积蓄部121。

图19中示出S243中的处理流程。

若开始处理，则将变量M置为1(S250)，从N个声音识别结果中提取识别位次是第M位的单词W(M)(S251)。接着，从近义词DB122中的近义词信息群中检索与W(M)完全一致的项目单词(S252)，若存在完全一致的项目单词(S252的是)，则将与该项目单词对应的正规化表现、上位单词、低位单词从近义词DB122中全部提取出来(S253)。而且，判断提取出的项目单词与其正规化表现是否相同(S254)，若相同，则将该项目单词与上位单词、低位单词输出到显示数据积蓄部121(S255)。另一方面，若不相同(S254的否)，则将该项目单词与正规化表现、上位单词、低位单词输出到显示数据积蓄部121(S255)。

在S252中，若判断为近义词DB中没有与W(M)完全一致的项目单词，则将W(M)与空的近义词信息输出到显示数据积蓄部121(S257)。

这样，若对W(M)的处理结束，则在变量M上加1后，返回S251，相对下一识别位次的识别结果的处理同样地进行。该处理反复进行直到识别位次成为第N位的识别结果为止(S259)。由此，N最好相对的近义词信息被输出到显示数据积蓄部121。

返回图18，这样，若进行S243中的近义词扩展处理，则接着删除显示于显示画面上的“能声音输入”的消息，进而将电视机300的输出音量返回到由S202(图17)调整前的状态(S247)。而且，从文本输出部123向输出信息生成部113输出从显示信息积蓄部121接收到的近义词信息与声音识别结果，从输出信息生成部113向电视机300输出用于如显示图14所示的画面的信息。由此，电视机300的显示画面被更新为如图14所示的画面(S248)。

在S242中，若没有得到声音识别结果，则在S244中解除麦克风开关的按压，且判断解除后是否经过了一定期间。在此，若为“否”，则接着待机声音识别结果的接收(S242)。若为“是”，则中止声音识别处理(S245)，删除显示于显示画面上的“能声音输入”的消息，进而，电视机300的输出音量返回到由S202(图17)调整前的状态(S247)。而且，显示画面返回到初始画面显示后的状态(S248)。

并且，在此，进行声音识别处理到麦克风开关的按压解除后经过一定期间为止(S242)，但也可以仅在麦克风开关被按压的期间内进行声音识别处理。

另外，在没有得到声音识别结果的情况下，也可以在S248中进行“未得到声音识别结果”的显示后，返回初始画面显示后的状态。

而且，虽然得到了声音识别结果，但在由于相对于声音识别的得分低，而舍弃(reject)声音识别结果的情况下，在S242中不会判断为已经得到声音识别结果。该情况下，优选直接进行“没有得到声音识别结果”的显示，向用户催促再次的声音输入。由此，可以回避不管是否进行声音输入都不会发生任何情况的事态，可以实现方便性的提高。

图20表示键信息处理程序。

若从图17的S105移向该程序，则由键信息处理部104进行键信息处理(S113)，进而，如上所述由操作处理部105判断是否可以通过该键信息来进行显示项目的集中(S210)。在此，若判断为可以进行显示项目的集中，则在能由该键信息进行先行处理的情况下进行先行处理(S211)，进行S212以后的集中处理。

而且，所谓先行处理，例如是在所输入的键信息指示BS广播的情况下、将电视机300的接收系统切换为BS广播的接收模式等的处理。由此，在通过之后的选择处理选择了BS广播的电视机程序之际，可以迅速进行该程序的输出。

若这样进行先行处理，则接着判断当前的显示画面是否为显示识别结果与近义词项目群的画面(图14)(S212)，若为显示中(S212的是)，则如上所述由文本输出部123进行使用了键信息的显示项目的集中(S217)。而且，从文本输出部123向输出信息生成部113输出集中后的识别结果与近义词信息，显示画面上的显示项目被集中为与所输入的键信息相关联的项目(S216)。

另一方面，在S212中，若当前的显示画面没有成为显示识别结果与近义词项目群的画面(图14)、即显示控制项目群的画面(S212的否)，则作为相对于检索式生成部110的检索条件，注册键信息的集中条件(键操作项目)(S213)，由检索式生成部110生成使用了其的检索式(S214)。而且，以该检索式为基础，由检索部111执行检索(S215)，显示于显示画面上的控制项目被集中为键信息相关联的项目(S216)。

若在S114中判断为按压了选择键，则判断所选择的显示项目是否包含于近义词区域内(S217)。

若当前的显示画面为显示识别结果与近义词项目群的画面(图14)，其中指示对象的显示项目是位于近义词区域内的项目，则S217中的判断成为“是”。即使当前的显示画面为显示识别结果与近义词项目群的画面(图14)，若指示对象的显示项目是位于识别结果区域内的项目，则S217中的判断结果也会成为“否”，另外，若为与此不同的显示画面、即显示控制项目群的画面，则S217中的判断成为“否”。在S217中的判断为“是”的情况下，移向S214，进行检索式的生成。

图21表示S214中的处理流程。

若处理开始，则在S214中判断是否注册了键信息的集中条件。该判断在从图20的S213移向S214的情况下(控制项目群显示中)成为“是”，在从S217移向S214的情况下(识别结果与近义词群显示中)成为“否”。

若该判断为“是”，则由检索式生成部110在之前检索控制项目时的检索式中追加键操作项目的集中条件(S231)，并将其输出到检索部111(S236)。由此，由检索部111提取比之前的检索时还进一步集中到键操作项目的控制项目。

另一方面，若S231中的判断为“否”，则由检索式生成部110从近义词DB122中检索与所指示的项目对应的单词(项目单词、正规化表现、上位单词及低位单词的任一个)完全一致的项目单词(S232)。而且，判断所提取的项目单词与该正规化表现是否相同(S233)，若相同，则仅使用项目单词生成检索式(S234)。若不相同，则生成包含项目单词与正规化表现的检索式(S235)。生成的检索式被输出到检索部111(S236)。而且，以检索部111来执行该检索式，从控制项目检索用DB112中提取对应的控制项目。

返回图20，若指示对象是近义词区域内的项目(S217的否)，则接着判断指示对象是否为识别候补区域内的项目(S218)。在此，若为“是”，则从操作处理部105对输出信息生成部113进行将所选择的声音识别候补的近义词群显示在近义词区域中的指示，根据该指示，更新显示画面(S216)。

另外，在S218中的判断为“否”、即选择了显示画面上的控制项目群中的任一个的情况下，从控制项目检索用DB112中取出对应的控制代码，输出到电视机300(S219)。由此，电视机300设定为对应于控制代码的状态，之后执行辅助操作处理(S220)。

图22中示出S220的处理流程。

若处理开始，则由输出信息生成部113进行与发行到电视机300的控制代码对应的辅助操作画面(S260)。例如，在发行了用于进行声音切换的控制代码的情况下，在画面上显示用于选择主声音/副声音/主声音+副声音的选择按钮。然后，若进行相对于辅助操作画面的操作，则从操作处理部105向控制代码发行部106进行对应的控制代码的发行指示(S261)。由此，对应于已选择的功能的控制代码被发行到电视机300。而且，判断从辅助操作画面是否经过了一定时间(S262)，若没有经过，则继续待机相对于辅助操作画面的操作。若经过了一定时间，则结束辅助操作画面的显示(S263)，结束辅助操作处理。

图23是辅助操作画面的显示例。该图(a)是作为声音切换相关的控制代码、向电视机300发行了指示副声音的设定的控制代码时的显示例。用户可以从该显示进一步进行声音切换的指示输入。另外，在该画面中，声音切换相关的功能项目显示在副区域。若选择所显示的功能项目中、例如“音量”的功能项目，则如该图(b)所示，显示用于变更音量的滑杆。用户操作左右键就可以调整音量。

图24表示本遥控系统中的动作的具体例。

若用户按压遥控终端200的麦克风开关后，朝向麦克风202声音输入“运动”(图24的上左)，则如上所述，到第N位为止的声音识别结果(本图为第4位)和相对于第1位的识别结果的近义词项目群，显示在电视机画面上(图24的上右)。

接收该显示，若用户将遥控终端200作为指示器操作，则显示在显示画面上的显示项目(控制项目)中、由指示器指示的显示项目被顺序高亮度显示(图24的上右)。

在该状态下，若选择位于最上面的识别结果中、与识别位次第1位不同的识别结果，则在电视机画面上的近义词区域中显示与该识别结果对应的近义词项目群。

另一方面，在该状态下，若选择位于近义词区域的显示项目群，则在与该显示项目对应的项目单词及其正规化表现与控制项目检索用DB112中的各控制项目的用语进行比较，选择对象的控制项目显示在电视机画面上(图24的下右)。

然后，在指示所希望的显示项目(控制项目)的状态下，若用户操作遥控终端200的“选择键”(图24的下左)，则取得该控制项目的控制代码，并发送到电视机300。由此，可以在电视机300中设定与该控制项目相应的功能。

如上所述，根据本实施方式的遥控系统，通过声音输入可以将声音识别结果与近义词群作为选择项目显示。由此，即使在不清楚如何进行声音输入恰当的情况下，通过输入想到的词语，从而可以通过想进行的操作使相近的种类、类型的项目显示。而且，然后通过指示该项目，可以使控制项目群作为选择候补显示。此时，由于控制项目群以项目单词与正规化表现为基础进行检索，所以与上述实施方式相比，可以显示在稍微广泛的范围内。由此，与上述相比，易于显示所希望的控制项目。

而且，在上述实施方式2中，近义词DB112内的全部项目单词注册在声音识别辞典108内。即，近义词DB112内的全部近义词(项目单词、正规化表现、上位单词、低位单词)可以由声音识别部107进行声音识别。该情况下，例如在初始画面中，若在画面上显示了“声音输入后显示的项目全部可以作为关键字进行声音输入”的消息，则通过观察声音输入后显示的画面(例如图24的上面)，从而用户可以知道能进行声音输入的单词。而且，在下一次以后，就可以直接声音输入所希望的单词了。通过重复该操作，用户逐渐学习能进行声音输入的单词。由此，在每次使用时，可以知道声音输入哪一个关键字是适当的，应声音输入的关键字的范围扩展。本系统越持续使用，其方便性越扩展。

而且，即使在本实施方式中，也将控制器100的构成作为功能块表示，但与之前的实施方式相同，控制器100除了如设定顶部箱(set top box)等、可以构成为执行该功能用的专用设备，还可以通过将执行该功能用的程序及数据库安装在个人计算机等通用计算机中而构成。

再有，该程序及数据库除了存储在CD-ROM等存储介质中并进行交易的方式以外，还可以采用通过经互联网等的数据通信来进行交易的方式。

另外，在由通用计算机构成控制器100的情况下，与之前的实施方式所示的图9同样，可以将上述控制器100的功能分割为LAN连接的2个PC(Personal Computer)。

以上，对本发明的各种实施方式进行了说明，但本发明并未限于上述实施方式，另外当然能够进行各种变更。

例如，在图2所示的实施方式中，在控制器侧进行声音识别，但也可以使遥控终端200侧负担该功能。该情况下，取代声音信息，从遥控终端200向控制器100发送识别结果(关键字)。进而，也可以使遥控终端200负担到选择项目的提取为止。

另外，在上述实施方式中，在遥控终端200中同时配置麦克风、指示器、操作键，但也可以准备2个或3个遥控终端200，并在每个上将麦克风、指示器、操作键的功能分离而配置。

然而，如上所述，在一个遥控终端中同时配置全部的操作机构在便携性方面优越，另外可以实现操作的简便性。例如，眼睛不从电视机画面离开，就可以进行声音输入与选择项目的指示，进而若将手指预先压在“选择”键上，则到控制项目的选择为止都可以不看键来进行。而且，从该状况看来，“选择”键可以配置在握持遥控终端时规定的手指容易施力的位置上。另外，遥控终端自身的形状也优选做成那样的形状。

此外，上述图12及图13所示的实施方式中，从外部服务器对控制器外部发送候补项目与设备ID，但也可以一并发送用来将显示项目显示在画面上的画面信息。该情况下，需要将用户侧设备的识别信息(设备类别/设置场所/等)一并注册在外部服务器侧的用户设备DB703中。

另外，在上述图12及图13所示的实施方式中，虽然由外部服务器进行声音识别与选择项目的提取，但也可以将该处理从外部服务器委托给制造商服务器等。该情况下，外部服务器从用户设备DB特定对象设备，向制造该对象设备的制造商的服务器发送包含声音信息的委托信息。或者，也可以在外部服务器侧进行声音识别，将识别结果包括在委托信息中发送到制造商侧的服务器。该情况下，制造商服务器负担上述外部服务器的声音识别功能和/或控制项目选择功能。在此，在制造商服务器上的数据库中构筑有自身产品阵容(lineup)相关的声音识别辞典DB及控制项目检索用DB。

此外，在上述实施方式中，由陀螺仪构成指示器，但也可以由操纵杆(joy stick)或慢进刻度盘(jog dial)等构成。

进而，本发明并未限于图8所示的显示形态，也可以包括通过文本信息的罗列来显示所提取的控制项目的显示形态。即，只要是以所提取的控制项目为基础而可以提示选择画面的形态即可，并未特别限定控制项目的显示形态或显示顺序、项目配置等。

还有，在上述显示形态的基础上，还可以测量输入到麦克风的声音的大小(声音水平)，将其以数字或图示(graphics)等形态显示在画面上。

再者，在上述实施方式2中，作为近义词示出了项目单词、正规化表现、上位单词、低位单词，但例如也可以在搜寻图5所示的功能树时将处于上位－低位关系的功能性相近的单词作为近义词。或者，也可以将在相同时间带但不同频道的电视机程序或相同的频道但在前后时间带放映的电视机程序等、表示检索时存在某些关系的事项的单词作为近义词。

再有，在上述实施方式中，附加识别是来自指示器201、麦克风202、操作键203中哪一个的信息的识别信息后，从操作信息发送部204向控制器100侧发送这些信息，但也可以对应于指示器201、麦克风202及操作键203而分别配置发送机构，在控制器100侧配置与各发送机构相对的接收机构。

进而，也可以将控制器100的功能包含在电视机300中。另外，若电视机300是便携式的，则不仅控制器100的功能，也可以使遥控终端200的功能也包含在电视机侧。该情况下，选择显示项目用的键、确定显示项目的选择用的键及进行声音输入用的麦克风装载在电视机上，来自各键的信息及来自麦克风的信息被提交给内置的控制部。

此外，关于数据库的构成或数据库上的检索项目等，也能进行各种变更。本发明的实施方式在技术方案范围所示出的技术思想范围内能够适当地进行各种变更。

Claims (29)

1.一种遥控系统，其中具有操作终端、和根据相对于该操作终端的操作输入来输出设备控制用控制信息的控制器，其特征在于，具有：

用于输入声音信息的声音输入机构；

用于选择指示显示在画面上的显示项目的指示输入机构；

根据输入到所述声音输入机构的声音信息，生成能成为选择对象的候补项目群的候补生成机构；

以由该候补生成机构生成的候补项目群为基础，生成图像信息的图像信息生成机构；

使由该图像信息生成机构生成的图像信息显示在画面上的显示机构；

判别由该显示机构显示在画面上的候补项目群中、由所述指示输入机构选择指示过的控制项目的判别机构；和

输出由该判别机构判别过的控制项目相对应的控制信息的控制信息输出机构。

2.根据权利要求1所述的遥控系统，其特征在于，所述候补生成机构具有：

将控制项目与关键字对应存储的数据库机构；

以输入到所述声音输入机构的声音信息为基础，构成文本数据的文本构成机构；和

候补提取机构，其对由该文本构成机构构成的文本数据与存储于所述数据库机构中的各控制项目的关键字进行比较，将包含与该文本中的字符串匹配的关键字的控制项目作为选择对象的候补而提取。

3.根据权利要求2所述的遥控系统，其特征在于，所述候补提取机构按每个所述控制项目检测所述文本中的字符串与所述关键字的匹配程度，从匹配程度大的开始按照顺序提取成为选择对象的候补的控制项目。

4.根据权利要求3所述的遥控系统，其特征在于，所述候补提取机构按每控制项目计数所述文本中的字符串所包含的用语中、与所述关键字匹配的用语个数，从该计数值大的开始按照顺序提取成为选择对象的候补的控制项目。

5.根据权利要求2～4的任一项中所述的遥控系统，其特征在于，所述文本构成机构包括：对输入到所述声音输入机构的声音信息进行声音识别，以生成文本数据的声音识别机构；将类似度相对所述输入的声音信息高的上位N个(N为自然数)声音识别结果的文本数据群，作为应与所述关键字进行比较的文本数据提示给所述候补提取机构。

6.根据权利要求1所述的遥控系统，其特征在于，所述候补生成机构具有：以输入到所述声音输入机构的声音信息为基础，从外部服务器取得可以成为选择对象的候补项目群的候补群取得机构。

7.根据权利要求1～6的任一项中所述的遥控系统，其特征在于，所述指示输入机构包含通过使所述操作终端面向画面、从而在画面上重叠显示指示位置的指示器。

8.根据权利要求1所述的遥控系统，其特征在于，所述候补生成机构具有：

将近义词与关键字对应存储的近义词数据库；

将控制项目与关键字对应而存储的控制项目数据库；

以输入到所述声音输入机构的声音信息为基础，构成文本数据的文本构成机构；

近义词显示机构，其对由该文本构成机构构成的文本数据与存储于所述近义词数据库的近义词的关键字进行比较，将匹配于该文本中的字符串的关键字所对应的近义词作为选择对象候补提取，并将提取出的近义词作为选择对象显示在画面上；和

候补提取机构，其对由该近义词显示机构显示在画面上的近义词中、被选择指示的近义词与存储于所述控制项目数据库的各控制项目的关键字进行比较，并将包含匹配于该文本中的字符串的关键字的控制项目作为选择对象候补提取。

9.根据权利要求8所述的遥控系统，其特征在于，所述候补提取机构除了所述已选择指示的近义词以外，还将所述近义词数据库中该近义词对应的关键字相对应的其他近义词与存储于所述控制项目数据库的各控制项目的关键字进行比较，提取可作为所述选择对象候补的控制项目。

10.根据权利要求8或9所述的遥控系统，其特征在于，

所述文本构成机构包括：对输入到所述声音输入机构的声音信息进行声音识别、以生成文本数据的声音识别机构，将类似度相对于所述输入的声音信息高的上位N个(N为自然数)声音识别结果的文本数据群，作为应与所述关键字进行比较的文本数据提示给所述近义词显示机构；

所述近义词显示机构针对所述N个声音识别结果提取可以作为所述选择对象候补的近义词，同时将以该近义词与所述声音识别结果双方作为选择对象而包含的图像显示在画面上。

11.根据权利要求10所述的遥控系统，其特征在于，所述近义词显示机构将以所述N个声音识别结果和其中识别顺序为最上位的识别结果相对应的近义词作为选择对象而包含的图像显示在画面上。

12.根据权利要求11所述的遥控系统，其特征在于，所述近义词显示机构在选择指示了所显示的所述N个识别结果中的一个识别结果时，取代显示中的近义词，而将所选择指示的识别结果相对应的近义词作为选择候补显示在画面上。

13.一种控制器，其中根据从操作终端接收到的操作输入信息来输出设备控制用控制信息，其特征在于，具有：

根据从所述操作终端接收到的通过声音输入的操作输入信息，生成能成为选择对象的候补项目群的候补生成机构；

以由该候补生成机构生成的候补项目群为基础，生成图像信息的图像信息生成机构；

使由该图像信息生成机构生成的图像信息显示在画面上的显示机构；

判别由该显示机构显示在画面上的候补项目群中、从所述操作终端接收到的通过选择指示输入的操作输入信息所对应的控制项目的判别机构；和

输出由该判别机构判别过的控制项目相对应的控制信息的控制信息输出机构。

14.根据权利要求13所述的控制器，其特征在于，所述候补生成机构具有：

将控制项目与关键字对应而存储的数据库机构；

以从所述操作终端接收到的通过声音输入的操作输入信息为基础，构成文本数据的文本构成机构；和

候补提取机构，其对由该文本构成机构构成的文本数据与存储于所述数据库机构中的各控制项目的关键字进行比较，将包含与该文本中的字符串匹配的关键字的控制项目作为选择对象的候补而提取。

15.根据权利要求14所述的控制器，其特征在于，所述候补提取机构按每个所述控制项目检测所述文本中的字符串与所述关键字的匹配程度，从匹配程度大的开始按照顺序提取成为选择对象的候补的控制项目。

16.根据权利要求15所述的控制器，其特征在于，所述候补提取机构按每控制项目计数所述文本中的字符串所包含的用语中、与所述关键字匹配的用语个数，从该计数值大的开始按照顺序提取成为选择对象的候补的控制项目。

17.根据权利要求14～16中任一项所述的控制器，其特征在于，所述文本构成机构包括：对从所述操作终端接收到的通过声音输入的操作输入信息进行声音识别，以生成文本数据的声音识别机构；将类似度相对所述输入的声音信息高的上位N个(N为自然数)声音识别结果的文本数据群，作为应与所述关键字进行比较的文本数据提示给所述候补提取机构。

18.根据权利要求13所述的控制器，其特征在于，所述候补生成机构具有：

将近义词与关键字对应存储的近义词数据库；

将控制项目与关键字对应存储的控制项目数据库；

以从所述操作终端接收到的通过声音输入的操作输入信息为基础来构成文本数据的文本构成机构；

近义词显示机构，其对由所述文本构成机构构成的文本数据与存储于所述近义词数据库的近义词的关键字进行比较，将匹配于该文本中的字符串的关键字所对应的近义词作为选择对象候补提取，并将提取出的近义词作为选择对象显示在画面上；和

候补提取机构，其对由所述近义词显示机构显示在画面上的近义词中、来自所述操作终端的选择指示信息所对应的近义词与存储于所述控制项目数据库的各控制项目的关键字进行比较，并将包含匹配于该文本中的字符串的关键字的控制项目作为选择对象候补提取。

19.根据权利要求18所述的控制器，其特征在于，所述候补提取机构除了所述选择指示信息对应的近义词以外，还将所述近义词数据库中与该近义词对应的关键字相对应的其他近义词与存储于所述控制项目数据库的各控制项目的关键字进行比较后提取可作为所述选择对象候补的控制项目。

20.根据权利要求18或19所述的控制器，其特征在于，

所述文本构成机构包括：对所述通过声音输入的操作输入信息进行声音识别、以生成文本数据的声音识别机构，将类似度相对于所述声音输入高的上位N个(N为自然数)声音识别结果的文本数据群，作为应与所述关键字进行比较的文本数据提示给所述近义词显示机构；

所述近义词显示机构针对所述N个声音识别结果提取可作为所述选择对象候补的近义词，同时将以该近义词与所述声音识别结果双方作为选择对象而包含的图像显示在画面上。

21.根据权利要求20所述的控制器，其特征在于，所述近义词显示机构将以所述N个声音识别结果和其中识别顺序为最上位的识别结果相对应的近义词作为选择对象而包含的图像显示在画面上。

22.根据权利要求21所述的控制器，其特征在于，所述近义词显示机构在选择指示了所显示的所述N个识别结果中的一个识别结果时，取代显示中的近义词，而将所选择指示的识别结果相对应的近义词作为选择候补显示在画面上。

23.一种程序，其特征在于，向计算机提供权利要求13～22中任一项所述的控制器的功能。

24.一种记录介质，其特征在于，存储了向计算机提供权利要求13～22中任一项所述的控制器的功能的程序。

25.一种服务器，其特征在于，具有：

用来通过网络而与控制器进行通信的通信机构；

根据从所述控制器接收到的声音信息，生成能成为选择对象的候补项目群的候补生成机构；和

通过所述通信机构向所述控制器发送由所述候补生成机构生成的候补项目群的发送机构。

26.根据权利要求25所述的服务器，其特征在于，所述候补生成机构按照每台设备具备检索候补项目用的数据库，将所述数据库中、能成为控制对象的设备所对应的数据库设定为检索用数据库，根据设定过的数据库，以从所述控制器接收到的声音信息为基础，取得能成为选择对象的候补项目群。

27.根据权利要求26所述的服务器，其特征在于，所述数据库包括用来声音识别所述声音信息的声音识别辞典，所述候补生成机构将选择统合了所述声音识别辞典中、能成为控制对象的设备所对应的声音识别辞典的声音识别辞典设定为声音识别用，根据已设定的声音识别辞典，对从所述控制器接收到的声音信息进行声音识别，根据识别结果，取得能成为选择对象的候补项目群。

28.根据权利要求26或27中任一项所述的服务器，其特征在于，所述候补生成机构具备按照每个用户区分而注册设备信息的设备数据库；以注册于该设备数据库的设备信息为基础，来特定能成为控制对象的设备所对应的数据库。

29.根据权利要求25～28中任一项所述的服务器，其特征在于，所述候补生成机构具备：从所述控制器取得表示能成为控制对象的设备的动作状态的状态信息取得机构；根据取得的状态信息来判别能成为控制对象的候补项目群是否适当的判别机构；根据该判别结果，来限制能成为选择对象的候补项目群。

Images