CN1437090A - 接口装置、动作控制方法、画面显示方法 - Google Patents

Abstract

本发明提供一种接口装置、动作控制方法及画面显示方法。在本发明的接口装置中，识别部(11)根据识别对象(声音数据)和包含在识别用词典(122)中的词典数据之间的相似度获取识别结果(S110)。动作控制部(12)指示执行与识别结果(S110)相关的第1动作。提示控制部(14)提示与识别结果(S110)相关的1个或者多个候补(S111)，当提示该候补(S111)的时间达到给定时间后，中止该候补(S111)的提示。由此可以提高利用者的方便性，从而可更有效地利用显示画面。

Description

接口装置、动作控制方法、画面显示方法

技术领域

本发明涉及一种为应用识别技术的机器操作提供支持的接口装置、动作控制方法、画面显示方法，特别涉及电视·汽车导航·移动电话等家电·信息终端机器的操作。

背景技术

作为利用者操作电视·汽车导航·移动电话等家电·信息终端机器的方法之一，有利用声音识别的方法。在该方法中，通过用声音发出与给定动作对应的指令，执行给定的动作。

这就需要为用声音执行动作的声音识别。但是，由于噪音和话语之间造成声音上的差异，或者由于使用了没有在识别用词库中登录的词汇发音等原因，到目前为止声音识别还没有达到100％不出错的状态。

有关识别精度的问题，是在文字识别·图象识别·指纹识别·虹膜识别等识别、识别技术中共同的问题。为此，作为识别结果出错时的对策方案，例如在特開平4-16043号公报、特開平2-278297号公报、特開2000-250587号公报、特開平4-106597号公报、特開平2-117252号公报等中有提案。

又，伴随机器的高技术化·多功能化，希望采用与人的亲和性高的声音进行识别的功能的所谓“容易使用”的接口。

本发明的目的在于提供一种对利用识别技术的机器操作可以提高方便性的接口装置。

[专利文献1]

特開平4-16043号公报

[专利文献2]

特開平2-278297号公报

[专利文献3]

特開2000-250587号公报

[专利文献4]

特開平4-106597号公报

[专利文献5]

特開平2-117252号公报

发明内容

依据本发明的一方案，接口装置包括识别部、动作控制部、提示控制部。识别部根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果。动作控制部指示执行与由识别部获取的识别结果相关联的第1动作。提示控制部提示由识别部获取的识别结果相关联的1个或者多个候补、提示该候补的时间达到给定时间后中止该候补的提示。

理想的是，上述提示控制部在显示器上显示候补，候补在显示器上显示的时间达到给定时间后中止候补在显示器上的显示。

在上述接口装置中，即使经过给定时间利用者也没有选择动作候补的意思时让候补成非显示状态，当所执行的动作是反应利用者意图的动作时，没有必要由利用者让动作候补的提示成非提示状态。

在画面上显示候补时，随着所提示的候补数量增加，显示画面的可利用区域(显示画面中显示候补的区域之外的区域)减小。例如，在电视或者微机等显示器上显示候补时，有可能使得播放中的节目的一部分看不见。又，画面尺寸越小，为显示候补的区域占整个画面的比率越高。例如，如果在移动电话等小型显示器中显示多个候补时，本来的画面可能完全看不见。但是，依据上述接口装置，在经过给定时间后自动从画面上删除候补，可以有效利用画面。

理想的是，上述识别结果表示与识别对象之间的相似度超过给定基准值的词典数据。上述第1动作与识别结果所示的词典数据中的某一个词典数据关联。上述1个或者多个候补与上述识别结果所示的词典数据中的其它词典数据关联。

理想的是，响应提示控制部的提示，当从所提示的候补中选择的任一个所示的选择信息后，提示控制部中止所提示的候补的提示。

理想的是，上述动作控制部当从所提示的候补中选择的任一个所示的选择信息后，指示执行与由该选择信息所示的候补相关联的第2动作。这时保持第1动作的执行状态。

依据上述接口装置，可以同时执行第1动作和第2动作。例如，在电视的2画面显示中，在选择第1画面的节目后，可以从候补中选择第2画面的节目同时显示。

理想的是，响应提示控制部的提示，当从所提示的候补中选择任一个所示的选择信息后，动作控制部指示执行与由该选择信息所示的候补相关联的第2动作。

理想的是，上述选择信息表示第1候补和第2候补。上述第2动作包含与第1候补关联的动作和与第2候补关联的动作。

理想的是，响应提示控制部的提示，在候补提示的期间如果指示执行第3动作，提示控制部中止所提示的候补的提示。

理想的是，上述动作控制部提示到开始执行第1动作为止的时间。

理想的是，上述识别对象包含声音数据。

理想的是，上述识别对象包含为识别个人的信息。

依据本发明的另一方案，接口装置包括识别部、动作控制部、候补制作部、提示控制部。识别部根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果。动作控制部指示执行由识别部获取的识别结果相关联的第1动作。候补制作部根据由识别部获取的识别结果之间的意思相近度获取1个或者多个候补。提示控制部提示由候补制作部获取的候补。

在现有技术中，候补由于通过从识别候补中选择制作，只能执行所识别的意思相近的(例如输入声音「sight」时，在读音上相近的「sigh」、「site」、「sign」等)动作。但是在上述接口装置中，根据与识别结果的意思相近度获取候补，例如在检索电视的电子节目指南中，输入「足球」时，按照体育种类的意思，可以选择与「足球」相近的「棒球」、「篮球」等的动作。

此外，在所谓的「意思相近」包含以下(1)～(4)方面的内容。

(1)相同种类

对于识别结果「足球」可以采用「网球」、「棒球」、「高尔夫」等。

(2)联想的关键词

对于识别结果「足球」可以采用「中田」、「世界杯」等。

对于识别结果「红」可以采用「颜色」、「黑」、「苹果」等。

(3)考虑到利用者的嗜好的关键词

对于识别结果「常看节目」可以采用「足球」、「体育节选」、「今日新闻」等。

对于识别结果「当前要做的事」可以采用「邮件」、「打开浴室开关」等。

(4)有关机器操作的关键词

在视频播放机操作中对于识别「播放」可以采用「停止」、「快进」、「后退」等。

依据本发明的又一方案，接口装置包括第1识别用词典、识别部、提示控制部。第1识别用词典包含1个或者多个词典数据。识别部根据识别对象和包含在第1识别用词典中的词典数据之间的相似度获取识别结果。提示控制部提示与识别结果关联的1个或者多个候补、和提示与该候补对应的词典数据是否包含在第1识别用词典中。

依据上述接口装置，可以自然向利用者提示登录在第1识别用词典中的词汇。又，对于利用者而言，理解可识别的数据，可以提高识别率。因此，利用者使用方便。

理想的是，上述接口装置进一步包括第2识别用词典和词典控制部。第2识别用词典包含1个或者多个词典数据。词典控制部将包含在第1识别用词典中的词典数据与包含在第2识别用词典中的词典数据按照给定基准进行交换。

理想的是，上述接口装置还包括词典控制部。词典控制部可以在第1识别用词典中追加某个词典数据，从第1识别用词典中删除某个词典数据。

依据本发明的又一方案，动作控制方法包括步骤(a)～(c)。在步骤(a)中，根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果。在步骤(b)中，执行与上述识别结果相关联的第1动作。在步骤(c)中，提示与上述识别结果相关联的1个或者多个候补、在提示该候补的时间达到给定时间后中止该候补的提示。

理想的是，在上述步骤(c)中，在显示器上显示上述候补，上述候补在显示器上显示的时间达到给定时间后中止上述候补在显示器上的显示。

理想的是，上述识别结果表示与识别对象之间的相似度超过给定基准值的词典数据。上述第1动作与识别结果所示的词典数据中的某一词典数据关联。上述1个或者多个候补与识别结果所示的词典数据中的其它词典数据关联。

理想的是，在上述步骤(c)中，当从所提示的候补中选择任一个后，中止所提示的候补的提示。

理想的是，上述动作控制方法进一步包括步骤(d)。在步骤(d)中，当从步骤(c)所提示的候补中选择任一个后，执行与所选择的候补相关联的第2动作。

理想的是，在上述步骤(c)中，在候补提示的期间如果指示执行第3动作，中止所提示的候补的提示。

理想的是，上述动作控制方法进一步包括步骤(e)。在步骤(e)中，提示到开始执行上述第1动作为止的时间。

理想的是，上述识别对象包含声音数据。

理想的是，上述识别对象包含为识别个人的信息。

依据本发明的又一方案，动作控制方法包括步骤(a)～(d)。在步骤(a)中，根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果。在步骤(b)中，指示执行与识别结果相关联的第1动作。在步骤(c)中，根据与识别结果之间的意思相近度获取1个或者多个候补。在步骤(d)中，提示由步骤(c)获取的候补。

理想的是，上述1个或者多个候补属于识别结果的种类。

理想的是，上述1个或者多个候补的每一个包含根据识别结果联想的关键词。

理想的是，上述1个或者多个候补的每一个包含根据利用者嗜好以及/或者行动模式的关键词。

理想的是，上述1个或者多个候补的每一个表示与第1动作关联的动作。

依据本发明的又一方案，动作控制方法包括步骤(a)～(b)。在步骤(a)中，根据识别对象和包含在第1识别用词典中的词典数据之间的相似度获取识别结果。在步骤(b)中，提示与识别结果关联的1个或者多个候补、和提示与该候补对应的词典数据是否包含在第1识别用词典中。

理想的是，上述动作控制方法进一步包括步骤(c)。在步骤(c)中，将包含在第1识别用词典中的词典数据与包含在第2识别用词典中的词典数据按照给定基准进行交换。

理想的是，上述动作控制方法进一步包括步骤(d)。在步骤(d)中，可以在第1识别用词典中追加某个词典数据，从第1识别用词典中删除某个词典数据。

依据本发明的又一方案，画面显示方法包括步骤(a)～(b)。在步骤(a)中，在画面上显示根据识别结果获得的1个或者多个候补。在步骤(b)中，在画面上显示上述候补的时间到达给定时间后从画面上删除上述候补。

理想的是，在上述步骤(a)中，在画面上与在显示上述候补一起的同时显示与上述识别结果相关联的第1动作的内容

理想的是，在上述步骤(a)中，强调显示第1动作的内容。

理想的是，在上述步骤(a)中，显示到开始执行第1动作的时间。

理想的是，在上述步骤(a)中，在画面的可显示区域中在显示第1动作内容的区域之外的区域上显示上述候补。

理想的是，在上述步骤(a)中，强调显示上述候补中的被选中的候补。

理想的是，在上述步骤(a)中，显示可以通过声音识别技术选择的候补，并强调显示为选择所显示的候补应发声的部分

理想的是，在上述步骤(a)中，强调显示上述识别结果。

理想的是，在上述步骤(b)中，在删除候补的同时中止识别结果的强调显示。

理想的是，上述画面显示方法进一步包括步骤(c)。在步骤(c)中，当从在画面上显示的候补中选择任一个后删除在画面上显示的所有候补。

理想的是，在上述步骤(a)中，显示根据与识别结果意思的相近度获取的候补。

理想的是，在上述步骤(a)中，针对每个上述1个或者多个候补，显示是否可以通过声音识别技术选择候补的信息。

理想的是，上述第1动作是进行与识别结果相关信息的显示。

理想的是，上述第1动作是与识别结果相关的机器操作。

理想的是，上述第1动作是进行与识别结果相关的信息检索及检索结果的显示。

理想的是，上述第2动作是进行与选择信息所表示的候补相关的信息的显示。

理想的是，上述第2动作是与选择信息所表示的候补相关的机器操作。

理想的是，上述第2动作是与选择信息所表示的候补相关的信息检索及检索结果的显示。

理想的是，上述第3动作是进行识别对象的输入。

理想的是，上述第3动作是进行给定画面(例如菜单画面)的显示。

理想的是，上述第3动作是由第1动作的执行结果的声音给出的提示。

附图说明

图1表示第1实施方案的数字电视系统的整体构成方框图。

图2表示图1所示系统的动作流程图。

图3表示在显示器上显示的画面图。

图4A表示在显示器上显示的画面图。

图4B表示在显示器上显示的画面图。

图5表示在显示器上显示的另一例画面图。

图6表示在显示器上显示的另一例画面图。

图7A表示第2实施方案的数字电视系统的整体构成方框图。

图7B表示保存在候选DB中的数据库的内容

图7C表示保存在识别用词典数据以及候选DB中的词汇数据。

图8表示图7所示系统的动作流程图。

图9A表示在显示器上显示的画面图。

图9B表示在显示器上显示的画面图。

图9C表示在显示器上显示的画面图。

图9D表示在显示器上显示的画面图。

图9E表示在显示器上显示的画面图。

图9F表示为说明在识别用词典中追加、删除词典数据的处理的图。

图9G表示为说明在识别用词典中追加、删除词典数据的处理的图。

图9H表示为说明在识别用词典中追加、删除词典数据的处理的图。

图10表示第3实施方案的数字电视系统的整体构成方框图。

图11表示图10所示系统的动作流程图。

图12A表示在显示器上显示的画面图。

图12B表示在显示器上显示的画面图。

图13表示第4实施方案的视频系统的整体构成方框图。

图14表示图13所示系统的动作流程图。

图15A表示在显示器上显示的画面图。

图15B表示在显示器上显示的画面图。

图15C表示数据库的内容。

图16表示第5实施方案的汽车导航系统的整体构成方框图。

图17表示图16所示系统的动作流程图。

图18表示在显示器上显示的画面图。

图19表示第6实施方案的移动电话的整体构成方框图。

图20表示图19所示移动电话的动作流程图。

图21A表示在显示器上显示的画面图。

图21B表示在显示器上显示的画面图。

图22表示第7实施方案的翻译装置的整体构成方框图。

图23表示图22所示的翻译装置的动作流程图。

图24表示在显示器上显示的画面图。

图25表示第8实施方案的监视系统的整体构成方框图。

图26表示图25所示系统的动作流程图。

图27A表示在显示器上显示的画面图。

图27B表示在显示器上显示的画面图。

图27C表示在显示器上显示的画面图。

图27D表示在显示器上显示的画面图。

图27E表示数据库的内容。

图28表示第9实施方案的控制系统的整体构成方框图。

图29表示图28所示系统的动作流程图。

图30A表示在显示器上显示的画面图。

图30B表示在显示器上显示的画面图。

图30C表示数据库的内容。

图30D表示在显示器上显示的画面图。

图30E表示在显示器上显示的画面图。

具体实施方案

以下参照附图说明本发明的实施方案。图中相同或者相当的部分采用相同的符号，并且不重复进行说明。

(第1实施方案)

              <数字电视系统的构成>

图1表示依据第1实施方案的数字电视系统的整体构成。该系统包括数字电视机主体135、声音识别遥控器134。

数字电视机主体135包括声音识别部11、动作控制部12、候补制作部13、候补提示部14、候补选择部15、红外线接收部136、显示器137。声音识别部11包括噪声处理部120、模型制作部121、识别用词典122、比较处理部123。

声音识别遥控器134包括红外线发射部130、麦克风131、确认键132、移动键133。麦克风131接收利用者的声音数据后向红外线发射部130传送。红外线发射部130将来自麦克风131的声音数据发送给红外线接收部136。

噪声处理部120将来自红外线接收部136的声音数据传送噪声处理部120。

噪声处理部120将对来自红外线接收部1 36的声音数据进行噪声处理后数据传送得模型制作部121。

模型制作部121对来自噪声处理部120的数据变换成到谱系数等特征量，给特征量作为模型保存。

比较处理部123对包含在词典数据(声音模型)和由模型制作部121保存的模型进行比较，制作识别结果S110。由比较处理部123获得的识别结果S110传送给动作控制部12和候补制作部13。

动作控制部12根据声音识别部11作成的识别结果S110切换显示器137的画面显示。

候补制作部13根据声音识别部11作成的识别结果S110制作动作候补S111。由候补制作部13制作的动作候补S111被传送给候补提示部14。

候补提示部14在显示器137上提示由候补制作部13制作的动作候补S111，将提示位置信息S144传送给候补选择部15。候补提示部14，当从提示动作候补S111开始经过第1时间并且从动作控制部12没有接收到非提示信号S142时，让在显示器137上提示的动作候补S111成非提示状态，向候补选择部15传送触发信号S143。

红外线发射部130向红外线接收部136传送操作移动键133和确认键132的操作信号S146。

红外线接收部136将来自红外线发射部130的操作信号S146传送给候补选择部15。

候补选择部15从接收到来自候补提示部14的提示位置信息S144到接收到触发信号S143为止的期间接收到由移动键133形成的操作信号S146时，根据操作信号S146和提示位置信息S144制作预备候补位置信息S141，根据预备候补位置信息S141变更显示器137的显示。候补选择部l5在接收到来自候补提示部14的触发信号S143为止的期间接收到由移动键133形成的操作信号S146时，根据操作信号S146和提示位置信息S144制作选择信息S112，向动作控制部12传送选择信息S112。

动作控制部12响应来自候补选择部15的选择信息S112，将非提示信号S142传送给候补提示部14。又，动作控制部12根据来自候补选择部15的选择信息S112切换显示器137的画面。

候补提示部14响应来自动作控制部12的非提示信号S142，让在显示器137上的动作候补S111的提示成非提示状态。

                  <数字电视系统的动作>

以下说明以上构成的数字电视系统的动作。在此，以通过声音和按键操作进行电视的电子节目指南操作时的情况为例，参照图2～图4B进行说明。

(1)显示反应利用者意图的画面时的情况

首先，在显示器137上显示「BS大阪」的节目(参见图3的显示画面3-1)。

[第ST21步]

利用者为了看足球节目的电子节目指南(EPG)，对准遥控器134的麦克风131发出「足球」声音(参见图3的显示画面3-1)。所输入的声音数据由红外线发射部130被传送给电视机主体135的红外线接收部136。红外线接收部136将所接收到的声音数据传送给声音识别部11。声音识别部11，作为识别结果S110输出包含在识别用词典122中的词典数据中与有关该声音数据的信息一致度最高的「足球」、和一致度第2～第4高的「曲棍球」、「酒(sake)」、「红(aka：相当于red的日语)」。将识别结果S110的「足球」传送给动作控制部12，将识别结果S110的「曲棍球」、「酒」、「红」传送给候补制作部13。候补制作部13，制作动作候补S111的「曲棍球」、「酒」、「红」，并传送给候补提示部14。

[第ST22步]

动作控制部12根据识别结果S110的「足球」在显示器137上显示足球节目的电子节目指南(第1画面)(第1动作)。候补提示部14在显示器137上显示第1画面之外的画面候补的「曲棍球」、「酒」、「红」(参见图3的显示画面3-2)。如显示画面3-2所示，通过显示「足球节目的EPG」，向利用者通知在该时刻画面上所显示的是足球节目的电子节目指南。又，在「足球节目的EPG」显示中的「足球」部分、即识别结果被强调显示。又，对显示足球节目的EPG的区域用粗框进行强调显示。另一方面，画面候补，用小字显示在画面的一端。又，通过显示「候补」，向利用者通知所显示的是候补。显示「候补」的区域用虚线、细框、小字显示。

此外，可以显示「足球节目的EPG」，也可以通过在画面候补中显示「足球」替代「足球节目的EPG」的显示，向利用者通知在该时刻画面上所显示的是足球节目的电子节目指南。

候补提示部14，将在显示器137上显示画面候补的「曲棍球」、「酒」、「红」的位置信息的提示位置信息S144传送给候补选择部15。

[第ST23～ST24步]

从画面候补被显示开始3秒钟(给定时间)期间，如果利用者没有操作移动键133，没有选择画面候补的意思时(即，候补提示部14没有接收到非提示信号S142时)，候补提示部14从画面候补被显示开始3秒钟后(给定时间后)向候补选择部15传送触发信号S143，在输入下一声音数据之前不让候补选择部15制作选择信息S112。然后进入到第ST25步。

[第ST25步]

如图3的显示画面3-3所示，候补提示部14消除显示器137上的画面候补(成非显示状态)。

(2)没有显示反应利用者意图的画面时的情况

首先，在显示器137上显示「BS大阪」的节目(参见图4A的显示画面4-1)。

[第ST21步]

利用者为了看足球节目的电子节目指南(EPG)，对准遥控器134的麦克风131发出「足球」声音(参见图4A的显示画面4-1)。所输入的声音数据由红外线发射部130被传送给电视机主体135的红外线接收部136。红外线接收部136将所接收到的声音数据传送给声音识别部11。声音识别部11，作为识别结果S110输出包含在识别用词典122中的词典数据中与有关该声音数据的信息一致度最高的「曲棍球」(误识别)、和一致度第2～第4高的「足球」、「酒」、「红」。将识别结果S110的「曲棍球」传送给动作控制部12，将识别结果S110的「足球」、「酒」、「红」传送给候补制作部13。候补制作部13，制作动作候补S111的「足球」、「酒」、「红」，并传送给候补提示部14。

[第ST22步]

动作控制部12根据识别结果S110的「曲棍球」在显示器137上显示曲棍球节目的电子节目指南(第1画面)(第1动作)。候补提示部14在显示器137上显示第1画面之外的画面候补的「酒」、「足球」、「红」(参见图4A的显示画面4-2)。如显示画面4-2所示，通过显示「曲棍球节目的EPG」，向利用者通知在该时刻画面上所显示的是曲棍球节目的电子节目指南。又，在「曲棍球节目的EPG」显示中的「曲棍球」部分、即识别结果被强调显示。又，对显示曲棍球节目的EPG的区域用粗框进行强调显示。另一方面，画面候补，用小字显示在画面的一端。又，通过显示「候补」，向利用者通知所显示的是候补。显示「候补」的区域用虚线、细框、小字显示。

此外，可以显示「曲棍球节目的EPG」，也可以通过在画面候补中显示「曲棍球」替代「曲棍球节目的EPG」的显示，向利用者通知在该时刻画面上所显示的是曲棍球节目的电子节目指南。

候补提示部14，将在显示器137上显示画面候补的「酒」、「足球」、「红」的位置信息的提示位置信息S144传送给候补选择部15。

[第ST23～ST24步]

由于反应利用者意图的画面应该是足球节目的电子节目指南，在从画面候补被显示开始3秒钟(给定时间)期间，利用者操作遥控器134的移动键133，进行表示选择画面候补的意思时(参见图4A的显示画面4-3)。候补选择部15根据响应移动键133的操作制作的操作信号S146制作预备选择位置信息S141，让在显示器137显示的候补的框闪烁(参见图4A的显示画面4-3)进一步，如图4B的显示画面4-4所示，根据移动键133的操作，用粗框围住所选择的画面候补。此外，也可以采用改变所选择的候补的颜色、反色、加粗显示等。候补选择部15，根据确认键132制作的操作信号S146作为选择信息S112确认「足球」(参见图4B的显示画面4-4)。候补选择部15向动作控制部12传送选择信息S112的「足球」。

[第ST26步]

动作控制部12，根据选择信息S112在显示器137显示足球节目的电子节目指南。这时，为了表明是修正后的，将足球节目的电子节目指南放大显示，或者改变颜色进行强调。又，动作控制部12在接收到选择信息S112后，向候补提示部14传送非提示信号S142。候补提示部14，响应非提示信号S142，让在显示器137上显示的动作候补成非显示状态(参见图4B的显示画面4-5)。

                  <画面显示的另一例>

参照图5～图6说明画面显示的另一例。

(1)显示反应利用者意图的画面时的情况

首先，在显示器137上显示「BS大阪」的节目(参见图5的显示画面5-1)。

[第ST21步]

利用者为了看「电视说唱节目」，对准遥控器134的麦克风131发出「电视说唱节目」声音(参见图5的显示画面5-1)。所输入的声音数据，通过红外线发射部130以及红外线接收部136传送给声音识别部11。声音识别部11，作为识别结果S110输出包含在识别用词典122中的词典数据中与有关该声音数据的信息一致度最高的「电视说唱节目」。声音识别部11进一步，将包含在识别用词典122中的词典数据中与「电视说唱节目」相关的词典数据的「朝日TV」、「CTV」、「每日TV」也作为识别结果S110输出。包含在识别用词典122中的词典数据中的「电视说唱节目」、「朝日TV」、「CTV」、「每日TV」是表示电视台(频道)的词汇，这些词典数据与电视台(频道)相互对应关联。将识别结果S110的「电视说唱节目」传送给动作控制部12，将识别结果S110的「朝日TV」、「CTV」、「每日TV」传送给候补制作部13。候补制作部13，制作动作候补S111的「朝日TV」、「CTV」、「每日TV」，并传送给候补提示部14。

[第ST22步]

动作控制部12，如图5的显示画面5-2所示，在显示器137的区域R1上显示识别结果S110的「电视说唱节目」的画面(第1动作)。这时在识别结果的「电视说唱节目」的文字下增加下划线进行强调。候补提示部14在显示器137的区域R1以外的区域上显示画面候补「朝日TV」、「CTV」、「每日TV」(参见图5的显示画面5-2)。这时，对于利用者可以发声的词汇(为选择而发声的词汇)的「朝日」、「C」、「每日」的部分下面增加下划线进行强调。由于「TV」包含在所有词汇(候补)中，该部分可以不发声，所以也不用强调。

[第ST23～ST24步]

从画面候补被显示开始3秒钟(给定时间)期间，如果利用者没有选择画面候补的意思(发声)时(即，候补提示部14没有接收到非提示信号S142时)，候补提示部14从画面候补被显示开始3秒钟后(给定时间后)向候补选择部15传送触发信号S143，在输入下一声音数据之前不让候补选择部15制作选择信息S112。然后进入到第ST25步。

[第ST25步]

如图5的显示画面5-3所示，候补提示部14消除显示器137上的画面候补(成非显示状态)。并且，停止对识别结果的「电视说唱节目」强调显示。

(2)没有显示反应利用者意图的画面时的情况

首先，在显示器137上显示「BS大阪」的节目(参见图6的显示画面6-1)。

[第ST21步]

利用者为了看「电视说唱节目」，对准遥控器134的麦克风131发出「电视说唱节目」声音(参见图6的显示画面6-1)。所输入的声音数据，通过红外线发射部130以及红外线接收部136传送给声音识别部11。声音识别部11，将包含在识别用词典122中的词典数据中与有关该声音数据的信息一致度最高的「每日TV」(误识别)作为识别结果S110输出。声音识别部11进一步，将包含在识别用词典122中的词典数据中与「每日TV」相关的词典数据的「朝日TV」、「电视说唱节目」、「CTV」也作为识别结果S110输出。将识别结果S110的「每日TV」传送给动作控制部12，将识别结果S110的「朝日TV」、「电视说唱节目」、「CTV」传送给候补制作部13。候补制作部13，制作动作候补S111的「「朝日TV」、「电视说唱节目」、「CTV」，并传送给候补提示部14。

[第ST22步]

动作控制部12，如图6的显示画面6-2所示，在显示器137的区域R1上显示识别结果S110的「每日TV」的画面(第1动作)。这时在识别结果的「每日TV」的文字下增加下划线进行强调。候补提示部14在显示器137的区域R1以外的区域上显示画面候补「朝日TV」、「电视说唱节目」、「CTV」(参见图6的显示画面6-2)。这时，对于利用者可以发声的词汇(为选择而发声的词汇)的「朝日」、「说唱节目」、「C」部分下面增加下划线进行强调。

[第ST23、ST24、ST26步]

由于反应利用者意图的画面应该是「电视说唱节目」，在从画面候补被显示开始3秒钟(给定时间)期间，利用者对准遥控器134的麦克风131发出「说唱节目」声音(参见图6的显示画面6-3)。所输入的声音数据，通过红外线发射部130以及红外线接收部136传送给声音识别部11。声音识别部11，将包含在识别用词典122中的词典数据中与有关该声音数据的信息一致度最高的「电视说唱节目」作为识别结果S110输出。将识别结果S110的「电视说唱节目」传送给动作控制部12。动作控制部12，如图6的显示画面6-3所示，将识别结果S110的「电视说唱节目」的画面在显示器137的区域R1上显示。又，候补提示部14响应非提示信号S142，让在显示器137上显示的动作候补成非显示状态(参见图6的显示画面6-3)。

                       <效果>

依据以上说明的第1实施方案，在执行第2动作的第1时刻和从提示动作候补开始到经过第1给定时间后的第2时刻之中较早时刻之前，提示候补制作部13制作的动作候补，为执行选择反应利用者意图的动作，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，候补提示部14，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补的提示成非提示状态。因此，利用者使用方便而不麻烦。又，可以有效利用画面显示区域。例如，在显示候补的区域中可以显示其它信息。对于体育节目可以显示选手的资料等。也可以显示新闻、天气信息等。

又，动作控制部12，由于自动执行根据识别部11输出的识别结果S110的第1动作，如果所执行的第1动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，候补提示部14由于自动提示动作候补，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补的操作。因此，利用者使用方便而不麻烦。

又，候补制作部13制作的动作候补，由于包含在通过将反应所输入识别对象的动作内容的信息与识别用词典数据进行比较而一致度高的识别用数据相关联的动作，即使出现误识别，动作候补中包含识别正确的动作，通过利用者的选择可以修改误识别。因此，利用者使用方便。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)在本实施方案中也可以并用取消功能。

b)在声音识别部11中，也可以利用语言知识、语法知识、意思知识等进行识别，也可以进行抽出关键词等的处理。

c)识别用词典数据，并不限定于单词，也可以是句子。

d)动作候补的选择也可以用声音进行。

e)也可以在多个识别结果中确定1个动作或者1个动作候补。

f)动作候补也可以只有1个。

g)作为动作候补之一也可以包含实现取消功能的动作。

h)遥控器和电视机主体之间的数据传送也并不限定于红外线，也可以采用蓝牙等无线数据通信技术。

i)动作候补的提示也并不限定于画面显示，也可以采用声音提示等。

j)提示动作候补的个数也可以不固定。

k)动作候补也可以在显示器上滚动显示。

l)动作候补的一部分也可以在经过第1给定时间后提示。

(第2实施方案)

              <数字电视系统的构成>

图7A表示依据第2实施方案的数字电视系统的整体构成。该系统包括电视机主体435、遥控器434。电视机主体435包括红外线接收部436、动作控制部42、候补制作部43、候补提示部44、候补选择部45、显示器437、识别用词典441、候补数据库(DB)442和词典控制部443。遥控器434包括麦克风431、声音输入按键438、识别部41、移动键433、确认键432、红外线发射部430。识别部41包括模型制作部421、识别用词典422、比较处理部423。

麦克风431在按下声音输入按键438期间接收利用者的声音数据后向模型制作部421传送。

模型制作部421将麦克风431传送来的声音数据变换成特征量，作为模型保存。

比较处理部423对包含在识别用词典422中的词典数据和由模型制作部421保存的模型进行比较，制作识别结果S410，传送给红外线发射部430。

红外线发射部430将识别结果S410传送给红外线接收部436。

红外线接收部436将红外线发射部430传送来的识别结果S410传送给动作控制部42和候补制作部43。

动作控制部42根据红外线接收部436传送来的识别结果S410切换显示器137的画面(第1动作)。

候补制作部43根据红外线接收部436传送来的识别结果S410制作动作候补S411，并将动作候补S411被传送给候补提示部44。

候补提示部44在显示器437上提示由候补制作部43制作的动作候补S411，将触发信号S443和提示位置信息S444传送给候补选择部45。

候补选择部45从接收到触发信号S443开始在经过第1给定时间之前，如果没有接收到由移动键433形成的操作信号S446时，将非提示信号S447传送给候补提示部44。

候补提示部44向应非提示信号S447，让在显示器437上提示的动作候补S411成非提示状态(第2时刻)。

红外线发射部430将移动键433和确认键432形成的操作信号S446传送给红外线接收部436。

红外线接收部436将该操作信号S446传送给候补选择部45。

候补选择部45，从接收到候补提示部44传送来的触发信号S443开始在经过第1给定时间之前，如果接收到由移动键433形成的操作信号S446时，根据由移动键433形成的操作信号S446和候补提示部44传送来的提示位置信息S444制作预备候补位置信息S441，根据预备候补位置信息S441变更显示器437的显示。候补选择部45，从接收到触发信号S443开始在经过第1给定时间之前，如果接收到由移动键433形成的操作信号S446时，根据由移动键433和确认键432形成的操作信号S446和提示位置信息S444制作选择信息S412，向动作控制部42传送选择信息S412。

动作控制部42接收候补选择部45制作的选择信息S412后向候补提示部44传送非提示信号S442。又，动作控制部42根据来自候补选择部45的选择信息S412切换显示器437的画面(第2动作)。

候补提示部44接收到动作控制部42传送来的非提示信号S442后，让显示器437的动作候补S411的提示成非提示状态(第1时刻)。

红外线发射部430将通过声音输入按键438制作的反应与第1动作不同动作内容的一般信息的利用者的动作信号S445传送给红外线接收部436。

红外线接收部436将动作信号S445传送给候补选择部45和候补提示部44。

候补选择部45接收到动作信号S445后在接收到下一提示位置信息S444之前不制作选择信息S412。

候补提示部44接收到动作信号S445后，让显示器437的动作候补S411的提示成非提示状态(第3时刻)。

在候补DB442中，保存有图7B所示的表。在图7B所示的表中，根据种类设定有4个类似区域(组)，这里所说的“类似区域”表示“意思相近”即，属于同～类似区域(组)的词汇，其意思相近，并且4个组与每组对应识别信息(组ID)为a～d。各组以种类作为关键词分组化。各组包含表示该组种类的词汇、和属于该词汇所表示的种类中的词汇。组IDa所对应的组(组a)包含表示组a的种类的词汇「体育」、和属于「体育」种类的词汇「足球」、「棒球」、…、「板球」。组b包含表示组b的种类的词汇「电影」、和属于「电影」种类的词汇「国产电影」、「西洋电影」。组c包含表示组c的种类的词汇「新闻」、和属于「新闻」种类的词汇「最新」、「经济」、…、「文化·艺术」。组d包含表示组d的种类的词汇「音乐」、和属于「音乐」种类的词汇「民乐」、「西洋音乐」、…、「古典」。

包含在各组中的每个词汇所表示的数据(词汇数据)，如图7C所示，保存在识别用词典422、441以及候补DB442中。保存在识别用词典422、441中的词汇数据，以声音识别用的词典数据的形式保存。在候补DB442中，保存在声音识别用词典数据中没有预备的词汇数据。每个词汇数据与表示该词汇所属组的ID、和表示通过采用声音识别遥控器434的声音或者按键操作由利用者所选择的次数的数据相对应。在图7C中，表示组的ID用a.(表示组a)、b.(表示组b)等表示，表示所选择次数的数据用(0)[表示选择了0次]、(1)[表示选择了1次]等表示。

为了减少在声音识别部41中的误识别，对保存在识别用词典422中的词汇数据(词典数据)的数量进行了限制。保存在识别用词典422中的词汇数据根据给定标准确定。在此，将表示种类的词汇数据「体育」、「电影」、「新闻」、「音乐」、以及所选择次数(使用频度)比较多的词汇数据「足球」、「棒球」、「最新」等保存在识别用词典422中。进一步，对于组整体使用频度高的组(在此为组a)，保存在识别用词典422中的词汇数据的数量要比其它组多。为此，将词汇数据「篮球」也保存在识别用词典422中。

                  <数字电视系统的动作>

以下说明以上构成的数字电视系统的动作。在此，以通过声音和按键操作进行电视的电子节目指南操作时的情况为例，参照图8以及图9A～H进行说明。

(1)显示反应利用者意图的画面时的情况

首先，在显示器437上显示「BS大阪」的节目(参见图9A的显示画面9-1)。

[第ST57步]

利用者为进行声音输入而按下声音输入按键438。响应该按键438的动作信号S445被传送给候补提示部44。响应动作信号S445，候补提示部44，如果有动作候补S411在显示器437上显示时，让动作候补S411成非显示状态，并在显示器437上显示「请发声」的文字(参见图9A的显示画面9-1)。

[第ST51步]

利用者在按下遥控器434的声音输入按键438的同时对准麦克风431发出「足球」的声音(参见图9A的显示画面9-2)。所输入的声音数据被传送给识别部41。识别部41选择包含在识别用词典422的词典数据中与有关该声音数据的信息相似度最高的词典数据(在此为「足球」)。

[第ST510步]

然后，识别部41判断所选择的词典数据的相似度是否在给定阈值以上。如果相似度在给定阈值以上，进入到第ST52步。如果相似度比给定阈值小进入到第ST511步。在此，假定进入到第ST52步。

此外，「给定阈值」并不一定要固定在某一个值上。利用者根据使用环境或者使用方便(识别率低时等)，也可以适当变更阈值。

[第ST52步]

识别部41将「足球」作为识别结果S410输出。该识别结果S410通过红外线发射部430传送给电视机主体435的红外线接收部436。红外线接收部436将接收到的识别结果S410的「足球」传送给动作控制部42和候补制作部43。

候补制作部43根据识别结果S410的「足球」制作动作候补S411。候补制作部43参照候补DB422内的表(图7B)，抽出属于「足球」的组(组a)和属于同组的词汇数据「棒球」、「篮球」、「高尔夫」、「网球」、「曲棍球」、「滑雪」、「长曲棍球」、「板球」。在此，除去词汇数据「足球」、和表示种类的词汇数据「体育」。候补制作部43将所抽出的词汇数据作为动作候补S411传送给候补提示部44。候补制作部43，对于所抽出的每个词汇数据，表示是否包含在识别用词典422中的信息附加在动作候补S411中。

动作控制部42根据识别结果S410的「足球」在显示器437上显示第1画面的足球节目的电子节目指南(第1动作)。候补提示部44在显示器437上显示第1画面之外的画面候补的「棒球」、「篮球」、「高尔夫」、「网球」、「曲棍球」、「滑雪」、「长曲棍球」、「板球」(参见图9A的显示画面9-2以及图9B)。如图9B所示，在包含在识别用词典422中的画面候补中的「棒球」、「篮球」之前没有附加*号，而在没有包含在识别用词典422中的画面候补中的「高尔夫」、「网球」、「曲棍球」、「滑雪」、「长曲棍球」、「板球」之前附加了*号。这样，可以向利用者表明所显示的各个候补是否包含在识别用词典422中。这样，利用者可以知道下一次什么可以用声音进行选择，什么不能用声音进行选择(必须用操作键进行选择)。候补提示部44，在显示画面候补的时刻，将表示在显示器437上显示画面候补的棒球」、「篮球」、「高尔夫」、「网球」、「曲棍球」、「滑雪」、「长曲棍球」、「板球」的位置信息的提示位置信息S444和触发信号S443传送给候补选择部45。

[第ST59、ST53、ST54步]

候补选择部45从接收到触发信号S443开始3秒钟(第1给定时间)期间，如果利用者没有按下声音输入按键438输入声音数据，并且候补选择部45从接收到触发信号S443开始3秒钟(给定时间)期间没有操作移动键433选择画面候补的意思时，候补选择部45在接收到下一动作信号S445之前不制作选择信息S412。

[第ST55步]

候补提示部44让显示器437上的画面候补成非显示状态(参见图9A的显示画面9-3)。

(2)没有显示反应利用者意图的画面时的情况

首先，在显示器437上显示「BS大阪」的节目(参见图9C的显示画面9-4)。

[第ST57步]

利用者为进行声音输入而按下声音输入按键438。响应该按键438的动作信号S445被传送给候补提示部44。响应动作信号S445，候补提示部44，如果有动作候补S411在显示器437上显示时，让动作候补S411成非显示状态，并在显示器437上显示「请发声」的文字(参见图9C的显示画面9-4)。

[第ST51步]

利用者希望在显示器437上显示「长曲棍球」的EPG。然而由于「长曲棍球」是不常见的运动，能否用声音让「长曲棍球」的EPG显示，利用者不能确定。不管怎样利用者尝试在按下遥控器434的声音输入按键438的同时对准麦克风431发出「长曲棍球」的声音(参见图9C的显示画面9-5)。所输入的声音数据被传送给识别部41。识别部41选择包含在识别用词典422的词典数据中与有关该声音数据的信息相似度最高的词典数据

[第ST510步]

然后，识别部41判断所选择的词典数据的相似度是否在给定阈值以上。在此假定判定相似度比给定阈值小。识别部41将表示该意思的信号传送给动作控制部42。让后进入到第ST511步。

[第ST511步]

动作控制部42在显示器437上显示「没能识别，对不起，请再次发声」的文字(参见图9C的显示画面9-5)。然后返回到第ST57步。此外，作为向利用者通知的手段，也可以利用警音(蜂鸣音等)、光(LED发光等)、声音。

[第ST57步]

利用者再次按下声音输入按键438。响应该按键438，清除显示器437上的显示，并在显示器437上显示「请发声」的文字(参见图9C的显示画面9-6)。

[第ST51步」

利用者知道「长曲棍球」属于「体育」种类。为此，利用者这次在按下遥控器434的声音输入按键438的同时对准麦克风431发出「体育」的声音(参见图9C的显示画面9-7)。识别部41选择包含在识别用词典422的词典数据中与有关该声音数据的信息相似度最高的词典数据(在此为「体育」)。

[第ST510步]

然后，识别部41判断所选择的词典数据的相似度是否在给定阈值以上。在此假定判定相似度在给定阈值以上。

[第ST52步]

识别部41将「体育」作为识别结果S410输出。将该识别结果S410传送给动作控制部42和候补制作部43。

候补制作部43根据识别结果S410的「体育」制作动作候补S411。候补制作部43参照候补DB422内的表(图7B)，抽出属于「体育」的组(组a)相同组的词汇数据「足球」、「棒球」、「篮球」、「高尔夫」、「网球」、「曲棍球」、「滑雪」、「长曲棍球」、「板球」。在此，除去词汇数据「体育」。候补制作部43将所抽出的词汇数据作为动作候补S411传送给候补提示部44。候补制作部43，对于所抽出的每个词汇数据，表示是否包含在识别用词典422中的信息附加在动作候补S411中。

动作控制部42根据识别结果S410的「体育」在显示器437上显示「体育节目的EPG」的文字(第1动作)。候补提示部44在显示器437上显示画面候补的「足球」、「棒球」、「篮球」、「高尔夫」、「网球」、「曲棍球」、「滑雪」、「长曲棍球」、「板球」(参见图9D的显示画面9-7以及图9E)。如图9E所示，在此，将包含在识别用词典422中的画面候补中的「足球」、「棒球」、「篮球」与「声音OK」的文字相关联。这样，向利用者表示可以用声音选择「足球」、「棒球」、「篮球」。另一方面，将没有包含在识别用词典422中的画面候补中的「高尔夫」、「网球」、「曲棍球」、「滑雪」、「板球」、「长曲棍球」与「用操作键」的文字相关联。这样，向利用者表示不能用声音选择「高尔夫」、「网球」、「曲棍球」、「滑雪」、「板球」、「长曲棍球」，而必须用操作键进行选择。

利用者观察显示画面9-7，知道所希望的「长曲棍球」不能用声音选择而必须用操作键选择。

候补提示部44，在显示画面候补的时刻，将提示位置信息S444和触发信号S443传送给候补选择部45。

[第ST59、ST53、ST54步]

候补选择部45从接收到触发信号S443开始3秒钟(第1给定时间)期间，利用者操作遥控器434的移动键433选择画面候补。候补选择部45根据移动键433形成的操作信号S446制作预备选择位置信息S441，在显示器437上强调(用粗框围住、改变文字颜色等)显示被认为是当前预备画面候补的画面候补的「长曲棍球」(参见图9D的显示画面9-9)。

[第ST56步]

动作控制部42根据选择信息S412在显示器437上显示长曲棍球节目的电子节目指南(第2动作)(参见图9D的显示画面9-9)。

[词典数据的追加、删除]

这次选择的「长曲棍球」可以认为被该利用者再次选择的可能性高。为此，数字电视机主体435的词典控制部443，如图9F所示，从服务器、电视台等下载「长曲棍球」的声音识别用的词典数据。所下载的词典数据通过词典控制部443被保存在识别用词典441中。当识别用词典441的容量装满时，通过词典控制部443从识别用词典441中删除其它词典数据。所删除的词典数据通过词典控制部443被追加到候补DB442中。

然后，如图9G所示，通过词典控制部443对所下载的「长曲棍球」与包含在识别用词典422中的词典数据之间进行选择次数的比较。如果是比「长曲棍球」的选择次数少的词典数据，则词典控制部443从识别用词典422中删除该词典数据。由词典控制部443把所删除的词典数据追加到识别用词典441中。然后，由词典控制部443在识别用词典422中追加「长曲棍球」的词典数据。

在识别用词典422中追加「长曲棍球」的词典数据时，在显示器437上显示图9H的显示画面9-10。这样，利用者知道在下一次可以用声音选择「长曲棍球」。

                      <效果>

依据以上说明的第2实施方案，在执行第2动作的第1时刻、从提示动作候补开始到经过第1给定时间后的第2时刻、输入反应与第1动作不同动作内容的一般信息的第3时刻、之中任一较早时刻之前，提示候补制作部43制作的动作候补S411，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，候补提示部44，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S411自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S411的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部42，由于自动执行根据识别部41输出的识别结果S410的第1动作，如果所执行的动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，候补提示部44由于自动提示动作候补S411，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补的操作。因此，利用者使用方便而不麻烦。

又，候补制作部43制作的动作候补S411，不是与由识别部41获得的识别结果S410在声音上相近的候补，而是意思相近的候补。这样对于利用者而言，可以提高使用方便性。

又，动作候补从识别用词典数据中制作时，由于可以向利用者提示包含在识别词典数据中的内容，可以提高识别率。又，动作候补从识别用词典数据之外制作时，利用者可以及时执行没有包含在识别词典数据中的动作，因此，利用者使用方便。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)在本实施方案中也可以并用取消功能。

b)在识别部41中，也可以利用语言知识、语法知识、意思知识等进行识别，也可以进行抽出关键词等的处理。

c)识别用词典数据422，并不限定于单词，也可以是句子。

d)也可以在多个识别结果中确定1个动作或者1个动作候补。

e)动作候补411也可以只有1个。

f)作为动作候补411之一也可以包含实现取消功能的动作。

g)作为动作候补411，也可以包含有关将反应所输入识别对象的动作内容的信息与识别用词典数据422进行比较一致度高的识别用数据的动作。

h)这里，根据种类设定了图7B所示的表中的类似区域(种类的类似范围)。但种类的设定基准不限于此。例如，也可以根据联想的关键词来设定类似区域(词汇的类似范围)。在这种情况下，对每个基准词汇设定类似范围。在对应某个基准词汇的类似区域内，包含有根据该基准词汇而联想出的关键词(例如：在对应基准词汇“足球”的类似区域中包含“中田”、“世界杯”等。在对应基准词汇“红”的类似区域内包含“色彩”、“黑”、“苹果”等。在对应基准词汇“体育”的类似区域中包含“足球”、“棒球”、“高尔夫”等。

而且，也可以根据使用者的嗜好及/或行动习惯设定类似区域(习惯的类似范围)。例如：在对应基准词汇“经常看的节目”的类似区域中包含使用者经常看的节目的关键词“足球”、“体育点评”、“当日新闻”等。在对应基准词汇“目前要做的事”的类似区域中包含兼顾到使用者及时间的关键词“邮件”、“向浴缸内放水”等。

另外，也可以根据相关的机器操作进行类似区域的设定(功能性类似范围)。例如：在操作录象机时，在对应基准词汇“回放”的类似区域内包含“停止”、“跳过”、“倒带”等。

i)根据需要也可以追加识别用词典数据422。

j)作为反应与第1动作不同的动作内容的一般信息，也可以采用进行取消功能的信息。

k)动作候补的提示也并不限定于画面显示，也可以采用声音提示等。

l)提示动作候补的个数也可以不固定。

m)动作候补的一部分也可以在经过第1给定时间后提示。

n)动作候补也可以在显示器上滚动显示。

o)遥控器和电视机主体之间的数据传送也并不限定于红外线，也可以采用蓝牙等。

(第3实施方案)

                   <数字电视系统的构成>

图10表示依据第3实施方案的数字电视系统的整体构成。该系统包括电视机主体735、遥控器734。电视机主体735包括收发部736、动作控制部72、动作候补制作部73、动作候补提示部74、显示器737。遥控器734包括麦克风731、发话按键738、识别部71(动作候补选择部75)、收发部730。识别部71(动作候补选择部75)包括模型制作部721、识别用词典数据722、比较处理部723。

麦克风731在按下发话按键738期间接收利用者的声音数据后向模型制作部721传送。

模型制作部721将麦克风731传送来的声音数据变换成特征量，作为模型保存。

比较处理部723对包含在识别用词典数据722和由模型制作部721保存的模型进行比较，制作识别结果S710，传送给收发部730。

收发部730将识别结果S710传送给收发部736。

收发部736将收发部730传送来的识别结果S710传送给动作控制部72和动作候补制作部73。

动作控制部72根据收发部736传送来的识别结果S710变更显示器737的画面(第1动作)。

动作候补制作部73根据收发部736传送来的识别结果S710制作动作候补S711，并将动作候补S711被传送给动作候补提示部74和收发部736。

动作候补提示部74在显示器737上提示由动作候补制作部73制作的动作候补S711，将触发信号S743传送给收发部736。并且动作候补提示部74切换信号S748传送给收发部736。

收发部736在接收到下一切换信号S748之前，不向动作候补制作部73传送选择信息S712，将所接收到的选择信息S712传送给动作控制部72。收发部736将接收到的触发信号S743和动作候补S711传送给收发部730。收发部730将接收到的触发信号S743和动作候补S711传送给比较处理部723。

动作候补选择部75的识别部71，从比较处理部723接收到触发信号S743开始在经过第1给定时间之前，如果模型制作部721接收到声音数据时，在比较处理部723中，由动作候补S711对识别用词典数据722加以限制，进行是别处理，将识别结果作为选择信息S712输出。

收发部730在接收到选择信息S712后将选择信息S712传送给收发部736。

收发部736将接收到的选择信息S712传送给动作控制部72。

动作控制部72在接收到选择信息S712后向动作候补提示部传送非提示信号S742。又，动作控制部72根据收发部736传送的选择信息S712变更显示器737的画面(第2动作)。

动作候补提示部74接收到动作控制部72传送来的非提示信号S742后，让显示器737的动作候补S711的提示成非提示状态(第1时刻)，并将切换信号S748传送给收发部736。

动作候补选择部75的识别部71，从比较处理部723接收到触发信号S743开始在经过第1给定时间之前，如果模型制作部721没有接收到声音数据时，向收发部730传送非提示信号S742。

收发部730将接收到的非提示信号S742传送给收发部736。

收发部736将接收到的非提示信号S742传送给动作候补提示部74。

动作候补提示部74在接收到非提示信号S742后让在显示器737上提示的动作候补S711成非提示状态(第2时刻)。又，动作候补提示部74在接收到非提示信号S742后将切换信号S748传送给收发部736

收发部736在接收到下一切换信号S748之前，将接收到的识别结果S710传送给动作控制部72和动作候补制作部73。

                  <数字电视系统的动作>

以下说明以上构成的数字电视系统的动作。在此，以通过声音进行电视节目的操作时的情况为例，参照图11以及图12A～B进行说明。

(1)显示反应利用者意图的画面时的情况

首先，在显示器737上显示「BS大阪」的节目(参见图12A的显示画面12-1)。

[第ST87步]

利用者为进行声音输入而按下发话按键738。

[第ST81步]

利用者在按下发话按键738的同时将「电视说唱节目」的声音数据输入给遥控器734的麦克风731(参见图12A的显示画面12-1)。所输入的声音数据被传送给识别部71。识别部71将有关声音数据的信息与识别用词典数据722一致度最高的「电视说唱节目」作为识别结果S710输出。并将识别结果S710通过收发部730传送给电视机主体735的收发部736。收发部736将接收到的识别结果S710的「电视说唱节目」传送给动作控制部72和动作候补制作部73。动作候补制作部73，根据识别结果S710的「电视说唱节目」，作为动作候补S711制作有关相同的电视台(频道)的种类的「朝日TV」、「CTV」、「每日TV」。动作候补制作部73，将动作候补S711传送给动作候补提示部74和收发部736。

[第ST82步]

动作控制部72，根据识别结果S710的「电视说唱节目」在显示器737上显示电视说唱节目的节目(第1动作)。动作候补提示部74在显示器737上显示第1画面以外的画面候补「朝日TV」、「CTV」、「每日TV」(参见图12A的显示画面12-2)。动作候补提示部74，在显示画面候补的时刻向收发部736传送触发信号S743。收发部736将接收到的触发信号S743和动作候补S711传送给收发部730。收发部730将接收到的触发信号S743和动作候补S711传送给比较处理部723。动作候补提示部74将切换信号S748传送给收发部736。收发部736在接收到下一切换信号S748之前，将接收到的选择信息S712传送给动作控制部72，接收到的选择信息S712不传送给动作候补制作部73。又，收发部736进一步在接收到下一切换信号S748时，将接收到的识别结果S710传送给动作控制部72和动作候补制作部73。

[第ST84、ST83步]

动作候补选择部75的识别部71，从接收到触发信号S743开始在经过第1给定时间的期间，如果没有按下发话按键738输入声音进行画面候补的选择的意思时，动作候补选择部75将非提示信号S747传送给收发部730。收发部730将接收到的非提示信号S747传送给收发部736。收发部736将接收到的非提示信号S747传送给动作候补提示部74。动作候补提示部74接收到非提示信号S747后，让显示器737的画面候补成非显示状态(参见图12A的显示画面12-3)。动作候补提示部74接收到非提示信号S747后，将切换信号S748传送给收发部736。

(2)反应利用者意图的画面显示没有结束时的情况

首先，在显示器737上显示「BS大阪」的节目(参见图12B的显示画面12-4)。

[第ST87步]

利用者为进行声音输入而按下发话按键738。

[第ST81步]

利用者在按下发话按键738的同时将「电视说唱节目」的声音数据输入给遥控器734的麦克风731(参见图12B的显示画面12-4)。所输入的声音数据被传送给识别部71。识别部71将有关声音数据的信息与识别用词典数据722一致度最高的「电视说唱节目」作为识别结果S710输出，并将识别结果S710通过收发部730传送给电视机主体735的收发部736。收发部736将接收到的识别结果S710的「电视说唱节目」传送给动作控制部72和动作候补制作部73。动作候补制作部73，根据识别结果S710的「电视说唱节目」，作为动作候补S711制作有关相同的电视台(频道)的种类的「朝日TV」、「CTV」、「每日TV」。动作候补制作部73，将动作候补S711的「朝日TV」、「CTV」、「每日TV」传送给动作候补提示部74和收发部736。

[第ST82步]

动作控制部72，根据识别结果S710的「电视说唱节目」在显示器737上显示电视说唱节目的节目(第1动作)。动作候补提示部74在显示器737上显示第1画面以外的画面候补「朝日TV」、「CTV」、「每日TV」(参见图12B的显示画面12-5)。动作候补提示部74，在显示画面候补的时刻向收发部736传送触发信号S743。又，动作候补提示部74将切换信号S748传送给收发部736。收发部736进行将下面接收到的选择信息S712传送给动作控制部72而接收到的选择信息S712不传送给动作候补制作部73的准备。收发部736将接收到的触发信号S743和动作候补S711传送给收发部730。收发部730将触发信号S743和动作候补S711传送给动作候补选择部75的识别部71。

「第ST84、ST83步]

动作候补选择部75从接收到触发信号S743开始在经过第1给定时间的期间，利用者按下发话按键738用麦克风731输入了声音数据的「每日TV」。麦克风731将声音数据传送给模型制作部721。模型制作部721将「每日TV」的声音数据变换成特征量保存。比较处理部723对接收到的动作候补S711的有关「朝日TV」、「CTV」、「每日TV」的词典加以限制，利用模型制作部721保存的特征量和识别用词典数据722进行关键词定位，制作选择信息S712(识别结果S710)的「每日TV」。比较处理部723将选择信息S712传送给收发部736。收发部736将接收到的选择信息S712传送给动作控制部72。

[第ST86步]

动作控制部72根据收发部736传送来的选择信息S712变更显示器737的显示，将画面2分割，追加显示每日TV的节目(第2动作)。如图12B的显示画面12-6所示，不是对「电视说唱节目的节目」的显示进行修正而显示「每日TV的节目」，而是根据识别结果同时显示多个节目的「电视说唱节目的节目」和「每日TV的节目」。动作控制部72，在接收到选择信息S712后将非提示信息S742传送给动作候补提示部74。动作候补提示部74接收非提示信息S742后让在显示器737显示的动作候补S711非显示状态(参见图12B的显示画面12-6)。动作候补提示部74接收非提示信息S742后将切换信号S748传送给收发部736。收发部736进行将下面接收到的识别结果S710传送给动作控制部72和动作候补制作部73的准备。

                       <效果>

依据以上说明的第3实施方案，在执行第2动作的第1时刻、从提示动作候补S711开始到经过第1给定时间后的第2时刻之中任一较早时刻之前，提示动作候补制作部73制作的动作候补S711，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部74，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S711自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S711的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部72，由于自动执行根据识别部71输出的识别结果S710的第1动作，如果所执行的动作是反应利用者意图的动作时，没有必要由利用者选择动作候补S711。因此，利用者使用方便而不麻烦。

又，动作候补提示部74由于自动提示动作候补S711，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补S711的操作。因此，利用者使用方便而不麻烦。

又，在动作候补S711，由于对于根据识别部71输出的识别结果S710的第1动作，包含考虑意思相关的动作的候补，可以及时选择反应利用者意图的动作。因此，利用者使用方便性好。

又，动作控制部72，可以同时进行根据识别结果S710的多个动作控制(在显示电视说唱节目的节目的同时显示每日TV的节目等)，因此，利用者使用方便性好。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)在本实施方案中也可以并用取消功能。

b)在识别部71中，也可以利用语言知识、语法知识、意思知识等进行识别。

c)作为动作候补之一也可以包含实现取消功能的动作。

d)作为动作候补711，也可以包含有关将反应所输入识别对象的动作内容的信息与识别用词典数据722进行比较一致度高的识别用数据的动作。

e)作为与根据识别部71输出的识别结果710的动作意思相关的动作候补S711，虽然列举了相同种类的动作候补(对于「电视说唱节目」，采用「朝日TV」、「CTV」、「每日TV」等)，意思相关并不限定于种类，也可以包括联想的动作候补(对于「足球」采用「中田」、「世界杯」等，对于「红」采用「颜色」、「黑」、「苹果」等)，或者考虑到利用者的嗜好的动作候补(对于「常看节目」采用利用者经常收视的节目的「足球」、「体育节选」、「今日新闻」等，对于「当前要做的事」采用考虑了利用者和时间的「邮件」、「打开浴室开关」等)，或者有关操作机器的动作候补(在视频播放机操作中对于「播放」采用「停止」、「快进」、「后退」等)。

f)动作候补S711的提示也并不限定于画面显示，也可以采用声音提示等。

g)提示动作候补的个数也可以不固定。

h)动作候补的一部分也可以在经过第1给定时间后提示。

i)动作候补也可以在显示器上滚动显示

j)遥控器和电视机主体之间的数据传送也并不限定于红外线，也可以采用蓝牙等。

(第4实施方案)

               <视频系统的构成>

图13表示依据第4实施方案的视频系统的整体构成方框图。图13所示系统包括视频播放器1085、遥控器1084。视频播放器1085包括接收部1086、动作控制部1056。遥控器1084包括麦克风1081、发话按键1088、识别部1051、动作候补制作部1053、动作候补提示部1054、显示器1087、按键1083、动作候补选择部1055、发射部1080。识别部1051包括模型制作部1071、识别用词典数据1072、比较处理部1073。

麦克风1081在按下发话按键1088期间接收利用者的声音数据后向模型制作部1071传送。

模型制作部1071将麦克风1081传送来的声音数据变换成特征量，作为模型保存。

比较处理部1073对包含在识别用词典数据1072和由模型制作部1071保存的模型进行比较，制作识别结果S1060，将识别结果S1060传送给收发部1080和动作候补制作部1053。

发射部1080将接收到的识别结果S1060传送给接收部1086。

接收部1086将接收到的识别结果S1060传送给动作控制部1056。

动作控制部1056根据接收到的识别结果S1060变更视频播放器的操作(第1动作)。

动作候补制作部1053根据接收到的识别结果S1060制作动作候补S1061，并将动作候补S1061被传送给动作候补提示部1054。

动作候补提示部1054在显示器1087上提示接收到的动作候补S1061，将触发信号S1093传送给动作候补选择部1055。

动作候补选择部1055，从接收到触发信号S1093开始在经过第1给定时间之前，如果没有接收到由按键1083形成的操作信号S1096时，向动作候补提示部1054传送非提示信号S1092。

动作候补提示部1054接收到非提示信号S1092后，让在显示器1087提示的动作候补S1061成非提示状态(第2时刻)。

动作候补选择部1055，从接收到动作候补提示部1054传送来的触发信号S1093开始在经过第1给定时间之前，如果接收到由按键1083形成的操作信号S1096时，根据该操作信号S1096制作选择信息S1062，将选择信息S1062传送给发射部1080。又，动作候补选择部1055接收操作信号S1096后，将非提示信号S1092传送给动作候补提示部1054。

发射部1080将接收到的选择信息S1062传送给接收部1086。

接收部1086将接收到的选择信息S1062传送给动作控制部1056。

动作控制部1056根据接收到的选择信息S1062进行视频播放器的操作(第2动作)。

动作候补提示部1054接收到非提示信号S1092后，让在显示器1087提示的动作候补S1061成非提示状态(第1时刻)。

                  <视频系统的动作>

以下说明以上构成的视频系统的动作。在此，以通过声音和按键操作进行视频播放器的操作时的情况为例，参照图14以及图15A～C进行说明。

(1)执行反应利用者意图的动作时的情况

[第ST1157步]

利用者为进行声音输入而按下发话按键1088。

[第ST1151步]

利用者在按下发话按键1088的同时将「播放」的声音数据输入给遥控器1081的麦克风1081(参见图15A的显示画面15-1)。所输入的声音数据被传送给识别部1051。识别部1051将有关声音数据的信息与识别用词典数据1072一致度最高的「播放」作为识别结果S1060输出。并将识别结果S1060通过发射部1080、接收部1086传送给视频播放器1085的动作控制部1056。

[第ST1152步]

动作控制部1056，根据识别结果S1060的「播放」播放视频播放器(第1动作)。又，识别部1051将识别结果S1060传送给动作候补制作部1053。动作候补制作部1053具有图15C所示的表。图15C所示的表让识别词汇和与该识别词汇意思相近的操作对应。在此「意思相近的操作」是指根据识别词汇的操作在功能上使用的可能性高的操作。即，在图15C所示的表中，通过机器操作设定4个类似区域(功能性的类似范围)。4个类似区域分别对应4个识别词汇(基准词汇)“回放”、“停止”、“跳过”、“倒带”。在各个类似区域中，包含有表示在相对应的识别词汇所表示的操作的基础上进行功能性地使用的可能性高的词汇。动作候补制作部1053，参照图15C所示的表，根据接收到的识别结果S1060的「播放」，作为动作候补S1061制作功能上使用的可能性高的「①停止」、「②快进」、「③后退」，并将动作候补S1061传送给动作候补提示部1054。动作候补提示部1054在显示器1087上显示接收到的动作候补S1061的「①停止」、「②快进」、「③后退」(参见图15A的显示画面15-2)。动作候补提示部1054接收到的动作候补S1061后向动作候补选择部1055传送触发信号S1093。

[第ST1154、ST1153步]

动作候补选择部1055，从接收到触发信号S1093开始在经过第1给定时间(在此为3秒)的期间，如果利用者没有按下按键1083选择动作候补S1061的意思时，动作候补选择部1055在接收到下一触发信号S1093之前不制作选择信息S1062。动作候补选择部1055向动作候补提示部1054传送非提示信号S1092。

[第ST1155步]

动作候补提示部1054接收到非提示信号S1092后，让显示器1087的动作候补S1061成非显示状态(参见图15A的显示画面15-3)。

(2)没有执行反应利用者意图的动作时的情况

[第ST1157步]

利用者为进行声音输入而按下发话按键1088。

[第ST1151步]

利用者在按下发话按键1088的同时将「播放」的声音数据输入给遥控器1081的麦克风1081(参见图15B的显示画面15-4)。所输入的声音数据被传送给识别部1051。识别部1051将有关声音数据的信息与识别用词典数据1072一致度最高的「播放」作为识别结果S1060输出。并将识别结果S1060通过发射部1080、接收部1086传送给视频播放器1085的动作控制部1056。

[第ST1152步]

动作控制部1056，根据识别结果S1060的「播放」播放视频播放器(第1动作)。又，识别部1051将识别结果S1060传送给动作候补制作部1053。动作候补制作部1053根据接收到的识别结果S1060的「播放」，作为动作候补S1061制作功能上使用的可能性高的「①停止」、「②快进」、「③后退」，并将动作候补S1061传送给动作候补提示部1054。动作候补提示部1054在显示器1087上显示接收到的动作候补S1061的「①停止」、「②快进」、「③后退」(参见图15B的显示画面15-5)。动作候补提示部1054接收到的动作候补S1061后向动作候补选择部1055传送触发信号S1093。

[第ST1154、ST1153步]

动作候补选择部1055，从接收到触发信号S1093开始在经过第1给定时间(在此为3秒)的期间，如果利用者按下按键1083选择动作候补S1061。如图15B的显示画面15-5)所示，在此按下了③的按键选择「③后退」。动作候补选择部1055根据按键1083形成的操作信号S1096制作选择信息S1062的「后退」，并传送给发射部1080。发射部1080将接收到的选择信息S1062，通过接收部1086传送给动作控制部1056。

[第ST1156步]

动作控制部1056根据接收到的选择信息S1062让视频播放器执行后退操作。动作候补选择部1055在制作了选择信息S1062后向动作候补提示部1054传送非提示信号S1092。动作候补提示部1054接收到非提示信号S1092后，让显示器1087的动作候补S1061成非显示状态(参见图15B的显示画面15-6)。

                       <效果>

依据以上说明的第4实施方案，在执行第2动作的第1时刻、从提示动作候补S1061开始到经过第1给定时间后的第2时刻之中任一较早时刻之前，提示动作候补制作部1053制作的动作候补S1061，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部1054，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S1061自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S1061的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部1056，由于自动执行根据识别部1051输出的识别结果S1060的第1动作，如果所执行的动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，动作候补提示部1054由于自动提示动作候补S1061，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补的操作。因此，利用者使用方便而不麻烦。

又，在动作候补S1061，由于对于根据识别部1051输出的识别结果S1060的第1动作，包含考虑意思相关的动作的候补，可以及时选择反应利用者意图的动作。因此，利用者使用方便性好。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)在本发明中也可以并用取消功能。

b)在识别部1051中，也可以利用语言知识、语法知识、意思知识等进行识别，也可以进行抽出关键词等的处理。

c)识别用词典数据1072，并不限定于单词，也可以是句子。

d)也可以在多个识别结果中确定1个动作或者1个动作候补。

e)动作候补也可以只有1个。

f)作为动作候补之一也可以包含实现取消功能的动作。

g)作为动作候补S1061，也可以包含有关将反应所输入识别对象的动作内容的信息与识别用词典数据1072进行比较一致度高的识别用数据的动作。

h)根据需要也可以追加识别用词典数据1072。

i)动作候补S1061的提示也并不限定于画面显示，也可以采用声音提示等。

j)提示动作候补S1061的个数也可以不固定。

k)动作候补S1061的一部分也可以在经过第1给定时间后提示。

l)动作候补S1061也可以在显示器1087上滚动显示。

m)遥控器和视频播放器之间的数据传送也并不限定于红外线，也可以采用蓝牙等。

(第5实施方案)

               <汽车导航系统的构成>

图16表示依据第5实施方案的汽车导航系统的整体构成方框图。图16所示的汽车导航系统包括麦克风1381、发话按键1388、识别部1351(动作候补选择部1355)、切换开关部1386、动作候补制作部1353、动作候补提示部1354、显示器1387、喇叭1389、控制部1340、动作控制部1352。识别部1351包括模型制作部1371、识别用词典数据1372、比较处理部1373。

麦克风1381在按下发话按键1388期间接收利用者的声音数据后向模型制作部1371传送。

模型制作部1371将麦克风1381传送来的声音数据变换成特征量，作为模型保存。

比较处理部1373对识别用词典数据1372和由模型制作部1371保存的模型进行比较，制作识别结果S1360，将识别结果S1360传送给切换开关部1386。

切换开关部1386将接收到的识别结果S1360传送给动作控制部1352和动作候补制作部1353。

动作控制部1352根据切换开关部1386传送来的识别结果S1360变更显示器1387的画面，从喇叭1389发出声音引导，由控制部1340设置目的地(第1动作)。

动作候补制作部1353根据切换开关部1386传送来的识别结果S1360制作动作候补S1361，并将动作候补S1361被传送给动作候补提示部1354。

动作候补提示部1354在显示器1387上显示动作候补制作部1353制作的动作候补S1361，将触发信号S1393传送给切换开关部1386。又，动作候补提示部1354将切换信号S1398传送给切换开关部1386。

切换开关部1386在接收到下一切换信号S1398之前，不向动作候补制作部1353传送选择信息S1362，将所接收到的选择信息S1362传送给动作控制部1352。切换开关部1386将接收到的触发信号S1393和动作候补S1361传送给比较处理部1373。

作为动作候补选择部1355的识别部1351，从比较处理部1373接收到触发信号S1393开始在经过第1给定时间之前，如果模型制作部1371接收到声音数据时，在比较处理部1373中，由动作候补S1361对识别用词典数据1372加以限制，进行识别处理，将识别结果作为选择信息S1362输出。

切换开关部1386接收比较处理部1373输出的选择信息S1362，将选择信息S1362传送给动作控制部1352。

动作控制部1352接收到选择信息S1362后向动作候补提示部1354传送非提示信号S1392。又，动作控制部1352根据所接收到的选择信息S1362变更显示器1387的画面，从喇叭1389发出声音引导，由控制部1340设置目的地(第2动作)。

动作候补提示部1354接收到动作控制部1352传送来的非提示信号S1392后，让在显示器1387上的动作候补S1061的提示成非提示状态(第1时刻)，将切换信号S1398传送给切换开关部1386。

作为动作候补选择部1355的识别部1351，从比较处理部1373接收到触发信号S1393开始在经过第1给定时间之前，如果模型制作部1371没有接收到声音数据时，将非提示信号S1392传送给切换开关部1386。

切换开关部1386将接收到的非提示信号S1392传送给动作候补提示部1354。

动作候补提示部1354接收到非提示信号S1392后，让在显示器1387提示的动作候补S1361成非提示状态(第2时刻)。又，动作候补提示部1354接收到非提示信号S1392后，将切换信号S1398传送给切换开关部1386。

切换开关部1386在接收到下一切换信号S1398之前，将接收到的识别结果S1360传送给动作控制部1352和动作候补制作部1353。

                 <汽车导航系统的动作>

以下说明以上构成的汽车导航系统的动作。在此，以通过声音进行导航操作时的情况为例，参照图17以及图18进行说明。

(1)执行反应利用者意图的动作时的情况

在显示器1387上显示「请输入目的地」(图18的第15-1-1步)。

[第ST1457步]

利用者为了用声音输入目的地而按下发话按键1388。

[第ST1451步]

利用者在按下发话按键1388的同时将「东京迪斯尼乐园(R)」的声音数据输入给麦克风1381(参见图18的第15-1-1步)。所输入的声音数据被传送给识别部1351。识别部1351将有关声音数据的信息与识别用词典数据1372一致度高的「东京迪斯尼乐园(R)」、「东京迪斯尼海(R)」、「东京站」作为识别结果S1360输出。并将识别结果S1360传送给切换开关部1386。在此，识别用词典数据1372保存单词词典数据，比较处理部1373保存每个音的声音模型。比较处理部1373利用每个音的声音模型和识别用词典数据1372中的单词词典数据制作识别结果S1360。切换开关部1386将接收到的识别结果S1360的「东京迪斯尼乐园(R)」传送给动作控制部1352，将所接收到的识别结果S1360的「东京迪斯尼海(R)」、「东京站」传送给动作候补制作部1353。动作候补制作部1353根据识别结果S1360的「东京迪斯尼海(R)」、「东京站」作为动作候补S1361制作「①东京迪斯尼海(R)」、「②东京站」。又，动作候补制作部1353作为动作候补S1361制作「③取消」。动作候补制作部1353将动作候补S1361传送给动作候补提示部1354和切换开关部1386。

[第ST1452步]

动作控制部1352，根据识别结果S1360的「东京迪斯尼乐园(R)」，在显示器1387上显示东京迪斯尼乐园(R)附近的地图，并从喇叭1389中发出「设定了东京迪斯尼乐园(R)为目的地」的声音引导。在控制部1340中，搜索作为第1设定的去往东京迪斯尼乐园(R)的道路，设定路径(第1动作)。

动作候补提示部1354，在显示器1387上显示动作候补S1361的「①东京迪斯尼海(R)」、「②东京站」、「③取消」(图18的第15-1-2步)。动作候补提示部1354在显示动作候补S1361的时刻，将触发信号S1393传送给切换开关部1386。切换开关部1386将接收到的触发信号S1393和动作候补S1361传送给比较处理部1373。动作候补提示部1354将切换信号S1398传送给切换开关部1386。切换开关部1386在接收到下一切换信号S1398之前，将接收到的选择信息S1362传送给动作控制部1352，将接收到的选择信息S1362不传送给动作候补制作部1353。又，切换开关部1386进一步接收到下一切换信号S1398时，将所接收到的识别结果S1360传送给动作控制部1352和动作候补制作部1353。

[第ST1453、ST1454步]

动作候补选择部1355的识别部1351，从接收到触发信号S1393开始在经过第1给定时间的期间，如果利用者没有按下发话按键1388输入声音选择动作候补S1361的意思时，动作候补选择部1355将非提示信号S1392传送给切换开关部1386。切换开关部1386将接收到的非提示信号S1392传送给动作候补提示部1354。动作候补提示部1354在接收到非提示信号S1392后，让显示器1387上的动作候补成非显示状态(图18的第15-1-3步)。动作候补提示部1354在接收到非提示信号S1392后，将切换信号S1398传送给切换开关部1386。

(2)没有执行反应利用者意图的动作时的情况

在显示器1387上显示「请输入目的地」(图18的第15-2-1步)。

[第ST1457步]

利用者为了用声音输入目的地而按下发话按键1388。

[第ST1451步]

利用者在按下发话按键1388的同时将「东京迪斯尼乐园(R)」的声音数据输入给麦克风1381(参见图18的第15-1-1步)。所输入的声音数据被传送给识别部1351。识别部1351将有关声音数据的信息与识别用词典数据1072一致度高的「东京迪斯尼海(R)」、「东京迪斯尼乐园(R)」、「东京站」作为识别结果S1360输出。并将识别结果S1360传送给切换开关部1386。切换开关部1386将接收到的识别结果S1360的「东京迪斯尼海(R)」传送给动作控制部1352，将所接收到的识别结果S1360的「东京迪斯尼乐园(R)」、「东京站」传送给动作候补制作部1353。动作候补制作部1353根据识别结果S1360的「东京迪斯尼乐园(R)」、「东京站」作为动作候补S1361制作「①东京迪斯尼乐园(R)」、「②东京站」。又，动作候补制作部1353作为动作候补S1361制作「③取消」。在此，附加了与「东京迪斯尼乐园(R)」、「东京站」相比容易进行声音识别的编号(①、②、③等)。又，在识别用词典数据1372中登录有编号(①号、②号、③号等)。动作候补制作部1353将动作候补S1361传送给动作候补提示部1354和切换开关部1386。

[第ST1452步]

动作控制部1352，根据识别结果S1360的「东京迪斯尼海(R)」，在显示器1387上显示东京迪斯尼海(R)附近的地图，并从喇叭1389中发出「设定了东京迪斯尼海(R)为目的地」的声音引导。在控制部1340中，搜索作为第1设定的去往东京迪斯尼海(R)的道路，设定路径(第1动作)。

动作候补提示部1354，在显示器1387上显示动作候补S1361的「①东京迪斯尼乐园(R)」、「②东京站」、「③取消」(图18的第15-1-2步)。动作候补提示部1354在显示动作候补S1361的时刻，将触发信号S1393传送给切换开关部1386。切换开关部1386将接收到的触发信号S1393和动作候补S1361传送给比较处理部1373。动作候补提示部1354将切换信号S1398传送给切换开关部1386。切换开关部1386在接收到下一切换信号S1398之前，将接收到的选择信息S1362传送给动作控制部1352，将接收到的选择信息S1362不传送给动作候补制作部1353。又，切换开关部1386进一步接收到下一切换信号S1398时，将所接收到的识别结果S1360传送给动作控制部1352和动作候补制作部1353。

[第ST1453、ST1454步]

动作候补选择部1355的识别部1351，从接收到触发信号S1393开始在经过第1给定时间的期间，利用者按下发话按键1388输入声音「①号」。麦克风1381将声音数据传送给模型制作部1371。模型制作部1371将「①号」的声音数据变换成特征量保存。比较处理部1373利用模型制作部1371保存的特征量和识别用词典数据1372制作识别结果S1360的「①号」，根据识别结果S1360的「①号」和动作候补S1361的「东京迪斯尼乐园(R)」、制作选择信息S1362的「东京迪斯尼乐园(R)」。比较处理部1373将选择信息S1362传送给切换开关部1386。切换开关部1386将接收到的选择信息S1362传送给动作控制部1352。

[第ST1456步]

动作控制部1352根据接收到的选择信息S1362，在显示器1387上显示东京迪斯尼乐园(R)附近的地图，并从喇叭1389中发出「设定了东京迪斯尼乐园(R)为目的地」的声音引导。在控制部1340中，搜索去往东京迪斯尼乐园(R)的道路，设定路径(第2动作)。

动作控制部1352在接收到选择信息S1362后将非提示信号S1392传送给动作候补提示部1354。动作候补提示部1354在接收到非提示信号S1392后，让显示器1387上的动作候补成非显示状态(图18的第15-2-3步)。动作候补提示部1354在接收到非提示信号S1392后，将切换信号S1398传送给切换开关部1386。切换开关部1386进行将接收到的下一识别结果S1360传送给动作控制部1352和动作候补制作部1353的准备。

                       <效果>

依据以上说明的第5实施方案，在执行第2动作的第1时刻、从提示动作候补S1361开始到经过第1给定时间后的第2时刻之中任一较早时刻之前，提示动作候补制作部1353制作的动作候补S1361，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部1354，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S1361自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S1361的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部1352，由于自动执行根据识别部1351输出的识别结果S1360的第1动作，如果所执行的第1动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，动作候补提示部1354由于自动提示动作候补S1361，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补的操作。因此，利用者使用方便而不麻烦。

又，动作候补制作部1353制作的动作候补，由于包含将反应所输入识别对象的动作内容的信息与识别用词典数据1372进行比较后一致度高的识别用数据相关的动作，即使出现误识别，由于在动作候补S1361中包含识别正确的动作，通过利用者的选择可以更正误识别。因此，利用者使用方便。

又，动作控制部1352根据识别结果S1360可以进行多个动作控制(显示东京迪斯尼乐园(R)附近的地图，并从喇叭1389中发出「设定了东京迪斯尼乐园(R)为目的地」的声音引导，在控制部1340中，搜索去往东京迪斯尼乐园(R)的道路，设定路径等)。因此，利用者使用方便。

又，作为动作候补S1361，附加与识别结果S1360比较容易识别的单词(在此已编号为例)，进行动作候补S1361的选择，不会出现选择错误。因此，利用者使用方便。

又，作为动作候补S1361，包括取消功能，当没有执行反应意图的动作时可以取消返回原来的状态。因此，利用者使用方便。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)在识别部1351中，也可以利用语言知识、语法知识、意思知识等进行识别。

b)作为动作候补S1361，也可以包含根据识别部1351输出的识别结果S1360的动作意思相关的内容。

c)动作候补S1361的提示也并不限定于画面显示，也可以采用声音提示等。

d)提示动作候补S1361的个数也可以不固定。

e)动作候补S1361的一部分也可以在经过第1给定时间后提示。

f)动作候补S1061也可以在显示器1387上滚动显示。

(第6实施方案)

               <移动电话的构成>

图19表示依据第6实施方案的移动电话的整体构成方框图。图19所示的移动电话1685包括麦克风1681、发话按键1688、识别部1651(动作候补选择部1655)、切换开关部1686、动作候补制作部1653、动作候补提示部1654、显示器1687、控制部1640、动作控制部1652。识别部1651(动作候补选择部1655)包括模型制作部1671、识别用词典数据1672、比较处理部1673。

麦克风1681在按下发话按键1688期间接收利用者的声音数据后向模型制作部1671传送。

模型制作部1671将麦克风1681传送来的声音数据变换成特征量，作为模型保存。

比较处理部1673对识别用词典数据1672和由模型制作部保存的模型进行比较，制作识别结果S1660，将识别结果S1660传送给切换开关部1686。

切换开关部1686将接收到的识别结果S1660传送给动作控制部1652和动作候补制作部1653。

动作控制部1652根据切换开关部1686传送来的识别结果S1660变更显示器1687的画面。又，动作控制部1652接收比较处理部1673传送来的触发信号S1699(经过第2给定时间后)，根据切换开关部1686传送来的识别结果S1660变更显示器1687的画面，在控制部1640拨打通话方的电话(第1动作)。

动作候补制作部1653根据切换开关部1686传送来的识别结果S1660制作动作候补S1661，并将动作候补S1661被传送给动作候补提示部1654和比较处理部1673。

动作候补提示部1654在显示器1687上显示动作候补制作部1653制作的动作候补S1661，将触发信号S1693传送给比较处理部1673。又，动作候补提示部1654将切换信号S1698传送给切换开关部1686。

切换开关部1686在接收到下一切换信号S1698之前，不向动作候补制作部1653传送选择信息S1662，将所接收到的选择信息S1662传送给动作控制部1652。

作为动作候补选择部1655的识别部1651，从比较处理部1673接收到触发信号S1693开始在经过第1给定时间之前，如果模型制作部1671接收到声音数据时，在比较处理部1673中，由动作候补S1661对识别用词典数据1672加以限制，进行识别处理，将识别结果作为选择信息S1662输出。

切换开关部1686接收到比较处理部1673输出的选择信息S1662后，将选择信息S1662传送给动作控制部1652。

动作控制部1652接收到选择信息S1662后向动作候补提示部1654传送非提示信号S1692。又，动作控制部1652根据所接收到的选择信息S1662变更显示器1687的画面，在控制部1640拨打通话方的电话(第2动作)。

动作候补提示部1654接收到动作控制部1652传送来的非提示信号S1692后，让在显示器1687上的动作候补S1661的提示成非提示状态(第1时刻)，将切换信号S1698传送给切换开关部1686。

作为动作候补选择部1655的识别部1651，从比较处理部1673接收到触发信号S1693开始在经过第1给定时间之前，如果模型制作部1671没有接收到声音数据时，比较处理部1673将非提示信号S1697传送给动作候补提示部1654。又，比较处理部1673将触发信号S1699传送给动作控制部1652。

动作候补提示部1654接收到非提示信号S1397后，让在显示器1687提示的动作候补S1661成非提示状态(第2时刻)。又，动作候补提示部1654接收到非提示信号S1697后，将切换信号S1698传送给切换开关部1686。

切换开关部1686在接收到下一切换信号S1698之前，将接收到的识别结果S1660传送给动作控制部1652和动作候补制作部1653。

                    <移动电话的动作>

以下说明以上构成的移动电话1685的动作。在此，以通过声音进行移动电话的通话操作时的情况为例，参照图20以及图21进行说明。

(1)执行反应利用者意图的动作时的情况

在显示器1687上显示「请输入发送方」(图21A的显示画面21-1)。

[第ST1757步]

利用者为了用声音输入发送方而按下发话按键1688。

[第ST1751步]

利用者在按下发话按键1688的同时将「铃木」的声音数据输入给麦克风1681(图21A的显示画面21-1)。所输入的声音数据被传送给识别部1651。识别部1651将有关声音数据的信息与识别用词典数据1672一致度高的「铃木」、「斎藤」、「须藤」作为识别结果S1660输出。并将识别结果S1660传送给切换开关部1686。切换开关部1686将接收到的识别结果S1660的「铃木」传送给动作控制部1652，将所接收到的识别结果S1660的「斎藤」、「须藤」传送给动作候补制作部1653。动作候补制作部1653根据识别结果S1660的「斎藤」、「须藤」作为动作候补S1661制作「②斎藤」、「③须藤」。又，动作候补制作部1653作为动作候补S1661制作「①取消」、「④下一候补」。动作候补制作部1653将动作候补S1661传送给动作候补提示部1654和比较处理部1673。

[第ST1752步]

动作控制部1652，根据识别结果S1660的「铃木」，在显示器1687上显示「向铃木发送」和到第1给定时间(5秒)剩余的秒数「3秒」(第1动作)。

动作候补提示部1654，在显示器1687上显示动作候补S1661的「①取消」、「②斎藤」、「③须藤」、「④下一候补」(图21A的显示画面21-2)。动作候补提示部1654在显示动作候补S1661的时刻，将触发信号S1693传送给比较处理部1673。动作候补提示部1654将切换信号S1698传送给切换开关部1686。切换开关部1686在接收到下一切换信号S1698之前，将接收到的选择信息S1662传送给动作控制部1652，将接收到的选择信息S1662不传送给动作候补制作部1653。又，切换开关部1686进一步接收到下一切换信号S1698时，将所接收到的识别结果S1660传送给动作控制部1652和动作候补制作部1653。

[第ST1753、ST1754步]

在作为动作候补选择部1655的识别部1651中，从比较处理部1673接收到触发信号S1693开始在经过第1给定时间(3秒)的期间，如果利用者没有按下发话按键1688输入声音选择动作候补S1661的意思时，在动作候补选择部1655中，比较处理部1673将非提示信号S1697传送给动作候补提示部1654。又，比较处理部1673将触发信号S1699传送给动作控制部1652。动作候补提示部1654在接收到非提示信号S1697后，让显示器1687上的动作候补成非显示状态。动作控制部1652接收到触发信号S1699后(经过了第2给定时间(在此为5秒)后)，根据识别结果S1660的「铃木」向铃木拨打电话(第1动作)(图21A的显示画面21-3)。动作候补1654接收到非提示信号S1697后，将切换信号S1698传送给切换开关部1686。此外，在上述第1给定时间(3秒)期间如果按下菜单按键时，在显示器1687上显示菜单画面(图21A的显示画面21-4)。

(2)没有执行反应利用者意图的动作时的情况

在显示器1687上显示「请输入发送方」(图21B的显示画面21-5)。

[第ST1757步]

利用者为了用声音输入发送方而按下发话按键1688。

[第ST1751步]

利用者在按下发话按键1688的同时将「铃木」的声音数据输入给麦克风1681(图21B的显示画面21-5)。所输入的声音数据被传送给识别部1651。识别部1651将有关声音数据的信息与识别用词典数据1672一致度高的「斎藤」、「铃木」、「须藤」作为识别结果S1660输出。并将识别结果S1660传送给切换开关部1686。切换开关部1686将接收到的识别结果S1660的「斎藤」传送给动作控制部1652，将所接收到的识别结果S1660的「「铃木」、「须藤」传送给动作候补制作部1653。动作候补制作部1653根据识别结果S1660的「铃木」、「须藤」作为动作候补S1661制作「②铃木」、「③须藤」。又，动作候补制作部1653作为动作候补S1661制作「①取消」、「④下一候补」。动作候补制作部1653将动作候补S1661传送给动作候补提示部1654和比较处理部1673。

[第ST1752步]

动作控制部1652，根据识别结果S1660的「斎藤」，在显示器1687上显示「向斎藤发送」和到第1给定时间剩余的秒数「3秒」(第1动作)。

动作候补提示部1654，在显示器1687上显示动作候补S1661的「①取消」、「②铃木」、「③须藤」、「④下一候补」(图21B的显示画面21-6)。动作候补提示部1654在显示动作候补S1661的时刻，将触发信号S1693传送给比较处理部1673。动作候补提示部1654将切换信号S1698传送给切换开关部1686。切换开关部1686在接收到下一切换信号S1698之前，将接收到的选择信息S1662传送给动作控制部1652，将接收到的选择信息S1662不传送给动作候补制作部1653。又，切换开关部1686进一步接收到下一切换信号S1698时，将所接收到的识别结果S1660传送给动作控制部1652和动作候补制作部1653。

[第ST1753、ST1754步]

在作为动作候补选择部1655的识别部1651中，从比较处理部1673接收到触发信号S1693开始在经过第1给定时间(3秒)的期间，利用者按下发话按键1688输入声音「②号」。麦克风1681将声音数据传送给模型制作部1671。模型制作部1671将「②号」的声音数据变换成特征量保存。比较处理部1673利用模型制作部1671保存的特征量和识别用词典数据1672制作识别结果S1660的「②号」，根据识别结果S1660的「②号」和动作候补S1661的「②铃木」、制作选择信息S1662的「铃木」。比较处理部1673将选择信息S1662传送给切换开关部1686。切换开关部1686将接收到的选择信息S1662传送给动作控制部1652。

[ST1756步]

在经过第2给定时间后，动作控制部1652根据接收到的选择信息S1662，在显示器1687上显示铃木的电话号码和「铃木」，拨打铃木的电话(第2动作)。

动作控制部1652在接收到选择信息S1662后将非提示信号S1692传送给动作候补提示部1654。动作候补提示部1654在接收到非提示信号S1692后，让显示器1687上显示的动作候补S1661成非显示状态(图21B的显示画面21-7)。动作候补提示部1654在接收到非提示信号S1692后，将切换信号S1698传送给切换开关部1686。切换开关部1686进行将接收到的下一识别结果S1660传送给动作控制部1652和动作候补制作部1653的准备。

                       <效果>

依据以上说明的第6实施方案，在执行第2动作的第1时刻、从提示动作候补S1661开始到经过第1给定时间后的第2时刻之中任一较早时刻之前，提示动作候补制作部1653制作的动作候补S1661，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部1654，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S1661自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S1661的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部1652，由于自动执行根据识别部1651输出的识别结果S1660的第1动作，如果所执行的第1动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，动作候补提示部1654由于自动提示动作候补S1661，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补的操作。因此，利用者使用方便而不麻烦。

又，动作候补制作部1653制作的动作候补S1661，由于包含将反应所输入识别对象的动作内容的信息与识别用词典数据1672进行比较后一致度高的识别用数据相关的动作，即使出现误识别，由于在动作候补S1661中包含识别正确的动作，通过利用者的选择可以更正误识别。因此，利用者使用方便。

又，由于是在第2给定时间后执行根据识别结果S1660的第1动作(拨打电话)，可以防止执行不是利用者意图的第1动作。因此，利用者使用方便。

又，作为动作候补S1661，附加与识别结果S1660比较容易识别的单词(在此已编号为例)，进行动作候补S1661的选择，不会出现选择错误。因此，利用者使用方便。

又，作为动作候补S1661，包括取消功能，当没有执行反应意图的动作时可以取消返回原来的状态。因此，利用者使用方便。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)在识别部1651中，也可以利用语言知识、语法知识、意思知识等进行识别。

b)作为动作候补S1661，也可以包含根据识别部1651输出的识别结果S1660的动作意思相关的内容(对于「铃木」采用「查看铃木的邮件」、「查看铃木的个人信息」等)。

c)动作候补S1661的提示也并不限定于画面显示，也可以采用声音提示等。

d)提示动作候补S1661的个数也可以不固定。

e)如图21A的显示画面21-4)所示，也可以采用反应与第1动作不同动作内容的一般信息的「按下了菜单画面按键」的信息等。

f)识别部1651并不限定于声音识别装置，也可以是文字识别等。

g)第1给定时间、和有关第1动作执行的第2给定时间也可以独立设定。

h)动作候补S1661的一部分也可以在经过第1给定时间后提示。

i)也可以采用文字识别替换声音识别。

(第7实施方案)

               <翻译装置的构成>

图22表示依据第7实施方案的翻译装置的整体构成方框图。图22所示的翻译装置1985包括麦克风1981、识别部1951、动作控制部1952动作候补制作部1993、动作候补提示部1954、动作候补选择部1955、触摸屏显示器1987、控制部1940、喇叭1989。识别部1951包括模型制作部1971、识别用词典数据1972、比较处理部1973。

触摸屏显示器1987在用笔按下「发话按键」部分的时刻，将操作信号S1996传送给麦克风1981。

麦克风1981在接收到操作信号S1996后，接收声音数据，向模型制作部1971传送。

模型制作部1971将麦克风1981传送来的声音数据变换成特征量，作为模型保存。

比较处理部1973对识别用词典数据1972和由模型制作部1971保存的模型进行比较，制作识别结果S1960，将识别结果S1960传送给动作控制部1952和动作候补制作部1993。

动作控制部1952根据接收的识别结果S1960，在触摸屏显示器1987上显示一致度最高的识别结果，并将触摸屏显示器1987上的发话按键变更合成音按键显示器，在控制部1940进行一致度最高的识别结果的翻译，将翻译结果在触摸屏显示器1987显示(第1动作)。

动作候补制作部1993根据接收到的识别结果S1960制作动作候补S1961，并将动作候补S1961被传送给动作候补提示部1954。

动作候补提示部1954在触摸屏显示器1987上显示接收到的动作候补S1961，将触发信号S1993传送给动作候补选择部1955。

动作候补选择部1955，从接收到触发信号S1993开始在经过第1给定时间之前，如果没有接收到由触摸屏显示器1987进行候补选择所形成的操作信号S1996时，将非提示信号S1997传送给动作候补提示部1954。

动作候补提示部1954接收到非提示信号S1997后，让在触摸屏显示器1987」上显示的动作候补S1961成非显示状态(第2时刻)。

动作候补选择部1955，从接收到触发信号S1993开始在经过第1给定时间之前，如果接收到由触摸屏显示器1987进行候补选择所形成的操作信号S1996时，制作根据接收到的操作信号S1996的选择信息S1962，并将选择信息S1962传送给动作控制部1952。

动作控制部1952根据接收的选择信息S 1962，在触摸屏显示器1987上显示所选择的识别结果，在控制部1940进行所选择的识别结果的翻译，将翻译结果在触摸屏显示器1987显示(第2动作)。

动作控制部1952，在接收到由动作候补选择部1955制作的选择信息S1962后，将非提示信号S1992传送给动作候补提示部1954。

动作候补提示部1954接收到动作控制部1952传送来的非提示信号S1992后，让在触摸屏显示器1987上显示的动作候补S1961成非显示状态(第1时刻)。

动作控制部1952接收到在由触摸屏显示器1987按下合成音按键所形成的操作信号S1996(反应与第1动作不同动作内容的一般信息)后，将非提示信号S1992传送给动作候补提示部1954。

动作候补选择部1955接收在由触摸屏显示器1987按下合成音按键所形成的操作信号S1996，在接收到触发信号S1993之前不制作选择信息S1962。

动作候补提示部1954接收到非提示信号S1992后，让在触摸屏显示器1987上显示的动作候补S1961成非显示状态(第3时刻)。

                    <翻译装置的动作>

以下说明以上构成的翻译装置1985的动作。在此，以通过声音和用笔在触摸屏显示器1987上的操作进行翻译装置的操作时的情况为例，参照图23以及图24进行说明。

(1)显示反应利用者意图的翻译结果时的情况的例1

[第ST2057步]

利用者为进行声音输入用笔按下触摸屏显示器1987上的发话按键。

[第ST2051步]

利用者将「买去往东京的车票」的声音数据输入给麦克风1981(图24的第21-1-1步)。所输入的声音数据被传送给识别部1951。识别部1951将有关声音数据的信息与识别用词典数据1972一致度高的「买去往东京的车票」、「买去往京都的车票」、「买到东京的邮票」作为识别结果S1960输出。并将识别结果S1960的「买去往东京的车票」传送给动作控制部1952，将识别结果S1960的「买去往京都的车票」、「买到东京的邮票」传送给动作候补制作部1993。在此，识别结果S1960，通过从声音数据中抽出关键词、从识别用词典数据1972的例文中选择更多包含从声音数据中抽出的关键词的例文制作而成。动作候补制作部1993根据识别结果S1960，作为动作候补S1961制作「①买去往京都的车票」、「②买到东京的邮票」。动作候补制作部1993将动作候补S1961传送给动作候补提示部1954。

[第ST2052步]

动作控制部1952，根据识别结果S1960的「买去往东京的车票」，在触摸屏显示器1987上显示「买去往东京的车票」，将触摸屏显示器1987上的发话按键变更成合成音按键，在控制部1940进行「买去往东京的车票」的翻译，并将翻译结果显示在触摸屏显示器1987(第1动作)。

动作候补提示部1954，在触摸屏显示器1987上显示动作候补S1961的「①买去往京都的车票」、「②买到东京的邮票」(图24的第21-1-2步)。

[第ST2059、ST2053、ST2054步]

在动作候补选择部1955接收到触发信号S1993开始2秒钟(第1给定时间)的期间，如果动作候补选择部1955没有接收到触摸屏显示器1987上的合成音按键所形成的操作信号S1996，并且动作候补选择部1955没有接收到触摸屏显示器1987选择动作候补S1961的操作信号S1996时，动作候补选择部1955将非提示信号S1996传送给动作候补提示部1954。又，动作候补选择部1955在接收到下一触发信号S1993之前，不制作选择信息S1962。

[第ST2055步]

动作候补提示部1954让触摸屏显示器1987上的动作候补S1961成非显示状态(图24的第21-1-3步)。在此，如果按下触摸屏显示器1987上的合成音按键时，从喇叭1989发出「Could you give me a ticket bound forTokyo」的读音。

(2)显示反应利用者意图的翻译结果时的情况的例2

[第ST2057步]

利用者为进行声音输入用笔按下触摸屏显示器1987上的发话按键。

[第ST2051步]

利用者将「买去往东京的车票」的声音数据输入给麦克风1981(图24的第21-1-1步)。所输入的声音数据被传送给识别部1951。识别部1951将有关声音数据的信息与识别用词典数据1972-致度高的「买去往东京的车票」、「买去往京都的车票」、「买到东京的邮票」作为识别结果S1960输出。并将识别结果S1960的「买去往东京的车票」传送给动作控制部1952，将识别结果S1960的「买去往京都的车票」、「买到东京的邮票」传送给动作候补制作部1993。在此，识别结果S1960，通过从声音数据中抽出关键词、从识别用词典数据1972的例文中选择更多包含从声音数据中抽出的关键词的例文制作而成。动作候补制作部1993根据识别结果S1960，作为动作候补S1961制作「①买去往京都的车票」、「②买到东京的邮票」。动作候补制作部1993将动作候补S1961传送给动作候补提示部1954。

[第ST2052步]

动作控制部1952，根据识别结果S1960的「买去往东京的车票」，在触摸屏显示器1987上显示「买去往东京的车票」，将触摸屏显示器1987上的发话按键变更成合成音按键，在控制部1940进行「买去往东京的车票」的翻译，并将翻译结果显示在触摸屏显示器1987(第1动作)。动作候补提示部1954，在触摸屏显示器1987上显示动作候补S1961的「①买去往京都的车票」、「②买到东京的邮票」(图24的第21-1-2步)。

[第ST2059、ST2053、ST2054步]

在动作候补选择部1955接收到触发信号S1993开始2秒钟(第1给定时间)的期间，如果动作候补选择部1955接收到触摸屏显示器1987上的合成音按键所形成的操作信号S1996，时，动作候补选择部1955将非提示信号S1996传送给动作候补提示部1954。又，动作候补选择部1955在接收到下一触发信号S1993之前，不制作选择信息S1962。动作控制部1952接收到操作信号S1996后，将非提示信号S1992传送给动作候补提示部1954。动作候补提示部1954接收到非提示信号S1992后让触摸屏显示器1987上的动作候补S1961成非显示状态，动作控制部1952从喇叭1989发出「Could you give me a ticket bound for Tokyo」的读音(图24的第21-1-4步)。

(3)没有显示反应利用者意图的翻译结果时的情况

[第ST2057步]

利用者为进行声音输入用笔按下触摸屏显示器1987上的发话按键。

[第ST2051步]

利用者将「买去往东京的车票」的声音数据输入给麦克风1981(图24的第21-2-1步)。所输入的声音数据被传送给识别部1951。识别部1951将有关声音数据的信息与识别用词典数据1972一致度高的「买去往京都的车票」、「买去往东京的车票」、「买到东京的邮票」作为识别结果S1960输出。并将识别结果S1960的「买去往京都的车票」传送给动作控制部1952，将识别结果S1960的「买去往东京的车票」、「买到东京的邮票」传送给动作候补制作部1993。在此，识别结果S1960，通过从声音数据中抽出关键词、从识别用词典数据1972的例文中选择更多包含从声音数据中抽出的关键词的例文制作而成。动作候补制作部1993根据识别结果S1960，作为动作候补S1961制作「①买去往东京的车票」、「②买到东京的邮票」。动作候补制作部1993将动作候补S1961传送给动作候补提示部1954。

[第ST2052步]

动作控制部1952，根据识别结果S1960的「买去往京都的车票」，在触摸屏显示器1987上显示「买去往京都的车票」，将触摸屏显示器1987上的发话按键变更成合成音按键，在控制部1940进行「买去往京都的车票」的翻译，并将翻译结果的「Could you give me a ticket bound for Kyoto」显示在触摸屏显示器1987(第1动作)。动作候补提示部1954，在触摸屏显示器1987上显示动作候补S1961的「①买去往东京的车票」、「②买到东京的邮票」(图24的第21-2-2步)。

[第ST2059、ST2053、ST2054步]

在动作候补选择部1955接收到触发信号S1993开始2秒钟(第1给定时间)的期间，动作候补选择部1955接收到触摸屏显示器1987选择动作候补S1961的操作信号S1996(选择「买去往东京的车票」时，动作候补选择部1955根据接收到的操作信号S1996制作选择信息S1962的「买去往东京的车票」(图24的第21-2-2步)。

[第ST2056步]

动作控制部1952选择信息S1962，在触摸屏显示器1987上显示「买去往东京的车票」，在控制部1940进行「买去往东京的车票」的翻译，并将翻译结果的「Could you give me a ticket bound for Tokyo？」显示在触摸屏显示器1987。在此，如果按下触摸屏显示器1987上的合成音按键时，从喇叭1989发出「Could you give me a ticket bound for Tokyo？」的读音(图24的第21-2-3步)。

                       <效果>

依据以上说明的第7实施方案，在执行第2动作的第1时刻、从提示动作候补S1961开始到经过第1给定时间后的第2时刻、输入反应与第1动作不同动作内容的一般信息的第3时刻、之中任一较早时刻之前，提示动作候补制作部1993制作的动作候补S1661，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部1954，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S1961自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S1961的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部1952，由于自动执行根据识别部1951输出的识别结果S1960的第1动作，如果所执行的动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，动作候补提示部1954由于自动提示动作候补S1961，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补的操作。因此，利用者使用方便而不麻烦。

又，动作候补制作部1993制作的动作候补S1961，由于包含将反应所输入识别对象的动作内容的信息与识别用词典数据1972进行比较后一致度高的识别用数据相关的动作，即使出现误识别，由于在动作候补S1961中包含识别正确的动作，通过利用者的选择可以更正误识别。因此，利用者使用方便。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)也可以与本发明并用取消功能。

b)作为动作候补S1661之一，也可以包含实现取消功能的动作。

c)也也可以根据需要追加识别用词典数据1972。

d)作为反应与第1动作不同动作的一般信息，也可以是执行取消功能的信息。

e)动作候补S1961的提示也并不限定于画面显示，也可以采用声音提示等。

f)识别部1951并不限定于声音识别装置，也可以是文字识别等。

g)提示动作候补S1961的个数可以不固定。

h)动作候补S1661的一部分也可以在经过第1给定时间后提示。

i)作为动作候补S1961，对于识别结果S1960的动作，也可以包含意思相关的内容。

(第8实施方案)

               <监视系统的构成>

图25表示依据第8实施方案的监视系统的整体构成方框图。图25所示的监视系统2385，在利用者1侧包括摄像机2281、控制部2240，在利用者2侧包括识别部2251、动作控制部2252、动作候补制作部2253、动作候补提示部2254、动作候补选择部2255、触摸屏显示器2287，两者通过网络连接。。识别部2251包括模型制作部2271、识别用词典数据2272、比较处理部2273。

摄像机2281接收利用者1的人移动的数据，通过网络，将人移动的数据传送给模型制作部2271和动作控制部2252。

动作控制部2252将人移动的数据在触摸屏显示器2287上显示。

模型制作部2271将接收到的人移动的数据变换成特征量，作为模型保存。

比较处理部2273对识别用词典数据2272和由模型制作部2271保存的模型进行比较，制作识别结果S2260，将识别结果S2260传送给动作控制部2252和动作候补制作部2253。

动作控制部2252，在从接收到识别结果S2260开始经过第2给定时间后的时刻，根据接收到的识别结果S2260对控制部2240进行控制(第1动作)。

动作候补制作部2253根据接收到的识别结果S2260制作动作候补S2261，并将动作候补S2261被传送给动作候补提示部2254

动作候补提示部2254在触摸屏显示器2287上显示所接收到的动作候补S2261。

动作候补选择部2255在将动作候补S226 1在触摸屏显示器2287上显示的期间接收到由来自利用者2的动作候补S2261的选择操作所形成的操作信号S2296时，动作候补选择部2255制作选择信息S2262，并将选择信息S2262传送给动作控制部2252。

动作控制部2252根据接收到的选择信息S2262对控制部2240进行控制。又，动作控制部2252将非提示信号S2292传送给动作候补提示部2254。动作候补提示部2254接收到非提示信号S2292后，让在触摸屏显示器2287显示的动作候补S2261成非显示状态。

动作候补选择部2255在将动作候补S2261在触摸屏显示器2287上显示的期间没有接收到由来自利用者2的动作候补S2261的选择操作所形成的操作信号S2296(动作候补提示部2254在接收到动作候补S2261经过第1给定时间的情况)时，动作候补提示部2254让在触摸屏显示器2287显示的动作候补S2261成非显示状态。

                    <监视系统的动作>

以下说明以上构成的监视系统2385的动作。在此，以通过网络进行远距离操作行动监视系统的的情况为例，参照图26以及图27A～B进行说明。

(1)执行反应利用者意图的动作时的情况

[第ST2351步]

摄像机2281接收到利用者1的人移动的数据后，将该数据通过因特网等网络传送给识别部2251和动作控制部2252。动作控制部2252采用触摸屏显示器2287向利用者2显示所接收到的人移动的数据(图27A的显示画面27-1)。识别部225 1将有关人移动的数据的信息与识别用词典数据2272中的行动模式一致度高的「肚子饿了时的行动模式」、「要打开电源开关时的行动模式」、「要洗澡时的行动模式」作为识别结果S2260输出，将一致度最高的识别结果S2260的「肚子饿了时的行动模式」传送给动作控制部2252，将识别结果S2260的「要打开电源开关时的行动模式」、「要洗澡时的行动模式」传送给动作候补制作部2253。动作候补制作部2253根据接收到的识别结果S2260制作动作候补S2261的「打开电源」、「洗澡」，并传送给动作候补提示部2254。

[第ST2352步]

动作候补提示部2254在触摸屏显示器2287上显示动作候补S2261的「打开电源」、「洗澡」。又，动作控制部2252在触摸屏显示器2287上显示根据识别结果S2260「肚子饿了时的行动模式」的动作「是否用餐」(图27A的显示画面27-2)。

[第ST2353、ST2354步]

动作候补提示部2254从接收到动作候补S2261开始经过第1给定时间之前，没有从动作控制部2252接收到非提示信号S2292时，动作候补提示部2254让在触摸屏显示器2287上显示的动作候补S2261成非显示状态。动作候补提示部2254在从接收到识别结果S2260开始经过给定第2给定时间的时刻，让控制部2240执行根据识别结果S2260的动作「用餐」(第1动作)(图27A的显示画面27-3)。

(2)没有执行反应利用者意图的动作时的情况

[第ST2351步]

摄像机2281接收到利用者1的人移动的数据后，将该数据通过因特网等网络传送给识别部2251和动作控制部2252。动作控制部2252采用触摸屏显示器2287向利用者2显示所接收到的人移动的数据(图27B的显示画面27-4)。识别部2251将有关人移动的数据的信息与识别用词典数据2272中的行动模式一致度高的「肚子饿了时的行动模式」、「要打开电源开关时的行动模式」、「要洗澡时的行动模式」作为识别结果S2260输出，将一致度最高的识别结果S2260的「肚子饿了时的行动模式」传送给动作控制部2252，将识别结果S2260的「要打开电源开关时的行动模式」、「要洗澡时的行动模式」传送给动作候补制作部2253。动作候补制作部2253根据接收到的识别结果S2260制作动作候补S2261的「打开电源」、「洗澡」，并传送给动作候补提示部2254。

[第ST2352步]

动作候补提示部2254在触摸屏显示器2287上显示动作候补S2261的「打开电源」、「洗澡」。又，动作控制部2252在触摸屏显示器2287上显示根据识别结果S2260「肚子饿了时的行动模式」的动作「是否用餐」(图27B的显示画面27-5)。

[第ST2353、ST2354步]

利用者2观察触摸屏显示器2287上利用者1的行动模式，选择利用者1的行动模式最适合的动作。在将动作候补S2261在触摸屏显示器2287上显示的期间，由利用者2选择动作候补S2261。动作候补选择部2255接收到操作信号S2296后，根据操作信号S2296制作选择信息S2262的「洗澡」，并将选择信息S2262传送给动作控制部2252。动作控制部2252，由控制部2240执行根据识别结果S2260的动作(第1动作)「用餐」、和根据接收到的选择信息S2262的动作作(第2动作)「洗澡」。又，动作控制部2252为了向利用者2通知已经执行了第1动作和第2动作的情况，在触摸屏显示器2287上显示「用餐：OK」、「洗澡：OK」。动作控制部2252向动作候补提示部2254传送非提示信号S2292。动作候补提示部2254在接收到非提示信号S2292后，让在触摸屏显示器2287上显示的动作候补S2261成非显示状态(图27B的显示画面27-6)。

                <监视系统的动作另一例>

参照图27C～E说明监视系统2385的动作的另一例。

(1)执行反应利用者意图的动作时的情况

摄像机2281接收到利用者1的人移动的数据后，将该数据通过因特网等网络传送给识别部2251和动作控制部2252。动作控制部2252采用触摸屏显示器2287向利用者2显示所接收到的人移动的数据(图27C的显示画面27-7)。识别部2251将包含在识别用词典数据2272中的行动模式中与有关人移动的数据的信息一致度最高的行动模式作为识别结果S2260输出。在此，「小偷侵入」作为识别结果S2260输出。该识别结果S2260被传送给动作控制部2252和动作候补制作部2253。动作控制部2252，参照图27E所示的表，从与「小偷侵入」对应的动作「发出警音」、「向警察报警」、「取消」中选择优先度最高的动作(在此为「发出警音」)，又控制部2240执行所选择的动作。在图27E所示的表中，根据应执行的动作设定类似范围(动作的类似范围)。在对应识别行动“盗贼的侵入”的类似范围内，包含对应该识别行动应进行的动作“发出警音”、“通报警察”、“取消”。动作控制部2252为了向利用者2通知已经执行了「发出警音」的情况，在触摸屏显示器2287上显示「警音：OK」(图27C的显示画面27-8)。动作候补制作部2253，参照图27E所示的表，从与识别结果S2260的「小偷侵入」对应的动作中剩余的「向警察报警」、「取消」作为动作候补S2261传送给动作候补提示部2254。动作候补提示部2254在触摸屏显示器2287显示动作候补S2261的「向警察报警」、「取消」(图27C的显示画面27-8)。如果没有选择所显示的候补经过20秒后，动作候补提示部2254让在触摸屏显示器2287上显示的动作候补S2261成非显示状态(图27C的显示画面27-9)。

(2)没有执行反应利用者意图的动作时的情况

和上述同样，在触摸屏显示器2287显示「向警察报警」、「取消」(图27D的显示画面27-10、27-11)。利用者2在显示候补后20秒以内选择「向警察报警」(图27D的显示画面27-11)。响应该选择，报警装置通过通信路径向警察报警。动作控制部2252为了向利用者2通知已经执行了向警察报警的情况，在触摸屏显示器2287上显示「报警：OK」。又，动作候补提示部2254让在触摸屏显示器2287上显示的动作候补S2261成非显示状态(图27D的显示画面27-12)。

                      <效果>

依据以上说明的第8实施方案，在执行第2动作的第1时刻、从提示动作候补S2261开始到经过第1给定时间后的第2时刻之中任一较早时刻之前，提示动作候补制作部2253制作的动作候补S2261，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部2254，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S2261自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S2261的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部2252，由于自动执行根据识别部2251输出的识别结果S2260的第1动作，如果所执行的第1动作是反应利用者意图的动作时，没有必要由利用者选择动作候补S2261。因此，利用者使用方便而不麻烦。

又，动作候补提示部2254由于自动提示动作候补S2261，如果所执行的第1动作不是反应利用者意图的动作时，没有必要由利用者进行为提示动作候补S2261的操作。因此，利用者使用方便而不麻烦。

又，由于在第2给定时间之后执行根据识别结果S2260的第1动作，可以防止执行不是利用者意图的第1动作。因此，利用者使用方便。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)提示动作候补S2261的个数可以不固定。

b)也可以选择多个动作候补S2261，进行多个第2动作。

c)作为网络，也可以采用电话网络、因特网、局域网、无线网等。

d)动作候补S2261的一部分也可以在经过第1给定时间后提示。

(第9实施方案)

                 <控制系统的构成>

图28表示依据第9实施方案的控制系统的整体构成方框图。图28所示的控制系统2585，是带识别功能的机器控制系统，包括摄像机2581A、麦克风2581B、机器K的控制部2540K(K＝1，2，…，N)、识别部2551、动作控制部2552、动作候补制作部2553、动作候补提示部2554、动作候补选择部2555、触摸屏显示器2587。识别部2551包括模型制作部2571、识别用词典数据2572、比较处理部2573。

摄像机2581A接收利用者的虹膜数据，将该虹膜数据传送给模型制作部2571。

麦克风2581B接收利用者的声音数据，将该声音数据传送给模型制作部2571。

模型制作部2571将接收到的虹膜数据和声音数据变换成特征量，作为利用者的模型保存。

比较处理部2573对识别用词典数据2572和由模型制作部2571保存的利用者的模型进行比较，制作识别结果S2560。在此，作为识别用词典数据，准备多个由个人ID和识别个人的模型组成的对，将具有识别用词典数据的模型与由模型制作部2571保存的模型之间一致度高的模型的个人ID作为识别结果S2560输出。

比较处理部2573将制作的识别结果S2560传送给动作控制部2552和动作候补制作部2553。

动作控制部2552，根据接收到的识别结果S2560对机器1的控制部25401进行控制(第1动作)。

动作候补制作部2553根据接收到的识别结果S2560制作动作候补S2561，并传送给动作候补提示部2554

动作候补提示部2554在触摸屏显示器2587上显示所接收到的动作候补S2561。

在将动作候补S2561在触摸屏显示器2587上显示的期间利用者进行了选择动作候补S2561的操作时，动作候补选择部2555根据所接收的识别结果S2560制作选择信息S2562，并传送给动作控制部2552。

动作控制部2552根据接收到的选择信息S2562对机器K的控制部2540K(K＝1，2，…，N)、触摸屏显示器2587进行控制。又，动作控制部2552将非提示信号S2592传送给动作候补提示部2554。

动作候补提示部2554接收到非提示信号S2592后，让在触摸屏显示器2587显示的动作候补S2561成非显示状态。

在将动作候补S2561在触摸屏显示器2587上显示的期间利用者没有进行了选择动作候补S2561的操作时(动作候补提示部2554在接收到动作候补S2561即使经过第1给定时间后也没有接收到的非提示信号S2592的情况)时，动作候补提示部2554让在触摸屏显示器2587显示的动作候补S2561成非显示状态。

                    <控制系统的动作>

以下说明以上构成的控制系统2585的动作。在此，以进行带识别功能的机器控制系统的操作的情况为例，参照图29以及图30A～E进行说明。

(1)反应利用者意图的动作结束时的情况的例1

[第ST2651步]

摄像机2581A接收到利用者的虹膜数据后传送给模型制作部2571。麦克风2581B接收到利用者的声音数据后传送给模型制作部2571(图30A的显示画面30-1)。模型制作部2571根据接收到的利用者的虹膜数据和声音数据制作识别用数据后保存。作为识别用词典数据2572，「A先生：模式A」、「B先生：模式B」、「C先生：模式C」、「松下太郎先生：模式X」等个人ID与识别用模式成对使用。识别用模式根据每个人的虹膜数据和声音数据制作。在此，在识别用词典数据2572中登录了机器1的控制功能的可以打开门锁的个人名。比较处理部2573将识别用词典数据2572中的识别用模式和由模型制作部2571保存的模式进行比较，探讨是否可以将一致度最高的模式的「模式X」作为识别结果。在此，由于一致度满足给定阈值，判定为「可以」，将具有一致度最高的「模式X」的「松下太郎先生」作为识别结果S2560输出。动作控制部2552和动作候补制作部2553接收识别部2551输出的识别结果S2560。

[第ST2652步]

动作控制部2552根据识别结果S2560对机器1的控制部25401的「门锁」进行控制，打开门锁。又，动作控制部2552在触摸屏显示器2587上显示识别结果S2560。动作候补制作部2553，参照图30C所示的表，将所接收的识别结果S2560的「松下太郎先生」所喜好的动作「①打开房间A的电源」、「②打开房间B的电源」、「③查看电子邮件」、「④给浴缸加热水」、「⑤打开电视电源」作为动作候补S2561制作，并传送给动作候补提示部2554。在图30C所示的表中，根据使用者的嗜好及行动习惯设定类似范围(习惯的类似范围)。对每一个认证结果设定相应的类似范围。在对应某个认证结果的类似范围内，包含该认证结果所表示的使用者所喜好的动作、日常所进行的动作等。动作候补提示部2554在触摸屏显示器2587上显示动作候补S2561的「①打开房间A的电源」、「②打开房间B的电源」、「③查看电子邮件」、「④给浴缸加热水」、「⑤打开电视电源」(图30A的显示画面30-2)。

[第ST2653、ST2654步]

动作候补提示部2554从接收到动作候补S2561开始经过第1给定时间之前，没有从动作控制部2552接收到非提示信号S2592时，动作候补提示部2554让在触摸屏显示器2587上显示的动作候补S2561成非显示状态(图30A的显示画面30-3)。

<反应利用者意图的动作结束时的情况的例2>

[第ST2651步]

摄像机2581A接收到利用者的虹膜数据后传送给模型制作部2571。麦克风2581B接收到利用者的声音数据后传送给模型制作部2571(图30A的显示画面30-1)。模型制作部2571根据接收到的利用者的虹膜数据和声音数据制作识别用数据后保存。作为识别用词典数据2572，「A先生：模式A」、「B先生：模式B」、「C先生：模式C」、「松下太郎先生：模式X」等个人ID与识别用模式成对使用。识别用模式根据每个人的虹膜数据和声音数据制作。比较处理部2573将识别用词典数据2572中的识别用模式和由模型制作部2571保存的模式进行比较，探讨是否可以将一致度最高的模式作为识别结果。在此，由于一致度不满足给定阈值，判定为「不可以」，将「不可以」作为识别结果S2560输出。动作控制部2552和动作候补制作部2553接收识别部2551输出的识别结果S2560。

[第ST2652步]

动作控制部2552根据识别结果S2560对机器1的控制部25401的「门锁」进行控制。在此由于识别结果S2560为「不可以」，动作控制部2552通过控制机器1让门锁保持在关闭状态。又，动作控制部2552在触摸屏显示器2587上显示识别结果S2560的「不是登录之人」。显示动作候补制作部2553，根据所接收的识别结果S2560，作为动作候补S2561制作「①呼出」、「②输入密码」、「③取消」、「④重新输入」等，并传送给动作候补提示部2554。动作候补提示部2554在触摸屏显示器2587上显示动作候补S2561的「①呼出」、「②输入密码」、「③取消」、「④重新输入」。

[第ST2653、ST2654步」

动作候补提示部2554从接收到动作候补S2561开始经过第1给定时间之前，没有从动作控制部2552接收到非提示信号S2592时，动作候补提示部2554让在触摸屏显示器2587上显示的动作候补S2561成非显示状态。

(2)反应利用者意图的动作没有结束时的情况

[第ST2651步]

摄像机2581A接收到利用者的虹膜数据后传送给模型制作部2571。麦克风2581B接收到利用者的声音数据后传送给模型制作部2571(图30B的显示画面30-4)。模型制作部2571根据接收到的利用者的虹膜数据和声音数据制作识别用数据后保存。作为识别用词典数据2572，「A先生：模式A」、「B先生：模式B」、「C先生：模式C」、「松下太郎先生：模式X」等个人ID与识别用模式成对使用。识别用模式根据每个人的虹膜数据和声音数据制作。在此，在识别用词典数据2572中登录了机器1的控制功能的可以打开门锁的个人名。比较处理部2573将识别用词典数据2572中的识别用模式和由模型制作部2571保存的模式进行比较，探讨是否可以将一致度最高的模式的「模式X」作为识别结果。在此，由于一致度满足给定阈值，判定为「可以」，将具有一致度最高的「模式X」的「松下太郎先生」作为识别结果S2560输出。动作控制部2552和动作候补制作部2553接收识别部2551输出的识别结果S2560。

[第ST2652步]

动作控制部2552根据识别结果S2560对机器1的控制部25401的「门锁」进行控制，打开门锁。又，动作控制部2552在触摸屏显示器2587上显示识别结果S2560。显示动作候补制作部2553，参照图30C所示的表，将所接收的识别结果S2560的「松下太郎先生」所喜好的动作「①打开房间A的电源」、「②打开房间B的电源」、「③查看电子邮件」、「④给浴缸加热水」、「⑤打开电视电源」作为动作候补S2561制作，并传送给动作候补提示部2554。动作候补提示部2554在触摸屏显示器2587上显示动作候补S2561的「①打开房间A的电源」、「②打开房间B的电源」、「③查看电子邮件」、「④给浴缸加热水」、「⑤打开电视电源」(图30B的显示画面30-5)。

[第ST2653、ST2654步]

利用者在第1给定时间内从动作候补中选择所希望的动作。在触摸屏显示器2587上显示动作候补S2561的期间由利用者选择动作候补S2561。在此，利用者用手指选择了触摸屏显示器2587上的「③查看电子邮件」、「⑤打开电视电源」。作为选择方法，有在所希望的动作候补上加上标记后通过按下确认键进行选择的方法、针对每个动作候补确定是否选择的方法(图30B的显示画面30-5)。动作候补选择部2555接收来自触摸屏显示器2587的操作信号S2596，制作选择信息S2562的「③查看电子邮件」、「⑤打开电视电源」，并传送给动作控制部2552。

动作控制部2552根据接收到的选择信息S2562，由机器2的控制部25402打开电视，在触摸屏显示器2587上显示传给松下太郎的电子邮件(第2动作)。动作控制部2552将非提示信号S2592传送给动作候补提示部2554。动作候补提示部2554在接收到非提示信号S2592后，让在触摸屏显示器2587上显示的动作候补成非显示状态(图30B的显示画面30-6)

                       <效果>

依据以上说明的第9实施方案，在执行第2动作的第1时刻、从提示动作候补S2561开始到经过第1给定时间后的第2时刻之中任一较早时刻之前，提示动作候补制作部2553制作的动作候补S2561，由利用者选择，利用者没有必要再次从头开始进行为执行反应利用者意图的动作的流程。因此，利用者使用方便而不麻烦。

又，动作候补提示部2554，在经过第1给定时间后利用者仍然没有选择动作候补的意思时，让动作候补S2561自动成非提示状态，所执行的第1动作是反应利用者意图的动作时，没有必要由利用者让动作候补S2561的提示成非提示状态。因此，利用者使用方便而不麻烦。

又，动作控制部2552，由于自动执行根据识别部2251输出的识别结果S2560的第1动作，如果所执行的第1动作是反应利用者意图的动作时，没有必要由利用者选择动作候补。因此，利用者使用方便而不麻烦。

又，动作候补提示部2554由于自动提示动作候补S2561，如果所执行的第1动作是反应利用者意图的动作没有结束时，利用者可以容易选择动作候补S2561。因此，利用者使用方便而不麻烦。

又，动作候补选择部2555，可以选择多个动作候补S2561，动作控制部2552可以控制多个动作，因此，利用者使用方便而不麻烦。

此外，本实施方案，并不限定于上述内容，可以形成以下各种各样的应用。

a)提示动作候补S2261的个数可以不固定。

b)动作候补S2261的一部分也可以在经过第1给定时间后提示。

c)也可以在触摸屏显示器2587上滚动提示动作候补S2261。

d)识别部2551，并不限定于虹膜、声音识别装置，也可以包含指纹识别装置等一般识别装置。图30D～E表示在使用指纹识别装置时的动作例。这个例是对应指纹识别的结果来控制个人计算机的系统。首先控制个人计算机，使其处于拒绝访问的状态(显示画面30-7、30-10)。当指纹识别的结果表示该被识别人为已作过登录的人(被许可访问的人)时，使个人计算机转变为许可访问的状态，然后把该人感兴趣的URL(候补)显示在画面上(显示画面30-8、30-11)。如果在10秒钟内该人未进行候补的选择，则从画面中消去候补(显示画面30-9)。如果在10秒钟内选择了某一个URL(候补)，则在画面中显示该URL的内容(显示画面30-11、30-12)。

Claims (49)

1.一种接口装置，其特征是：包括

根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果的识别部、

指示执行与所述识别结果相关联的第1动作的动作控制部、

提示与所述识别结果相关联的1个或者多个候补、当提示该候补的时间达到给定时间后，中止该候补的提示的提示控制部。

2.根据权利要求1所述的接口装置，其特征是：所述提示控制部在显示器上显示所述候补，当所述候补在所述显示器上显示的时间达到给定时间后，中止所述候补在所述显示器上的显示。

3.根据权利要求1所述的接口装置，其特征是：所述识别结果表示与所述识别对象之间的相似度超过给定基准值的词典数据，

所述第1动作与所述识别结果所示的词典数据中的某一词典数据关联，

所述1个或者多个候补与所述识别结果所示的词典数据中的其它词典数据关联。

4.根据权利要求1所述的接口装置，其特征是：当输入有表示响应所述提示控制部的指示所提示的候补中任意候补的选择信息时，所述提示控制部指示中止被提示的候补的提示。

5.根据权利要求1所述的接口装置，其特征是：当输入有表示响应所述提示控制部的提示所提示的候补中任意候补的选择信息时，所述动作控制部指示执行与由该选择信息所示的候补相关联的第2动作。

6.根据权利要求5所述的接口装置，其特征是：所述选择信息表示第1候补和第2候补，

所述第2动作包含与所述第1候补关联的动作和与所述第2候补关联的动作。

7.根据权利要求1所述的接口装置，其特征是：当输入有响应所述提示控制部的提示在所述候补被提示的期间内执行第3动作的指示时，所述提示控制部中止所提示的候补的提示。

8.根据权利要求1所述的接口装置，其特征是：所述动作控制部指示到开始执行所述第1动作的所剩时间的提示。

9.根据权利要求1所述的接口装置，其特征是：所述识别对象包含声音数据。

10.根据权利要求1所述的接口装置，其特征是：所述识别对象包含用于识别个人的信息。

11.根据权利要求1所述的接口装置，其特征是：所述第1动作是表示与所述识别结果相关的信息。

12.根据权利要求1所述的接口装置，其特征是：所述第1动作是与所述识别结果相关的机器操作。

13.根据权利要求1所述的接口装置，其特征是：所述第1动作是与所述识别结果相关的信息的检索及检索结果的提示。

14.根据权利要求5所述的接口装置，其特征是：所述第2动作是与由所述选择信息表示的候补相关的信息的显示。

15.根据权利要求5所述的接口装置，其特征是：所述第2动作是与由所述选择信息表示的候补相关的机器操作。

16.根据权利要求5所述的接口装置，其特征是：所述第2动作是与由所述选择信息表示的候补相关的信息的检索及检索结果的提示。

17.根据权利要求7所述的接口装置，其特征是：所述第3动作是识别对象的输入。

18.根据权利要求7所述的接口装置，其特征是：所述第3动作是显示给定的画面。

19.根据权利要求7所述的接口装置，其特征是：所述第3动作是所述第1动作的执行结果的声音提示。

20.一种接口装置，其特征是：包括

根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果的识别部、

指示执行与所述识别结果相关联的第1动作的动作控制部、

根据与所述识别结果之间的意思相近度获取1个或者多个候补的候补制作部、

提示所述候补制作部获取的候补的提示控制部。

21.根据权利要求20所述的接口装置，其特征是：所述1个或者多个候补属于所述识别结果的种类。

22.根据权利要求20所述的接口装置，其特征是：所述1个或者多个候补的每一个包含根据所述识别结果联想的关键词。

23.根据权利要求20所述的接口装置，其特征是：所述1个或者多个候补的每一个候补包含根据利用者嗜好以及/或者行动模式的关键词。

24.根据权利要求20所述的接口装置，其特征是：所述1个或者多个候补的每一个候补表示与所述第1动作关联的动作。

25.一种接口装置，其特征是：包括

包含1个或者多个词典数据的第1识别用词典、

根据识别对象和包含在所述第1识别用词典中的词典数据之间的相似度获取识别结果的识别部、

提示与所述识别结果关联的1个或者多个候补、和提示与该候补对应的词典数据是否包含在所述第1识别用词典中的提示控制部。

26.根据权利要求25所述的接口装置，其特征是：进一步包括包含1个或者多个词典数据的第2识别用词典、

将包含在所述第1识别用词典中的词典数据与包含在所述第2识别用词典中的词典数据按照给定基准进行交换的词典控制部。

27.根据权利要求25所述的接口装置，其特征是：还包括可以在所述第1识别用词典中追加某个词典数据，从所述第1识别用词典中删除某个词典数据的词典控制部。

28.一种动作控制方法，其特征是：包括

根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果的步骤(a)、

执行与所述识别结果相关联的第1动作的步骤(b)、

提示与所述识别结果相关联的1个或者多个候补、在提示该候补的时间达到给定时间后中止该候补的提示的步骤(c)。

29.根据权利要求28所述的动作控制方法，其特征是：在所述步骤(c)中，在显示器上显示所述候补，所述候补在所述显示器上显示的时间达到给定时间后中止所述候补在所述显示器上的显示。

30.根据权利要求28所述的动作控制方法，其特征是：所述识别结果表示与所述识别对象之间的相似度超过给定基准值的词典数据，

所述第1动作与所述识别结果所示的词典数据中的某一词典数据关联，

所述1个或者多个候补与所述识别结果所示的词典数据中的其它词典数据关联。

31.根据权利要求28所述的动作控制方法，其特征是：在所述步骤(c)中，当从所提示的候补中选择任一个后，中止所提示的候补的提示。

32.根据权利要求28所述的动作控制方法，其特征是：进一步包括当从所述步骤(c)所提示的候补中选择任一个后，执行与所选择的候补相关联的第2动作的步骤(d)。

33.根据权利要求28所述的动作控制方法，其特征是：在所述步骤(c)中，在所述候补提示的期间如果指示执行第3动作，则中止所提示的候补的提示。

34.一种动作控制方法，其特征是：包括

根据识别对象和包含在识别用词典中的词典数据之间的相似度获取识别结果的步骤(a)、

指示执行与所述识别结果相关联的第1动作的步骤(b)、

根据与所述识别结果之间的意思相近度获取1个或者多个候补的步骤(c)、

提示由所述步骤(c)获取的候补的步骤(d)。

35.一种动作控制方法，其特征是：包括

根据识别对象和包含在所述第1识别用词典中的词典数据之间的相似度获取识别结果的步骤(a)、

提示与所述识别结果关联的1个或者多个候补、和提示与该候补对应的词典数据是否包含在所述第1识别用词典中的步骤(b)。

36.根据权利要求35所述的动作控制方法，其特征是：进一步包括将包含在所述第1识别用词典中的词典数据与包含在所述第2识别用词典中的词典数据按照给定基准进行交换的步骤(c)。

37.根据权利要求35所述的动作控制方法，其特征是：进一步包括可以在所述第1识别用词典中追加某个词典数据，从所述第1识别用词典中删除某个词典数据的步骤(d)。

38.一种画面显示方法，其特征是：包括

在画面显示根据识别结果获得的1个或者多个候补的步骤(a)、

在所述画面上显示所述候补的时间到达给定时间后从所述画面上删除所述候补的步骤(b)。

39.根据权利要求38所述的画面显示方法，其特征是：在所述步骤(a)中，在所述画面上与在显示所述候补一起的同时显示与所述识别结果相关联的第1动作的内容。

40.根据权利要求39所述的画面显示方法，其特征是：在所述步骤(a)中，强调显示所述第1动作的内容。

41.根据权利要求39所述的画面显示方法，其特征是：在所述步骤(a)中，显示到开始执行所述第1动作的时间。

42.根据权利要求39所述的画面显示方法，其特征是：在所述步骤(a)中，在所述画面的可显示区域中在显示所述第1动作内容的区域之外的区域上显示所述候补。

43.根据权利要求38所述的画面显示方法，其特征是：在所述步骤(a)中，强调显示所述候补中的被选中的候补。

44.根据权利要求38所述的画面显示方法，其特征是：在所述步骤(a)中，显示可以通过声音识别技术选择的候补，并强调显示为选择所显示的候补应发声的部分。

45.根据权利要求38所述的画面显示方法，其特征是：在所述步骤(a)中，强调显示所述识别结果。

46.根据权利要求45所述的画面显示方法，其特征是：在所述步骤(b)中，在删除所述候补的同时中止所述识别结果的强调显示。

47.根据权利要求38所述的画面显示方法，其特征是：进一步包括当从在所述画面上显示的候补中选择任一个后删除在所述画面上显示的所有候补的步骤(c)。

48.根据权利要求38所述的画面显示方法，其特征是：在所述步骤(a)中，显示根据与所述识别结果意思的相近度获取的候补。

49.根据权利要求38所述的画面显示方法，其特征是：在所述步骤(a)中，针对每个所述1个或者多个候补，显示是否可以通过声音识别技术选择候补的信息。

Images