JP2009015493A - Action execution device and method - Google Patents
Action execution device and method Download PDFInfo
- Publication number
- JP2009015493A JP2009015493A JP2007175101A JP2007175101A JP2009015493A JP 2009015493 A JP2009015493 A JP 2009015493A JP 2007175101 A JP2007175101 A JP 2007175101A JP 2007175101 A JP2007175101 A JP 2007175101A JP 2009015493 A JP2009015493 A JP 2009015493A
- Authority
- JP
- Japan
- Prior art keywords
- action
- normal
- execution
- unit
- plan
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、アクション実行装置、及び方法に関するものである。 The present invention relates to an action execution apparatus and method.
従来、音声検出技術の向上に伴い、利用者との対話をトリガーとして処理を行う様々な装置が提案されている。このような装置では、利用者が発した音声の認識処理を行うことで、利用者が当該装置に対する指示を認識することができる。そして、当該装置では、利用者からの指示を認識した後、音声出力で次の指示を促したり、処理内容等の提示を行う。このように利用者と当該装置の間で音声による対話プランが行われることになる。しかしながら、音声認識率が100パーセントでない以上、対話プラン中に誤認識が生じることになる。 2. Description of the Related Art Conventionally, with improvement of voice detection technology, various devices that perform processing triggered by interaction with a user have been proposed. In such a device, a user can recognize an instruction to the device by performing a process of recognizing a voice uttered by the user. Then, after recognizing the instruction from the user, the apparatus prompts the next instruction by voice output or presents the processing contents. In this way, a voice conversation plan is performed between the user and the device. However, since the speech recognition rate is not 100%, erroneous recognition occurs in the dialogue plan.
このような装置の対話プラン中に誤認識が生じた場合に、誤認識が生じた箇所を特定すると共に、当該誤認識の箇所を修正するのは難しい。 When erroneous recognition occurs in the dialogue plan of such an apparatus, it is difficult to identify the location where the erroneous recognition has occurred and to correct the erroneous recognition location.
例えば、特許文献1に記載された技術では、装置と利用者との間で対話を行った後、装置の認識が誤りと判断した場合、入力毎に音声コマンドの確認を行うか、最初から音声入力するかを判断した後、いずれかの処理を行うことで誤りを訂正している。これにより誤認識が生じた場合に訂正するための労力の低減を図っている。
For example, in the technique described in
しかしながら、装置が処理を行う場合、利用者に入力された指示のみならず、当該装置に格納されている情報を用いて処理を行うことが多い。特許文献1に記載された技術を適用すると、当該装置に格納されている情報についても利用者に全て確認を行うことになり、利用者の確認負担が増大するという問題がある。
However, when a device performs processing, it often performs processing using information stored in the device as well as instructions input by the user. When the technique described in
本発明は、上記に鑑みてなされたものであって、利用者の意図を効率よく認識することのできるイベント管理装置、及び方法を提供することを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to provide an event management apparatus and method that can efficiently recognize a user's intention.
上述した課題を解決し、目的を達成するために、本発明にかかるアクション実行装置は、利用者の要求を示す通常目標情報を記憶する通常目標記憶部と、利用者の意図したとおりに処理が行われていないことに対する利用者の反応に応じて変更可能な状況情報を示す可変状況情報と、前記利用者の反応に応じて変更を行わない状況情報を示す不変状況情報と、を記憶する状況情報記憶部と、前記通常目標情報に応じたアクションである、前記可変状況情報と前記不変状況情報のうちいずれか一つ以上を使用して処理を行う通常アクションの実行順序を示す通常プランを作成する通常プラン作成部と、作成された前記通常プラン毎に、前記実行順序に従って、前記通常アクションを実行する通常アクション実行部と、実行された前記通常アクションの履歴を記憶するアクション履歴記憶部と、前記通常アクション毎に、当該通常アクションが実行時に使用する前記可変状況情報のを対応付けたアクション対応情報を記憶するアクション情報記憶部と、前記アクション履歴記憶部に記憶されている前記通常アクション毎に、当該通常アクションに対応付けられている前記可変状況情報を前記アクション対応情報記憶部から抽出し、抽出した前記可変状況情報が適切か否かの確認を利用者に対して要求する確認要求アクションを作成する割込プラン作成部と、前記確認要求アクションを前記通常アクションに割り込んで実行する確認要求アクション実行部と、実行された前記確認要求アクションにより利用者から前記可変状況情報が適切でないことを示す情報が入力された場合に、前記状況情報記憶部に記憶されている、前記確認要求アクションの確認対象である前記可変状況情報を更新する更新部と、を備えたことを特徴とする。 In order to solve the above-described problems and achieve the object, the action execution device according to the present invention performs processing as intended by the user, and a normal target storage unit that stores normal target information indicating a user's request. Situation for storing variable status information indicating status information that can be changed according to a user's response to not being performed, and invariant status information indicating status information that is not changed according to the user's response Create a normal plan that indicates the execution order of normal actions that perform processing using one or more of the variable status information and the invariant status information, which are actions corresponding to the information storage unit and the normal target information A normal plan creation unit that executes the normal action according to the execution order for each created normal plan, and the normal action executed An action history storage unit that stores a history of actions, an action information storage unit that stores, for each of the normal actions, action correspondence information that associates the variable status information that the normal action uses at the time of execution, and the action history For each normal action stored in the storage unit, the variable situation information associated with the normal action is extracted from the action correspondence information storage unit, and whether the extracted variable situation information is appropriate is checked Used by an interrupt plan creation unit for creating a confirmation request action for requesting a user, a confirmation request action execution unit for interrupting and executing the confirmation request action in the normal action, and the confirmation request action executed When information indicating that the variable status information is not appropriate is input from a person Stored in the information storage unit, characterized by comprising a an update unit that updates the variable status information is to be confirmed the confirmation request action.
また、本発明にかかるアクション実行方法は、利用者の要求を示す通常目標情報を通常目標記憶部に記憶する通常目標記憶ステップと、利用者の意図したとおりに処理が行われていないことに対する利用者の反応に応じて変更可能な状況情報を示す可変状況情報と、前記利用者の反応に応じて変更を行わない状況情報を示す不変状況情報と、を状況情報記憶部に記憶する状況情報記憶ステップと、前記通常目標情報に応じたアクションである、前記可変状況情報と前記不変状況情報のうちいずれか一つ以上を使用して処理を行う通常アクションの実行順序を示す通常プランを作成する通常プラン作成ステップと、作成された前記通常プラン毎に、前記実行順序に従って、前記通常アクションを実行する通常アクション実行ステップと、実行された前記通常アクションの履歴をアクション履歴記憶部に記憶するアクション履歴記憶ステップと、前記通常アクション毎に、当該通常アクションが実行時に使用する前記可変状況情報を対応付けたアクション対応情報をアクション情報記憶部に記憶するアクション情報記憶ステップと、前記アクション履歴記憶部に記憶されている前記通常アクション毎に、当該通常アクションに対応付けられている前記可変状況情報を前記アクション対応情報記憶部から抽出し、抽出した前記可変状況情報が適切か否かの確認を利用者に対して要求する確認要求アクションを作成する割込プラン作成ステップと、前記確認要求アクションを前記通常アクションに割り込んで実行する確認要求アクション実行ステップと、実行された前記確認要求アクションにより利用者から前記可変状況情報が適切でないことを示す情報が入力された場合に、前記状況情報記憶部に記憶されている、前記確認要求アクションの確認対象である前記可変状況情報を更新する更新ステップと、を有することを特徴とする。 The action execution method according to the present invention includes a normal target storage step for storing normal target information indicating a user's request in the normal target storage unit, and usage for processing not being performed as intended by the user. Status information storage that stores variable status information indicating status information that can be changed according to a user's reaction and invariant status information indicating status information that is not changed according to the user's response in a status information storage unit A normal plan for creating a normal plan indicating an execution order of normal actions for performing processing using any one or more of the variable status information and the invariant status information, which is an action corresponding to the step and the normal target information A plan creation step; a normal action execution step for executing the normal action in accordance with the execution order for each of the created normal plans; An action history storage step of storing the history of the normal action in an action history storage unit, and an action information storage unit that associates the variable situation information used at the time of execution of the normal action for each normal action by the action information storage unit For each of the normal actions stored in the action history storage unit, the variable situation information associated with the normal action is extracted from the action correspondence information storage unit and extracted. An interrupt plan creation step for creating a confirmation request action for requesting the user to confirm whether or not the variable status information is appropriate, and a confirmation request action execution for interrupting and executing the confirmation request action in the normal action Step and said confirmation request action performed When the information indicating that the variable status information is not appropriate is input from the user, the update for updating the variable status information that is stored in the status information storage unit and is the confirmation target of the confirmation request action And a step.
本発明によれば、通常目標情報に応じて実行済のアクションに対応する可変状況情報が適切か否かを利用者に確認するプランを作成することで、利用者の意図を効率よく認識することが可能という効果を奏する。 According to the present invention, the user's intention can be efficiently recognized by creating a plan for confirming to the user whether or not the variable status information corresponding to the executed action is appropriate according to the normal target information. There is an effect that is possible.
以下に、本発明にかかるアクション実行装置、方法の実施の形態を図面に基づいて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。以下、アクション実行装置をプラン実行システムの一部に適用した例を示す。 Embodiments of an action execution apparatus and method according to the present invention will be described below in detail with reference to the drawings. Note that the present invention is not limited to the embodiments. Hereinafter, an example in which the action execution apparatus is applied to a part of the plan execution system will be described.
(第1の実施の形態)
第1の実施の形態にかかるプラン実行システム1は、利用者との対話によりプランを作成し、作成されたプランの実行を管理する。図1に示すように、プラン実行システム1は、外界監視部10と、イベント対応部20と、プランニングエージェント30と、通常・割込アクション実行部40とを備えている。外界監視部10、イベント対応部20およびプランニングエージェント30は、本実施の形態においては一つの装置内に格納されている。なお、このように一つの装置内に格納することに限定するものではなく、インターネット等で結合された複数のコンピュータ上に実装してもよい。
(First embodiment)
The
外界監視部10は、外界環境を監視する。具体的には、外界環境として外界監視部10の外部から得られる情報を監視する。さらに、外界監視部10は、外界監視部10自身に記録されている情報を参照する。そして、監視結果が予め定められている条件を満たした場合には、イベントを発行する。そして、このイベントをイベント対応部20に通知する。ここで、イベントは、監視結果が予め定められている所定の条件を満たしていることを示す情報である。
The external
外界監視部10はまた、イベント対応部20から通知指示を取得する。通知指示とは、外界監視部10におけるイベント発行に関する指示である。例えば利用者から発せられた音声を検出し、利用者から所定の音声コマンドを検出した場合に、条件を満たしたと判断し、イベント対応部20にイベントを通知する。通知指示には、この他、外界監視部10のオンオフ、必要なイベントの種類、イベント発行のための条件、イベント発行の頻度などの情報が含まれている。
The
なお、外界監視部10が外部から得られる情報としては、例えば、マイクから得られる音声情報、カメラから得られる画像情報等が考えられる。
Note that examples of information obtained from the outside by the
また、内部に記録されている情報としては、音声認識に必要な音声情報、音声によるコマンド認識に必要なコマンド情報等がある。 The information recorded inside includes voice information necessary for voice recognition, command information necessary for voice command recognition, and the like.
イベント対応部20は、外界監視部10から取得した外部イベントに基づいて、次に行うべき処理内容を特定する。ここで、処理内容としては、外界監視部10への通知指示の送信、後述するプランニングエージェント30へのゴールの投入、およびプランニングエージェント30の信念DB501の更新がある。
The
ここで、信念とは、プランニングエージェント30に関する現在の状況を示す情報である。また、ゴールとは、実行完了したいタスクまたは達成したい状態等を示すものである。
Here, the belief is information indicating the current situation regarding the
さらに、イベント対応部20は、プランニングエージェント30からプランニングエージェント30によるプランの実行がどのような実行状態にあるかを示す内部イベントを取得する。この場合、イベント対応部20は内部イベントに基づいて処理内容を特定する。
Further, the
プランニングエージェント30は、イベント対応部20から投入されたゴールに基づいて、複数のアクションを含むプラン群を作成する。図2に示すように、ゴールは、1又は2以上のプランを実行することで達せられるものとする。そして、各プランは、ゴールを達成するための1または2以上の処理であるアクションの実行順序を保持している。すなわち、ゴールに応じて作成されるものである。プランニングエージェント30は、プランに含まれるアクションの実行指示を通常・割込アクション実行部40に通知する。プランニングエージェント30はまた、通常・割込アクション実行部40からアクションの実行結果を受け取り、実行結果に応じてアクションの実行を管理する。また、アクションの実行状態に応じた内部イベントをイベント対応部20に通知する。
The
通常・割込アクション実行部40は、プランニングエージェント30からの指示に従ってアクションを実行または中断する。そして、実行結果(成功・失敗・中断)をプランニングエージェント30に通知する。なお、アクションは、通常アクション及び割込アクションを含むものとする。これらアクションの説明については後述する。
The normal / interrupt
図3に示すように、イベント対応部20は、イベントルールDB301と、外部イベント取得部302と、内部イベント取得部304と、条件判定部305と、処理内容抽出部306と、通知部307とを有している。外部イベント取得部302は、外界監視部10から通知された外部イベントを取得する。内部イベント取得部304は、プランニングエージェント30から内部イベントを取得する。内部イベントとしては、具体的には、アクション実行の開始を示す開始イベントやアクション実行の終了を示す終了イベントがある。
As shown in FIG. 3, the
イベントルールDB301は、イベントルールを格納している。イベントルールにおいては、イベントと、実行条件と、処理内容とが対応付けられている。ここで、イベントとして具体的には、外界監視部10により発行される外部イベントまたはプランニングエージェント30により発行される内部イベントを識別するイベント識別情報が格納されている。また、実行条件とは、後述するプランニングエージェント30が保持している信念DB501の事実に関する情報である。事実とは、プラン実行システム1で行われた処理の状況、又は外部の環境などの状況を示すデータとする。
The event rule DB 301 stores event rules. In the event rule, an event, an execution condition, and a processing content are associated with each other. Here, specifically, event identification information for identifying an external event issued by the
また、外部イベントと処理内容とを対応付けたイベントルールの例としては、「利用者から音声入力された場合に、当該音声で示された目的地に移動するためのナビゲーションを開始する」など、外部イベントの処理内容を行うための条件として格納している。内部イベントと処理内容とを対応付けたイベントルールの例としては、例えば、「ナビゲーションが終了した場合に、利用者から音声による目的地の入力の受付を開始する」などがある。 In addition, examples of event rules that associate external events with processing contents include “when a voice is input from a user, navigation for moving to the destination indicated by the voice” is started. Stored as a condition for processing the external event. As an example of an event rule in which an internal event is associated with a processing content, for example, “when the navigation is completed, reception of input of a destination by voice from a user is started” is available.
イベントルールは、具体的には、
event(E,[C1,…Cn],[R1,…Rm])
の形をしている。ここで、Eはイベント識別情報を示している。C1,…Cnは、実行条件である。R1,…Rmは処理内容である。
Specifically, event rules are:
event (E, [C1,... Cn], [R1,... Rm])
It has the shape of Here, E indicates event identification information. C1,... Cn are execution conditions. R1,... Rm are processing contents.
このイベントルールは、イベント識別情報Eで示されるイベントが通知されたときに、これらの実行条件C1,…Cnが全て成り立っている(つまり、発火条件が成り立つ)ならば、R1から順にRmまでの処理を順に行うことにより、イベント処理を行うことを意味している。 In this event rule, when the event indicated by the event identification information E is notified, if all of these execution conditions C1,... Cn are satisfied (that is, the ignition condition is satisfied), the event rules from R1 to Rm in order. This means that event processing is performed by sequentially performing the processing.
ここで、R1,…Rmはいずれも、外界監視部10、イベント対応部20またはプランニングエージェント30のうちいずれかの操作である。具体的には、プランニングエージェント30の信念DB501の更新、プランニングエージェント30への割込ゴール投入、プランニングエージェント30への通常ゴール投入、プランニングエージェント30への割込プランチェック命令、外界監視部10のスイッチ・オン(イベント発行の条件付き)、外界監視部10のスイッチ・オフ、イベント要求(要求するイベントの条件付き)等がある。なお、割込ゴールとは、実行された通常アクションの確認処理を要求するために、実行中の通常アクションを中断し、優先的に達成すべきゴールであり、換言すれば割込目標情報に相当する。通常ゴールとは、利用者の要求を示すゴールであって、プランニングエージェント30が取得した順序に従って処理すべきゴールであり、換言すれば通常目標情報に相当する。
Here, each of R1,... Rm is an operation of any one of the
図4に示すイベントルールの例では、イベントルールの符号401に記載された部分にイベント識別情報が設定され、符号402に記載された部分に実行条件が設定され、符号403に記載された部分に処理内容(例えば、実行するアクション)が設定されている。なお、符号402には実行条件が設定されていないため、符号401に設定されたイベントを取得した場合に、符号403に示された処理内容が実行される。
In the example of the event rule shown in FIG. 4, event identification information is set in the part described in the
図3に戻り、条件判定部305は、外部イベント取得部302が外部イベントを取得した場合や内部イベント取得部304が内部イベントを取得した場合には、イベントルールDB301のイベントルールにおいて取得したイベントに対応付けられている実行条件を抽出する。そして、後述するプランニングエージェント30の信念DB501から取得した信念を参照し、現在の状況が実行条件を満たしているか否かを判断する。
Returning to FIG. 3, when the external
なお、イベントルールDB301のイベントルールは、イベントと処理内容とを対応付けていればよく、実行条件は必ずしも必須ではない。現在の状況にかかわらずイベントが発行した場合にはかならず所定の処理を行うような場合には、実行条件は不要である。この場合には、条件判定部305は、条件を満たすと判断すればよい。
The event rule of the
処理内容抽出部306は、処理対象となるイベントが実行条件を満たす場合には、イベントルールDB301においてイベントに対応付けられている処理内容を抽出する。通知部307は、この処理内容に応じた処理を行う。ここで、処理内容としては、例えば、外界監視部10への指示の通知やプランニングエージェント30へのゴール投入指示の通知などがある。
When the event to be processed satisfies the execution condition, the processing
図5に示すように、プランニングエージェント30は、信念DB501と、プラン群スタック503と、アクション情報DB504と、アクション履歴DB505と、通常・割込ゴール取得部506と、ゴールキュー507と、通常・割込プラン作成部508と、アクション管理部510と、内部イベント通知部511と、更新部509とを有している。通常・割込ゴール取得部506は、イベント対応部20からゴール指示を取得する。ゴールキュー507は、通常・割込ゴール取得部506が取得したゴール指示に示されるゴールを格納する。
As shown in FIG. 5, the
信念DB501は、アクションの実行に使用する事実を格納している。この事実が処理等の状況を示すデータである以上、信念DB501は換言すれば状況情報記憶部に相当する。また、格納している事実は、2種類存在する。一方は、利用者の意図したとおりに処理が行われていないことに対する利用者の反応に応じて変更を行わない、つまり、誤認識が生じた場合に利用者に対して確認不要な事実であり、換言すれば不変状況情報に相当する。他方は、利用者の反応に応じて変更可能、つまり、誤認識が生じた場合に利用者に対して確認を行うことが可能な事実であり、換言すれば可変状況情報に相当する。
The
図6に示すように、信念DB501は、誤認識が生じた場合に利用者に対して確認不要な事実をbeliefの括弧内に保持し、誤認識が生じた場合に利用者に対して確認を行うことが可能な事実をaskableBeliefの括弧内に保持する。また、本実施の形態にかかる信念DB501では、確認不要な事実と確認を行うことが可能な事実とをまとめて保持しているが、確認可能な事実と、確認不要な事実とをそれぞれ別の記憶手段に記憶しても良い。なお、当該情報を使用した処理については後述する。
As shown in FIG. 6, the
通常・割込プラン作成部508は、信念DB501を参照し、当該信念DB501に格納されている確認可能な事実と確認不要な事実とを用いて実行されるアクションの順序を含むプランを作成する。また、通常・割込プラン作成部508が生成するプランのうち、割込ゴールを達成するために生成されたプランを割込プラン、通常ゴールを達成するために生成されたプランを通常プランとする。
The normal / interrupt
プラン群スタック503は、通常・割込プラン作成部508により作成されたプランを格納する。図7に示すように、プラン群スタック503には、ゴール毎に作成されたプラン群を格納している。そして、後述するアクション管理部510は、優先度の高いプラン群に従ってアクションの実行を通常・割込アクション実行部40に指示する。
The
また、通常・割込アクション実行部40が実行するアクションのうち、通常プランに従って実行されるアクションを通常アクション、割込プランに従って実行されるアクションを割込アクションとする。この割込アクションは、通常アクションに割り込んで実行されるアクションである。この割込アクションには、信念DB501に格納されている確認可能な事実に対して適切か否かの確認を行う確認要求アクションが含まれている。つまり、通常・割込アクション実行部40は、換言すれば確認要求アクション実行部としての機能も有する。
Of the actions executed by the normal / interrupt
なお、本実施の形態においては、通常ゴール及び割込ゴールを一つのゴールキュー507に格納することで、通常・割込プラン作成部508で通常プラン及び割込プランを作成することとした。本実施の形態は、このような構成に限定するものではなく、通常プランを作成する通常プラン作成部と、割込プランを作成する割込プラン作成部とを別の構成としても良い。この場合は通常・割込アクション実行部40についても同様に、通常アクションを実行する通常アクション実行部と、割込のアクションを実行する割込アクション実行部とを別の構成としても良い。
In the present embodiment, the normal / interrupt plan is created in the normal / interrupt
アクション情報DB504は、アクション毎に、アクションの実行時に使用される事前条件と、事前条件が成立したときに行う処理が記述されたアクションルールを保持している。アクションの事前条件には、確認可能な事実及び確認不要な事実のいずれか一方以上が設定されている。これら確認可能な事実及び確認不要な事実のいずれか一方以上が信念DB501に適切に格納されている場合に、事前条件を満足していると判断される。なお、アクションルールは、プログラミング言語Prologの形式で記述されていが、他の形式で記述しても良い。なお、当該アクションルールにおいて、英大文字で始まる英数文字列は、変数とみなされる。
The
このような事前条件の情報は、アクション情報DB504に記録されており、具体的には、図21で示されるアクションルールが記録されている。ここで、アクションルールは、具体的には、
action(Action,[C1,…Cn],[E1,…Em])
の形をしている。ここで、Actionはアクション名を示している。C1,…Cnは、事前条件である。E1,…Emはアクションが行われたことに伴う事実関係の変更処理であり、信念DB501が保持している事実の変更処理である。つまり、アクション(Action)のn個の事前条件(C1,…,Cn)が全て成立したときに、m個の事実関係(E1,…、Em)が変更されることを示している。また、E1,…Emで示される事実関係の変更内容は、initiates(F)、initiatesAskable(F)、又はterminates(F)のいずれかの形式を有している。
Such precondition information is recorded in the
action (Action, [C1,... Cn], [E1,... Em])
It has the shape of Here, Action indicates the action name. C1,... Cn are preconditions. E1,... Em is a fact change process associated with an action, and is a fact change process held in the
initiates(F)は、利用者に確認を行う必要のない事実Fが成立するようになることを示し、信念DB501にbelief(F)が登録される。また、initiatesAskable(F)は、利用者に確認可能な事実Fが成立するようになることを示し、信念DB501にaskableBelief(F)が登録される。
Initiates (F) indicates that the fact F that does not need to be confirmed to the user is established, and belief (F) is registered in the
terminates(F)は、事実Fが成立しなくなることを示し、belief(F)又はaskableBelief(F)が信念DB501から削除される。
“Terminates (F)” indicates that the fact “F” is not established, and “belief (F)” or “ableBelief (F)” is deleted from the
アクション管理部510は、プラン群スタック503に格納されているプランを読み出し、プランに含まれているアクションの実行指示を通常・割込アクション実行部40に通知する。その後、アクション管理部510は、通常・割込アクション実行部40から実行結果を受け取る。さらに、アクション管理部510は、実行したアクションを履歴として、アクション履歴DB505に登録する。また、アクション管理部510は、ゴールを達成した場合、当該ゴールを達成するために行ったアクションの履歴を、アクション履歴DB505から削除する。
The
アクション履歴DB505は、通常・割込アクション実行部40が実行したアクションの履歴を記憶する。図8に示すように、アクション履歴DB505には、実行順にアクション履歴が格納されている。
The
図5に戻り、内部イベント通知部511は、アクション管理部510によるアクションの実行指示を通知した際にアクション開始を示す開始イベントをイベント対応部20に通知する。また、アクション管理部510がアクション実行の成功を示す実行結果を受け取った際にアクション終了を示す終了イベントを通知する。なお、アクション実行の中断を示す実行結果を受け取った場合にも終了イベントを通知する。
Returning to FIG. 5, the internal
更新部509は、アクション管理部510からの指示、イベント対応部20および通常・割込アクション実行部40からの信念更新指示にしたがい、信念DB501およびプラン群スタック503を更新する。プラン群スタック503を更新した結果、実行中のアクションを実行する必要がなくなった場合には、アクション管理部510は、アクションの中断を通常・割込アクション実行部40に通知する。
The
次に、上述したプラン実行システム1を、カー・ナビゲーション・システムに適用した例について説明する。当該カー・ナビゲーション・システムにおいては、利用者と対話により目的地を特定し、ナビゲーションを開始する。
Next, an example in which the above-described
図9に示す例では、音声コマンド認識を行う外界監視部10は、利用者の「たてやまえき」から目的地を富山地方鉄道立山線の立山駅と解釈する。また、外界監視部10は、「とうちゃくじこく」から、目的地までの予想到着時刻をユーザは知りたいと解釈する。
In the example shown in FIG. 9, the
この解釈に従い、プラン実行システム1は、ルートの作成に必要な事前条件(事実)を設定する。プラン実行システム1は、信念DB501に「(確認可能な事実である)目的地を立山駅」に設定する。また、プラン実行システム1は、「到着時刻を知りたい」を信念DB501に設定する。
According to this interpretation, the
また、ルート検索条件(例えば、一般道優先か高速優先か)は、利用者からユーザから指定されていないが、プラン実行システム1は、デフォルト設定である高速優先と判断することにする。そこで、プラン実行システム1は、「(確認可能な事実である)高速優先」を設定する。
The route search condition (for example, whether general road priority or high-speed priority) is not specified by the user from the user, but the
その後、プラン実行システム1は、事前条件を満たした場合に「ルートを作成・表示」する。なお、「ルート検索条件」とは「高速優先」か否かとする。そして、当該処理を行ったあと、信念DB501には、「(確認の必要のない事実である)ルート作成済」が設定される。
Thereafter, the
そして、プラン実行システム1は、作成された「ルート上の注意事項を読み上げる」と共に、「到着予想時刻を読み上げる」。特に問題が生じていなければ、プラン実行システム1は、その後案内を開始する。
Then, the
次に、上述した処理を、図1に示した構成に従って説明する。まず、外界監視部10は、各種設定とナビゲーション開始のトリガーとなる外部イベントを、イベント対応部20に通知する。この通知される外部イベントは、
command(navigate destination(‘立山駅’,’富山地方鉄道立山線’),arrivalTime(necessary),routePreference(highway),)
とする。
Next, the process described above will be described according to the configuration shown in FIG. First, the
command (navigate destination ('Tateyama Station', 'Toyama Regional Railway Tateyama Line'), arrivalTime (necessary), routePreference (highway),)
And
そして、イベント対応部20は、外部イベントが通知された場合、イベントルールに従って、処理を行うことになる。図4に示したイベントルールの場合、投入された外部イベントとイベント401が一致するため、処理内容403が実行される。
When the external event is notified, the
この処理内容403のassertAskableFluentは、引数に設定された事実が、利用者に確認可能なものとして登録することを意味する。つまり、assertAskableFluent(PlannningAgent,F)が実行されると、プランニングエージェント30の信念DB501にaskableBelief(F)が登録されることになる。
The assetAskableFluent of the
なお、利用者に確認を行わない事実の登録にはassertFluentを用いる。つまり、assertFluent(PlannningAgent,F)が実行されると、プランニングエージェント30の信念DB501にbelief(F)が登録されることになる。これにより、信念DB501に確認可能な事実と、確認を行わない事実とを区別して登録することができる。
It should be noted that assetFluent is used to register facts that are not confirmed by the user. That is, when assertFluent (Planning Agent, F) is executed, belief (F) is registered in the
そして、図4の処理内容403に示された処理のうち、登録処理のみ行うことで、信念DB501に、destination(‘立山駅’,’富山地方鉄道立山線’)、arrivalTime(necessary)、routePreference(highway)が登録される。なお、登録された信念DB501は、図6に示した通りとなる。これにより、図1に示すイベント対応部20からプランニングエージェント30への信念更新が行われた。
Then, by performing only the registration processing among the processing shown in the
その後、図4の処理内容403に示された処理のうち、assertGoal(planningAgent、navigate)は、イベント対応部20がプランニングエージェント30にnavigateを通常ゴールとして投入することを意味する。これにより、図1に示すイベント対応部20からプランニングエージェント30に、ナビゲーションの実行を示すゴールの投入が行われたことになる。
Thereafter, among the processes shown in the
そして、プランニングエージェント30は、当該通常ゴールを実現する通常プランを作成する。なお、プランの作成手法は、どのような作成手法を用いても良い。この作成されたプラン群は、ゴール毎にプラン群スタック503にプッシュされる。
Then, the
そして、プランニングエージェント30により作成された通常プランに従い、図10で示した順序でアクションを実行するように設定される。この場合、図10で示した順序に従って、プランニングエージェント30は、通常・割込アクション実行部40に対して実行指示を行うことになる。これにより、図1で示したプランニングエージェント30から通常・割込アクション実行部40への通常アクションの実行指示が行われる。
Then, according to the normal plan created by the
図10に示すように、プランニングエージェント30が、通常・割込アクション実行部40に対して、特に問題が発生無ければ、setdestination(‘立山駅’,‘富山地方鉄道立山線’)の実行を指示し(ステップS1001)、setRoutePreference(highway)の実行を指示し(ステップS1002)、searchAndShowRouteの実行を指示し(ステップS1003)、tellRouteInformationの実行を指示し(ステップS1004)、tellArrivalTimeの実行を指示し(ステップS1005)、最後にstartNavigationの実行を指示することで(ステップS1006)、利用者に対するナビゲーションが開始され、全プランが終了する予定である。
As shown in FIG. 10, the
まず、通常・割込アクション実行部40は、プランニングエージェント30から入力されたsetdestination(‘立山駅’,‘富山地方鉄道立山線’)に従い、目的地を立山駅に設定する。
First, the normal / interrupt
次に、通常・割込アクション実行部40は、プランニングエージェント30から入力されたsetRoutePreference(highway)に従い、ルート検索条件を高速優先に設定する。
Next, the normal / interrupt
さらに、通常・割込アクション実行部40は、プランニングエージェント30から入力されたsearchAndShowRouteに従い、ルートを作成・表示を行う。
Further, the normal / interrupt
さらに、通常・割込アクション実行部40は、プランニングエージェント30から入力されたtellArrivalTimeに従い、ルート上の注意事項を読み上げているものとする。そして、当該読み上げの最中に、利用者が音声で拒否反応を示したとする。この場合、図10のステップS1004で処理が中断されることになる。
Furthermore, it is assumed that the normal / interrupt
つまり、ルート上の注意事項を読み上げているときに、利用者が拒否反応を示した場合、プラン実行システム1は、利用者がどこに不満を抱いているのか特定するための処理を優先的に行う。このための処理手順について説明する。
That is, when the user shows a rejection response while reading the precautions on the route, the
また、利用者の拒否反応とは、信念DB501に格納されている誤った事実に基づいてプランの作成・実行したことで、利用者の意図したとおりに処理が行われていないことに対する拒否反応とする。拒否反応は、上述したように音声認識により判定してもよいし、顔画像の解析により判定してもよいし、拒否ボタンが押されたときに、ユーザが拒否をしたと判定してもよい。
In addition, the user's rejection reaction is a rejection response to the fact that the processing is not performed as intended by the user by creating and executing the plan based on the erroneous fact stored in the
次に、プラン実行システム1において割り込みが生じた場合の処理手順を、図11を用いて説明する。外界監視部10が、利用者が拒否反応を示したことを表すイベント(reject)を、イベント対応部20に通知する(図11の(1))。この通知に伴い、イベント対応部20は、利用者の意図を確認するための割込ゴールをプランニングエージェント30に投入する(図11の(2))。
Next, a processing procedure when an interrupt occurs in the
このような割込ゴールを投入するためには、図12に示すように、イベント対応部20のイベントルールDB301に、利用者の意図を確認するためのイベントを予め格納しておく必要がある。これにより、利用者ユーザが実行中の対話等のプランに対し拒否反応を示されたときに、利用者の意図を確認するための割込ゴールを投入することができる。
In order to insert such an interrupt goal, it is necessary to store in advance an event for confirming the user's intention in the
割込ゴールとは、プランニングエージェント30に投入された場合に、実行中のプランを中断し、実行中のアクションも中断可能であれば中断し、優先的にプランの作成・実行が行われるゴールとする。この割込ゴールはinsertGoal(投入先,[条件],[
割込ゴール名])で定義されている。
An interrupt goal is a goal in which when a plan is entered into the
Interrupt goal name]).
つまり、図12に示したイベントルールは、イベントrejectが通知された場合に、割込ゴール(insertGoal)であるユーザ意図確認ゴール(checkIntention)が、プランニングエージェント30(planningAgent)に投入されることを意味している。 That is, the event rule shown in FIG. 12 means that when an event reject is notified, a user intention confirmation goal (checkIntent) that is an interrupt goal (insertGoal) is input to the planning agent 30 (planningAgent). is doing.
図11に戻り、プランニングエージェント30は、ユーザ意図確認のための割込ゴールが投入されると、通常・割込プラン作成部508が当該割込ゴールのための割込プランを作成して、プラン群スタック503に作成した割込プランを登録する。
Returning to FIG. 11, when an interruption goal for user intention confirmation is input, the
この割込プランは、アクション履歴記憶DB505に記憶されている通常アクション毎に、アクション情報記憶部504及び信念DB501を参照して、通常アクションに対応付けられている確認可能な事実を抽出し、抽出した確認可能な事実が適切か否かの確認を利用者に対して要求する割込アクション(確認要求アクション)で構成される。
This interruption plan extracts, for each normal action stored in the action
割込ゴールより作成された割込プランは、図13の符号1301に示すように、最も高い優先度でプラン群スタック503に格納される。これにより、プランニングエージェント30のアクション管理部510が、割込ゴールの割込プラン群を優先的に実行するよう制御を行うことになる。
The interrupt plan created from the interrupt goal is stored in the
図11に戻り、プランニングエージェント30のアクション管理部510は、通常プランの実行を中止すると共に、通常・割込アクション実行部40に対して通常アクションの中断を指示する(図11の(3))。その後、通常・割込アクション実行部40から、通常アクションの中断の報告を受け付ける(図11の(4))。これにより、実行中の通常プラン及び通常アクションが中断されたことになる。
Returning to FIG. 11, the
そして、プランニングエージェント30のアクション管理部510は、ユーザ意図確認のための割込ゴールに対する割込プランの実行を開始する。そこでプランニングエージェント30は、図11の(5)に示すように、ユーザへの意図確認(質問のための出力と質問に対するユーザからの入力待ち)、ユーザによる意図訂正(ユーザに訂正を促す出力と、ユーザからの訂正待ち)を順に行う。なお、この意図確認及び意図訂正の処理は、割込プランに応じて複数回行われるものとする。
Then, the
そして、プランニングエージェント30は、割込ゴールから作成された割込プランの実行が終了した後、中断していた通常プランの実行を再開する。なお、図1のアクション実行が中断されている間に、ユーザ意図確認のための割込ゴールから作成された割込プランが実行された場合に、信念DB501が更新されると、通常・割込プラン作成部508は、実行中プランのみならず、プラン群スタック503に格納されている全ての通常プラン群(中断中プラン群も含む)を更新する。
Then, after the execution of the interrupt plan created from the interrupt goal is completed, the
また、利用者の意図確認の結果を、直接またはイベント対応部20を介して、外界監視部10に通知することで、音声入力等の精度向上に役立てることも考えられる。
It is also conceivable that the result of the user's intention confirmation is notified to the
次に、上述した処理を行うプラン実行システム1の各構成が行う処理について説明する。まずは、イベント対応部20が行う処理について説明する。図14に示すように、イベント対応部20の外部イベント取得部302が外部イベントを取得した場合(ステップS1401:Yes)、または内部イベント取得部304が内部イベントを取得した場合には(ステップS1402:Yes)、条件判定部305は、イベントルールDB301を参照し、取得した外部イベントまたは内部イベントに対応付けられている実行条件を特定する(ステップS1403)。さらに、信念DB501に格納されている事実(確認可能な事実、確認不要な事実含む)が実行条件を満たすか否かを判定する。信念DB501の事実が実行条件を満たす場合には(ステップS1404:Yes)、処理内容抽出部306は、イベントルールDB301において外部イベントまたは内部イベントに対応付けられている処理内容を抽出する(ステップS1405)。
Next, processing performed by each component of the
次に、処理内容に応じて、通知部307は処理内容を実行する(ステップS1406)。具体的には、外界監視部10へのイベント指示であった場合には、通知部307は、イベント指示を外界監視部10に通知する。また、処理内容がプランニングエージェント30へのゴール指示または信念更新であった場合には、通知部307は、ゴール指示または信念更新をプランニングエージェント30に通知する。なお、同一の外部イベントや内部イベントに複数の処理内容が対応付けられていてもよい。この場合には、処理内容抽出部306は、最も優先順位の高い処理内容を選択することとする。
Next, according to the processing content, the
図15に示すように、プランニングエージェント30は、通知部307から通常ゴールを取得すると(ステップS1501)、ゴールキュー507にゴールが格納されているか否かを確認する。ゴールキュー507にゴールが格納されていない場合には(ステップS1502:No)、通常ゴールに対するプラン実行処理が行われる(ステップS1503)。一方、ゴールキュー507にゴールが格納されている場合には(ステップS1502:Yes)、取得した通常ゴールをプラン群スタック503の最後尾に格納し(ステップS1504)、処理が完了する。
As illustrated in FIG. 15, when the
次に、プラン群スタック503にゴールが存在する場合には(ステップS1505:Yes)、プラン群スタック503の先頭ゴールに対するプラン実行処理が行われる(ステップS1506)。そして、ステップS1505においてプラン群スタック503にゴールが存在しなくなると(ステップS1505:No)、処理が完了する。
Next, when a goal exists in the plan group stack 503 (step S1505: Yes), plan execution processing is performed on the first goal of the plan group stack 503 (step S1506). When no goal exists in the
図15のステップS1503、S1506で行われるプラン実行処理においては、図16に示すように、通常・割込プラン作成部508は、処理対象となるゴールに対応するプランを作成する(ステップS1601)。次に、作成または更新したプランが存在し(ステップS1602:Yes)、プランの実行が終了していない場合には(ステップS1603:Yes)、アクション管理部510が、プラン群スタック503から実行するプランを選択する(ステップS1604)。これにより、実行するアクションが特定される。
In the plan execution process performed in steps S1503 and S1506 of FIG. 15, as shown in FIG. 16, the normal / interrupt
そして、内部イベント通知部511は、実行すべきアクションの開始を示す開始イベントをイベント対応部20に通知する(ステップS1605)。
Then, the internal
次に、アクション管理部510が、アクション情報DB504及び信念DB501を参照して、信念DB501に格納されている事実が、アクション情報DB504に格納されているアクションの事前条件を満足した場合、通常・割込アクション実行部40に対しアクションの実行指示を通知する(ステップS1606)。次に、実行したアクションの終了を示す実行状態をイベント対応部20に通知する(ステップS1607)。次に、更新部509は、アクションの実行結果(成功・失敗・中断)にしたがい信念DB501およびプラン群スタック503を更新する(ステップS1608、S1609)。そして、アクション管理部510が、実行したアクションを実行履歴として、アクション履歴DB505に登録する(ステップS1610)。また、割込ゴールが通知された場合、割込ゴールの処理中は待機する(ステップS1611)。割込ゴールの処理が終了した場合、又は割込ゴールの通知が無かった場合は、ステップS1602に戻る。
Next, when the
なお、ステップS1606におけるアクションの実行結果が中断になるのは、別スレッドの、外部から信念を更新された場合や、割込ゴールが投入され、実行中のアクションが中断された場合である。この場合には、ステップS1606から速やかにステップS1607に処理が移行する。 Note that the execution result of the action in step S1606 is interrupted when the belief is updated from the outside of another thread, or when an interrupt goal is input and the action being executed is interrupted. In this case, the process immediately proceeds from step S1606 to step S1607.
ステップS1603においてプラン実行が終了すると(ステップS1613:Yes)、プラン実行成功時の処理を行う(ステップS1613)。また、ステップS1602において作成または更新したプランが存在しない場合には(ステップS1602:No)、プラン実行失敗時の処理を行う(ステップS1612)。 When the plan execution is completed in step S1603 (step S1613: Yes), a process when the plan execution is successful is performed (step S1613). If the plan created or updated in step S1602 does not exist (step S1602: No), the process at the time of plan execution failure is performed (step S1612).
そして、アクション管理部510は、ゴールに対応するプランのアクションの実行履歴を、アクション履歴DB505から削除して(ステップS1614)、処理を終了する。
Then, the
図17に示すようにプランニングエージェント30は、割込ゴールを取得すると(ステップS1701)、このとき他のゴールに対応するプラン実行処理が行われているか否かを判断する(ステップS1702)。他のゴールに対応するプラン実行処理が行われていないと判断した場合(ステップS1702:No)、割込ゴールに対応するプラン実行処理を行う(ステップS1707)。
As shown in FIG. 17, when the
一方、プランニングエージェント30は、他のゴールに対応するプラン実行処理が行われていると判断した場合(ステップS1702:Yes)、現在実行中のアクション、すなわち他のゴールを達成するためのアクションを中断する(ステップS1703)。なお、ステップS1703においてアクションが中断されると、このアクションの実行結果(中断)にしたがい、アクション実行終了を示す実行状態がイベント対応部20に通知される(図16のステップS1607)。次に、実行中のプランを中断するために、図16で示される別スレッドの実行中プランの処理がステップS1611まで到達するのを待つ(ステップS1704)。
On the other hand, when the
次に、プランニングエージェント30は、割込ゴールに対応する割込プランを実行処理する(ステップS1705)。割込ゴールに対するプラン実行処理が終了すると、ステップS1704において中断したプランの実行を再開する(ステップS1706)。このとき、図16で示される別スレッドにおいて、プランの実行が再開され、ステップS1611からステップS1602に処理が進む。
Next, the
図18に示すように、外部からの指示により信念DB501が更新されると(ステップS1801)、通常・割込プラン作成部508が、プラン群スタック503に実行中または中断中のプランが存在するか否かを判断する(ステップS1802)。実行中または中断中のプランが存在しないと判断した場合(ステップS1802:No)、このまま終了する。
As shown in FIG. 18, when the
一方、通常・割込プラン作成部508が、実行中または中断中のプランが存在すると判断した場合(ステップS1802:Yes)、信念DB501の更新によりこれらのプランに影響が及ぶ可能性がある。そこで、この場合には、通常・割込プラン作成部508が、信念更新時の実行中および中断中プラン群を、更新後の信念に基づいて修正する(ステップS1803)。
On the other hand, when the normal / interrupt
さらに、アクション管理部510が、修正後の実行中プランにおいて、実行中のアクションの実行継続をすることが無意味であると判断した場合、すなわち、実行中のアクションが信念更新後に修正された実行中プランと関連がないような場合には(ステップS1804:Yes)、アクション管理部510が、実行していたアクションの実行を中断し(ステップS1805)、処理を終了する。なお、ステップS1805においてアクションの実行を中断した直後に、別スレッドのプラン実行処理におけるアクションの実行は中断され、アクションの実行結果は中断となる。また、実行中のアクションを継続することが無意味とならない場合には(ステップS1804:No)、このまま終了する。
Further, when the
次に、図17のステップS1705又はステップS1707において、ユーザの意図を確認するための割込ゴールに対する割込プランを実行する場合に、通常・割込プラン作成部508が割込プランを作成する処理手順について、図19を用いて説明する。
Next, in step S1705 or step S1707 in FIG. 17, when executing an interrupt plan for an interrupt goal for confirming the user's intention, the normal / interrupt
まず、通常・割込プラン作成部508は、ゴールキュー507に格納されたゴールcheckIntentionに従って、割込プランの作成を開始する。
First, the normal / interrupt
そして、通常・割込プラン作成部508は、アクション管理部510が管理している中断したアクションと、アクション履歴DBに記載されている各アクションの事前条件である事実を抽出する(ステップS1901)。この事前条件である事実の抽出には、アクション情報DB504が保持している事前条件と、信念DB501に格納されている事実を参照することで特定できる。
Then, the normal / interrupt
そして、通常・割込プラン作成部508は、抽出した事実のうち、ユーザに確認可能な事実のみ抽出する(ステップS1902)。
Then, the normal / interrupt
次に、通常・割込プラン作成部508は、抽出した事実毎に、ユーザに対して確認、確認結果に応じて訂正を行うプラン群を作成する(ステップS1903)。
Next, the normal / interrupt
そして、通常・割込プラン作成部508は、抽出した事実を事前条件として利用したアクションの実行順序に従って、プランを構成する各アクションの優先順位を設定する(ステップS1904)。本実施の形態では、使用したアクションが新しいものから順に事実を確認するように、プランを構成する各アクションの優先順位を設定する。
Then, the normal / interrupt
次に、図10で示した処理手順のステップS1004で割込ゴールが通知された場合について説明する。 Next, the case where an interrupt goal is notified in step S1004 of the processing procedure shown in FIG. 10 will be described.
まずは、ステップS1901に示したように、通常・割込プラン作成部508は、中断した通常アクションtellRouteInformationの事前条件を、アクション情報DB504から確認する。そして、アクション情報DB504に、図20に示す通常アクションの情報が格納されている場合、当該アクションは事前条件としてrouteFoundであると判断する。そして、通常・割込プラン作成部508は、routeFoundを、信念DB501で確認する。図6に示すようにbelief(routeFound)が格納されている。このため、確認不要と判断され、ステップS1902で抽出対象から除外される。
First, as shown in step S1901, the normal / interrupt
次に、通常・割込プラン作成部508は、アクション履歴DBから実行した通常アクションを取得する。図8に示したアクション履歴DBからは、通常アクションsearchAndShowRouteと、通常アクションsetRoutePreference(highway)と、通常アクションsetDestination(‘立山駅’,‘富山地方鉄道立山線’)とが取得できる。
Next, the normal / interrupt
そこで、通常・割込プラン作成部508は、通常アクションtellRouteInformationの直前に実行した通常アクションsearchAndShowRouteの事前条件を、アクション履歴DB505から確認する。図21に示す通常アクションの情報が格納されている場合、当該アクションは事前条件としてdestinationSetと、routePreferenceSetであると判断する。そして、通常・割込プラン作成部508は、destinationSetと、routePreferenceSetとを、信念DB501で確認する。この場合、信念DB501には、belief(destinationSet)と、belief(routePreferenceSet)が格納されている。このため、確認不要と判断され、ステップS1902で抽出対象から除外される。
Therefore, the normal / interrupt
次に、通常・割込プラン作成部508は、通常アクションsearchAndShowRouteの直前に実行した通常アクションsetRoutePreference(highway)の事前条件を、アクション履歴DB505から確認する。図22に示す通常アクションの情報が格納されている場合、当該通常アクションは事前条件としてroutePreference(Preference)であると判断する。そして、通常・割込プラン作成部508は、routePreference(Preference)を、信念DB501で確認する。この場合、信念DB501には、図6に示すようにaskableBelief(routePreference(highway))が格納されている。このため、確認必要と判断され、ステップS1902で抽出される。これにより、当該事実を利用者が確認し、誤りならば訂正が促されることになる。
Next, the normal / interrupt
そして、通常・割込プラン作成部508は、通常アクションsetRoutePreference(highway)の直前に実行した通常アクションsetDestination(‘立山駅’,‘富山地方鉄道立山線’)の事前条件を、アクション履歴DB505から確認する。図23に示す通常アクションの情報が格納されている場合、当該アクションは事前条件としてdestination(POI,Description)であると判断する。そして、通常・割込プラン作成部508は、destination(POI,Description)を、信念DB501で確認する。この場合、信念DB501には、図6に示すようにaskableBelief(destination(‘立山駅’,‘富山地方鉄道立山線’))が格納されている。このため、確認必要と判断され、ステップS1902で抽出される。これにより、当該事実を利用者が確認し、誤りならば訂正が促されることになる。
Then, the normal / interrupt
次に、通常・割込プラン作成部508は、ステップS1903において、routePreference(highway)、destination(‘立山駅’,‘富山地方鉄道立山線’)の事実毎に、利用者に対して確認、確認結果に応じて訂正を行う割込プラン群を作成する。なお、これら割込プランは予め図示しないプラン・ライブラリーに用意されているものとする。
Next, the normal / interrupt
そして、通常・割込プラン作成部508は、ステップS1904において、実行順序として、routePreference(highway)の確認、確認結果に応じて訂正を行う割込プランを実行した後、destination(‘立山駅’,‘富山地方鉄道立山線’)の確認、確認結果に応じて訂正を行う割込プランを実行するように実行順序を設定する。つまり、最近実行された通常アクションで利用された事実から順に割込プランが実行されるように、通常・割込プラン作成部508が、各割込プランに対して優先度を設定する(つまり、routePreference(highway)に関する割込プランより、destination(‘立山駅’,‘富山地方鉄道立山線’)に関す割込るプランの方が優先度が低く設定される)。そして、これら作成された割込プラン群は、まとめてプラン群スタック503に格納される。
In step S1904, the normal / interrupt
そして、アクション管理部510が、作成された割込プランを実行する。まず、アクション管理部510は、格納された割込プラン群から、routePreference(highway)の確認と、確認結果に応じて訂正するための割込プランを実行する。
Then, the
図24に示すように、アクション管理部510は、割込アクションの一種である確認要求アクションspeak(‘高速優先でよろしかったですか?’)の実行を、通常・割込アクション実行部40に指示する(ステップS2401)。
As shown in FIG. 24, the
これにより、通常・割込アクション実行部40は、「高速優先でよろしかったですか?」と音声出力する。その後、アクション管理部510は、割込アクションwaitForEvent(no)の実行を、通常・割込アクション実行部40に指示する(ステップS2402)。これにより、通常・割込アクション実行部40は、利用者からの音声入力「いいえ」を待つセンシング・アクションが実行される。
As a result, the normal / interrupt
この場合、図25に示すように通常・割込アクション実行部40は、音声入力を受け付ける外界監視部10に、「はい」または「いいえ」の音声入力イベントを監視するように依頼する。そして、利用者が「はい」と発話した場合にはYesイベントが、「いいえ」と発話した場合にはNoイベントが通常・割込アクション実行部40に通知される。
In this case, as shown in FIG. 25, the normal / interrupt
図24に戻り、通常・割込アクション実行部40は、Noイベントが通知された場合、waitForEvent(no)の実行を成功と判断する。一方、Yesイベントが通知された場合、waitForEvent(no)の実行は失敗と判断する。
Returning to FIG. 24, when the No event is notified, the normal / interrupt
通常・割込アクション実行部40が成功と判断した場合、つまり、高速優先でなかった場合、以下のアクションを実行する(ステップS2403)。
changeGoal(getPreference(route,except([highway])))
If the normal / interrupt
changeGoal (getPreference (route, exception ([highway])))
このchangeGoal(G)は、ゴールをGに変更するアクションを意味する。つまり、当該changeGoal(G)が実行されると、現在のゴールのために作成されたプラン群を、プラン群スタック503からポップして廃棄すると共に、廃棄した各プランの実行履歴もアクション履歴DB505から廃棄される。そのかわりゴールをGに変更して、Gを達成するために作成されたプラン群を1つにまとめて、プラン群スタック503にプッシュする。
This change Goal (G) means an action for changing the goal to G. That is, when the change goal (G) is executed, the plan group created for the current goal is popped from the
従って、changeGoal(getPreference(route,except([highway])))を実行すると、ゴールを、getPreference(route,except([highway]))に変更し、これに伴いプラン群も変更される。 Therefore, when changeGoal (getPreference (route, exception ([highway]))) is executed, the goal is changed to getPreference (route, exception ([highway])), and the plan group is also changed accordingly.
利用者はルート検索条件として「高速優先」を意図していた際に、図24で示した処理が実行された場合について説明する。この場合、プラン実行システム1から発生された「高速優先でよろしかったですか?」との質問に対し、利用者が「はい」と返答したとする。この場合、ステップS2402のwaitForEvent(no)が失敗したものとしてステップS2403の処理は行われない。
A case where the process shown in FIG. 24 is executed when the user intends “fast priority” as the route search condition will be described. In this case, it is assumed that the user responds “Yes” to the question “Are you sure you want high-speed priority?” Generated from the
次に、アクション管理部510は、格納されたプラン群から、destination(‘立山駅’,‘富山地方鉄道立山線’)の確認と、確認結果に応じて訂正するためのプランを実行する。
Next, the
図26に示すように、アクション管理部510は、割込アクションの一種である確認要求アクションspeak(‘目的地は富山地方鉄道立山線の立山駅でよろしかったでしょうか?’)の実行を、通常・割込アクション実行部40に指示する(ステップS2601)。
As shown in FIG. 26, the
これにより、通常・割込アクション実行部40は、「目的地は富山地方鉄道立山線の立山駅でよろしかったでしょうか?」と音声出力する。その後、アクション管理部510は、割込アクションwaitForEvent(no)の実行を、通常・割込アクション実行部40に指示する(ステップS2602)。これにより、通常・割込アクション実行部40は、利用者からの音声入力「いいえ」を待つセンシング・アクションが実行される。また、この場合の処理は、上述した説明と同様なので説明を省略する。
As a result, the normal / interrupt
そして、通常・割込アクション実行部40は、Noイベントが通知された場合、waitForEvent(no)の実行を成功と判断する。一方、Yesイベントが通知された場合、waitForEvent(no)の実行は失敗と判断する。
If the No event is notified, the normal / interrupt
通常・割込アクション実行部40が成功と判断した場合、つまり、富山地方鉄道立山線の立山駅でなかった場合、以下の割込アクションを実行する(ステップS2603)。
changeGoal(getDestination(except([destination(‘立山駅’,‘富山地方鉄道立山線’)]))
When the normal / interrupt
changeGoal (getDestination (except ([destination ('Tateyama Station', 'Toyama Regional Railway Tateyama Line')])))
利用者は目的地として「JR東日本内房線館山駅」を意図していた際に、図26で示した処理が実行された場合について説明する。この場合、プラン実行システム1から発生された「目的地は富山地方鉄道立山線の立山駅でよろしかったでしょうか?」との質問に対し、利用者が「いいえ」と返答したとする。この場合、ステップS2602のwaitForEvent(no)が成功したものとしてステップS2603の処理は行われる。
The case where the process shown in FIG. 26 is executed when the user intends “JR East Uchibo Line Tateyama Station” as the destination will be described. In this case, it is assumed that the user responds “No” to the question “Are you sure you want to go to Tateyama Station on the Toyama District Railway Tateyama Line?” Generated by the
次に、割込アクションchangeGoal(getDestination(except([destination(‘立山駅’,‘富山地方鉄道立山線’)]))を実行することで、今までのプラン群を代替プラン群スタックからポップして廃棄し、廃棄した各プランのアクション実行履歴をアクション履歴DB505から廃棄する。
Next, by executing the interrupt action changeGoal (getDestination (exception ([destination ('Tateyama Station', 'Toyama Regional Railway Tateyama Line')])), the existing plan group is popped from the alternative plan group stack. The action execution history of each discarded plan is discarded from the
そして、通常・割込プラン作成部508が、目的地を利用者に問うゴール(getDestination(except([destination(‘立山駅’,‘富山地方鉄道立山線’)])))を達成するための割込プラン群を作成し、プラン群スタック503にプッシュする。
Then, the normal / interrupt
これにより、アクション管理部510は、図27に示された割込プランを実行する。図27に示すように、まず、アクション管理部510は、通常・割込アクション実行部40に対して、「目的地を再入力してください。」と音声発話するアクションの実行を指示する(ステップS2701)。
Thereby, the
その後、アクション管理部510は、通常・割込アクション実行部40に対して、割込アクションwaitForEvent(destination(POI,Description),[except(destination(‘立山駅’,‘富山地方鉄道立山線’))])の実行を指示する(ステップS2702)。
Thereafter, the
この際、アクション管理部510は、外界監視部10に、目的地POIとその説明Descriptionの入力イベント(destination(POI,Description))を監視するように依頼する。ただし、富山地方鉄道立山線の立山駅ではないことを示す条件(except(destination(‘立山駅’,‘富山地方鉄道立山線’)))とすることにより、同じ誤認識が発生することを防止する。この場合の処理については後述する。
At this time, the
その後、アクション管理部510は、割込アクションretractFluent(destination(_,_))の実行と(ステップS2703)、割込アクションassertAskableFluent(destination(POI,Description))の実行を(ステップS2704)、通常・割込アクション実行部40に指示する。
Thereafter, the
この実行される割込アクションretractFluent(destination(_,_))は、信念DB501から事実destination(_,_)を削除することを意味する。
This executed interrupt action retractFluent (destination (_, _)) means that the fact destination (_, _) is deleted from the
また、実行される割込アクションassertAskableFluent(destination(POI,Description))は、信念DB501に確認可能な事実であるaskableBelief(POI,Description)の登録を意味する。
Also, the interrupt action assertAscableFluent (destination (POI, Description)) to be executed means registration of askableBelief (POI, Description), which is a fact that can be confirmed in the
つまり、通常・割込アクション実行部40は、割込アクションに応じた信念更新を更新部509に要求する。これに従って、更新部509が、信念DB509の更新を行う。
That is, the normal / interrupt
これにより、外界監視部10から目的地POIとその説明Descriptionを取得した場合、プランニングエージェント30及び通常・割込アクション実行部40は、上述したアクション実行により、信念DB501に記録されている目的地とその説明を、新たに取得したPOIとDescriptionに置換する。
As a result, when the destination POI and its description Description are acquired from the outside
これら割込アクションの実行で、割込プランの実行が終了する。そして、プラン群も含めて、プラン群スタック503からポップし、廃棄した各プランのアクション実行履歴をアクション履歴DB505から廃棄する。そして、再び元のプラン実行に戻る。
Execution of these interrupt actions completes execution of the interrupt plan. Then, the plan including the plan group is popped from the
次に、図27のステップS2702で依頼された外界監視部10の処理について、図28を用いて説明する。まず、外界監視部10は、ユーザ入力(例えば音声入力)の待機を行う(ステップS2801)。
Next, the processing of the
次に、外界監視部10は、ユーザ入力(例えば音声入力)を受け付ける(ステップS2802)。そして、外界監視部10は、条件(例えば、except(destination(‘立山駅’,‘富山地方鉄道立山線’)))に従って、前回検出した誤りと同様の内容にならないように、ユーザ入力(例えば音声入力)を解釈する(ステップS2803)。
Next, the external
そして、外界監視部10は、解釈した内容をセンシングの結果として、アクション管理部510に通知する(ステップS2804)。
Then, the external
つまり、外界監視部10は、利用者から再び「たてやまえき」と入力された場合でも、富山地方鉄道立山線の立山駅にならないよう解釈を行う。本処理手順では、JR東日本内房線の館山駅と解釈されたものとする。この解釈に従って、中断されていた元のプランの処理が開始される。
In other words, the outside
つまり、通常・割込プラン作成部508は、図29に示したプランを作成する。図29に示すように、setdestination(‘館山駅’,‘JR東日本内房線’)の実行で目的地の再設定は行うが、setRoutePreference(highway)の実行による高速優先設定は必要ない。
That is, the normal / interrupt
そして、プランニングエージェント30が、通常・割込アクション実行部40に対して、通常アクションsetdestination(‘館山駅’,‘JR東日本内房線’)の実行を指示し(ステップS2901)、通常アクションsearchAndShowRouteの実行を指示し(ステップS2902)、通常アクションtellRouteInformationの実行を指示し(ステップS2903)、通常アクションtellArrivalTimeの実行を指示し(ステップS2904)、最後に通常アクションstartNavigationの実行を指示する(ステップS2905)。
Then, the
なお、割込みプラン実行中の中断中プランの修正方法については、従来から提案されている手法を含み、どのような手法を用いても良い。 Note that any method may be used as a method for correcting an interrupted plan during execution of an interrupt plan, including a conventionally proposed method.
上述した実施形態にかかるプラン実行システム1によれば、信念DB501の利用者に確認可能な事実に限って、利用者に確認を行うためのプランを作成することで、利用者の意図を効率よく認識することが可能になる。
According to the
図30に示すように、第1の実施の形態にかかるプラン実行システム1は、ハードウェア構成として、上述した処理を行うプラン実行プログラムなどが格納されているROM52と、ROM52内のプログラムに従ってプラン実行システム1の各部を制御するCPU51と、必要な種々のデータを記憶するRAM53と、ネットワークに接続して通信を行う通信I/F57と、各部を接続するバス62とを備えている。
As shown in FIG. 30, the
プラン実行プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フロッピー(登録商標)ディスク(FD)、DVD等のコンピュータで読み取り可能な記録媒体に記録されて提供されてもよい。 The plan execution program may be provided by being recorded in a computer-readable recording medium such as a CD-ROM, a floppy (registered trademark) disk (FD), or a DVD as an installable or executable file. .
この場合には、プログラムは、プラン実行システム1において上記記録媒体から読み出して実行することにより主記憶装置上にロードされ、上記ソフトウェア構成で説明した各部が主記憶装置上に生成されるようになっている。
In this case, the program is loaded onto the main storage device by being read from the recording medium and executed by the
また、本実施の形態のプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。 Further, the program of the present embodiment may be configured to be stored by being stored on a computer connected to a network such as the Internet and downloaded via the network.
他の例としては、プラン実行システム1の外界監視部10、イベント対応部20およびプランニングエージェント30をそれぞれ別のコンピュータ上に実装されていてもよい。この場合の外界監視部10、イベント対応部20およびプランニングエージェント30のハードウェア構成は上述したハードウェア構成と同様である。
As another example, the external
以上、本発明を実施の形態を用いて説明したが、上記実施の形態に多様な変更または改良を加えることができる。 As described above, the present invention has been described using the embodiment, but various changes or improvements can be added to the above embodiment.
1 プラン実行システム
10 外界監視部
20 イベント対応部
30 プランニングエージェント
40 通常・割込アクション実行部
51 CPU
52 ROM
53 RAM
57 通信I/F
62 バス
301 イベントルールDB
302 外部イベント取得部
304 内部イベント取得部
305 条件判定部
306 処理内容抽出部
307 通知部
501 信念DB
503 プラン群スタック
504 アクション条件管理DB
505 アクション履歴DB
506 ゴール取得部
507 ゴールキュー
508 通常・割込プラン作成部
509 更新部
510 アクション管理部
511 内部イベント通知部
1
52 ROM
53 RAM
57 Communication I / F
62
302 External
503
505 Action history DB
506
Claims (6)
利用者の意図したとおりに処理が行われていないことに対する利用者の反応に応じて変更可能な状況情報を示す可変状況情報と、前記利用者の反応に応じて変更を行わない状況情報を示す不変状況情報と、を記憶する状況情報記憶部と、
前記通常目標情報に応じたアクションである、前記可変状況情報と前記不変状況情報のうちいずれか一つ以上を使用して処理を行う通常アクションの実行順序を示す通常プランを作成する通常プラン作成部と、
作成された前記通常プラン毎に、前記実行順序に従って、前記通常アクションを実行する通常アクション実行部と、
実行された前記通常アクションの履歴を記憶するアクション履歴記憶部と、
前記通常アクション毎に、当該通常アクションが実行時に使用する前記可変状況情報のを対応付けたアクション対応情報を記憶するアクション情報記憶部と、
前記アクション履歴記憶部に記憶されている前記通常アクション毎に、当該通常アクションに対応付けられている前記可変状況情報を前記アクション対応情報記憶部から抽出し、抽出した前記可変状況情報が適切か否かの確認を利用者に対して要求する確認要求アクションを作成する割込プラン作成部と、
前記確認要求アクションを前記通常アクションに割り込んで実行する確認要求アクション実行部と、
実行された前記確認要求アクションにより利用者から前記可変状況情報が適切でないことを示す情報が入力された場合に、前記状況情報記憶部に記憶されている、前記確認要求アクションの確認対象である前記可変状況情報を更新する更新部と、
を備えたことを特徴とするアクション実行装置。 A normal target storage unit for storing normal target information indicating a user's request;
Indicates variable status information indicating status information that can be changed according to a user's reaction to processing not being performed as intended by the user, and status information that is not changed according to the user's response A status information storage unit for storing invariant status information;
A normal plan creation unit that creates a normal plan indicating an execution order of normal actions for performing processing using one or more of the variable status information and the invariant status information, which is an action corresponding to the normal target information When,
A normal action execution unit that executes the normal action according to the execution order for each of the created normal plans;
An action history storage unit for storing a history of the executed normal actions;
An action information storage unit that stores action correspondence information in which the normal action is associated with the variable situation information used at the time of execution for each normal action;
For each normal action stored in the action history storage unit, the variable situation information associated with the normal action is extracted from the action correspondence information storage unit, and whether or not the extracted variable situation information is appropriate An interrupt plan creation unit for creating a confirmation request action for requesting confirmation from the user,
A confirmation request action execution unit that executes the confirmation request action by interrupting the normal action;
When information indicating that the variable status information is not appropriate is input from the user by the executed confirmation request action, the confirmation request action is a confirmation target stored in the status information storage unit An update unit for updating variable status information;
An action execution device comprising:
前記割込プラン作成部は、さらに、前記アクション情報記憶部を参照し、新しい前記通常アクションから順に、当該通常アクションに対応付けられている前記可変状況情報の確認を要求する前記確認要求アクションを実行するように実行順序を設定すること、
を特徴とする請求項1に記載のアクション実行装置。 The action history storage unit stores a history according to an order in which the execution of the normal action by the normal action execution unit is completed,
The interrupt plan creation unit further refers to the action information storage unit and executes the confirmation request action for requesting confirmation of the variable status information associated with the normal action in order from the new normal action. To set the execution order to
The action execution device according to claim 1.
前記確認要求アクション実行部が前記確認要求アクションを前記通常アクションに割り込んで実行する場合に、前記状況情報記憶部により保持している前記可変状況情報を、前記外界監視部に通知する通知部と、をさらに備え、
前記状況情報記憶部は、前記外界監視部が取得した前記状況情報を、前記可変状況情報として保持し、
前記外界監視部は、前記通知部から前記可変状況情報が通知された場合に、通知された前記可変状況情報以外の前記状況情報を取得するように、前記外界から取得した情報を解釈すること、
を特徴とする請求項1又は2に記載のアクション実行装置。 An external monitoring unit that monitors the external world, interprets information acquired from the external world, and acquires status information;
A notification unit for notifying the external monitoring unit of the variable status information held by the status information storage unit when the verification request action execution unit interrupts and executes the verification request action in the normal action; Further comprising
The status information storage unit holds the status information acquired by the external monitoring unit as the variable status information,
The outside world monitoring unit interprets the information acquired from the outside world so as to acquire the status information other than the notified variable status information when the variable status information is notified from the notification unit;
The action execution device according to claim 1 or 2, wherein
前記通常プラン作成部は、前記更新部により前記可変状況情報が更新された後、前記通常アクション実行部が中断した前記通常アクションを含む前記通常プランの再作成を行い、
前記通常アクション実行部は、更新後の前記可変状況情報を使用して、再作成された前記通常プラン毎の前記通常アクションを実行すること、
を特徴とする請求項1乃至3のいずれか一つに記載のアクション実行装置。 The normal action execution unit, when the confirmation request action execution unit interrupts and executes the confirmation request action in the normal action, interrupts the execution of the normal action for each normal plan created,
The normal plan creation unit re-creates the normal plan including the normal action interrupted by the normal action execution unit after the variable status information is updated by the update unit,
The normal action execution unit executes the normal action for each of the recreated normal plans using the updated variable status information.
The action execution device according to any one of claims 1 to 3, wherein
利用者の意図したとおりに処理が行われていないことに対する利用者の反応に応じて変更可能な状況情報を示す可変状況情報と、前記利用者の反応に応じて変更を行わない状況情報を示す不変状況情報と、を状況情報記憶部に記憶する状況情報記憶ステップと、
前記通常目標情報に応じたアクションである、前記可変状況情報と前記不変状況情報のうちいずれか一つ以上を使用して処理を行う通常アクションの実行順序を示す通常プランを作成する通常プラン作成ステップと、
作成された前記通常プラン毎に、前記実行順序に従って、前記通常アクションを実行する通常アクション実行ステップと、
実行された前記通常アクションの履歴をアクション履歴記憶部に記憶するアクション履歴記憶ステップと、
前記通常アクション毎に、当該通常アクションが実行時に使用する前記可変状況情報を対応付けたアクション対応情報をアクション情報記憶部に記憶するアクション情報記憶ステップと、
前記アクション履歴記憶部に記憶されている前記通常アクション毎に、当該通常アクションに対応付けられている前記可変状況情報を前記アクション対応情報記憶部から抽出し、抽出した前記可変状況情報が適切か否かの確認を利用者に対して要求する確認要求アクションを作成する割込プラン作成ステップと、
前記確認要求アクションを前記通常アクションに割り込んで実行する確認要求アクション実行ステップと、
実行された前記確認要求アクションにより利用者から前記可変状況情報が適切でないことを示す情報が入力された場合に、前記状況情報記憶部に記憶されている、前記確認要求アクションの確認対象である前記可変状況情報を更新する更新ステップと、
を有することを特徴とするアクション実行方法。 A normal target storage step of storing normal target information indicating a user's request in the normal target storage unit;
Indicates variable status information indicating status information that can be changed according to a user's reaction to processing not being performed as intended by the user, and status information that is not changed according to the user's response A situation information storage step for storing invariant situation information in the situation information storage unit;
A normal plan creation step of creating a normal plan indicating an execution order of normal actions for performing processing using one or more of the variable status information and the invariant status information, which is an action according to the normal target information When,
A normal action execution step of executing the normal action according to the execution order for each of the generated normal plans;
An action history storage step of storing a history of the executed normal actions in an action history storage unit;
An action information storage step for storing, in each action information storage unit, action correspondence information that associates the variable situation information used by the normal action at the time of execution for each normal action;
For each normal action stored in the action history storage unit, the variable situation information associated with the normal action is extracted from the action correspondence information storage unit, and whether or not the extracted variable situation information is appropriate An interrupt plan creation step for creating a confirmation request action for requesting confirmation from the user,
A confirmation request action execution step of interrupting and executing the confirmation request action in the normal action;
When information indicating that the variable status information is not appropriate is input from the user by the executed confirmation request action, the confirmation request action is a confirmation target stored in the status information storage unit An update step for updating variable status information;
An action execution method characterized by comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007175101A JP2009015493A (en) | 2007-07-03 | 2007-07-03 | Action execution device and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007175101A JP2009015493A (en) | 2007-07-03 | 2007-07-03 | Action execution device and method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009015493A true JP2009015493A (en) | 2009-01-22 |
Family
ID=40356339
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007175101A Pending JP2009015493A (en) | 2007-07-03 | 2007-07-03 | Action execution device and method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009015493A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018528518A (en) * | 2015-07-27 | 2018-09-27 | グーグル エルエルシー | Predict the likelihood that a condition will be satisfied using a recursive neural network |
US10402721B2 (en) | 2015-07-27 | 2019-09-03 | Google Llc | Identifying predictive health events in temporal sequences using recurrent neural network |
-
2007
- 2007-07-03 JP JP2007175101A patent/JP2009015493A/en active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018528518A (en) * | 2015-07-27 | 2018-09-27 | グーグル エルエルシー | Predict the likelihood that a condition will be satisfied using a recursive neural network |
US10402721B2 (en) | 2015-07-27 | 2019-09-03 | Google Llc | Identifying predictive health events in temporal sequences using recurrent neural network |
US10726327B2 (en) | 2015-07-27 | 2020-07-28 | Google Llc | Predicting likelihoods of conditions being satisfied using recurrent neural networks |
US11790216B2 (en) | 2015-07-27 | 2023-10-17 | Google Llc | Predicting likelihoods of conditions being satisfied using recurrent neural networks |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3513324B1 (en) | Computerized natural language query intent dispatching | |
US20140297354A1 (en) | Workflow control apparatus and method therefor | |
JP5091894B2 (en) | Stream recovery method, stream recovery program, and failure recovery apparatus | |
US20150081292A1 (en) | Method and device for automatically managing audio air control messages on an aircraft | |
WO2015141700A1 (en) | Dialogue system construction support apparatus and method | |
JP2007241872A (en) | Program for monitoring change in computer resource on network | |
US10304455B1 (en) | Method and system for performing a task based on user input | |
US10360306B2 (en) | Monitoring of a maintenance intervention on an aircraft | |
US11676496B2 (en) | Methods and systems for querying for parameter retrieval | |
CN114648893A (en) | Dialogue system for autonomous aircraft | |
CN111309294B (en) | Business processing method and device, electronic equipment and storage medium | |
JP2008293252A (en) | Manipulation system and control method for manipulation system | |
JP2009015493A (en) | Action execution device and method | |
JPH0863478A (en) | Method and processor for language processing | |
JP2019148832A (en) | Map information system and program | |
CN110865829B (en) | Database upgrading method, system, equipment and storage medium | |
WO2009119219A1 (en) | Information providing device, recording medium on which computer program is recorded and information providing method | |
JP7243207B2 (en) | Information processing system, information processing device and program | |
JP3878147B2 (en) | Terminal device | |
Subramanian et al. | Custom IBM Watson speech-to-text model for anomaly detection using ATC-pilot voice communication | |
JP3946224B2 (en) | Robot control system | |
JP4357442B2 (en) | Plan execution device, plan execution method and program | |
CN111061642B (en) | Full-automatic competition data processing system and method based on user data | |
CN105487847B (en) | A kind of function dissemination method and equipment | |
JP2006331118A (en) | Apparatus, method and program for command execution |