JP2014098962A - Behavior control device, behavior control method, and control program - Google Patents

Behavior control device, behavior control method, and control program Download PDF

Info

Publication number
JP2014098962A
JP2014098962A JP2012249236A JP2012249236A JP2014098962A JP 2014098962 A JP2014098962 A JP 2014098962A JP 2012249236 A JP2012249236 A JP 2012249236A JP 2012249236 A JP2012249236 A JP 2012249236A JP 2014098962 A JP2014098962 A JP 2014098962A
Authority
JP
Japan
Prior art keywords
user
information
action
behavior
cleaning robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012249236A
Other languages
Japanese (ja)
Other versions
JP6157838B2 (en
Inventor
Takayuki Nagamatsu
孝之 永松
Chie Hideishi
千絵 秀石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2012249236A priority Critical patent/JP6157838B2/en
Publication of JP2014098962A publication Critical patent/JP2014098962A/en
Application granted granted Critical
Publication of JP6157838B2 publication Critical patent/JP6157838B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Toys (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To make a communication between a user and a device have reality.SOLUTION: An agent server (1) is set independently from a user, indicating user feeling information set for a user and attributes of a cleaning robot (5). The agent server (1) includes: a behavior determination part (132) which determines behavior according to user feeling information and feeling information based on the feeling information to be updated; and an output information preparing part (133) which executes the behaviour.

Description

本発明は、ユーザに機器とのコミュニケーションを体験させるための行動制御装置などに関するものである。   The present invention relates to an action control device for allowing a user to experience communication with a device.

従来から、機器のユーザに、該機器とのコミュニケーションを体験させることができるロボットなどの機器に関する様々な技術が知られている。   2. Description of the Related Art Conventionally, various technologies relating to devices such as robots that allow a user of a device to experience communication with the device are known.

下記特許文献1には、ペット型ロボットのエンタテインメント性を高め、より実際のペットに近い動作を行わせることができる、ペット型ロボットに関する技術が開示されている。   Patent Document 1 below discloses a technique related to a pet-type robot that can enhance the entertainment property of the pet-type robot and can perform an operation closer to an actual pet.

また、下記特許文献2には、感情をこめて対話を行うロボット装置およびロボット装置の対話方法が開示されている。   Patent Document 2 below discloses a robot apparatus that performs dialogue with emotion and a dialogue method of the robot apparatus.

さらに、下記特許文献3には、仮想疑似生物の抱いている感情を効果的に表現しながらユーザとの対話を進めることができるようにする、感情表出装置などが開示されている。   Further, Patent Document 3 below discloses an emotion expression device that enables a user to proceed with a dialogue while effectively expressing an emotion held by a virtual pseudo creature.

特開2003−205179号公報(2003年7月22日公開)JP 2003-205179 A (published July 22, 2003) 特開2004−90109号公報(2004年3月25日公開)JP 2004-90109 A (published on March 25, 2004) 特開2001−209820号公報(2001年8月3日公開)JP 2001-209820 A (released on August 3, 2001)

しかしながら、上記特許文献1に記載された技術は、ペット型ロボットへの接触頻度に応じて「なつき度」を変化させ、「なつき度」に応じて感情行動を変化させるものであり、ロボット自身の感情は考慮されていなかった。   However, the technique described in the above-mentioned Patent Document 1 changes the “degree of familiarity” according to the frequency of contact with the pet-type robot, and changes the emotional behavior according to the “degree of familiarity”. Emotions were not considered.

同様に、上記特許文献2に記載された技術は、対話者に対するロボットの親密さ(感情)に応じて、発する応答文とその際の態度を決定するものであり、ロボット自身の感情は考慮されていなかった。   Similarly, the technique described in Patent Document 2 determines the response sentence to be issued and the attitude at that time in accordance with the robot's intimacy (emotion) with respect to the conversation person, and the robot's own emotion is taken into consideration. It wasn't.

さらに、上記特許文献3に記載された技術では、ユーザ毎に応じた感情の変化、あるいは、感情に基づいてユーザに対する行動および行為を決定することは考慮されていない。   Furthermore, in the technique described in the above-mentioned Patent Document 3, it is not considered to change an emotion corresponding to each user or to determine an action and an action for the user based on the emotion.

一方、人間同士のコミュニケーションの場合、同じ相手とコミュニケーションを図る際にも、そのときの気分などで発する内容、口調、および態度などが変わる。   On the other hand, in the case of communication between humans, even when trying to communicate with the same partner, the content, tone, attitude, etc., which change depending on the mood at that time, change.

このように、従来の技術では、機器の感情を考慮せずに該機器の行動を決定しているため、機器の行動が単調で予測しやすいものになりがちであり、リアルさに欠けるという問題点があった。   As described above, in the conventional technology, since the behavior of the device is determined without considering the emotion of the device, the behavior of the device tends to be monotonous and easy to predict, and there is a problem of lack of realism. There was a point.

本発明は、上記の課題に鑑みてなされたものであって、その目的は、ユーザと機器とのコミュニケーションのリアリティを高めることのできる行動制御装置などを実現することにある。   The present invention has been made in view of the above-described problems, and an object of the present invention is to realize an action control device that can enhance the reality of communication between a user and a device.

上記の課題を解決するために、本発明の一態様に係る行動制御装置は、機器のユーザに対する行動を制御する行動制御装置であって、上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定手段と、上記行動決定手段が決定した行動を実行する実行制御手段とを備えていることを特徴としている。   In order to solve the above problem, a behavior control device according to an aspect of the present invention is a behavior control device that controls a behavior of a device to a user, the user attribute information set for the user, Action determination that is set independently of the user as an indication of the device attribute and determines a predetermined action according to the user attribute information and the device attribute information based on the device attribute information to be updated And execution control means for executing the action determined by the action determination means.

また、上記の課題を解決するために、本発明の一態様に係る行動制御方法は、機器のユーザに対する行動を制御する行動制御装置による行動制御方法であって、上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定ステップと、上記行動決定ステップにて決定した行動を実行する実行制御ステップとを含むことを特徴としている。   In order to solve the above-mentioned problem, a behavior control method according to an aspect of the present invention is a behavior control method by a behavior control device that controls a behavior of a device to a user, and is set for the user. Based on the user attribute information and the device attribute information which is set independently of the user as an indication of the device and is to be updated, predetermined according to the user attribute information and the device attribute information. It includes an action determining step for determining an action and an execution control step for executing the action determined in the action determining step.

本発明の一態様によれば、1人以上のユーザに機器とのコミュニケーションを疑似体験させるための行動制御装置において、人間同士のコミュニケーションのように、ユーザとよりリアルにかつ自然にコミュニケーションを図ることができるように、機器の制御を行うことができるという効果を奏する。   According to one aspect of the present invention, in a behavior control apparatus for causing one or more users to simulate a communication with a device, communication with a user is more realistic and natural, such as communication between humans. As a result, it is possible to control the device.

本発明の一実施形態に係るエージェントサーバの要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the agent server which concerns on one Embodiment of this invention. 本発明に係る家族伝言板システムの概要を示す模式図である。It is a schematic diagram which shows the outline | summary of the family message board system which concerns on this invention. 本発明に係る家族伝言板の画面例を示す模式図である。It is a schematic diagram which shows the example of a screen of the family message board concerning this invention. 上記エージェントサーバが備える対ユーザ感情情報記憶部に記憶されるデータの構造および具体例を示す模式図である。It is a schematic diagram which shows the structure and specific example of the data memorize | stored in the anti-user emotion information storage part with which the said agent server is provided. 上記エージェントサーバが備える算出方法記憶部に記憶されるデータの構造および具体例を示す模式図である。It is a schematic diagram which shows the structure and specific example of the data memorize | stored in the calculation method memory | storage part with which the said agent server is provided. 上記エージェントサーバが備える行動記憶部に記憶されるデータの構造および具体例を示す模式図である。It is a schematic diagram which shows the structure and specific example of the data memorize | stored in the action memory | storage part with which the said agent server is provided. 上記エージェントサーバにおける行動決定処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the action determination process in the said agent server. (a)は、気分情報の更新例を示すテーブルであり、(b)および(c)は、対ユーザ感情情報の更新例を示すテーブルである。(A) is a table which shows the example of an update of mood information, (b) and (c) are tables which show the example of an update of to-user sentiment information. 上記エージェントサーバにおける気分情報更新処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the mood information update process in the said agent server. 上記エージェントサーバにおける対ユーザ感情情報更新処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of a user emotion information update process in the said agent server.

本発明の一実施形態について、図1〜図10に基づいて説明すれば以下の通りである。   An embodiment of the present invention will be described below with reference to FIGS.

〔家族伝言板システムの概要〕
まず、本発明の一実施形態にかかる家族伝言板システムの概要を図2に基づいて説明する。図2は、家族伝言板システム100の概要を示す図である。
[Outline of Family Message Board System]
First, the outline | summary of the family message board system concerning one Embodiment of this invention is demonstrated based on FIG. FIG. 2 is a diagram showing an outline of the family message board system 100.

家族伝言板システム100は、登録されたグループのメンバー間におけるコミュニケーションのための電子伝言板を提供するシステムである。また、家族伝言板システム100では、家庭内に配置された機器(以下、家庭内機器と呼ぶ)の状態や、メンバーの書き込み内容等に応じて、家族伝言板に書き込みが行われるようになっている。さらに、家族伝言板システム100では、メンバーからの指示に従って、家庭内機器の動作制御を行うこともできるようになっている。   The family message board system 100 is a system that provides an electronic message board for communication between registered group members. Moreover, in the family message board system 100, writing is performed on the family message board in accordance with the state of the devices arranged in the home (hereinafter referred to as home devices), the contents written by the members, and the like. Furthermore, the family message board system 100 can also control the operation of household devices in accordance with instructions from members.

図示のように、家族伝言板システム100は、エージェントサーバ(行動制御装置)1、家族伝言板サーバ2、およびホームサーバ3を含む。また、家族伝言板には、家族のメンバー(図示の例ではお父さん、お母さん、子供)の所持する携帯端末4a、4b、および4cにてアクセスし、書き込み、閲覧、および家庭内機器の操作指示を行うことができるようになっている。また、ホームサーバ3には、掃除ロボット(機器)5が無線通信接続されていると共に、家庭内機器が有線または無線にて通信接続されている。なお、同図では、家庭内機器が、空調装置6、照明装置7、テレビ8、および録画装置9である例を示しているが、家庭内機器の種類および数は特に限定されない。   As illustrated, the family message board system 100 includes an agent server (behavior control apparatus) 1, a family message board server 2, and a home server 3. Further, the family message board is accessed by the portable terminals 4a, 4b, and 4c possessed by family members (in the illustrated example, father, mother, and child), and writing, browsing, and operation instructions for home devices are performed. Be able to. In addition, a cleaning robot (device) 5 is connected to the home server 3 by wireless communication, and home devices are connected by wire or wirelessly. In the figure, an example is shown in which the home devices are the air conditioner 6, the lighting device 7, the television 8, and the recording device 9, but the types and number of home devices are not particularly limited.

エージェントサーバ1は、家庭内機器の状態、家庭内機器が取得した情報、およびメンバーの書き込み内容等に応じて、家族伝言板に書き込みを行う。より具体的には、エージェントサーバ1は、掃除ロボット5を擬人化したキャラクタとして書き込みを行う。これにより、家族のメンバーは、家族伝言板において、掃除ロボット5とのコミュニケーションを疑似体験することができる。   The agent server 1 writes on the family message board according to the state of the home device, the information acquired by the home device, the content written by the member, and the like. More specifically, the agent server 1 writes the character as an anthropomorphic character of the cleaning robot 5. Thereby, the member of a family can experience the communication with the cleaning robot 5 on the family message board.

また、エージェントサーバ1は、携帯端末4a、4b、および4cからの操作指示を受け付け、これに応じた操作指示をホームサーバ3に送信することによって、掃除ロボット5または家庭内機器の動作を制御する。   Further, the agent server 1 receives operation instructions from the mobile terminals 4a, 4b, and 4c, and transmits an operation instruction corresponding to the operation instructions to the home server 3, thereby controlling the operation of the cleaning robot 5 or the household device. .

なお、ここでは、エージェントサーバ1が、家族伝言板への書き込みを行う機能と、掃除ロボット5および家庭内機器の動作を制御する機能とを備えている例を説明するが、これらの機能は個別のサーバに搭載してもよい。   Here, an example in which the agent server 1 has a function of writing on the family message board and a function of controlling the operations of the cleaning robot 5 and household devices will be described. It may be installed in the server.

家族伝言板サーバ2は、携帯端末4a、4b、および4cに対する家族伝言板の表示画面の提示、および書き込みの管理等の、家族伝言板に関する処理全般を行う。   The family message board server 2 performs all processes related to the family message board, such as the display of the display screen of the family message board for the mobile terminals 4a, 4b, and 4c, and the management of writing.

ホームサーバ3は、掃除ロボット5または家庭内機器と、エージェントサーバ1との間の情報の送受信を統括して制御する。具体的には、ホームサーバ3は、エージェントサーバ1から受信した操作指示に従って、掃除ロボット5または家庭内機器の動作制御を行う。また、ホームサーバ3は、掃除ロボット5から取得した情報、および家庭内機器から取得した情報をエージェントサーバ1に送信する。   The home server 3 controls the overall transmission / reception of information between the cleaning robot 5 or home device and the agent server 1. Specifically, the home server 3 controls the operation of the cleaning robot 5 or the household device according to the operation instruction received from the agent server 1. In addition, the home server 3 transmits information acquired from the cleaning robot 5 and information acquired from household devices to the agent server 1.

なお、図示の例では、掃除ロボット5または家庭内機器に搭載されたセンサによって取得されたセンシングデータ、掃除ロボット5または家庭内機器の動作ログ、および掃除ロボット5または家庭内機器が撮影した写真を送信しているが、送信する情報はこれらの例に限られない。   In the illustrated example, sensing data acquired by a sensor mounted on the cleaning robot 5 or a home device, an operation log of the cleaning robot 5 or a home device, and a photograph taken by the cleaning robot 5 or the home device are shown. Although transmitted, the information to be transmitted is not limited to these examples.

また、例えば家族伝言板に関与する家庭内機器が存在しない場合のように、統括的な制御の必要がない場合には、ホームサーバ3を設けずに、掃除ロボット5がエージェントサーバ1と情報を送受信する構成としてもよい。   Further, when there is no need for overall control, for example, when there is no home device involved in the family message board, the cleaning robot 5 transmits and receives information to and from the agent server 1 without providing the home server 3. It is good also as composition to do.

携帯端末4a、4b、および4cは、家族伝言板の閲覧、書き込み、並びに掃除ロボット5および家庭内機器の操作指示を行うための装置である。同図では、携帯端末4a、4b、および4cがスマートフォンである例を示しているが、家族伝言板の閲覧、書き込み、および操作指示を行うことができるものであればこれに限られない。   The portable terminals 4a, 4b, and 4c are devices for browsing and writing on the family message board and for operating the cleaning robot 5 and household devices. Although the portable terminal 4a, 4b, and 4c have shown the example which is a smart phone in the figure, if it can perform browsing of the family message board, writing, and operation instruction, it will not be restricted to this.

掃除ロボット5は、自動で床の掃除を行う自走式の掃除機である。また、掃除ロボット5は、掃除のための機能の他にも、動作ログの記憶機能、充電残量の検出および出力機能、画像撮影機能、音声認識機能、音声出力機能、室温を検知する温度センサ等を備えている。さらに、掃除ロボット5は、家庭内機器に制御信号を送信してこれを操作する機能も有している。   The cleaning robot 5 is a self-propelled cleaner that automatically cleans the floor. In addition to the cleaning function, the cleaning robot 5 includes an operation log storage function, a remaining charge detection and output function, an image shooting function, a voice recognition function, a voice output function, and a temperature sensor for detecting room temperature. Etc. Further, the cleaning robot 5 also has a function of transmitting a control signal to the home device and operating it.

その他にも、掃除ロボット5は、様々な機能を備えることが可能である。例えば、ユーザの接触を検知するセンサ、湿度を検知する湿度センサ、人を検知する人感センサ、およびにおいを検知するにおいセンサなどを備えていてもよい。   In addition, the cleaning robot 5 can have various functions. For example, a sensor for detecting a user's contact, a humidity sensor for detecting humidity, a human sensor for detecting a person, an odor sensor for detecting an odor, and the like may be provided.

空調装置6は、冷暖房等の空調を行う装置であり、いわゆるエアコンである。また、空調装置6は、温度センサを備えており、これによって検出した室温をホームサーバ3に送信する。   The air conditioner 6 is a device that performs air conditioning such as cooling and heating, and is a so-called air conditioner. The air conditioner 6 includes a temperature sensor, and transmits the room temperature detected thereby to the home server 3.

照明装置7は、LED等の光源を備えた照明装置であり、ホームサーバ3の制御によって点灯および消灯することができる。   The lighting device 7 is a lighting device including a light source such as an LED, and can be turned on and off under the control of the home server 3.

テレビ8はテレビジョン受像機であり、録画装置9はテレビ8が受信した放送番組を録画する装置である。これらの機器についても、ホームサーバ3によって動作制御することができる。   The television 8 is a television receiver, and the recording device 9 is a device for recording a broadcast program received by the television 8. Operations of these devices can also be controlled by the home server 3.

〔家族伝言板の画面例〕
次に、図3を参照して、エージェントサーバ1による家族伝言板への書き込みについて、図3は、家族伝言板の画面例を示す図である。
[Family message board screen example]
Next, with reference to FIG. 3, about the writing to the family message board by the agent server 1, FIG. 3 is a figure which shows the example of a screen of a family message board.

図示の画面例では、家族伝言板に書き込まれたメッセージM1〜M5が時系列で並んでおり、各メッセージにはその書き込み者を示すアイコンが表示されている。具体的には、メッセージM1のアイコンは、書き込み者が図2の「お父さん」であることを示し、メッセージM3、M5のアイコンは、書き込み者が図2の「お母さん」であることを示している。そして、メッセージM2、M4のアイコンは、書き込み者が掃除ロボット5であることを示している。   In the illustrated screen example, messages M1 to M5 written on the family message board are arranged in time series, and an icon indicating the writer is displayed on each message. Specifically, the icon of message M1 indicates that the writer is “dad” in FIG. 2, and the icons of messages M3 and M5 indicate that the writer is “mother” in FIG. . The icons of the messages M2 and M4 indicate that the writer is the cleaning robot 5.

この掃除ロボット5としての書き込みを制御するのがエージェントサーバ1である。図示の例では、「お父さん」からの「掃除を開始して」という指示に対して、掃除ロボット5から応答の書き込みが行われているが、この書き込みを行っているのがエージェントサーバ1である。   The agent server 1 controls writing as the cleaning robot 5. In the example shown in the figure, a response is written from the cleaning robot 5 in response to an instruction “start cleaning” from “dad”. The agent server 1 is writing this response. .

このとき、エージェントサーバ1は、掃除ロボット5自体の感情を示す指標である気分情報と、ユーザに対する感情を示す指標である対ユーザ感情情報とに応じて決定される行動を実行する。図示の例では、掃除ロボット5からの書き込みとして「はい」のメッセージを投稿して、掃除の実行を引き受けるという行動を実行している。   At this time, the agent server 1 executes an action determined according to mood information that is an index indicating the emotion of the cleaning robot 5 itself and user-facing emotion information that is an index indicating an emotion to the user. In the example shown in the figure, a message “Yes” is posted as a writing from the cleaning robot 5 and an action of undertaking the cleaning is executed.

また、図示の例では、「お母さん」からも掃除ロボット5に対して指示が行われている。ここで、掃除ロボット5との親密度は、「お父さん」に比べて「お母さん」の方が高いとする。この場合、エージェントサーバ1は、応答の文面、文字フォント、文字の色、背景色などを変化させた応答を行う。   In the illustrated example, an instruction is also given to the cleaning robot 5 from “mother”. Here, it is assumed that “mother” has a higher familiarity with cleaning robot 5 than “dad”. In this case, the agent server 1 makes a response by changing the response text, character font, character color, background color, and the like.

これにより、掃除ロボット5からの書き込みとして「はい、よろこんで♪」のメッセージが投稿される。このように、掃除ロボット5に対して同様に指示を行った場合であって、指示を行ったユーザの対ユーザ感情情報が異なっていれば、異なる応答がなされる。   As a result, a message “Yes, please ♪” is posted as a writing from the cleaning robot 5. In this way, if the instruction is given to the cleaning robot 5 in the same manner, and the user's sentiment information for the user who has given the instruction is different, a different response is made.

すなわち、ユーザ毎に応答内容を変化させることで、あたかも掃除ロボット5が、各ユーザに対して、好き嫌いの感情を有しているかのような応答を行う。   That is, by changing the response content for each user, the cleaning robot 5 responds to each user as if he / she has a favorite / dislike emotion.

また、上記応答は、気分情報によっても内容が変化する。これにより、機嫌が悪いために、人間が普段仲の良い相手に対してそっけない態度をとるというような状況を、家族伝言板へのメッセージを通して表現できる。   The content of the response also changes depending on mood information. As a result, it is possible to express a situation in which a person is in a bad mood and takes an insidious attitude toward a normally good partner through a message to the family message board.

このように、エージェントサーバ1は、掃除ロボット5とユーザとのコミュニケーションを、よりリアルなものとするような制御を行う。   In this way, the agent server 1 performs control to make the communication between the cleaning robot 5 and the user more realistic.

なお、掃除ロボット5への行動は、図3に示すような指示だけに限定されない。例えば、掃除ロボット5を褒めたり、叱ったりすることも可能である。また、ユーザから掃除ロボット5に声をかける、または操作する等の掃除ロボット5に対する直接の行動であってもよい。そして、この場合には、掃除ロボット5からの応答は、掃除ロボット5が音声を出力して直接ユーザにメッセージを伝える等、掃除ロボット5に対して行動を行ったユーザが掃除ロボット5の応答を即座に確認できる態様で行う。   In addition, the action to the cleaning robot 5 is not limited to only an instruction as shown in FIG. For example, it is possible to give up or beat the cleaning robot 5. Moreover, the direct action | operation with respect to the cleaning robot 5 of making a voice or operating the cleaning robot 5 from a user may be sufficient. In this case, the response from the cleaning robot 5 is such that the user who has acted on the cleaning robot 5 responds to the cleaning robot 5, for example, the cleaning robot 5 outputs a sound and directly transmits a message to the user. Perform in a way that can be confirmed immediately.

なお、掃除ロボット5からの応答は、指示を行ったユーザに対する応答に限定されない。例えば、ユーザから掃除ロボット5に対する直接の声かけ、あるいは操作によって、家族伝言板を介さずに指示がなされた場合には、その旨(誰から指示を受けたかおよびどのような指示を受けたかなど)を家族伝言板に投稿してもよい。なお、この場合に、指示を行ったユーザに応じて、投稿の内容を変更してもよい。   Note that the response from the cleaning robot 5 is not limited to the response to the user who has given the instruction. For example, when an instruction is given without a family message board by a direct voice or operation to the cleaning robot 5 from the user, that fact (who received the instruction and what instruction was received) May be posted on the family message board. In this case, the content of the posting may be changed according to the user who gives the instruction.

これにより、掃除ロボット5に直接指示がなされた場合でも、各ユーザは家族伝言板に投稿された掃除ロボット5のメッセージを通して、当該指示を確認することができる。   Thereby, even when the cleaning robot 5 is instructed directly, each user can confirm the instruction through the message of the cleaning robot 5 posted on the family message board.

〔エージェントサーバの構成〕
次に、図1を参照して、エージェントサーバ1の構成について説明する。図1は、本実施形態に係るエージェントサーバ1の要部構成を示すブロック図である。
[Agent server configuration]
Next, the configuration of the agent server 1 will be described with reference to FIG. FIG. 1 is a block diagram showing a main configuration of the agent server 1 according to the present embodiment.

本実施形態では、説明の便宜上、対ユーザ感情情報は、ユーザ毎に管理される属性情報として説明するが、対ユーザ感情情報は、複数のユーザで構成されるグループ毎に管理されてもよい。   In the present embodiment, for convenience of explanation, the user emotion information is described as attribute information managed for each user. However, the user emotion information may be managed for each group including a plurality of users.

図1に示すように、エージェントサーバ1は少なくとも、通信部11、記憶部12、および、制御部13を含んでいる。   As shown in FIG. 1, the agent server 1 includes at least a communication unit 11, a storage unit 12, and a control unit 13.

通信部11は、エージェントサーバ1が外部と通信するための通信デバイスである。具体的には、後述する通信制御部131が、家族伝言板サーバ2、およびホームサーバ3と各種情報を送受信するために用いられる。   The communication unit 11 is a communication device for the agent server 1 to communicate with the outside. Specifically, a communication control unit 131 described later is used to transmit and receive various information to and from the family message board server 2 and the home server 3.

記憶部12は、装置内で使用する各種情報を記憶する記憶装置であり、気分情報記憶部121、対ユーザ感情情報記憶部122、算出方法記憶部123、および行動記憶部124を含む。   The storage unit 12 is a storage device that stores various types of information used in the device, and includes a mood information storage unit 121, an anti-user emotion information storage unit 122, a calculation method storage unit 123, and an action storage unit 124.

気分情報記憶部121には、掃除ロボット5の属性を示すものとしてユーザと独立に設定された機器属性情報である気分情報が記憶される。この気分情報は、掃除ロボット5を取り巻く環境、掃除ロボット5の状態、あるいは掃除ロボット5に対するユーザの行為などに応じて更新される。気分情報は、掃除ロボット5の感情を示す指標として設定された情報である。   The mood information storage unit 121 stores mood information, which is device attribute information set independently of the user as indicating the attribute of the cleaning robot 5. This mood information is updated according to the environment surrounding the cleaning robot 5, the state of the cleaning robot 5, or the user's action on the cleaning robot 5. The mood information is information set as an index indicating the emotion of the cleaning robot 5.

例えば、気分情報は、3(良い)、2(普通)、1(悪い)の3段階で気分情報記憶部121に記憶される。なお、気分情報は3段階に限らず、掃除ロボット5の感情を区分できる分け方であればよい。また、気分情報の更新処理の詳細については後述する。   For example, mood information is stored in the mood information storage unit 121 in three stages of 3 (good), 2 (normal), and 1 (bad). Note that the mood information is not limited to three levels, and may be any method that can divide emotions of the cleaning robot 5. Details of the mood information update process will be described later.

対ユーザ感情情報記憶部122には、掃除ロボット5のユーザ毎に設定される、対ユーザ感情情報が記憶される。対ユーザ感情情報は、例えば、掃除ロボット5に対するユーザの行為により、各ユーザに対して決定される。つまり、対ユーザ感情情報は、掃除ロボット5の各ユーザに対する好き嫌いのようなものである。   The user emotion information storage unit 122 stores user emotion information set for each user of the cleaning robot 5. The user emotion information is determined for each user, for example, by the user's action on the cleaning robot 5. That is, the feeling information for the user is like likes and dislikes for each user of the cleaning robot 5.

算出方法記憶部123には、気分情報と対ユーザ感情情報とから、行動決定レベルを決定するための算出方法が記憶される。   The calculation method storage unit 123 stores a calculation method for determining an action determination level from mood information and user emotion information.

行動記憶部124には、各行動決定レベルと掃除ロボット5の行動内容とを対応付けた情報が記憶される。   The action storage unit 124 stores information in which each action determination level is associated with the action content of the cleaning robot 5.

対ユーザ感情情報記憶部122、算出方法記憶部123、および、行動記憶部124に記憶されるデータの構造、および具体例については後述する。   The structure of data stored in the user emotion information storage unit 122, the calculation method storage unit 123, and the behavior storage unit 124, and a specific example will be described later.

なお、エージェントサーバ1は、図示しない一時記憶部を備えていてもよい。一時記憶部は、エージェントサーバ1が実行する各種処理の過程で、演算に使用するデータおよび演算結果などを一時的に記憶するいわゆるワーキングメモリであり、RAM(Random Access Memory)などの記憶装置で構成される。   The agent server 1 may include a temporary storage unit (not shown). The temporary storage unit is a so-called working memory that temporarily stores data used for calculation and calculation results in the course of various processes executed by the agent server 1, and is composed of a storage device such as a RAM (Random Access Memory). Is done.

また、どのデータをどの記憶装置に記憶するのかについては、エージェントサーバ1の使用目的、利便性、コスト、物理的な制約などから適宜決定される。   Further, which data is stored in which storage device is determined as appropriate based on the purpose of use, convenience, cost, physical restrictions, and the like of the agent server 1.

次に、制御部13は、エージェントサーバが備える各部を統括制御するものである。制御部13は、通信制御部131、行動決定部(行動決定手段)132、出力情報作成部(実行制御手段)133、ユーザ特定部134、気分情報更新部(機器属性更新手段)135、および、対ユーザ感情情報更新部(ユーザ属性更新手段)136を備えている。   Next, the control unit 13 performs overall control of each unit included in the agent server. The control unit 13 includes a communication control unit 131, an action determination unit (behavior determination unit) 132, an output information creation unit (execution control unit) 133, a user identification unit 134, a mood information update unit (equipment attribute update unit) 135, and A user emotion information update unit (user attribute update means) 136 is provided.

通信制御部131は、通信部11を介して、エージェントサーバ1の内部と外部との通信を制御するものである。具体的には、通信制御部131は、通信部11を介して、家族伝言板サーバ2あるいはホームサーバ3から各種情報を取得する。そして、取得した情報を各部に供給する。また、通信制御部131は、後述する出力情報作成部133から供給された出力情報を、通信部11を介して、家族伝言板サーバ2あるはホームサーバ3に送信する。   The communication control unit 131 controls communication between the inside and the outside of the agent server 1 via the communication unit 11. Specifically, the communication control unit 131 acquires various types of information from the family message board server 2 or the home server 3 via the communication unit 11. Then, the acquired information is supplied to each unit. In addition, the communication control unit 131 transmits output information supplied from an output information creation unit 133 described later to the family message board server 2 or the home server 3 via the communication unit 11.

行動決定部132は、掃除ロボット5の気分情報と、ユーザに対して設定された対ユーザ感情情報とに基づいて、掃除ロボット5のユーザに対する行動を決定する。より詳細には、行動決定部132は、掃除ロボット5にユーザに対して直接行わせる行動の内容および態様の決定と、家族伝言板において掃除ロボット5の代理として投稿するメンバー宛のメッセージの内容および態様の決定とを行う。なお、行動の決定方法については後述する。   The behavior determination unit 132 determines the behavior of the cleaning robot 5 with respect to the user based on the mood information of the cleaning robot 5 and the user emotion information set for the user. More specifically, the behavior determination unit 132 determines the content and mode of the behavior that the cleaning robot 5 performs directly on the user, and the content and mode of the message addressed to the member posted as a substitute for the cleaning robot 5 on the family message board. Make decisions. The action determination method will be described later.

出力情報作成部133は、行動決定部132が決定した行動を実行する。より詳細には、出力情報作成部133は、行動決定部132が掃除ロボット5にユーザに対して直接行わせる行動を決定した場合、ホームサーバ3を介して掃除ロボット5に該行動を実行させる。また、出力情報作成部133は、行動決定部132がメッセージの投稿に関する決定を行った場合、決定された内容および態様でメッセージを投稿する。   The output information creation unit 133 executes the action determined by the action determination unit 132. More specifically, when the action determining unit 132 determines an action that the cleaning robot 5 directly causes the user to perform, the output information creating unit 133 causes the cleaning robot 5 to execute the action via the home server 3. Further, when the action determining unit 132 makes a determination regarding posting of a message, the output information creating unit 133 posts a message with the determined content and mode.

ユーザ特定部134は、通信制御部131から供給された情報から、掃除ロボット5に対して所定の行為を行ったユーザを特定する。具体的には、ユーザ特定部134は、家族伝言板サーバ2から取得した家族伝言板のログから、掃除ロボット5へのメッセージを投稿したユーザを特定する。また、ユーザ特定部134は、掃除ロボット5から、ホームサーバ3を経由して送信された、ユーザの掃除ロボット5に対する所定の行為に関する情報を取得し、この行為を行ったユーザを特定する。   The user specifying unit 134 specifies a user who has performed a predetermined action on the cleaning robot 5 from the information supplied from the communication control unit 131. Specifically, the user specifying unit 134 specifies the user who posted the message to the cleaning robot 5 from the log of the family message board acquired from the family message board server 2. In addition, the user specifying unit 134 acquires information on a predetermined action of the user with respect to the cleaning robot 5 transmitted from the cleaning robot 5 via the home server 3 and specifies a user who has performed this action.

ここで、「行為に関する情報」とは、掃除ロボット5に対してユーザが行った行為を示す音声、画像、および動画などのデータである。例えば、ユーザの声を録音した音声データ、ユーザの行為を撮影した写真、ユーザからの接触の検出結果などである。ユーザの行為の具体例については後述する。   Here, the “information regarding the action” is data such as voice, image, and moving image indicating the action performed by the user with respect to the cleaning robot 5. For example, voice data recording a user's voice, a photograph of a user's action, a contact detection result from the user, and the like. Specific examples of user actions will be described later.

気分情報更新部135は、通信制御部131から供給された情報に基づいて、気分情報を更新する。具体的には、気分情報更新部135は、家族伝言板サーバ2、あるいはホームサーバ3から通信制御部131を介して取得した、掃除ロボット5を取り巻く環境、掃除ロボット5の状態、あるいは掃除ロボット5に対するユーザの行為に関する情報に応じて気分情報を更新する。   The mood information update unit 135 updates the mood information based on the information supplied from the communication control unit 131. Specifically, the mood information update unit 135 is acquired from the family message board server 2 or the home server 3 via the communication control unit 131, the environment surrounding the cleaning robot 5, the state of the cleaning robot 5, or the cleaning robot 5. The mood information is updated according to the information regarding the user's action.

より詳細には、気分情報更新部135は、気分情報に影響を与える因子のそれぞれについて、気分情報への影響の度合いに応じたカウント値の増減を定義した情報に基づき、上記因子の検出に応じてカウント値を更新する。そして、カウント値が所定の上限値または下限値に達したときに気分情報を更新する。   More specifically, the mood information update unit 135 responds to detection of the above factors based on information that defines increase / decrease of the count value according to the degree of influence on the mood information for each of the factors that affect the mood information. Update the count value. Then, the mood information is updated when the count value reaches a predetermined upper limit value or lower limit value.

このように、カウント値を介して気分情報を更新することにより、気分情報の変動する頻度を下げることができる。また、カウント値の上限値および下限値を大きく設定することによって、さらに気分情報の変動を抑えることができ、逆に小さく設定することによって、気分情報が変動しやすくすることもできる。これにより、気分が変わりやすい、変わりにくいといった性格を表現することも可能になる。   In this way, by updating the mood information via the count value, the frequency with which the mood information fluctuates can be lowered. Further, by setting the upper limit value and the lower limit value of the count value to be large, fluctuations in mood information can be further suppressed, and conversely, the mood information can be easily changed by setting it small. As a result, it is possible to express a personality that the mood is easily changed or difficult to change.

なお、気分情報の更新は、掃除ロボット5を取り巻く環境、掃除ロボット5の状態、あるいは掃除ロボット5に対するユーザの行為が気分情報に反映されるように行えばよく、その具体的な態様は特に限定されない。   The mood information may be updated so that the environment surrounding the cleaning robot 5, the state of the cleaning robot 5, or the user's action on the cleaning robot 5 is reflected in the mood information, and its specific mode is particularly limited. Not.

対ユーザ感情情報更新部136は、通信制御部131から供給された情報に基づいて、対ユーザ感情情報を更新する。具体的には、対ユーザ感情情報更新部136は、家族伝言板サーバ2、あるいはホームサーバ3から通信制御部131を介して取得した、ユーザの掃除ロボット5に対する行為に関する情報に応じて対ユーザ感情情報を更新する。対ユーザ感情情報の更新は、気分情報と同様にして行うことができる。   The user emotion information update unit 136 updates the user emotion information based on the information supplied from the communication control unit 131. Specifically, the anti-user emotion information updating unit 136 determines the anti-user emotion information according to information about the user's action on the cleaning robot 5 acquired from the family message board server 2 or the home server 3 via the communication control unit 131. Update. The update of the user emotion information can be performed in the same manner as the mood information.

以上のように、エージェントサーバ1では、行動決定部132が、気分情報および対ユーザ感情情報からユーザに対する行動を決定するので、同じユーザであっても気分情報に応じて異なる行動が決定され得る。   As described above, in the agent server 1, the behavior determination unit 132 determines the behavior for the user from the mood information and the anti-user emotion information. Therefore, even for the same user, different behaviors can be determined according to the mood information.

したがって、コミュニケーションのリアリティを高めることができる。そして、これにより、掃除ロボット5を利用する際のエンタテインメント性を高めることができる。   Therefore, the reality of communication can be improved. And thereby, the entertainment property at the time of using the cleaning robot 5 can be improved.

〔対ユーザ感情情報記憶部の構成〕
次に、図4を参照して、対ユーザ感情情報記憶部122に格納されるデータについて説明する。図4の(a)は、対ユーザ感情情報記憶部122に格納される対ユーザ感情情報の一例を示す模式図である。なお、図4の(a)に示すデータの構造は一例であって、データ構造が表形式に限定されるものではない。これは、以降に説明するデータについても同様である。
[Configuration of User Emotion Information Storage Unit]
Next, data stored in the user emotion information storage unit 122 will be described with reference to FIG. FIG. 4A is a schematic diagram illustrating an example of user emotion information stored in the user emotion information storage unit 122. Note that the data structure shown in FIG. 4A is an example, and the data structure is not limited to a table format. The same applies to data described below.

「ユーザ名」の列には、各ユーザを示す情報が格納される。なお、この列に格納される情報は、個人を示す情報に限定されず、例えば、複数のユーザで構成されるグループを示す情報であってもよい。また、ユーザを示す情報は、状況に応じて適宜追加可能であってもよい。   The “user name” column stores information indicating each user. The information stored in this column is not limited to information indicating an individual, and may be information indicating a group composed of a plurality of users, for example. In addition, information indicating the user may be appropriately added depending on the situation.

「親密度」の列には、各ユーザに対する掃除ロボット5の親密度(ユーザ属性情報、更新対象情報)が格納される。ここで、親密度とは、ユーザに対する掃除ロボット5の親密さの度合いを数値で示した指標である。親密度が高いほど、掃除ロボット5の当該ユーザへの対応は好意的なものとなり、反対に親密度が低い場合は、当該ユーザを嫌っているような対応となる。   The “intimacy” column stores the familiarity (user attribute information, update target information) of the cleaning robot 5 for each user. Here, the familiarity is an index indicating the degree of intimacy of the cleaning robot 5 with respect to the user as a numerical value. The higher the intimacy, the more favorable the cleaning robot 5 will deal with the user. On the other hand, when the intimacy is low, the user will dislike the user.

なお、図4の(a)では親密度を10段階で示しているが、これに限定する意図はなく、ユーザ毎の親密度を区分できる分け方であればよい。例えば、「好き」、「普通」、「嫌い」といった分け方でもよい。   In FIG. 4A, the familiarity is shown in 10 levels. However, there is no intention to limit the familiarity, and any method may be used as long as the familiarity for each user can be classified. For example, the classification may be “like”, “normal”, or “dislike”.

また、対ユーザ感情情報記憶部122において、「ユーザ名」に対応付けられる情報は複数あってもよい。例えば、図4の(b)に示すように、「親密度」に加えて、「礼儀度」の列があってもよい。   In addition, in the user emotion information storage unit 122, there may be a plurality of information associated with the “user name”. For example, as shown in FIG. 4B, in addition to “intimacy”, there may be a column of “courtiness”.

「礼儀度」の列には、掃除ロボット5の各ユーザへの礼儀度(ユーザ属性情報、非更新対象情報)が格納される。ここで、礼儀度とは、掃除ロボット5の、各ユーザに対する言葉遣いを決定する情報である。例えば、礼儀度が高いユーザに対しては、丁寧な言葉遣いで応答する。   In the column “Politeness”, the courtesy level (user attribute information, non-update target information) for each user of the cleaning robot 5 is stored. Here, the courtesy level is information that determines the language used by the cleaning robot 5 for each user. For example, it responds with a polite wording to a user with high courtesy.

礼儀度は、ユーザによって定義される、あるいはデフォルトで定義される値であり、更新の対象としない。これにより、親密度の値にかかわらず、礼儀度に応じた言葉遣いでコミュニケーションさせることが可能になる。例えば、「お父さん」に対しては、常に丁寧な言葉遣いで対応することが可能になる。   The courtesy level is a value defined by the user or defined by default, and is not subject to update. This makes it possible to communicate with words according to the courtesy regardless of the value of intimacy. For example, “Dad” can always be dealt with polite language.

また、図4の(b)では、礼儀度を10段階で示しているが、これに限定する意図はなく、ユーザ毎の礼儀度を区分できる分け方であればよい。例えば、「丁寧」、「普通」、「なれなれしい」といった分け方でもよい。   Further, in FIG. 4B, the courtesy level is shown in 10 levels, but there is no intention to limit to this, and any manner that can classify the courtesy level for each user may be used. For example, it may be divided into “polite”, “ordinary”, and “become familiar”.

なお、対ユーザ感情情報は、上記の親密度および礼儀度に限られず、ユーザに対する行動に影響を与えると考えられる因子に対応するものであればよい。例えば、目上、目下、同格などの立場を示す指標をユーザ感情情報として用いてもよいし、ユーザとの相性を示す指標を対ユーザ感情情報として用いてもよい。なお、立場は変化させることが好ましいが、相性は、基本的に変化しないものと考えられるため、更新の対象としないことが好ましい。   The user emotion information is not limited to the intimacy and courtesy described above, and may be information corresponding to a factor that is considered to affect the behavior to the user. For example, an index indicating the current position, current position, equality, or the like may be used as user emotion information, or an index indicating compatibility with the user may be used as user emotion information. Although it is preferable to change the position, it is preferable that the compatibility is not to be updated because compatibility is considered to be basically unchanged.

〔算出方法記憶部の構成〕
次に、図5を参照して、算出方法記憶部123に格納されるデータについて説明する。図5の(a)および(b)は、算出方法記憶部123に格納されるデータの一例を示す模式図である。
[Configuration of calculation method storage unit]
Next, data stored in the calculation method storage unit 123 will be described with reference to FIG. 5A and 5B are schematic diagrams illustrating an example of data stored in the calculation method storage unit 123. FIG.

図5の(a)は、行動決定レベルを決定するためのレベル決定テーブルの一例を示している。図示のデータにおいて、「指標値範囲」の列には、指標値の範囲を示す情報が格納されている。ここで、指標値とは、気分情報および対ユーザ感情情報の双方を加味した、行動決定の指標となる値であり、気分情報および対ユーザ感情情報を用いて所定の算出式から算出される。   FIG. 5A shows an example of a level determination table for determining the action determination level. In the illustrated data, the “index value range” column stores information indicating the index value range. Here, the index value is a value serving as an action determination index that takes into account both mood information and anti-user emotion information, and is calculated from a predetermined calculation formula using the mood information and anti-user emotion information.

なお、算出式は、気分情報と対ユーザ感情情報との双方を反映させた指標値を算出できるものであればよい。例えば、単に気分情報と対ユーザ感情情報とを掛け合わせるもの(指標値=気分情報×対ユーザ感情情報)であってもよいし、加算するもの(指標値=気分情報+対ユーザ感情情報)であってもよい。   The calculation formula may be any formula that can calculate an index value reflecting both mood information and user emotion information. For example, the information may simply be a product of mood information and user emotion information (index value = mood information × user emotion information) or may be added (index value = mood information + user emotion information). There may be.

さらに、気分情報と対ユーザ感情情報とで重みづけを行ってもよい。例えば、指標値=気分情報×α+対ユーザ感情情報×β(α、β:各情報に対する重みづけの数値)の算出式を用いてもよい。重みづけによって、どちらの属性情報をどの程度重視するのかを設定することができる。   Furthermore, weighting may be performed by mood information and user emotion information. For example, a calculation formula of index value = mood information × α + vs. User emotion information × β (α, β: weighting values for each information) may be used. By weighting, it is possible to set how much of which attribute information is important.

「行動決定レベル」の列には、行動決定レベルを示す数値が格納されている。すなわち、図5の(a)のレベル決定テーブルを用いる場合、行動決定部132は、該テーブルを参照して、算出式によって算出した指標値に対応付けられた行動決定レベルを読み出す。なお、同図の例では、行動決定レベルを1から5までの5段階としているが、これに限定されない。   In the “behavior determination level” column, a numerical value indicating the action determination level is stored. That is, when using the level determination table of FIG. 5A, the behavior determination unit 132 reads the behavior determination level associated with the index value calculated by the calculation formula with reference to the table. In addition, in the example of the figure, although the action decision level is made into five steps from 1 to 5, it is not limited to this.

また、レベル決定テーブルは、図5の(b)に示すような、横軸×縦軸のマトリックスのテーブルであってもよい。この場合、行動決定部132は、該テーブルを参照して、気分情報記憶部121および対ユーザ感情情報記憶部122から読み出した気分情報および対ユーザ感情情報に対応する行動決定レベルを読み出す。   Further, the level determination table may be a horizontal table × vertical matrix table as shown in FIG. In this case, the behavior determination unit 132 reads the behavior determination level corresponding to the mood information and the anti-user emotion information read from the mood information storage unit 121 and the anti-user emotion information storage unit 122 with reference to the table.

なお、対ユーザ感情情報が複数ある場合は、単に気分情報と複数の対ユーザ感情情報とを掛け合わせた、または加算した値を指標値としてもよい。また、重みづけを行ってもよい。   When there are a plurality of pieces of emotion information for the user, a value obtained by simply multiplying or adding the mood information and the pieces of emotion information for the user may be used as the index value. Also, weighting may be performed.

さらに、対ユーザ感情情報が複数ある場合に、レベル決定テーブルにて行動決定レベルを決定するときには、3次元のマトリックスのテーブルを用いてもよい。ただし、礼儀度のように、特定の行動(礼儀度の場合には言葉遣い)を指定する対ユーザ感情情報を用いる場合、行動決定レベルにはこれを反映させない。他のユーザ感情情報との併用によって特定の行動がなされなくなる(礼儀度の場合には言葉遣いが変わる)ことを防ぐためである。   Furthermore, when there are a plurality of pieces of user emotion information, a three-dimensional matrix table may be used when determining the action determination level using the level determination table. However, in the case of using user feeling information specifying a specific action (in the case of courtesy, wording) like the courtesy degree, this is not reflected in the action determination level. This is to prevent a specific action from being performed in combination with other user emotion information (in the case of courtesy, the wording changes).

〔行動記憶部の構成〕
次に、図6を参照して、行動記憶部124に格納されるデータについて説明する。図6は、行動記憶部124に格納される行動決定テーブルの一例を示す模式図である。図示のように、行動決定テーブルは、行動決定レベルに応じた行動の内容および態様を示すテーブルである。
[Configuration of action memory unit]
Next, the data stored in the action storage unit 124 will be described with reference to FIG. FIG. 6 is a schematic diagram illustrating an example of an action determination table stored in the action storage unit 124. As shown in the figure, the behavior determination table is a table showing the content and mode of behavior according to the behavior determination level.

具体的には、図示の行動決定テーブルでは、各行動決定レベルに対して、「口調」、「ユーザからの依頼を受けた時の対応」、「表示する際のフォント」、「表示する際の背景色」、および「出力音量」がそれぞれ対応付けられている。   Specifically, in the illustrated action determination table, for each action determination level, “tone”, “response when a request from the user is received”, “font for display”, “display time” “Background color” and “output volume” are associated with each other.

これらの項目のうち、「表示する際のフォント」、「表示する際の背景色」は、家族伝言板に登録する、掃除ロボット5を投稿者とするメッセージのフォントおよび背景色を示している。なお、「表示する際の背景色」に加えて、例えば、「表示する際の文字色」を指定する項目が含まれていてもよい。ここで、「表示する際の文字色」は、家族伝言板に登録する、掃除ロボット5を投稿者とするメッセージの文字色を示している。また、「出力音量」は、掃除ロボット5からユーザに対して直接に音声メッセージを出力する場合の音量を示している。   Among these items, “font for display” and “background color for display” indicate the font and background color of a message that is registered in the family message board and the posting is made by the cleaning robot 5. In addition to “background color when displaying”, for example, an item for specifying “character color when displaying” may be included. Here, “character color when displaying” indicates the character color of a message registered on the family message board with the cleaning robot 5 as a poster. The “output volume” indicates the volume when a voice message is directly output from the cleaning robot 5 to the user.

そして、「口調」は、メッセージの投稿時および掃除ロボット5からユーザへの音声メッセージの出力時の双方に適用されるものであり、メッセージにおける掃除ロボット5の口調を示している。   The “tone” is applied both when a message is posted and when a voice message is output from the cleaning robot 5 to the user, and indicates the tone of the cleaning robot 5 in the message.

また、「ユーザからの依頼を受けた時の対応」も、メッセージの投稿時および掃除ロボット5からユーザへの音声メッセージの出力時の双方に適用されるものである。家族伝言板で掃除等の実行依頼がなされた場合、あるいは掃除ロボット5に対して直接に掃除等の実行依頼がなされた場合の行動内容を示している。   The “response when receiving a request from the user” is also applied to both when posting a message and when outputting a voice message from the cleaning robot 5 to the user. The action content when the execution request such as cleaning is made by the family message board or when the execution request such as cleaning is directly made to the cleaning robot 5 is shown.

なお、上記の例のうち、「ユーザからの依頼を受けた時の対応」以外は、ベースとなる行動(メッセージを投稿または出力させること、およびそのメッセージの内容)が決まっており、行動決定レベルに応じて、その一部(例えば口調)を変更させるためのものである。   In addition, in the above example, except for “response when receiving a request from the user”, the base action (posting or outputting a message and the content of the message) is determined, and the action determination level This is for changing a part (for example, tone) of the sound.

また、図6の例では、行動決定レベル「1」については、「ユーザからの依頼を受けた時の対応」が「断る」となっている。この場合、エージェントサーバ1は、掃除ロボット5を動作させるための信号を送信しない。つまり、エージェントサーバ1は、嫌われている相手に依頼して断わられるという、人と人とのコミュニケーションに特有のシチュエーションを掃除ロボット5という機器とのコミュニケーションにおいて再現することができる。   In the example of FIG. 6, for the action determination level “1”, “response when receiving a request from the user” is “reject”. In this case, the agent server 1 does not transmit a signal for operating the cleaning robot 5. That is, the agent server 1 can reproduce the situation unique to the communication between people, which is requested by a disliked partner and refused, in the communication with the device called the cleaning robot 5.

なお、行動記憶部124のデータ例を図6に限定する意図はなく、図6に示されている行動および動作以外に、新たな列が追加されてもよい。   In addition, there is no intention to limit the data example of the action memory | storage part 124 to FIG. 6, A new row | line | column may be added other than the action and operation | movement shown by FIG.

また、行動決定レベルを介さずに、算出式から算出した指標値、あるいは気分情報の数値および対ユーザ感情情報の数値から、直接行動を決定してもよい。   Further, the action may be determined directly from the index value calculated from the calculation formula, the numerical value of the mood information, and the numerical value of the user emotion information without going through the action determination level.

以上より、行動決定部132は、気分情報と対ユーザ感情情報とから、行動決定レベルを決定し、当該決定レベルに対応付けられた行動を読み出すだけで、掃除ロボット5としての行動を決定することができる。   As described above, the behavior determination unit 132 determines the behavior as the cleaning robot 5 only by determining the behavior determination level from the mood information and the emotion information with respect to the user, and reading the behavior associated with the determination level. Can do.

また、決定された行動は、行動決定レベル、すなわち気分情報および対ユーザ感情情報に応じてそれぞれ異なる。つまり、ユーザあるいは状況に応じて電子伝言板に表示されたメッセージ、あるいは掃除ロボット5の出力する音声の内容が変更されるので、ユーザはより人間相手に近いコミュニケーションを行うことができる。   Further, the determined behavior differs depending on the behavior determination level, that is, mood information and user emotion information. That is, since the message displayed on the electronic message board or the content of the sound output from the cleaning robot 5 is changed according to the user or the situation, the user can perform communication closer to a human partner.

〔行動決定処理の流れ〕
続いて、図7を参照して、エージェントサーバ1における行動決定処理(行動制御方法)の流れの一例について説明する。図7は、エージェントサーバ1における行動決定処理の流れを示すフローチャートである。
[Behavior decision process flow]
Next, an example of the flow of action determination processing (behavior control method) in the agent server 1 will be described with reference to FIG. FIG. 7 is a flowchart showing a flow of action determination processing in the agent server 1.

なお、ここでは、ユーザから掃除ロボット5に対して指示が行われたときの、該指示に対する応答となる行動を決定する例を説明するが、行動決定処理はこのような場合に限られず、掃除ロボット5に関する任意の行動の決定の際に行ってよい。例えば、ユーザから掃除ロボット5に対して直接または家族伝言板にて褒める、叱る等のメッセージが発せられたときに、このメッセージに対する応答を決定するために行ってもよい。   Here, an example will be described in which an action that is a response to an instruction when an instruction is given from the user to the cleaning robot 5 is described. However, the action determination process is not limited to such a case. It may be performed when determining an arbitrary action related to the robot 5. For example, when a message such as praising or scolding is issued directly or by a family message board from the user to the cleaning robot 5, it may be performed to determine a response to the message.

まず、掃除ロボット5への指示を受信する(S101)。具体的には、通信制御部131が、家族伝言板サーバ2またはホームサーバ3から、通信部11を介して、掃除ロボット5への指示を受信する。指示の受信により、行動決定部132が、この指示に対する応答となる行動を決定するために以下の処理を開始する。   First, an instruction to the cleaning robot 5 is received (S101). Specifically, the communication control unit 131 receives an instruction to the cleaning robot 5 from the family message board server 2 or the home server 3 via the communication unit 11. Upon receipt of the instruction, the action determination unit 132 starts the following process to determine an action that is a response to the instruction.

なお、ユーザが掃除ロボット5に対して直接指示を行った場合、掃除ロボット5から指示を受けた旨がホームサーバ3に通知され、ホームサーバ3からこの旨がエージェントサーバ1に通知される。この場合、掃除ロボット5は、エージェントサーバ1からの指示を受けるまで、ユーザからの指示の実行を保留する。一方、ユーザが家族伝言板で指示を行った場合、家族伝言板サーバ2からこの旨がエージェントサーバ1に通知される。ただし、この場合、掃除ロボット5への指示を判別して、エージェントサーバ1に通知する機能を家族伝言板サーバ2に搭載する必要がある。このため、エージェントサーバ1が家族伝言板サーバ2から会話ログを定期的に、または会話ログが更新されたタイミングで取得し、これを解析することによって、掃除ロボット5への指示が行われたことを特定してもよい。これにより、家族伝言板サーバ2に上記の機能を搭載する必要がなくなる。   When the user directly instructs the cleaning robot 5, the home server 3 is notified that the instruction has been received from the cleaning robot 5, and the agent server 1 is notified from the home server 3. In this case, the cleaning robot 5 suspends execution of the instruction from the user until receiving an instruction from the agent server 1. On the other hand, when the user gives an instruction on the family message board, the family message board server 2 notifies the agent server 1 of this fact. However, in this case, the family message board server 2 needs to be equipped with a function of determining an instruction to the cleaning robot 5 and notifying the agent server 1. For this reason, the agent server 1 acquires the conversation log from the family message board server 2 periodically or at the timing when the conversation log is updated, and analyzes this to confirm that the instruction to the cleaning robot 5 has been performed. You may specify. Thereby, it becomes unnecessary to mount the above function on the family message board server 2.

続いて、行動決定部132は、指示したユーザの特定をユーザ特定部134に行わせる(S102)。ここで、家族伝言板による指示の場合には、ユーザ特定部134が、家族伝言板のログから指示を行ったユーザを特定する。一方、掃除ロボット5に対する直接の指示の場合、ユーザの行為に関する音声、画像および動画などのデータを掃除ロボット5から取得し、このようなデータから指示を行ったユーザを特定する。   Subsequently, the action determining unit 132 causes the user specifying unit 134 to specify the instructed user (S102). Here, in the case of the instruction by the family message board, the user specifying unit 134 specifies the user who gives the instruction from the log of the family message board. On the other hand, in the case of a direct instruction to the cleaning robot 5, data such as voices, images, and moving pictures related to the user's actions are acquired from the cleaning robot 5, and the user who gives the instruction is specified from such data.

次に、行動決定部132は、気分情報の読出しを行い(S103)、続いて対ユーザ感情情報の読み出しを行う(S105)。具体的には、行動決定部132は、S105では、ユーザ特定部134が特定したユーザに対応付けられた対ユーザ感情情報(例えば、親密度)を対ユーザ感情情報記憶部122から読み出す。なお、気分情報の読出しと、対ユーザ感情情報の読出しの順番はどちらが先でもよく、また平行して読み出してもよい。   Next, the behavior determination unit 132 reads mood information (S103), and then reads user emotion information (S105). Specifically, in S <b> 105, the behavior determining unit 132 reads out user emotion information (for example, familiarity) associated with the user specified by the user specifying unit 134 from the user emotion information storage unit 122. It should be noted that either the reading of mood information or the reading order of user emotion information may be performed first or in parallel.

次に、行動決定部132は、他に対ユーザ感情情報を使用するか否かの判定を行う(S107)。他に対ユーザ感情情報を使用する場合(S107でYES)、行動決定部132は、ユーザ特定部134が特定したユーザの、別の対ユーザ感情情報(例えば、礼儀度)を、対ユーザ感情情報記憶部122から読み出す。   Next, the behavior determination unit 132 determines whether or not to use other user emotion information (S107). When other user emotion information is used (YES in S107), the behavior determining unit 132 uses another user emotion information (for example, courtesy degree) of the user identified by the user identifying unit 134 as the user emotion information. Read from the storage unit 122.

一方、他に対ユーザ感情情報を使用しない場合(S107でNO)、行動決定部132は、算出方法の読出しを行う(S109)。具体的には、行動決定部132は、算出方法記憶部123から算出式を読み出す。なお、行動決定レベルの決定が、レベル決定テーブルによって行われる場合は、当該テーブルを読み出す。   On the other hand, when the other user emotion information is not used (NO in S107), the behavior determining unit 132 reads the calculation method (S109). Specifically, the behavior determination unit 132 reads the calculation formula from the calculation method storage unit 123. If the action determination level is determined by the level determination table, the table is read out.

次に、行動決定部132は、行動決定レベルを決定する(S111)。具体的には、行動決定部132は、算出方法記憶部123から読み出した算出式に、気分情報記憶部121および対ユーザ感情情報記憶部122からそれぞれ読み出した気分情報および対ユーザ感情情報を代入して、指標値を算出する。続いて、算出方法記憶部123を参照して、算出した指標値と対応付けられた行動決定レベルを読み出す。   Next, the behavior determination unit 132 determines a behavior determination level (S111). Specifically, the behavior determination unit 132 substitutes the mood information and the anti-user emotion information read from the mood information storage unit 121 and the anti-user emotion information storage unit 122, respectively, into the calculation formula read from the calculation method storage unit 123. The index value is calculated. Subsequently, the action determination level associated with the calculated index value is read with reference to the calculation method storage unit 123.

なお、行動決定レベルの決定をレベル決定テーブルによって行う場合は、行動決定部132は、気分情報記憶部121および対ユーザ感情情報記憶部122からそれぞれ読み出した気分情報および対ユーザ感情情報と対応付けられた行動決定レベルをレベル決定テーブルから読み出す。   When determining the action determination level using the level determination table, the action determination unit 132 is associated with the mood information and the anti-user emotion information read from the mood information storage unit 121 and the anti-user emotion information storage unit 122, respectively. The determined action determination level is read from the level determination table.

次に、行動決定部132は、行動内容の読出しを行う(S113、行動決定ステップ)。具体的には、行動決定部132は、S111で決定した行動決定レベルに対応する行動を行動記憶部124から読み出し、読み出した内容と掃除ロボット5への指示内容とに応じた行動を決定する。そして、行動決定部132は、決定した行動を実行するように出力情報作成部133に指示する。   Next, the behavior determination unit 132 reads the behavior content (S113, behavior determination step). Specifically, the behavior determination unit 132 reads the behavior corresponding to the behavior determination level determined in S111 from the behavior storage unit 124, and determines the behavior according to the read content and the content of the instruction to the cleaning robot 5. Then, the action determining unit 132 instructs the output information creating unit 133 to execute the determined action.

例えば、家族伝言板から掃除の実行指示がなされた場合、行動決定レベルが2以上であれば、掃除を実行させることを決定する。また、掃除の実行を引き受けることを示すメッセージを家族伝言板に投稿することを決定すると共に、行動決定テーブルを参照してこのメッセージの内容および態様を決定する。例えば、図6の行動決定テーブルを用いる場合に、行動決定レベルが5であれば、「親しい口調」で掃除の指示を「快く受ける」内容のメッセージを「丸文字」で「明るい色」の背景色で表示させることを決定する。   For example, when an instruction to perform cleaning is given from the family message board, if the action determination level is 2 or more, it is determined to perform cleaning. In addition, it is determined to post a message indicating that cleaning is undertaken on the family message board, and the content and mode of this message are determined with reference to the action determination table. For example, when the action determination table of FIG. 6 is used, if the action determination level is 5, a message with “round character” and “light color” background with a message of “easy to receive a cleaning instruction” in “close tone” Decide to display in color.

なお、図4の(b)の礼儀度のような言葉遣いを指定する対ユーザ感情情報を用いる場合には、以上のようにして決定したメッセージの言葉遣いを、指定されたものに変更する処理をさらに行う。   In addition, when using the user feeling information for designating the wording like the courtesy degree in FIG. 4B, the processing for changing the wording of the message determined as described above to the designated one. Do further.

最後に、出力情報作成部133は、出力情報の作成を行い(S115、実行制御ステップ)、作成した出力情報を出力し(S117)、行動決定処理は終了する。   Finally, the output information creation unit 133 creates output information (S115, execution control step), outputs the created output information (S117), and the action determination process ends.

具体的には、ユーザが家族伝言板で指示を行った場合、出力情報作成部133は、行動決定部132からの指示に従って、家族伝言板に投稿するメッセージを生成し、掃除ロボット5からのメッセージとして家族伝言板サーバ2に投稿する。また、出力情報作成部133は、掃除ロボット5にユーザの指示した動作を実行させる命令を生成して、ホームサーバ3に送信し、掃除ロボット5に伝達させる。なお、行動決定部132がユーザの指示した動作を実行させないことを決定している場合には、この命令の生成および送信は行わない。   Specifically, when the user gives an instruction on the family message board, the output information creation unit 133 generates a message to be posted on the family message board in accordance with the instruction from the action determination unit 132, and the family as a message from the cleaning robot 5 Post to the message board server 2. Further, the output information creation unit 133 generates a command for causing the cleaning robot 5 to execute an operation instructed by the user, transmits the command to the home server 3, and transmits the command to the cleaning robot 5. In addition, when the action determination part 132 has determined not to perform the operation | movement which the user instruct | indicated, the production | generation and transmission of this command are not performed.

一方、ユーザが掃除ロボット5に直接指示を行った場合、出力情報作成部133は、行動決定部132から指示された内容および態様で掃除ロボット5に音声出力を行わせる命令を生成してホームサーバ3に送信して、掃除ロボット5に伝達させる。また、出力情報作成部133は、掃除ロボット5にユーザの指示した動作を実行させる命令を生成して、ホームサーバ3に送信し、掃除ロボット5に伝達させる。なお、行動決定部132がユーザの指示した動作を実行させないことを決定している場合には、動作の実行命令の生成および送信は行わない。   On the other hand, when the user directly gives an instruction to the cleaning robot 5, the output information creation unit 133 generates a command for causing the cleaning robot 5 to output a sound in the content and manner instructed by the behavior determining unit 132, and the home server 3 and transmitted to the cleaning robot 5. Further, the output information creation unit 133 generates a command for causing the cleaning robot 5 to execute an operation instructed by the user, transmits the command to the home server 3, and transmits the command to the cleaning robot 5. Note that when the action determining unit 132 has determined not to execute the operation instructed by the user, the operation execution instruction is not generated and transmitted.

以上のように、エージェントサーバ1は、掃除ロボット5の気分情報および対ユーザ感情情報に基づいたメッセージを家族伝言板に投稿する。あるいは、気分情報および対ユーザ感情情報に基づいた音声を掃除ロボット5に出力させる。   As described above, the agent server 1 posts a message based on the mood information of the cleaning robot 5 and the emotional information on the user to the family message board. Alternatively, the cleaning robot 5 is made to output sound based on mood information and user emotion information.

これにより、掃除ロボット5とのリアリティのあるコミュニケーションをユーザに体験させることができ、家電を利用する際のエンタテインメント性を高めることができる。   Thereby, a user can experience the realistic communication with the cleaning robot 5, and the entertainment property at the time of using a household appliance can be improved.

〔情報の更新〕
次に、図8を参照して、気分情報および対ユーザ感情情報の更新について説明する。図8は、気分情報および対ユーザ感情情報の更新例を示すテーブルである。
[Update information]
Next, with reference to FIG. 8, the update of mood information and user emotion information will be described. FIG. 8 is a table showing an example of updating mood information and user emotion information.

まず、気分情報の更新について説明する。気分情報は、掃除ロボット5の機嫌のような指標であり、掃除ロボット5を取り巻く環境、掃除ロボット5の状態、あるいは掃除ロボット5に対するユーザの行為などによって変化する。気分情報は、上述したように、3(良い)、2(普通)、1(悪い)の3段階で気分情報記憶部121に記憶され、掃除ロボット5を取り巻く環境の変化、掃除ロボット5の状態の変化、あるいは掃除ロボット5に対するユーザの行為などがあったとき、気分情報のカウント値を更新する。そして、このカウント値が所定の値に達したときに、気分情報の段階を変化させる。   First, updating of mood information will be described. The mood information is an index like the mood of the cleaning robot 5, and changes depending on the environment surrounding the cleaning robot 5, the state of the cleaning robot 5, or the user's action on the cleaning robot 5. As described above, the mood information is stored in the mood information storage unit 121 in three stages of 3 (good), 2 (normal), and 1 (bad), and changes in the environment surrounding the cleaning robot 5 and the state of the cleaning robot 5 When there is a change or a user action on the cleaning robot 5, the count value of the mood information is updated. When the count value reaches a predetermined value, the mood information stage is changed.

具体的には、図8の(a)の例では、掃除ロボット5が掃除を完了したときには、達成感から掃除ロボット5の気分は良くなると想定して、当該状態にカウント値を1増やすことを対応付けている。このように、掃除を終了したという掃除ロボット5の動作状態(状態情報)をカウント値の増減の対象としてもよい。   Specifically, in the example of FIG. 8A, when the cleaning robot 5 completes the cleaning, it is assumed that the cleaning robot 5 feels better from the sense of accomplishment, and the count value is increased by 1 in this state. Corresponds. As described above, the operation state (state information) of the cleaning robot 5 indicating that the cleaning has been completed may be the target of the increase / decrease of the count value.

また、ユーザが、掃除ロボット5が掃除を完了したことを褒めたときには、掃除ロボット5の気分がさらに良くなると想定して、当該事象にカウント値を2増やすことを対応付けている。このように、掃除を終了したという動作状態と、ユーザからのメッセージとの組み合わせを1つの事象としてカウント値の増減の対象としてもよい。   Further, when the user gives up that the cleaning robot 5 has completed the cleaning, it is assumed that the cleaning robot 5 feels better, and this event is associated with increasing the count value by two. As described above, the combination of the operation state that the cleaning has been completed and the message from the user may be used as an object to increase or decrease the count value as one event.

一方、掃除予定時間の直前にユーザから掃除の指示があったときには、これから掃除をしようとしていた掃除ロボット5は気分が悪くなると想定して、当該事象にカウント値を1減らすことを対応付けている。   On the other hand, when the user gives an instruction for cleaning immediately before the scheduled cleaning time, the cleaning robot 5 that is about to clean is assumed to feel unwell, and this event is associated with a decrease in count value by one. .

その他にも、掃除ロボット5自体の状態を示す状態情報に応じて、気分情報のカウント値を増減させてもよい。例えば、図8の(a)の例では、充電残量が所定量より少ない状態となったとき、およびダストカップのごみの量が所定量より多い状態となったときには、掃除ロボット5の気分は悪くなると想定して、当該状態に遷移したことに対し、カウント値を1減らすことを対応付けている。   In addition, the count value of the mood information may be increased or decreased according to the state information indicating the state of the cleaning robot 5 itself. For example, in the example of FIG. 8A, when the remaining charge amount is less than a predetermined amount, and when the amount of dust in the dust cup is greater than a predetermined amount, the mood of the cleaning robot 5 is Assuming that it becomes worse, the count value is reduced by 1 for the transition to the state.

なお、同図には示していないが、これらの状態が解消されたときには、掃除ロボット5の気分も回復すると想定される。このため、充電残量が所定量より少ない状態から多い状態への遷移、およびごみの量が所定量より多い状態から少ない状態への遷移には、カウント値を1増やすことを対応付けてもよい。また、ごみの量や充電残量の程度に応じてカウント値を段階的に増減させてもよい。   Although not shown in the figure, it is assumed that the mood of the cleaning robot 5 also recovers when these states are resolved. For this reason, the transition from the state where the remaining charge amount is less than the predetermined amount to the large state, and the transition from the state where the amount of dust is larger than the predetermined amount to the small state may be associated with incrementing the count value by one. . Further, the count value may be increased or decreased in stages according to the amount of garbage or the remaining charge level.

例えば、充電残量が10%未満となったときに、カウント値を減らし、充電することによって10%以上となったときにカウント値を増やしてもよい。また、例えば、ごみの蓄積量が90%となったときにカウント値を1減らし、ごみの蓄積量が100%(ダストカップが一杯)となったときにさらにカウント値を2減らしてもよい。   For example, the count value may be decreased when the remaining charge becomes less than 10%, and may be increased when the remaining charge becomes 10% or more by charging. For example, the count value may be reduced by 1 when the amount of accumulated dust reaches 90%, and the count value may be further decreased by 2 when the amount of accumulated dust reaches 100% (the dust cup is full).

無論、カウント値を変動させる因子は、適宜決定されればよく、図8の(a)に示したものに限定されない。例えば、室温が上限値を超えたとき、または下限値を未満となったときにカウント値を減らしてもよい。同様に、湿度が上限値を超えたとき、または下限値を未満となったときにカウント値を減らしてもよい。このように、掃除ロボット5の周囲の状況を示す環境情報に応じてカウント値を更新してもよい。なお、環境情報は、掃除ロボット5にセンサを設けることによって取得することができるので、センシングデータと表現することもできる。   Of course, the factor that fluctuates the count value may be determined as appropriate, and is not limited to that shown in FIG. For example, the count value may be decreased when the room temperature exceeds the upper limit value or when the room temperature becomes less than the lower limit value. Similarly, the count value may be decreased when the humidity exceeds the upper limit value or becomes less than the lower limit value. Thus, the count value may be updated according to the environmental information indicating the situation around the cleaning robot 5. In addition, since environmental information can be acquired by providing the sensor in the cleaning robot 5, it can also be expressed as sensing data.

また、複数の情報の変化を複合させて、カウント値を変化させてもよい。例えば、ダストカップのごみの量が多くても、充電残量が十分残っている場合は減らさないが、充電残量が所定量より少ない場合は減らす、といった構成でもよい。   Further, the count value may be changed by combining a plurality of information changes. For example, even if the amount of dust in the dust cup is large, it may not be reduced when the remaining charge amount is sufficient, but may be reduced when the remaining charge amount is less than a predetermined amount.

なお、図8の(a)に示すようなテーブルは、例えば、気分情報記憶部121に保存されていてもよい。気分情報更新部135は、このテーブルを参照することで、カウント値の増減を決定してもよい。   In addition, the table as shown to (a) of FIG. 8 may be preserve | saved in the mood information storage part 121, for example. The mood information update unit 135 may determine increase / decrease in the count value by referring to this table.

そして、上記のようにカウント値を増減させることによって、カウント値が所定の値(例えば+10および−10)を超えたときには、気分情報を更新してカウント値をリセットする。なお、例えば、カウント値0〜5の場合は気分が悪く、6〜22の場合、普通、23〜30の場合は気分が良い、というように、カウント値をリセットしない構成でもよい。   Then, by increasing or decreasing the count value as described above, when the count value exceeds a predetermined value (for example, +10 and −10), the mood information is updated and the count value is reset. In addition, for example, the count value 0 to 5 may be unpleasant, the case 6 to 22 may be normal, the case 23 to 30 may be good, and the count value may not be reset.

また、気分情報のそれぞれの段階の範囲は、同じとしてもよいし、異ならせてもよい。異ならせる場合、気難しい等の性格を表現することも可能である。なお、以降では、カウント値が所定の値を超えた場合に、カウント値をリセットする構成を例に挙げて説明する。   In addition, the range of each stage of the mood information may be the same or different. When different, it is also possible to express a difficult character. Hereinafter, a configuration in which the count value is reset when the count value exceeds a predetermined value will be described as an example.

次に、対ユーザ感情情報の更新について説明する。対ユーザ感情情報は、掃除ロボット5が各ユーザに対して持っている、好き嫌いのような指標であるため、例えば、掃除ロボット5に対するユーザの行為によって変化する。対ユーザ感情情報は、上述したように、10段階で対ユーザ感情情報記憶部122に記憶され、掃除ロボット5に対するユーザの行為に応じて更新される。この更新は、気分情報と同様に、カウント値が所定の値に達したときに対ユーザ感情情報の段階を変化させることで行う。   Next, the update of the user emotion information will be described. Since the anti-user emotion information is an index such as likes and dislikes that the cleaning robot 5 has for each user, the emotion information changes depending on, for example, the user's action on the cleaning robot 5. As described above, the anti-user emotion information is stored in the anti-user emotion information storage unit 122 in 10 steps, and is updated according to the user's action on the cleaning robot 5. Similar to the mood information, this update is performed by changing the stage of the user emotion information when the count value reaches a predetermined value.

具体的には、ユーザの掃除ロボット5に対する行動に対して、予めカウント値の増減を定義しておく。例えば、図8の(b)に示すように、掃除ロボット5を蹴っ飛ばす、たたくなどの行為に対して、カウント値を所定量減らすことを定義し、反対になでるなどの行為に対しては、カウント値を所定量増やすことを定義しておく。   Specifically, the increase / decrease of the count value is defined in advance for the user's action on the cleaning robot 5. For example, as shown in FIG. 8B, it is defined that the count value is reduced by a predetermined amount for an action such as kicking or hitting the cleaning robot 5, and for an action such as stroking the opposite, It is defined that the value is increased by a predetermined amount.

なお、蹴っ飛ばす、たたくなどの行為は、掃除ロボット5にセンサを設けることで検出することが可能である。また、なでる行為については、なでたことを検知可能なパネルやシートを掃除ロボット5に設けることで検出可能である。   Note that an action such as kicking or hitting can be detected by providing the cleaning robot 5 with a sensor. Further, the act of stroking can be detected by providing the cleaning robot 5 with a panel or sheet that can detect stroking.

無論、カウント値を変動させる因子は、適宜決定されればよく、図8の(b)の例に限られない。例えば、掃除ロボット5に声をかけることでカウント値を変動させてもよく、掃除ロボット5に向けて発したメッセージの内容(叱る、褒める等)に応じてカウント値を変動させてもよい。   Of course, the factor that fluctuates the count value may be determined as appropriate, and is not limited to the example of FIG. For example, the count value may be changed by calling the cleaning robot 5, or the count value may be changed according to the content of the message (speaking, giving up, etc.) issued to the cleaning robot 5.

また、上述した、気分情報の更新で説明したような、掃除完了後に掃除ロボット5を褒めるといった行為のように、掃除ロボット5の状態とユーザの行為との組み合わせによってカウント値を変動させてもよい。   Further, the count value may be changed depending on the combination of the state of the cleaning robot 5 and the user's action, such as the action of giving up the cleaning robot 5 after completion of the cleaning as described in the update of the mood information described above. .

なお、掃除ロボット5に対するメッセージは、ユーザから掃除ロボット5に向かって直接に発せられたものであってもよいし、家族伝言板への投稿にて掃除ロボット5に向かって発せられるメッセージであってもよい。   The message for the cleaning robot 5 may be a message issued directly from the user toward the cleaning robot 5 or may be a message issued toward the cleaning robot 5 by posting to the family message board. Good.

さらに、掃除ロボット5へのお礼などの声かけを、掃除完了後すぐ行えばカウント値が増加し、反対に声かけが遅い、あるいは、掃除完了報告を無視するといった行為でカウント値が減少するというように、掃除ロボット5への応答までの時間に基づいて、カウント値を変動させてもよい。   Furthermore, if the call to the cleaning robot 5 is made immediately after the cleaning is completed, the count value will increase. On the other hand, the count value will decrease if the call is slow or the cleaning completion report is ignored. As described above, the count value may be changed based on the time until the response to the cleaning robot 5.

なお、上記の例のように、対ユーザ感情情報の段階が10段階などと多い場合は、図8の(c)に示すように、ユーザの行動と、対ユーザ感情情報とを直接対応付けたデータを用いて、カウント値を用いずに対ユーザ感情情報を更新してもよい。   In addition, as shown in the above example, when there are as many as 10 stages of user emotion information, as shown in FIG. 8C, the user's behavior is directly associated with the user emotion information. The user emotion information may be updated using the data without using the count value.

最後に、図8の(b)および(c)に示すようなテーブルは、例えば対ユーザ感情情報記憶部122に保存されていてもよい。対ユーザ感情情報更新部136は、このテーブルを参照することで、カウント値の増減を決定してもよい。   Finally, tables as shown in FIGS. 8B and 8C may be stored in the user emotion information storage unit 122, for example. The user emotion information update unit 136 may determine increase / decrease of the count value by referring to this table.

〔気分情報更新処理の流れ〕
次に、図9を参照して、エージェントサーバ1における気分情報更新処理の流れについて説明する。図9は、エージェントサーバ1における気分情報更新処理の流れを示すフローチャートである。
[Flow of mood information update process]
Next, a flow of mood information update processing in the agent server 1 will be described with reference to FIG. FIG. 9 is a flowchart showing a flow of mood information update processing in the agent server 1.

まず、掃除ロボット5を取り巻く環境・情報の変化に関する情報が変化したか否かを判定する(S201)。具体的には、気分情報更新部135は、ホームサーバ3を介してエージェントサーバ1に送信される掃除ロボット5に関する情報(掃除ロボット5の状態情報、センシングデータなど)を受信して、この情報に基づいて上記の判定を行う。   First, it is determined whether or not information related to changes in the environment and information surrounding the cleaning robot 5 has changed (S201). Specifically, the mood information update unit 135 receives information (cleaning robot 5 status information, sensing data, etc.) related to the cleaning robot 5 transmitted to the agent server 1 via the home server 3, and uses this information as the information. Based on this, the above determination is made.

ここで、情報が変化したと判定したときには(S201でYES)、気分情報更新部135は、気分情報を更新するか否かを判定する(S203)。具体的には、気分情報更新部135は、図8の(a)のテーブルに規定されている変化を検出したか否かによって、この判定を行う。   When it is determined that the information has changed (YES in S201), the mood information update unit 135 determines whether or not to update the mood information (S203). Specifically, the mood information updating unit 135 makes this determination depending on whether or not a change defined in the table of FIG.

そして、気分情報更新部135は、気分情報を更新すると判定した場合(S203でYES)、気分情報のカウント値の増減を決定する(S205)。具体的には、気分情報更新部135は、上記テーブルを参照して、検出した変化と対応付けられたカウント値の増減を読み出す。   When it is determined that the mood information is to be updated (YES in S203), the mood information update unit 135 determines increase / decrease in the count value of the mood information (S205). Specifically, the mood information update unit 135 reads the increase / decrease in the count value associated with the detected change with reference to the table.

続いて、気分情報更新部135は、カウント値を更新する(S207)。具体的には、気分情報更新部135は、読み出したカウント値の増減に基づいて、カウント値を更新する。   Subsequently, the mood information update unit 135 updates the count value (S207). Specifically, the mood information update unit 135 updates the count value based on the increase / decrease of the read count value.

次に、気分情報更新部135は、カウント値が所定の値に達したか否かを判定する(S209)。所定の値に達したと判定した場合(S209でYES)、気分情報更新部135は、気分情報を更新する(S211)。具体的には、気分情報を1段階上げる、あるいは下げる処理を行い、カウント値の数値を0に戻し、気分情報更新処理を終了する。   Next, the mood information update unit 135 determines whether or not the count value has reached a predetermined value (S209). If it is determined that the predetermined value has been reached (YES in S209), the mood information update unit 135 updates the mood information (S211). Specifically, a process of raising or lowering the mood information by one level is performed, the numerical value of the count value is returned to 0, and the mood information update process is ended.

なお、上記変化の情報が気分情報を更新するものでない場合(S203でNO)、および、カウント値が所定の値に達していない場合(S209でNO)には、気分情報更新処理を終了する。   If the change information does not update the mood information (NO in S203) and if the count value has not reached the predetermined value (NO in S209), the mood information update process ends.

上記の例では、カウント値による更新を行っているが、カウント値を用いずに、直接感情情報を更新してもよい。この場合、S205〜S209のステップは省略する。   In the above example, the update is performed using the count value, but the emotion information may be directly updated without using the count value. In this case, steps S205 to S209 are omitted.

〔対ユーザ感情情報更新処理の流れ〕
次に、図10を参照して、エージェントサーバ1における対ユーザ感情情報更新処理の流れについて説明する。図10は、エージェントサーバ1における対ユーザ感情情報更新処理の流れを示すフローチャートである。
[Flow of user emotion information update processing]
Next, with reference to FIG. 10, the flow of the user emotion information update process in the agent server 1 will be described. FIG. 10 is a flowchart showing the flow of the user emotion information update process in the agent server 1.

まず、ユーザからの行為に関する情報を受信する(S301)。具体的には、通信制御部131が、通信部11を介して、家族伝言板サーバ2あるいはホームサーバ3から、ユーザからの行為に関する情報を受信する。ここで、通信制御部131が受信する情報とは、家族伝言板サーバ2から取得する、家族伝言板へ投稿されたメッセージのログであり、また、ホームサーバ3から取得する、掃除ロボット5から供給された音声、画像、および動画などのデータである。   First, information about an action from a user is received (S301). Specifically, the communication control unit 131 receives information about an action from the user from the family message board server 2 or the home server 3 via the communication unit 11. Here, the information received by the communication control unit 131 is a log of messages posted to the family message board acquired from the family message board server 2 and supplied from the cleaning robot 5 acquired from the home server 3. Data such as voice, image, and video.

次に、ユーザからの行為を特定する(S303)。具体的には、対ユーザ感情情報更新部136が、通信制御部131が受信した上記の情報から、行為を特定する。続いて、対ユーザ感情情報更新部136は、対ユーザ感情情報を更新するか否かを判定する(S305)。具体的には、対ユーザ感情情報更新部136は、図8の(b)に示すようなテーブルを参照して、特定した行為が対ユーザ感情情報を更新するものであるか否かを判定する。   Next, an action from the user is specified (S303). Specifically, the user emotion information update unit 136 specifies an action from the information received by the communication control unit 131. Subsequently, the user emotion information update unit 136 determines whether or not to update the user emotion information (S305). Specifically, the user emotion information update unit 136 refers to a table as shown in FIG. 8B and determines whether or not the specified action is to update the user emotion information. .

ここで、特定した行為が対ユーザ感情情報を更新するものであった場合(S305でYES)、対ユーザ感情情報更新部136は、ユーザ特定部134に指示して、当該行為を行ったユーザを特定させる(S307)。   Here, when the specified action is to update the user emotion information (YES in S305), the user emotion information update unit 136 instructs the user specifying unit 134 to identify the user who has performed the action. Specify (S307).

次に、対ユーザ感情情報更新部136は、対ユーザ感情情報のカウント値の増減を決定する(S307)。具体的には、対ユーザ感情情報更新部136は、上記のテーブルを参照して、当該行為と対応付けられたカウント値の増減を読み出す。続いて、対ユーザ感情情報更新部136は、特定したユーザのカウント値を更新する(S311)。具体的には、対ユーザ感情情報更新部136が、特定したユーザのカウント値を、読み出したカウント値の増減に基づいて更新する。   Next, the user emotion information update unit 136 determines increase or decrease of the count value of the user emotion information (S307). Specifically, the user emotion information update unit 136 reads the increase / decrease in the count value associated with the action with reference to the table. Subsequently, the user emotion information update unit 136 updates the count value of the identified user (S311). More specifically, the user emotion information update unit 136 updates the count value of the identified user based on the increase or decrease of the read count value.

次に、対ユーザ感情情報更新部136は、カウント値が所定の値に達したか否かを判定する(S313)。所定の値に達した場合(S313でYES)、対ユーザ感情情報更新部136は、特定したユーザの対ユーザ感情情報を更新する。具体的には、対ユーザ感情情報記憶部122を特定したユーザの情報で参照し、ユーザ名に対応付けられた対ユーザ感情情報を1段階上げる、あるいは下げる処理を行い、カウント値の数値を0に戻し、対ユーザ感情情報更新処理を終了する。   Next, the user emotion information update unit 136 determines whether or not the count value has reached a predetermined value (S313). When the predetermined value is reached (YES in S313), the anti-user emotion information update unit 136 updates the specified user's anti-user emotion information. Specifically, the user emotion information storage unit 122 is referred to with the specified user information, and the user emotion information associated with the user name is increased or decreased by one level, and the count value is set to 0. The process for updating the user emotion information is ended.

なお、ユーザからの行為が、対ユーザ感情情報を更新するものでなかった場合(S305でNO)、および、カウント値が所定の値に達していない場合(S313でNO)は、その時点で対ユーザ感情情報更新処理を終了する。   If the action from the user is not to update the user emotion information (NO in S305) and the count value has not reached the predetermined value (NO in S313), The user emotion information update process is terminated.

また、カウント値を用いず、ユーザからの行為によって、直接対ユーザ感情情報を更新する場合は、S309〜S313のステップは省略する。   Further, when the user emotion information is directly updated by an action from the user without using the count value, the steps of S309 to S313 are omitted.

〔変形例〕
上記では、ユーザと掃除ロボット5とのコミュニケーションを制御する例を示したが、コミュニケーションの対象とする機器は、掃除ロボット5に限られない。例えば、家庭内機器である空調装置6やテレビ8のような他の機器とのコミュニケーションも、掃除ロボット5の場合と同様にして実現することができる。
[Modification]
Although the example which controls communication with a user and the cleaning robot 5 was shown above, the apparatus made into the object of communication is not restricted to the cleaning robot 5. FIG. For example, communication with other devices such as an air conditioner 6 and a television 8 which are household devices can be realized in the same manner as the cleaning robot 5.

〔まとめ〕
以上のように、本発明の一態様に係る行動制御装置(エージェントサーバ1)は、機器(掃除ロボット5)のユーザに対する行動を制御する行動制御装置であって、上記ユーザに対して設定されたユーザ属性情報(対ユーザ感情情報)と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報(気分情報)とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定手段(行動決定部132)と、上記行動決定手段が決定した行動を実行する実行制御手段(出力情報作成部133)とを備えている。
[Summary]
As described above, the behavior control device (agent server 1) according to one aspect of the present invention is a behavior control device that controls behavior of a device (cleaning robot 5) for a user, and is set for the user. Based on the user attribute information (to-user sentiment information) and the device attribute information (mood information) that is set independently of the user and indicates the attribute of the device, the user attribute information and the device Action determining means (behavior determining section 132) for determining a predetermined action according to device attribute information, and execution control means (output information creating section 133) for executing the action determined by the action determining means. Yes.

また、本発明の一態様に係る行動制御方法は、機器のユーザに対する行動を制御する行動制御装置による行動制御方法であって、上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定ステップと、上記行動決定ステップにて決定した行動を実行する実行制御ステップとを含む。   The behavior control method according to an aspect of the present invention is a behavior control method by a behavior control device that controls behavior of a device with respect to a user, the user attribute information set for the user, and the attribute of the device. An action determining step for determining a predetermined action according to the user attribute information and the device attribute information based on the device attribute information to be updated and set independently of the user as indicating An execution control step for executing the action determined in the action determination step.

上記の構成によれば、ユーザ属性情報および機器属性情報に応じて機器のユーザに対する行動を決定し、決定した行動を実行する。なお、機器のユーザに対する行動には、機器がユーザに向けて直接に行う行動の他、機器の代理として行動制御装置がユーザに向けて行う行動等も含まれる。   According to said structure, the action with respect to the user of an apparatus is determined according to user attribute information and apparatus attribute information, and the determined action is performed. The behavior of the device with respect to the user includes behavior that the behavior control device acts on the user as a proxy of the device, in addition to behavior that the device directly performs on the user.

ここで、上記ユーザ属性情報は、ユーザに対して設定された情報であるから、この情報に基づいて行動を決定することにより、ユーザに応じた行動を決定することができる。   Here, since the said user attribute information is the information set with respect to the user, the action according to the user can be determined by determining an action based on this information.

一方、上記機器属性情報は、ユーザと独立に設定され、更新の対象となるものであるから、機器属性情報を考慮して行動を決定することにより、同じユーザに対する行動が、そのときの機器属性情報に応じて変化し得る。   On the other hand, since the device attribute information is set independently of the user and is to be updated, by determining the behavior in consideration of the device attribute information, the behavior for the same user is changed to the device attribute at that time. It can change depending on the information.

つまり、上記の構成によれば、ユーザに応じた行動を実行することを可能にしながらも、そのときの機器属性情報に応じて変化に富んだ行動を実行することができる。また、上記機器属性情報は、ユーザと独立に設定されたものであるから、ユーザが直接的に制御することはできない。   That is, according to said structure, while making it possible to perform the action according to a user, the action rich in change can be performed according to the apparatus attribute information at that time. Further, since the device attribute information is set independently of the user, the user cannot directly control the device attribute information.

このように、上記の構成によれば、人と人とのコミュニケーションにおける相手の気分のような、ユーザが直接的に制御することのできない要素を行動に反映させることができるので、ユーザと機器とのコミュニケーションにリアリティを持たせることができる。   As described above, according to the above configuration, since it is possible to reflect in the behavior elements that the user cannot directly control, such as the feeling of the other party in communication between people, Reality can be given to communication.

なお、上記行動制御装置は、以下のように表現することもできる。   In addition, the said behavior control apparatus can also be expressed as follows.

機器のユーザに対する行動を制御する行動制御装置であって、上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定手段と、上記機器に上記行動決定手段が決定した行動を実行させる実行制御手段とを備えていることを特徴とする行動制御装置。   A behavior control device for controlling behavior of a device to a user, the device being set independently of the user as user attribute information set for the user and the attribute of the device, and to be updated Action determining means for determining a predetermined action according to the user attribute information and the device attribute information based on the attribute information; and an execution control means for causing the device to execute the action determined by the action determining means. A behavior control device comprising:

通信ネットワークを介したメッセージの投稿および閲覧を可能にするサービスにおいて、機器の代理として該機器のユーザ宛のメッセージを投稿する投稿装置であって、上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた内容および態様のメッセージを決定する決定手段と、上記決定手段が決定したメッセージを投稿する実行制御手段とを備えていることを特徴とする投稿装置。   In a service that allows posting and browsing of messages via a communication network, a posting device that posts a message addressed to the user of the device as a proxy of the device, the user attribute information set for the user, A message having a content and a mode determined in advance according to the user attribute information and the device attribute information based on the device attribute information to be updated and set independently of the user as indicating the device attribute A posting apparatus comprising: a determining unit that determines a message; and an execution control unit that posts a message determined by the determining unit.

また、本発明の一態様に係る行動制御装置は、上記機器の状態を示す状態情報、上記ユーザまたは他のユーザからの上記機器に対する行動、および上記機器の周囲の状況を示す環境情報の少なくとも何れかに応じて上記機器属性情報を更新する機器属性更新手段(気分情報更新部135)を備えていてもよい。   In addition, the behavior control apparatus according to one aspect of the present invention includes at least one of state information indicating a state of the device, an action on the device from the user or another user, and environmental information indicating a situation around the device. Accordingly, a device attribute update means (a mood information update unit 135) for updating the device attribute information may be provided.

上記の構成によれば、ユーザと機器とのコミュニケーションにさらなるリアリティを持たせることができる。人と人とのコミュニケーションにおいても、そのときの状態、他人からなされた行動、および周囲の状況に応じて感情が変化し、感情に応じて行動も変化するためである。   According to said structure, the further reality can be given to communication with a user and an apparatus. This is also because in the communication between people, emotions change according to the state at that time, behaviors made by others, and surrounding circumstances, and behaviors also change according to emotions.

また、本発明の一態様に係る行動制御装置は、上記ユーザからの上記機器に対する行動に応じて上記ユーザ属性情報を更新するユーザ属性更新手段を備えていてもよい。   Moreover, the behavior control apparatus according to an aspect of the present invention may include a user attribute update unit that updates the user attribute information according to an action on the device from the user.

上記の構成によれば、ユーザと機器とのコミュニケーションにさらなるリアリティを持たせることができる。人と人とのコミュニケーションにおいても、相手からどのような行動がなされたかによってその相手への感情が変化し、感情に応じて行動も変化するためである。   According to said structure, the further reality can be given to communication with a user and an apparatus. This is also because in the communication between people, the feelings toward the other party change depending on what action is taken from the other party, and the behavior also changes according to the emotion.

また、本発明の一態様に係る行動制御装置では、上記ユーザ属性情報には、更新の対象となる更新対象情報と、更新の対象とならない非更新対象情報とが含まれており、上記ユーザ属性更新手段は、上記更新対象情報のみを更新する構成であってもよい。   In the behavior control device according to an aspect of the present invention, the user attribute information includes update target information to be updated and non-update target information that is not to be updated. The update means may be configured to update only the update target information.

上記の構成によれば、ユーザと機器とのコミュニケーションにさらなるリアリティを持たせることができる。人と人とのコミュニケーションにおいても、相性、立場、あるいは血縁関係等のように変動しない要因と、相手からの行動に応じて変動する相手に対する感情とに応じて行動が変化するためである。   According to said structure, the further reality can be given to communication with a user and an apparatus. This is because even in communication between people, the behavior changes according to factors that do not change, such as compatibility, position, or relationship, and emotions that change according to the behavior from the other.

また、本発明の一態様に係る行動制御装置では、上記機器のユーザに対する行動は、通信ネットワークを介したメッセージの投稿および閲覧を可能にするサービスにおいて、上記行動制御装置が上記機器の代理として上記ユーザ宛のメッセージを投稿する行動であり、上記行動決定手段は、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた内容および態様のメッセージを投稿することを決定する構成であってもよい。   Further, in the behavior control device according to one aspect of the present invention, the behavior of the device to the user is a service that enables posting and browsing of a message via a communication network, and the behavior control device acts as a proxy for the device. It is an action for posting a message addressed to a user, and the action determining means is configured to determine to post a message having a predetermined content and mode according to the user attribute information and the device attribute information. Good.

上記の構成によれば、通信ネットワークを介したメッセージの投稿および閲覧を可能にするサービスにメッセージを投稿するので、機器の近くに居らず、機器との直接のコミュニケーションができないユーザとのコミュニケーションを実現することができる。また、投稿するメッセージは、ユーザ属性情報および機器属性情報に応じて予め定められた内容および態様のメッセージであるから、人とコミュニケーションをしているかのようなリアルなコミュニケーションをユーザに体験させることができる。   According to the above configuration, since messages are posted to a service that allows posting and browsing of messages via a communication network, communication with a user who is not near the device and cannot directly communicate with the device is realized. can do. In addition, since the message to be posted is a message having a content and mode predetermined according to the user attribute information and the device attribute information, the user can experience realistic communication as if they are communicating with a person. it can.

また、本発明の一態様に係る行動制御装置では、上記ユーザ属性情報および上記機器属性情報に応じた、口調、対応内容、表示フォント、メッセージの背景色、およびメッセージの文字色のうち少なくとも1つを示す情報を参照して、投稿するメッセージの内容および態様を決定する構成であってもよい。   Further, in the behavior control apparatus according to one aspect of the present invention, at least one of tone, corresponding content, display font, message background color, and message character color according to the user attribute information and the device attribute information. The content and the mode of the message to be posted may be determined with reference to the information indicating.

上記の構成によれば、人とコミュニケーションをしているかのようなリアルなコミュニケーションをユーザに体験させることができる。人と人とのメッセージのやり取りにおいても、その時の気分や、相手に対する感情に応じて、口調、対応内容、使用フォント、背景色、文字色等を変えることが行われるためである。   According to said structure, a user can experience realistic communication as if it is communicating with a person. This is because in the exchange of messages between people, the tone, the corresponding content, the font used, the background color, the character color, etc. are changed according to the mood at that time and the feelings of the other party.

また、本発明の一態様に係る行動制御装置では、上記行動決定手段は、ユーザから上記機器に対して行われた行動に対して、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた内容および態様の応答を上記機器に実行させることを決定する構成であってもよい。   In the behavior control apparatus according to one aspect of the present invention, the behavior determination unit is predetermined for the behavior performed by the user on the device according to the user attribute information and the device attribute information. It is also possible to adopt a configuration for determining that the device executes the response of the contents and the mode.

上記の構成によれば、ユーザが機器に対して行った行動に対して、ユーザ属性情報および機器属性情報に応じて予め定められた内容および態様の応答を機器に行わせるので、人とコミュニケーションをしているかのようなリアルなコミュニケーションをユーザに体験させることができる。   According to the above configuration, in response to the action performed by the user on the device, the device makes a response in a content and manner predetermined according to the user attribute information and the device attribute information. Users can experience realistic communication as if they were doing it.

また、本発明の一態様に係る行動制御装置では、上記行動決定手段は、上記ユーザ属性情報および上記機器属性情報に応じた、口調、対応内容、および出力音量のうち少なくとも1つを示す情報を参照して、ユーザからの行動に対する上記応答の内容および態様を決定する構成であってもよい。   In the behavior control device according to an aspect of the present invention, the behavior determination unit includes information indicating at least one of a tone, a corresponding content, and an output volume according to the user attribute information and the device attribute information. It may be configured to refer to the content and aspect of the response to the action from the user.

上記の構成によれば、人とコミュニケーションをしているかのようなリアルなコミュニケーションをユーザに体験させることができる。人と人とのコミュニケーションにおいても、その時の気分や、相手に対する感情に応じて、口調、対応内容、声の大きさ等を変えることが行われるためである。   According to said structure, a user can experience realistic communication as if it is communicating with a person. This is because also in communication between people, the tone, the corresponding content, the volume of the voice, etc. are changed according to the mood at that time and the feelings toward the other party.

なお、上記行動制御装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記行動制御装置の各手段として動作させることにより、上記行動制御装置をコンピュータにて実現させる制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。   The behavior control device may be realized by a computer. In this case, a control program for realizing the behavior control device by a computer by operating the computer as each unit of the behavior control device, and A computer-readable recording medium on which it is recorded also falls within the scope of the present invention.

〔ソフトウェアによる実現例〕
最後に、エージェントサーバ1の各ブロック、特に通信制御部131、行動決定部132、出力情報作成部133、ユーザ特定部134、気分情報更新部135、および対ユーザ感情情報更新部136は、集積回路(ICチップ)上に形成された論理回路によってハードウェア的に実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェア的に実現してもよい。
[Example of software implementation]
Finally, each block of the agent server 1, particularly the communication control unit 131, the action determination unit 132, the output information creation unit 133, the user identification unit 134, the mood information update unit 135, and the anti-user emotion information update unit 136 are integrated circuits It may be realized by hardware by a logic circuit formed on the (IC chip), or may be realized by software using a CPU (Central Processing Unit).

後者の場合、エージェントサーバ1は、各機能を実現するプログラムの命令を実行するCPU、上記プログラムを格納したROM、上記プログラムを展開するRAM、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアであるエージェントサーバ1の制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、上記エージェントサーバ1に供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。   In the latter case, the agent server 1 includes a storage device (such as a CPU that executes instructions of a program that realizes each function, a ROM that stores the program, a RAM that expands the program, a memory that stores the program and various data) Recording medium). An object of the present invention is to provide a recording medium in which a program code (execution format program, intermediate code program, source program) of a control program of the agent server 1 which is software that realizes the above-described functions is recorded so as to be readable by a computer. This can also be achieved by supplying the agent server 1 and reading and executing the program code recorded on the recording medium by the computer (or CPU or MPU).

上記記録媒体としては、一時的でない有形の媒体(non-transitory tangible medium)、例えば、磁気テープやカセットテープ等のテープ類、フロッピー(登録商標)ディスク/ハードディスク等の磁気ディスクやCD−ROM/MO/MD/DVD/CD−R等の光ディスクを含むディスク類、ICカード(メモリカードを含む)/光カード等のカード類、マスクROM/EPROM/EEPROM(登録商標)/フラッシュROM等の半導体メモリ類、あるいはPLD(Programmable logic device)やFPGA(Field Programmable Gate Array)等の論理回路類などを用いることができる。   Examples of the recording medium include non-transitory tangible medium, such as magnetic tape and cassette tape, magnetic disk such as floppy (registered trademark) disk / hard disk, and CD-ROM / MO. Discs including optical discs such as / MD / DVD / CD-R, cards such as IC cards (including memory cards) / optical cards, semiconductor memories such as mask ROM / EPROM / EEPROM (registered trademark) / flash ROM Alternatively, logic circuits such as PLD (Programmable Logic Device) and FPGA (Field Programmable Gate Array) can be used.

また、エージェントサーバ1を通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークは、プログラムコードを伝送可能であればよく、特に限定されない。例えば、インターネット、イントラネット、エキストラネット、LAN、ISDN、VAN、CATV通信網、仮想専用網(Virtual Private Network)、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、この通信ネットワークを構成する伝送媒体も、プログラムコードを伝送可能な媒体であればよく、特定の構成または種類のものに限定されない。例えば、IEEE1394、USB、電力線搬送、ケーブルTV回線、電話線、ADSL(Asymmetric Digital Subscriber Line)回線等の有線でも、IrDAやリモコンのような赤外線、Bluetooth(登録商標)、IEEE802.11無線、HDR(High Data Rate)、NFC(Near Field Communication)、DLNA(Digital Living Network Alliance)、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。   The agent server 1 may be configured to be connectable to a communication network, and the program code may be supplied via the communication network. The communication network is not particularly limited as long as it can transmit the program code. For example, the Internet, intranet, extranet, LAN, ISDN, VAN, CATV communication network, virtual private network, telephone line network, mobile communication network, satellite communication network, and the like can be used. The transmission medium constituting the communication network may be any medium that can transmit the program code, and is not limited to a specific configuration or type. For example, even with wired lines such as IEEE 1394, USB, power line carrier, cable TV line, telephone line, ADSL (Asymmetric Digital Subscriber Line) line, infrared rays such as IrDA and remote control, Bluetooth (registered trademark), IEEE 802.11 wireless, HDR ( It can also be used by radio such as High Data Rate (NFC), Near Field Communication (NFC), Digital Living Network Alliance (DLNA), mobile phone network, satellite line, and digital terrestrial network. The present invention can also be realized in the form of a computer data signal embedded in a carrier wave in which the program code is embodied by electronic transmission.

本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。   The present invention is not limited to the above-described embodiments, and various modifications are possible within the scope shown in the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments. Is also included in the technical scope of the present invention.

本発明は、ユーザに家電などの機器とのコミュニケーションを体験させるシステムに利用することができる。   The present invention can be used for a system that allows a user to experience communication with a device such as a home appliance.

1 エージェントサーバ(行動制御装置)
5 掃除ロボット(機器)
132 行動決定部(行動決定手段)
133 出力情報作成部(実行制御手段)
135 気分情報更新部(機器属性更新手段)
136 対ユーザ感情情報更新部(ユーザ属性更新手段)
1 Agent server (behavior control device)
5 Cleaning robot (equipment)
132 Action decision unit (behavior decision means)
133 Output information creation unit (execution control means)
135 mood information update unit (device attribute update means)
136 Emotion information update unit for user (user attribute update means)

Claims (10)

機器のユーザに対する行動を制御する行動制御装置であって、
上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定手段と、
上記行動決定手段が決定した行動を実行する実行制御手段とを備えていることを特徴とする行動制御装置。
A behavior control device for controlling behavior of a device to a user,
Based on the user attribute information set for the user and the device attribute information that is set independently of the user as an indication of the attribute of the device and is to be updated, the user attribute information and the device attribute Action determining means for determining a predetermined action according to information;
An action control device comprising: an execution control means for executing the action determined by the action determination means.
上記機器の状態を示す状態情報、上記ユーザまたは他のユーザからの上記機器に対する行動、および上記機器の周囲の状況を示す環境情報の少なくとも何れかに応じて上記機器属性情報を更新する機器属性更新手段を備えていることを特徴とする請求項1に記載の行動制御装置。   Device attribute update for updating the device attribute information according to at least one of status information indicating the status of the device, an action on the device from the user or another user, and environmental information indicating a situation around the device The behavior control apparatus according to claim 1, further comprising means. 上記ユーザからの上記機器に対する行動に応じて上記ユーザ属性情報を更新するユーザ属性更新手段を備えていることを特徴とする請求項1または2に記載の行動制御装置。   The behavior control apparatus according to claim 1, further comprising: a user attribute update unit that updates the user attribute information according to a behavior of the user with respect to the device. 上記ユーザ属性情報には、更新の対象となる更新対象情報と、更新の対象とならない非更新対象情報とが含まれており、上記ユーザ属性更新手段は、上記更新対象情報のみを更新することを特徴とする請求項3に記載の行動制御装置。   The user attribute information includes update target information to be updated and non-update target information that is not to be updated. The user attribute update means updates only the update target information. The behavior control device according to claim 3, wherein 上記機器のユーザに対する行動は、通信ネットワークを介したメッセージの投稿および閲覧を可能にするサービスにおいて、上記行動制御装置が上記機器の代理として上記ユーザ宛のメッセージを投稿する行動であり、
上記行動決定手段は、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた内容および態様のメッセージを投稿することを決定することを特徴とする請求項1から4の何れか1項に記載の行動制御装置。
The action for the user of the device is an action in which the behavior control device posts a message addressed to the user on behalf of the device in a service that enables posting and browsing of a message via a communication network,
5. The method according to claim 1, wherein the behavior determination unit determines to post a message having a predetermined content and mode according to the user attribute information and the device attribute information. The behavior control device described.
上記行動決定手段は、上記ユーザ属性情報および上記機器属性情報に応じた、口調、対応内容、表示フォント、メッセージの背景色、およびメッセージの文字色のうち少なくとも1つを示す情報を参照して、投稿するメッセージの内容および態様を決定することを特徴とする請求項5に記載の行動制御装置。   The behavior determination means refers to information indicating at least one of a tone, a corresponding content, a display font, a message background color, and a message character color according to the user attribute information and the device attribute information, 6. The behavior control apparatus according to claim 5, wherein the content and mode of a message to be posted are determined. 上記行動決定手段は、ユーザから上記機器に対して行われた行動に対して、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた内容および態様の応答を上記機器に実行させることを決定することを特徴とする請求項1から4の何れか1項に記載の行動制御装置。   The behavior determining means causes the device to execute a response of a content and a mode predetermined according to the user attribute information and the device attribute information in response to an action performed by the user on the device. The behavior control device according to claim 1, wherein the behavior control device is determined. 上記行動決定手段は、上記ユーザ属性情報および上記機器属性情報に応じた、口調、対応内容、および出力音量のうち少なくとも1つを示す情報を参照して、ユーザからの行動に対する上記応答の内容および態様を決定することを特徴とする請求項7に記載の行動制御装置。   The behavior determining means refers to information indicating at least one of a tone, a corresponding content, and an output volume according to the user attribute information and the device attribute information, and details of the response to the behavior from the user and The behavior control device according to claim 7, wherein a mode is determined. 機器のユーザに対する行動を制御する行動制御装置による行動制御方法であって、
上記ユーザに対して設定されたユーザ属性情報と、上記機器の属性を示すものとして上記ユーザと独立に設定され、更新の対象となる機器属性情報とに基づいて、上記ユーザ属性情報および上記機器属性情報に応じて予め定められた行動を決定する行動決定ステップと、
上記行動決定ステップにて決定した行動を実行する実行制御ステップとを含むことを特徴とする行動制御方法。
A behavior control method by a behavior control device for controlling behavior of a device to a user,
Based on the user attribute information set for the user and the device attribute information that is set independently of the user as an indication of the attribute of the device and is to be updated, the user attribute information and the device attribute An action determining step for determining a predetermined action according to the information;
An action control method comprising: an execution control step for executing the action determined in the action determination step.
請求項1から5の何れか1項に記載の行動制御装置を動作させるための制御プログラムであって、コンピュータを上記の各手段として機能させるための制御プログラム。   A control program for operating the behavior control device according to any one of claims 1 to 5, wherein the control program causes a computer to function as each of the above means.
JP2012249236A 2012-11-13 2012-11-13 Action control device, action control method, and control program Expired - Fee Related JP6157838B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012249236A JP6157838B2 (en) 2012-11-13 2012-11-13 Action control device, action control method, and control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012249236A JP6157838B2 (en) 2012-11-13 2012-11-13 Action control device, action control method, and control program

Publications (2)

Publication Number Publication Date
JP2014098962A true JP2014098962A (en) 2014-05-29
JP6157838B2 JP6157838B2 (en) 2017-07-05

Family

ID=50940949

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012249236A Expired - Fee Related JP6157838B2 (en) 2012-11-13 2012-11-13 Action control device, action control method, and control program

Country Status (1)

Country Link
JP (1) JP6157838B2 (en)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016012342A (en) * 2014-06-05 2016-01-21 ソフトバンク株式会社 Action control system and program
JP2016062077A (en) * 2014-09-22 2016-04-25 シャープ株式会社 Interactive device, interactive system, interactive program, server, control method for server, and server control program
JP2016099842A (en) * 2014-11-21 2016-05-30 シャープ株式会社 Written data transmission device, voice output apparatus, written data sharing system, control method, and control program
KR20160113857A (en) * 2015-03-23 2016-10-04 엘지전자 주식회사 Robot cleaner, and robot cleaning system
JP2016177442A (en) * 2015-03-19 2016-10-06 ヤフー株式会社 Information processing device and method
JP2016177441A (en) * 2015-03-19 2016-10-06 ヤフー株式会社 Information processing device and method
JP2017063359A (en) * 2015-09-25 2017-03-30 シャープ株式会社 Network system, apparatus, and server
JP2017107415A (en) * 2015-12-10 2017-06-15 ユカイ工学株式会社 Communication system
JP2017151394A (en) * 2016-02-26 2017-08-31 シャープ株式会社 Control device, method for controlling control device, and display device
JP2018060246A (en) * 2016-09-30 2018-04-12 本田技研工業株式会社 Output generating apparatus for moving body, output generating program for moving body, output generating method for moving body and moving body
US9943206B2 (en) 2015-06-26 2018-04-17 Samsung Electronics Co., Ltd. Robot cleaner, information providing system, and method for providing information

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001157982A (en) * 1999-11-30 2001-06-12 Sony Corp Robot device and control method thereof
JP2001188779A (en) * 1999-12-28 2001-07-10 Sony Corp Device and method for processing information and recording medium
JP2001212780A (en) * 2000-01-31 2001-08-07 Sony Corp Behavior controller, behavior control method, and recording medium
JP2002361582A (en) * 2001-06-05 2002-12-18 Sony Corp Robot power supplying system and robot
JP2003039361A (en) * 2001-07-24 2003-02-13 Namco Ltd Information providing system, robot, program, and information storage medium
JP2003225228A (en) * 2002-01-31 2003-08-12 Sanyo Electric Co Ltd Health management terminal device, computer program and recording medium
JP2004283957A (en) * 2003-03-20 2004-10-14 Sony Corp Robot device, method of controlling the same, and program
JP2005111637A (en) * 2003-10-10 2005-04-28 Ntt Data Corp Network robot service system
JP2010048953A (en) * 2008-08-20 2010-03-04 Toshiba Corp Interaction sentence generating device
WO2013073680A1 (en) * 2011-11-18 2013-05-23 独立行政法人科学技術振興機構 Task-sharing system capable of sharing tasks between human/robot

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001157982A (en) * 1999-11-30 2001-06-12 Sony Corp Robot device and control method thereof
JP2001188779A (en) * 1999-12-28 2001-07-10 Sony Corp Device and method for processing information and recording medium
JP2001212780A (en) * 2000-01-31 2001-08-07 Sony Corp Behavior controller, behavior control method, and recording medium
JP2002361582A (en) * 2001-06-05 2002-12-18 Sony Corp Robot power supplying system and robot
JP2003039361A (en) * 2001-07-24 2003-02-13 Namco Ltd Information providing system, robot, program, and information storage medium
JP2003225228A (en) * 2002-01-31 2003-08-12 Sanyo Electric Co Ltd Health management terminal device, computer program and recording medium
JP2004283957A (en) * 2003-03-20 2004-10-14 Sony Corp Robot device, method of controlling the same, and program
JP2005111637A (en) * 2003-10-10 2005-04-28 Ntt Data Corp Network robot service system
JP2010048953A (en) * 2008-08-20 2010-03-04 Toshiba Corp Interaction sentence generating device
WO2013073680A1 (en) * 2011-11-18 2013-05-23 独立行政法人科学技術振興機構 Task-sharing system capable of sharing tasks between human/robot

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016012342A (en) * 2014-06-05 2016-01-21 ソフトバンク株式会社 Action control system and program
JP2016062077A (en) * 2014-09-22 2016-04-25 シャープ株式会社 Interactive device, interactive system, interactive program, server, control method for server, and server control program
JP2016099842A (en) * 2014-11-21 2016-05-30 シャープ株式会社 Written data transmission device, voice output apparatus, written data sharing system, control method, and control program
JP2016177442A (en) * 2015-03-19 2016-10-06 ヤフー株式会社 Information processing device and method
JP2016177441A (en) * 2015-03-19 2016-10-06 ヤフー株式会社 Information processing device and method
KR20160113857A (en) * 2015-03-23 2016-10-04 엘지전자 주식회사 Robot cleaner, and robot cleaning system
KR102314637B1 (en) * 2015-03-23 2021-10-18 엘지전자 주식회사 Robot cleaner, and robot cleaning system
US9943206B2 (en) 2015-06-26 2018-04-17 Samsung Electronics Co., Ltd. Robot cleaner, information providing system, and method for providing information
JP2017063359A (en) * 2015-09-25 2017-03-30 シャープ株式会社 Network system, apparatus, and server
JP2017107415A (en) * 2015-12-10 2017-06-15 ユカイ工学株式会社 Communication system
JP2017151394A (en) * 2016-02-26 2017-08-31 シャープ株式会社 Control device, method for controlling control device, and display device
JP2018060246A (en) * 2016-09-30 2018-04-12 本田技研工業株式会社 Output generating apparatus for moving body, output generating program for moving body, output generating method for moving body and moving body

Also Published As

Publication number Publication date
JP6157838B2 (en) 2017-07-05

Similar Documents

Publication Publication Date Title
JP6157838B2 (en) Action control device, action control method, and control program
CN113412457B (en) Scene pushing method, device and system, electronic equipment and storage medium
KR102014623B1 (en) Image display apparatus, topic selection method, topic selection program, image display method and image display program
EP1901211B1 (en) Software robot apparatus
CN108919669A (en) A kind of smart home dynamic decision method, apparatus and service terminal
US20140095635A1 (en) Operation-assisting apparatus, operation-assisting method, and recording medium containing control program
KR20170099721A (en) Server and controlling user environment method of electronic device using electronic device and at least one smart device
TW201218846A (en) Method and apparatus for providing cooperative user interface layer management with respect to inter-device communications
CN105141587A (en) Virtual doll interaction method and device
US20140288678A1 (en) Electrical appliance control apparatus, electrical appliance control method, electrical appliance control system, input device, and electrical appliance
CN108632446A (en) A kind of information cuing method and mobile terminal
CN105278336A (en) Application display method and apparatus, and terminal
JP6189346B2 (en) CONTROL DEVICE, CONTROL DEVICE CONTROL PROGRAM, CONTROL DEVICE CONTROL METHOD, AND CONTROL SYSTEM
JP6017253B2 (en) CONTROL DEVICE, CONTROL METHOD FOR CONTROL DEVICE, CONTROLLED DEVICE, SERVER, CONTROL PROGRAM, AND RECORDING MEDIUM
CN112543365B (en) Media information playing method, device, equipment and computer readable storage medium
JPWO2018225313A1 (en) Information processing apparatus, information processing method, and program
JP6899543B2 (en) Cleanup support system, cleanup support method and program
JP6883451B2 (en) Servers, information processing methods, network systems, and terminals
KR20150123429A (en) Electronic device and Method for providing contents
CN111741116B (en) Emotion interaction method and device, storage medium and electronic device
JP2015219786A (en) Schedule management device, message presentation system, information terminal, method for controlling schedule management device, method for controlling information terminal, and control program
JP5990311B2 (en) Server, notification method, program, control target device, and notification system
CN105491114A (en) Method, apparatus and system for switching controlled device
WO2016052107A1 (en) Network system, server, device, and communication terminal
JP7236585B2 (en) User interface for voice messages

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150916

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160802

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170301

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20170309

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170607

R150 Certificate of patent or registration of utility model

Ref document number: 6157838

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees