JP7294637B2 - Dialogue adaptation device, dialogue adaptation method, program, and recording medium - Google Patents
Dialogue adaptation device, dialogue adaptation method, program, and recording medium Download PDFInfo
- Publication number
- JP7294637B2 JP7294637B2 JP2019049071A JP2019049071A JP7294637B2 JP 7294637 B2 JP7294637 B2 JP 7294637B2 JP 2019049071 A JP2019049071 A JP 2019049071A JP 2019049071 A JP2019049071 A JP 2019049071A JP 7294637 B2 JP7294637 B2 JP 7294637B2
- Authority
- JP
- Japan
- Prior art keywords
- dialogue
- model
- user
- information
- dialogue model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、対話適応化装置、対話適応化方法、プログラム、および記録媒体に関する。 The present invention relates to a dialog adaptation device, dialog adaptation method, program, and recording medium.
人手不足の問題から、様々な分野において対話ロボットの利用が試みられている。前記対話ロボットには、複数の対話モデルが記憶されており、ユーザと対話ロボットとの間での対話が行われるが、現状、ユーザとの間における対話が破たんしないことを目標とする開発が行われており、基本的に、対話が成立したか否かが判断されるにとどまっている(特許文献1、2)。 Due to the problem of labor shortage, the use of interactive robots has been attempted in various fields. A plurality of dialogue models are stored in the dialogue robot, and a dialogue takes place between the user and the dialogue robot. Basically, it is only determined whether or not the dialogue has been established (Patent Documents 1 and 2).
サービスの分野においては、継続的なインタラクションにより、ユーザが対話を通じて、目標が達成することが重要となる。しかし、前述のように、対話ロボットにおいては、対話の成立が判断されるにとどまっており、対話によって、ユーザの行動意欲を促進し、目標達成に導き、ユーザが満足する結果が得るような対話となっているかは、考慮されていない。 In the field of services, it is important for users to achieve their goals through continuous interaction. However, as described above, in the interactive robot, it is only judged whether the dialogue is established. It is not considered whether
そこで、本発明は、例えば、対話ロボットとの対話によって、ユーザの目標の達成を促し、ユーザに満足感を与えることができる対話の適応化を可能とするシステムの提供を目的とする。 SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to provide a system capable of adapting a dialogue that can promote the achievement of a user's goal and give the user a sense of satisfaction, for example, through dialogue with a dialogue robot.
前記目的を達成するために、本発明の対話適応化装置は、
記憶部、対話モデル選択部、発話出力部、ユーザ情報入力部、効果量算出部、対話モデル評価部、および対話モデル再選択部を含み、
前記記憶部は、
ユーザの目標達成を促す対話モデルを複数含む対話モデル群を記憶し、
前記対話モデル選択部は、
前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択し、
前記発話出力部は、
選択した前記対話モデルに基づくユーザへの発話情報を出力し、
前記ユーザ情報入力部は、
ユーザ情報を入力し、
前記ユーザ情報は、ユーザからの発話情報を含み、
前記効果量算出部は、
対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出し、
前記対話モデル評価部は、
前記効果量と、評価基準とに基づいて、
選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、
前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価し、
前記対話モデル再選択部は、
選択した対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、
選択した対話モデルを適切と評価した場合、前記選択した対話モデルを継続することを特徴とする。
To achieve the above object, the dialogue adaptation device of the present invention comprises:
A storage unit, a dialogue model selection unit, an utterance output unit, a user information input unit, an effect amount calculation unit, a dialogue model evaluation unit, and a dialogue model re-selection unit,
The storage unit
Storing a dialogue model group including a plurality of dialogue models that encourage a user to achieve a goal;
The dialogue model selection unit
selecting an arbitrary dialogue model as an initial dialogue model from the dialogue model group;
The speech output unit is
outputting utterance information to the user based on the selected interaction model;
The user information input unit
Enter your user information,
The user information includes utterance information from the user,
The effect amount calculation unit is
calculating a user's goal achievement rate based on the user information as an effect amount indicating the effect of the interaction model;
The dialogue model evaluation unit
Based on the effect size and evaluation criteria,
evaluating the dialogue model as inappropriate if the effect size of the selected dialogue model does not meet the evaluation criteria;
evaluating the dialogue model as appropriate if the effect size of the selected dialogue model satisfies the evaluation criteria;
The dialogue model reselection unit
if the selected dialogue model is evaluated as inappropriate, selecting another dialogue model from the dialogue model group;
When the selected dialogue model is evaluated as appropriate, the selected dialogue model is continued.
本発明の対話適応化方法は、
記憶部を使用し、
対話モデル選択工程、発話出力工程、ユーザ情報入力工程、効果量算出工程、対話モデル評価工程、および対話モデル再選択工程を含み、
前記記憶部は、
ユーザの目標達成を促す対話モデルを複数含む対話モデル群が記憶されており、
前記対話モデル選択工程は、
前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択し、
前記発話出力工程は、
選択した前記対話モデルに基づくユーザへの発話情報を出力し、
前記ユーザ情報入力工程は、
ユーザ情報を入力し、
前記ユーザ情報は、ユーザからの発話情報を含み、
前記効果量算出工程は、
対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出し、
前記対話モデル評価工程は、
前記効果量と、評価基準とに基づいて、
選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、
前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価し、
前記対話モデル再選択工程は、
選択した対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、
選択した対話モデルを適切と評価した場合、前記選択した対話モデルを継続することを特徴とする。
The dialogue adaptation method of the present invention comprises:
using the memory
including a dialog model selection step, an utterance output step, a user information input step, an effect amount calculation step, a dialog model evaluation step, and a dialog model re-selection step;
The storage unit
A dialogue model group including a plurality of dialogue models that encourage the user to achieve a goal is stored,
The interaction model selection step includes:
selecting an arbitrary dialogue model as an initial dialogue model from the dialogue model group;
The speech output step includes:
outputting utterance information to the user based on the selected interaction model;
The user information input step includes:
Enter your user information,
The user information includes utterance information from the user,
The effect amount calculation step includes:
calculating a user's goal achievement rate based on the user information as an effect amount indicating the effect of the interaction model;
The dialogue model evaluation step includes:
Based on the effect size and evaluation criteria,
evaluating the dialogue model as inappropriate if the effect size of the selected dialogue model does not meet the evaluation criteria;
evaluating the dialogue model as appropriate if the effect size of the selected dialogue model satisfies the evaluation criteria;
The interaction model reselection step includes:
if the selected dialogue model is evaluated as inappropriate, selecting another dialogue model from the dialogue model group;
When the selected dialogue model is evaluated as appropriate, the selected dialogue model is continued.
本発明のプログラムは、前記本発明の対話適応化方法をコンピュータに実行させることを特徴とする。 A program of the present invention causes a computer to execute the dialogue adaptation method of the present invention.
本発明の記録媒体は、前記本発明のプログラムを記録したコンピュータ読み取り可能な記録媒体である。 A recording medium of the present invention is a computer-readable recording medium recording the program of the present invention.
本発明の対話システムは、前記本発明の適応化装置を含むことを特徴とし、具体例として、対話ロボットがある。 A dialog system of the present invention is characterized by including the adaptation device of the present invention, and a specific example thereof is a dialog robot.
本発明によれば、ユーザに対して選択した対話モデルを、ユーザからの情報に基づく効果量によって評価するため、例えば、ユーザの目標達成につながっていない場合には、目標達成につながるより適切な対話モデルを再度選択し、それに基づくユーザへの発話情報をユーザに出力できる。このため、例えば、人手不足の現場においても、ユーザの目標達成につながる最適な対話モデルに基づく対話が可能となる。また、外出が困難なユーザに対しても、同様に、ユーザが目標を達成するための適した対話が可能となる。 According to the present invention, the interaction model selected for the user is evaluated by the amount of effect based on the information from the user. A dialogue model can be selected again, and utterance information to the user based on it can be output to the user. For this reason, for example, even in a field where there is a shortage of manpower, it is possible to have a dialogue based on an optimum dialogue model that leads to the achievement of the user's goal. In addition, even for users who have difficulty going out, it is possible to have conversations suitable for achieving their goals.
本発明の対話適応化装置および対話適応化方法は、ユーザの目標達成に適した対話の適応化を行うものである。本発明は、例えば、様々なサービスにおいて利用ができ、サービスの分野は、何ら制限されない。本発明によれば、例えば、選択した対話モデルを使用して、ユーザとの対話を行った結果、ユーザが目標の達成に関して効果を得ているか否かを評価し、効果が不足していると判定された場合には、ユーザに適した対話モデルを再選択し、ユーザに対する出力を行うため、目標達成のために、ユーザに対してより適応した対話が可能になる。このため、本発明は、ユーザが設定した目標を達成するための装置および方法とすることができる。前記サービスの種類は、何ら制限されず、例えば、フィットネス、ランニング等の運動支援、自主勉強等の学習支援、食事制限、および禁煙継続等の健康管理支援等が例示できる。 The dialogue adaptation apparatus and dialogue adaptation method of the present invention perform dialogue adaptation suitable for achieving a user's goal. The present invention can be used, for example, in various services, and the field of service is not limited at all. According to the present invention, for example, using the selected interaction model, as a result of interacting with the user, it is evaluated whether or not the user is getting an effect in achieving the goal, and if the effect is insufficient, When determined, a dialog model suitable for the user is reselected and an output is provided to the user, so that a more adaptive dialog for the user is possible in order to achieve the goal. Thus, the present invention can be an apparatus and method for achieving user-set goals. The types of the services are not limited at all, and examples thereof include exercise support such as fitness and running, learning support such as self-study, dietary restrictions, and health management support such as continuation of smoking cessation.
本発明の実施形態について説明する。なお、本発明は、以下の実施形態には限定されない。なお、以下の各図において、同一部分には、同一符号を付している。また、各実施形態の説明は、特に言及がない限り、互いの説明を援用できる。さらに、各実施形態の構成は、特に言及がない限り、組合せ可能である。 An embodiment of the present invention will be described. In addition, this invention is not limited to the following embodiment. In addition, in the following figures, the same reference numerals are given to the same parts. Also, the descriptions of the respective embodiments can be referred to each other's description unless otherwise specified. Furthermore, the configuration of each embodiment can be combined unless otherwise specified.
[実施形態1]
図1は、本実施形態の対話適応化装置10の一例の構成を示すブロック図である。図1(A)に示すように、対話適応化装置10は、記憶部11、対話モデル選択部12、発話出力部13、ユーザ情報入力部14、効果量算出部15、対話モデル評価部16、および対話モデル再選択部17を有する。対話適応化装置10は、例えば、対話適応化システムともいう。対話適応化装置10は、例えば、前記各部を含む1つの装置でもよいし、前記各部が、通信回線網を介して接続可能な装置でもよい。
[Embodiment 1]
FIG. 1 is a block diagram showing an example configuration of a
前記通信回線網は、特に制限されず、公知の通信回線網を使用でき、有線でも無線でもよい。前記通信回線網は、例えば、インターネット回線、電話回線、LAN(Local Area Network)、WiFi(Wireless Fidelity)等があげられる。対話適応化装置10は、各部の処理がクラウド上で行われてもよい。
The communication network is not particularly limited, and a known communication network can be used, and may be wired or wireless. The communication network includes, for example, the Internet line, telephone line, LAN (Local Area Network), WiFi (Wireless Fidelity), and the like. The processing of each part of the
対話適応化装置10は、例えば、それ自体が、対話ロボットの形態でもよいし、図1(B)に示すように、対話ロボットとして機能する外部機器40と、通信回線網20を介して接続されてもよい。
The
つぎに、図2に、対話適応化装置10のハードウエア構成のブロック図を例示する。対話適応化装置10は、例えば、CPU(中央処理装置)101、メモリ102、バス103、入力装置104、ディスプレイ105、通信デバイス106、記憶装置107を含み、この他に、例えば、スピーカ109、マイク110、カメラ111、センサ112等を含んでもよい。対話適応化装置10の各部は、それぞれのインターフェース(I/F)により、バス103を介して、相互に接続されている。
Next, FIG. 2 illustrates a block diagram of the hardware configuration of the
CPU101は、対話適応化装置10の全体の制御を担うプロセッサであり、CPUには限定されず、他のプロセッサでもよい。対話適応化装置10において、CPU101により、例えば、本発明のプログラムやその他のプログラムが実行され、また、各種情報の読み込みや書き込みが行われる。
The
対話適応化装置10は、例えば、バス103に接続された通信デバイス106により、通信回線網に接続でき、前記通信回線網を介して、外部機器とも接続できる。前記外部機器は、特に制限されず、例えば、端末、PC(パーソナルコンピュータ)等であり、前記端末は、例えば、タブレット、スマートフォン、携帯電話、ロボット等である。対話適応化装置10と前記外部機器との接続方式は、特に制限されず、例えば、有線による接続でもよいし、無線による接続でもよい。前記有線による接続は、例えば、コードによる接続でもよいし、通信回線網を利用するためのケーブル等による接続でもよい。前記無線による接続は、例えば、通信回線網を利用した接続でもよいし、無線通信を利用した接続でもよい。前記通信回線網は、特に制限されず、例えば、公知の通信回線網を使用でき、前述と同様である。
The
メモリ102は、例えば、メインメモリを含み、前記メインメモリは、主記憶装置ともいう。CPU101が処理を行う際には、例えば、後述する補助記憶装置に記憶されている、本発明のプログラム等の種々の動作プログラム108を、メモリ102が読み込み、CPU101は、メモリ102からデータを受け取って、プログラム108を実行する。前記メインメモリは、例えば、RAM(ランダムアクセスメモリ)である。メモリ102は、例えば、さらに、ROM(読み出し専用メモリ)を含む。
The
記憶装置107は、例えば、前記メインメモリ(主記憶装置)に対して、いわゆる補助記憶装置ともいう。記憶装置107は、例えば、記憶媒体と、前記記憶媒体に読み書きするドライブとを含む。前記記憶媒体は、特に制限されず、例えば、内蔵型でも外付け型でもよく、HD(ハードディスク)、CD-ROM、CD-R、CD-RW、MO、DVD、フラッシュメモリー、メモリーカード等があげられ、前記ドライブは、特に制限されない。記憶装置107は、例えば、記憶媒体とドライブとが一体化されたハードディスクドライブ(HDD)も例示できる。記憶装置107には、例えば、前述のように、プログラム108が格納され、前述のように、CPU101を実行させる際、メモリ102が、記憶装置107から動作プログラム108を読み込む。また、記憶装置107は、例えば、記憶部11を含む。
The
入力装置104は、例えば、スキャナー、タッチパネル、キーボード等である。ディスプレイ105は、例えば、LEDディスプレイ、液晶ディスプレイ等があげられ、前記対話モデルは、例えば、文字としてディスプレイ105に出力されてもよい。
The
前記対話モデルは、例えば、音としてスピーカ109より出力されてもよい。マイク110は、例えば、ユーザの対話を取得し、カメラ111は、例えば、ユーザの顔、行動等を画像として取得する。センサ112は、例えば、温度センサ、加速度センサ、脈拍計・心拍計・血圧計・体温計等のバイタルセンサ等があげられ、ユーザの行動をセンシングデータとして取得する。
The dialogue model may be output from the
記憶部11は、ユーザの目標達成を促す対話モデルを複数含む対話モデル群を記憶する。本実施形態において、「ユーザ」とは、対話適応化装置10との対話を行う利用者であり、「対話モデル」とは、例えば、コーチングにおける特徴を有する対話の形態である。前記対話モデルの種類は、特に制限されず、例えば、褒めて伸ばす対話モデル、論理立てて説明する対話モデル、厳しく指摘する対話モデル、冗談を挟んで返す対話モデル、たとえ話にして返す対話モデル等である。前記対話モデルは、例えば、既存のモデルでもよいし、学習データとして発話の音声データを用い、機械学習することによって作成してもよい。
The
記憶部11は、ユーザの識別情報に紐付けて、ユーザ情報を記憶する。前記ユーザ情報は、ユーザの発話情報であり、具体的には、対話適応化装置10に対するユーザからの発話情報である。前記ユーザの発話情報は、対話適応化装置10自体が対話ロボットである場合は、例えば、対話適応化装置10に対するユーザからの発話情報であり、外部機器40が対話ロボットである場合は、例えば、外部機器40に対するユーザからの発話情報であり、外部機器40から入力される前記発話情報である。前記識別情報は、例えば、ユーザを一意に特定できる情報であり、氏名、ID、前記外部機器のID等があげられる。前記ユーザ情報は、例えば、ユーザ情報入力部14により入力される。前記ユーザ情報は、例えば、前記ユーザ情報が取得された日時が紐づけられることが好ましい。以下の説明においては、前記ユーザからの発話は、対話適応化装置10に対する発話を例示するが、これには制限されず、例えば、前記対話ロボットである外部機器40についても同様である。
The
前記ユーザ情報は、例えば、後述するような、前記ユーザの行動情報を含んでもよい。前記ユーザの行動情報は、例えば、前記ユーザからの発話情報と並行して取得され、入力される。前記行動情報は、例えば、ユーザの表情、体勢、動き等を撮像した画像情報、ユーザの体温、動き等をセンシングしたセンシング情報、ユーザの発話に関する音声のピッチおよびレベル等の音声情報等があげられる。 The user information may include, for example, behavior information of the user as described later. The user's behavior information is, for example, acquired and input in parallel with the utterance information from the user. Examples of the behavior information include image information obtained by imaging the user's expression, posture, movement, etc., sensing information obtained by sensing the user's body temperature, movement, etc., and voice information such as the pitch and level of voice related to the user's utterance. .
前記ユーザ情報は、例えば、さらに、ユーザが回答したアンケート情報を含んでもよい。前記アンケート情報は、例えば、前記対話モデルの初期選択よりも前に取得したアンケート情報でもよいし、選択した前記対話モデルが不適切と評価された際に取得したアンケート情報でもよいし、両方でもよい。前記アンケートの内容は、特に制限されず、例えば、ユーザが好む対話モデル、ユーザの目標、ユーザが感じる成果、前記対話モデルに対するユーザの意見等を抽出する内容が好ましい。前記アンケート情報が、前記対話モデルの初期選択よりも前に取得したアンケート情報の場合、例えば、前記対話モデルの初期選択において、よりユーザに適した対話モデルを選択できる。また、前記アンケート情報が、前記選択した対話モデルを不適切と評価した際に取得したアンケート情報の場合、例えば、前記対話モデルの再選択の際、よりユーザに適した対話モデルを選択できる。 The user information may, for example, further include questionnaire information answered by the user. The questionnaire information may be, for example, questionnaire information obtained before the initial selection of the dialogue model, questionnaire information obtained when the selected dialogue model is evaluated as inappropriate, or both. . The content of the questionnaire is not particularly limited, and preferably includes, for example, a dialogue model preferred by the user, a goal of the user, results perceived by the user, an opinion of the user on the dialogue model, and the like. If the questionnaire information is obtained before the initial selection of the dialogue model, for example, the dialogue model more suitable for the user can be selected in the initial selection of the dialogue model. Further, if the questionnaire information is questionnaire information obtained when the selected dialogue model is evaluated as inappropriate, for example, when the dialogue model is reselected, a dialogue model more suitable for the user can be selected.
対話モデル選択部12は、記憶部11の前記対話モデル群から任意の対話モデルを、初期対話モデルとして選択する。最初に選択される初期対話モデルは、特に制限されず、任意の対話モデルを選択できる。また、予め、前記アンケート情報が入力されている場合には、前記アンケート情報に基づいて、例えば、よりユーザに適した対話モデルを選択できる。後述するように、選択した対話モデルについて、対話モデル評価部16により不適切と評価された場合、後述する対話モデル再選択部17で新たな対話モデルを再選択する。
The dialogue
発話出力部13は、選択した前記対話モデルに基づくユーザへの発話情報を出力する。具体的に、発話出力部13は、選択した前記対話モデルに基づいて、ユーザへの発話情報を生成し、これを出力する。前記発話情報は、ユーザが内容を認識できる形態であればよく、例えば、音声でもよいし、文字でもよい。音声の場合、例えば、スピーカ109から出力され、文字の場合、例えば、ディスプレイ105への表示として出力される。
The
ユーザ情報入力部14は、前記ユーザ情報を入力する。前記ユーザ情報は、前述のように、ユーザからの発話情報を含む。前記発話情報は、前述のように、例えば、前記ユーザが対話適応化装置10に話しかけた発話情報である。対話適応化装置10がマイク110を有する場合、例えば、マイク110でユーザからの発話情報を取得し、ユーザ情報入力部14により入力してもよい。また、外部機器40のマイクでユーザからの発話情報を取得した場合、例えば、通信回線網20を介して、通信デバイス106で受信し、ユーザ情報入力部14により入力してもよい。前記ユーザからの発話情報は、例えば、音声情報でもよいし、音声を言語処理した情報でもよく、この他に、文字情報でもよい。
The user
ユーザ情報入力部14は、前記ユーザからの発話情報の他に、前述のように、前記ユーザの行動情報を入力してもよく、また、前記アンケート情報を、前記ユーザ情報として入力してもよい。
The user
前記行動情報は、例えば、ユーザの行動に関する情報である。前記行動情報は、例えば、ユーザの表情、体勢、動き等を撮像した画像情報、ユーザの体温、動き等をセンシングしたセンシング情報、ユーザの発話に関する音声のピッチおよびレベル等の音声情報等があげられる。前記行動情報は、例えば、前記ユーザからの発話情報と並行して取得されてもよく、具体的には、対話適応化装置10に話しかけている時のユーザの行動に関する情報でもある。対話適応化装置10が、例えば、マイク110、カメラ111、またセンサ112を有する場合、これらで取得した情報を、ユーザ情報入力部14により入力してもよい。また、前記ユーザの行動情報を、外部機器40で取得した場合、例えば、通信回線網20を介して、通信デバイス106で受信し、ユーザ情報入力部14により入力してもよい。
The behavior information is, for example, information about user behavior. Examples of the behavior information include image information obtained by imaging the user's expression, posture, movement, etc., sensing information obtained by sensing the user's body temperature, movement, etc., and voice information such as the pitch and level of voice related to the user's utterance. . The behavior information may be acquired, for example, in parallel with the speech information from the user, and more specifically, it is also information about the user's behavior while speaking to the
前記ユーザ情報である前記ユーザからの発話情報および前記ユーザの行動情報は、選択された対話モデルの効果量の算出に使用するため、前記選択された対話モデルを使用したユーザとの対話期間における前記ユーザ情報を、記憶部11に蓄積することが好ましい。そして、例えば、所定期間が経過した時点において、蓄積された前記ユーザ情報に基づいて、効果量算出部15により効果量を算出することが好ましい。前記所定期間は、特に制限されず、その下限は、例えば、1日、1週間、2週間等の日数または週単位であり、その上限は、例えば、1カ月、3カ月等の月単位である。
Since the utterance information from the user and the behavior information of the user, which are the user information, are used to calculate the amount of effect of the selected dialogue model, during the dialogue period with the user using the selected dialogue model, User information is preferably stored in the
効果量算出部15は、選択した対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出する。効果量算出部15は、例えば、前記効果量として、前記ユーザ情報に基づいて、さらに、前記ユーザのストレス数値を算出してもよい。前記目標の達成とは、例えば、主観的な達成、および客観的な達成があげられる。前記主観的な達成とは、例えば、楽しい、嬉しい、気分が良い等の主観的に感じる達成であり、前記客観的な達成とは、例えば、距離、時間、体重等の目標に含まれる目標値に近づいた、前記目標値をクリアした等の客観的な達成である。前記目標達成率の単位は、任意に設定でき、その数値は、例えば、相対的な数値で表すことができる。前記目標達成率の算出方法は、特に制限されず、例えば、目標の種類、達成の種類(例えば、主観的、客観的)等に応じて、適宜設定できる。前記ストレス数値とは、前記ユーザが意識的または無意識的に感じているストレスの度合いを示す数値である。前記ストレス数値の単位は、任意に設定でき、その数値は、例えば、相対的な数値で表すことができる。また、前記目標達成率および前記ストレス数値は、例えば、数値範囲に応じて、「高、中、低」、「良、可、不可」等で表すこともできる。前記目標達成率が「低」とは、例えば、目標があまり達成できていないこと、つまり「不可」を意味し、前記ストレス数値が「低」とは、例えば、ストレスがあまりないこと、つまり「良」を意味する。
Based on the user information, the effect
対話モデル評価部16は、前記効果量と、評価基準とに基づいて、出力した前記対話モデルの効果を評価する。具体的には、選択した対話モデルの効果量が前記評価基準を満たしていない場合、ユーザには適していない、つまり、前記対話モデルを不適切と評価し、前記選択した対話モデルの効果量が前記評価基準を満たしている場合、ユーザに適している、つまり、前記対話モデルを適切と評価する。前記効果量である前記目標達成率と前記ストレス数値は、例えば、それぞれに評価基準を設けてもよいし、両者をあわせた評価基準を設けてもよい。また、いずれか一方を優先した評価基準でもよく、例えば、前記目標達成率を優先することが好ましい。
A dialogue
対話モデル再選択部17は、選択した前記対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、選択した前記対話モデルを適切と評価した場合、選択した前記対話モデルを継続する。前記他の対話モデルの選択方法は、特に制限されず、例えば、記憶部11の対話モデル群から、未選択の他の対話モデルを任意に選択してもよいし、前記効果量算出部15による効果量に基づいて、他の対話モデルを任意に選択してもよいし、前記効果量に加えて、さらに、前記事前のアンケート情報、前記出力した対話モデルに対するアンケート情報、または両方のアンケート情報に基づいて、他の対話モデルを選択してもよい。
A dialogue
また、選択した前記対話モデルを不適切と評価し、且つ、前記効果量がゼロを超える場合は、例えば、選択した前記対話モデルに類似の他の対話モデルを再選択し、選択した前記対話モデルを不適切と評価し、且つ、前記効果量がゼロ以下の場合、選択した前記対話モデルに非類似の他の対話モデルを再選択してもよい。前記類否の判断方法は、特に制限されず、例えば、対話モデルごとの特徴項目を利用してもよい。すなわち、記憶部11において、前記対話モデル群の複数の対話モデルは、それぞれ、特徴項目が紐付けて記憶されもよく、対話モデル再選択部17は、前記特徴項目に基づいて、類似の他の対話モデルおよび非類似の他の対話モデルを再選択することもできる。
Further, when the selected dialogue model is evaluated as inappropriate and the effect amount exceeds zero, for example, another dialogue model similar to the selected dialogue model is reselected, and the selected dialogue model is is inappropriate and the effect size is less than or equal to zero, another interaction model dissimilar to the selected interaction model may be reselected. The similarity determination method is not particularly limited, and for example, feature items for each interaction model may be used. That is, in the
つぎに、本実施形態の対話適応化方法について、図3のフローチャートを用いて説明する。図3のフローチャートは、前記対話適応化方法における対話モデルの選択に関して説明する一例である。本実施形態の対話適応化方法は、例えば、図1および図2に示す対話適応化装置10を用いて実施できる。なお、本実施形態の対話適応化方法は、対話適応化装置10の使用には限定されない。
Next, the dialogue adaptation method of this embodiment will be described using the flowchart of FIG. The flowchart of FIG. 3 is an example for explaining the selection of a dialogue model in the dialogue adaptation method. The dialog adaptation method of the present embodiment can be implemented using, for example, the
本実施形態の対話適応化方法は、記憶部を使用し、対話モデル選択工程、発話出力工程、ユーザ情報入力工程、効果量算出工程、対話モデル評価工程、および対話モデル再選択工程を含む。前記記憶部は、例えば、本実施形態の対話適応化装置における記憶部が利用できる。 The dialogue adaptation method of this embodiment uses a storage unit and includes a dialogue model selection step, an utterance output step, a user information input step, an effect size calculation step, a dialogue model evaluation step, and a dialogue model reselection step. For the storage unit, for example, the storage unit in the dialogue adaptation device of this embodiment can be used.
前記記憶部は、前述のように、前記対話モデル群が記憶されており、例えば、さらに、ユーザごとに、事前アンケート情報が記憶される(S100)。 The storage unit stores the dialogue model group as described above, and further stores preliminary questionnaire information for each user, for example (S100).
前記対話モデル選択工程は、前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択する(S101)。前記初期対話モデルは、例えば、前記事前アンケートによるユーザの傾向に基づいて選択できる。この工程は、例えば、対話適応化装置10の対話モデル選択部12により実行できる。
The dialogue model selection step selects an arbitrary dialogue model as an initial dialogue model from the dialogue model group (S101). The initial dialogue model can be selected, for example, based on the user's tendency according to the preliminary questionnaire. This step can be executed, for example, by the dialogue
前記発話出力工程は、選択した前記対話モデルに基づくユーザへの発話情報Dを出力する。具体的には、前記選択した対話モデルに基づいて、ユーザへの発話情報Dを生成して、ユーザに対して出力する(S102)。この工程は、例えば、対話適応化装置10の発話出力部13により実行できる。
The speech output step outputs speech information D to the user based on the selected dialogue model. Specifically, based on the selected dialogue model, utterance information D for the user is generated and output to the user (S102). This step can be executed by the
前記ユーザ情報入力工程は、ユーザ情報として、ユーザからの発話情報Uを取得し、入力する(S103)。この工程は、例えば、対話適応化装置10のユーザ情報入力部14により実行できる。
The user information input step acquires and inputs utterance information U from the user as user information (S103). This step can be performed, for example, by the user
前記ユーザへの発話情報Dの出力(S102)と前記ユーザからの発話情報Uの入力(S103)とが繰り返されることで、ユーザと対話適応化装置10との間における対話が行われる。
The output of the speech information D to the user (S102) and the input of the speech information U from the user (S103) are repeated, so that a dialogue between the user and the
また、前記発話情報Uの入力(S103)と並行して、ユーザの行動情報を取得し、入力する(S104)。この工程は、例えば、対話適応化装置10のユーザ情報入力部14により実行できる。
In parallel with the input of the utterance information U (S103), the user's action information is acquired and input (S104). This step can be performed, for example, by the user
前記効果量算出工程は、対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出する(S105)。前記効果量算出工程は、例えば、前記効果量として、前記ユーザ情報に基づいて、さらに前記ユーザのストレス数値を算出してもよい。この工程は、例えば、対話適応化装置10の効果量算出部15により実行できる。
In the effect amount calculation step, the user's goal achievement rate is calculated based on the user information as an effect amount indicating the effect of the dialogue model (S105). In the effect amount calculation step, for example, the user's stress numerical value may be further calculated as the effect amount based on the user information. This step can be executed by the effect
前記対話モデル評価工程は、前記効果量と、評価基準とに基づいて、出力した前記対話モデルの効果を評価する。具体的には、前記効果量が前記評価基準を満たすか否か(S106)により、選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価する。この工程は、例えば、対話適応化装置10の対話モデル評価部16により実行できる。
The dialogue model evaluation step evaluates the effect of the output dialogue model based on the effect amount and evaluation criteria. Specifically, depending on whether or not the effect amount satisfies the evaluation criteria (S106), if the effect amount of the selected dialogue model does not satisfy the evaluation criteria, the dialogue model is evaluated as inappropriate, and the If the effect size of the selected interaction model satisfies the evaluation criteria, the interaction model is evaluated as appropriate. This step can be performed, for example, by the dialogue
選択した前記対話モデルが前記評価基準を満たしておらず(NO)、不適切と評価された場合、前記対話モデル再選択工程は、前記対話モデル群から他の対話モデルを再選択し(S107)、選択した前記対話モデルが前記評価基準を満たし(YES)、適切と評価された場合、前記対話モデル再選択工程は、選択した前記対話モデルを継続して利用する(S108)。前記対話モデル再選択工程は、例えば、前記効果量がゼロを超える場合は、選択した前記対話モデルに類似の他の対話モデルを再選択し、前記効果量がゼロ以下の場合、選択した前記対話モデルに非類似の他の対話モデルを再選択してもよい。前記類似の他の対話モデルおよび前記非類似の他の対話モデルは、例えば、前記対話モデルの前記特徴項目に基づいて再選択してもよい。この工程は、例えば、対話適応化装置10の対話モデル再選択部17により実行できる。
If the selected dialogue model does not satisfy the evaluation criteria (NO) and is evaluated as inappropriate, the dialogue model reselection step reselects another dialogue model from the dialogue model group (S107). , if the selected dialogue model satisfies the evaluation criteria (YES) and is evaluated as appropriate, the dialogue model reselection step continues to use the selected dialogue model (S108). The dialogue model reselecting step, for example, reselects another dialogue model similar to the selected dialogue model if the effect size exceeds zero, and reselects the selected dialogue model if the effect size is less than or equal to zero. Other interaction models dissimilar to the model may be reselected. The similar other interaction model and the dissimilar other interaction model may be reselected, for example, based on the features of the interaction model. This step can be executed, for example, by the dialogue
選択した対話モデルが不適切と評価された場合は、例えば、さらにユーザへのアンケートを行い、そのアンケート情報を、さらに、記憶部11に記憶し、他のモデルの再選択(S107)に利用することが好ましい。この際、前記アンケートは、例えば、不適切と評価された対話モデルに対する不満点等を抽出する内容であることが好ましい。
If the selected dialogue model is evaluated as inappropriate, for example, a questionnaire is further conducted for the user, and the questionnaire information is further stored in the
対話適応化装置10とユーザとの対話を継続し、前述のように、選択した対話モデルの効果を評価し、より適した対話モデルの再選択を繰り返すことによって、ユーザの満足感を満たし、且つ、ユーザの目標の達成も効果的に支援する、ユーザとの対話の継続が可能になる。
Satisfying the user by continuing the interaction between the
ここで、本実施形態の対話適応方法における、前記S100から前記S108までの工程について、図4のフローチャートを一例として、さらに詳細に説明する。この例では、前記ユーザへの発話情報Dの出力(S102)と前記ユーザからの発話情報Uの入力(S103)とを繰り返し、効果量を算出する(S105)までを説明する。 Here, the steps from S100 to S108 in the dialog adaptation method of the present embodiment will be described in more detail, using the flowchart of FIG. 4 as an example. In this example, the output of speech information D to the user (S102) and the input of speech information U from the user (S103) are repeated until the effect amount is calculated (S105).
ユーザからの発話情報Uの入力(S103)とユーザへの発話情報Dの出力(S102)とを繰り返す、対話において、対話が終了したか否かを判定する(S200)。ここでいう対話の終了とは、ユーザと対話適応化装置10との間における連続する対話の終了を意味する。そして、対話が終了していないと判定した場合(NO)は、対話は続いていると推測されることから、さらに、ユーザへの発話情報Dの出力(S102)またはユーザからの発話情報Uの入力(S103)を継続する。一方、対話が終了したと判定した場合(YES)、選択した対話モデルの利用開始から所定期間を経過したか否かを判定する(S201)。
It is determined whether or not the dialogue has ended in the dialogue in which the input of the utterance information U from the user (S103) and the output of the utterance information D to the user (S102) are repeated (S200). The end of the dialogue here means the end of continuous dialogue between the user and the
所定期間を経過していない場合(NO)は、例えば、選択した対話モデルの効果確認に十分な時間が経っていないとして、対話において、前記対話モデルの使用を継続する。一方、所定期間を経過した場合(YES)は、例えば、選択した対話モデルの効果確認に十分な時間がたっているとして、所定期間内に入力されたユーザからの発話情報Uと行動情報とを累積し(S202)、効果量を算出する(S105)。効果量の算出以後は、例えば、前述の通りである。 If the predetermined period has not passed (NO), for example, it is determined that sufficient time has not passed to confirm the effect of the selected dialogue model, and the use of the dialogue model is continued in the dialogue. On the other hand, if the predetermined period has passed (YES), for example, it is assumed that sufficient time has passed to confirm the effect of the selected dialogue model. (S202), and the effect amount is calculated (S105). After calculating the effect amount, for example, it is as described above.
[実施形態2]
つぎに、本発明の対話適応化装置10を用いた対話適応化方法について、フィットネスでの利用を例にあげて、具体的に説明する。本実施形態においては、受付に対話ロボットとして対話適応化装置10が設置され、ユーザは、トレーニング前後に対話適応化装置10との対話を行う環境とする。
[Embodiment 2]
Next, the dialogue adaptation method using the
まず、ユーザには、事前にアンケートを行い、そのアンケート情報を対話適応化装置10の記憶部11に記憶させておく。そして、前記事前アンケート情報が、ユーザが「褒めて伸びるタイプ」であることを示す場合は、記憶部11の対話モデル群から、「褒めて伸ばす対話モデル」を選択し、これを初期対話モデルとする。
First, a user is given a questionnaire in advance, and the questionnaire information is stored in the
つぎに、前記初期対話モデルに基づくユーザへの発話情報Dを生成して、ユーザに出力し、ユーザとの対話を行い、ユーザからの発話情報Uを入力する。最初の対話においては、前記発話情報Uから、ユーザが設定する目標を抽出し、その目標を達成するためのレコメンデーションを設定し、これを「褒めて伸ばす対話モデル」に挿入したユーザへの発話情報Dを、ユーザに対して出力する。前記目標の抽出は、例えば、前記ユーザからの発話情報Uの言語処理によって行うことができる。また、前記レコメンデーションは、例えば、記憶部11に、予め、様々な目標に対するレコメンデーション候補を記憶させておき、抽出した目標に応じて、記憶部11から呼び出すことができる。また、前記レコメンデーションの挿入によるユーザへの発話情報Dの生成は、例えば、既存の文章生成のプログラムを利用できる。
Next, it generates utterance information D for the user based on the initial dialogue model, outputs it to the user, conducts dialogue with the user, and inputs utterance information U from the user. In the first dialogue, a goal set by the user is extracted from the utterance information U, a recommendation for achieving the goal is set, and the speech is given to the user who inserts this into the "praise and stretch dialogue model". Information D is output to the user. The extraction of the target can be performed, for example, by language processing of the utterance information U from the user. In addition, for example, recommendation candidates for various goals can be stored in the
具体例として、ユーザからの発話情報Uが「目標の体重は60kgで、毎日5km走りたい」である場合、前記発話情報Uから「体重60kg、毎日5km」という目標が抽出できる。そして、これを達成するためのレコメンデーションとして、「朝2km、夜3kmのランニング」を設定し、これを「褒めて伸ばす対話モデル」に挿入して、「偉いね!頑張って!朝2km、夜3kmを目標にしてみたらどう?」とのユーザへの発話情報Dを生成し、ユーザに出力する。 As a specific example, when the utterance information U from the user is "My target weight is 60 kg and I want to run 5 km every day", the goal "Weight is 60 kg and I want to run 5 km every day" can be extracted from the utterance information U. Then, as a recommendation to achieve this, "2km in the morning and 3km at night" is set, and this is inserted into the "praise and stretch dialogue model", and "great! Good luck! 2km in the morning and 3km at night". Speech information D for the user saying "Why don't you try 3km as a goal?" is generated and output to the user.
ユーザのトレーニング前後に、ユーザとの対話を行い、トレーニングの内容および成果を含むユーザからの発話情報Uを取得する。ユーザへの発話情報Dは、例えば、ユーザからの発話情報Uから前記内容および成果を抽出し、前記抽出した情報に対するレコメンデーションを挿入した発話情報Dを、前記初期対話モデルに基づき生成し、ユーザに対して出力する。 Before and after the user's training, dialogue with the user is performed to acquire utterance information U from the user including the content and results of the training. The utterance information D to the user is generated by, for example, extracting the contents and results from the utterance information U from the user, inserting recommendations for the extracted information, and generating the utterance information D based on the initial dialogue model. Output for
ここで、対話の具体例を以下に示す。
ユーザ:「3kmは走った。よく頑張っているからこれでいいや。」
装置10:「この1カ月、いい調子。ここ一週間、走る距離が少なくなっているね。」
ユーザ:「このぐらいでいいよ。最近体重も落ちないし、続けてもね。」
Here, a specific example of dialogue is shown below.
User: “I ran 3km .
Apparatus 10: "You've been doing great this past month. You've been running less distance this past week ."
User: "I'm fine with this. I haven't lost any weight recently, so I'll continue. "
このような対話に関して、ユーザからの発話情報Uに基づいて、前記初期対話モデル「褒めて伸ばす対話モデル」の効果量として、ユーザの目標達成率とストレス数値とを算出する。前記効果量の算出は、例えば、所定期間経過後(例えば、一週間経過後)に行う。 Regarding such a dialogue, based on the utterance information U from the user, the target achievement rate and stress value of the user are calculated as the effect amount of the initial dialogue model "praise and stretch dialogue model". The effect amount is calculated, for example, after a predetermined period of time has passed (for example, after one week has passed).
そして、前記初期対話モデルに基づく対話を継続し、任意の継続期間を経過した時点において、前記効果量が評価基準を満たしているか否かを評価して、前記初期対話モデルを継続して利用するか、他の対話モデルを新たに再選択するかを判定する。例えば、前記効果量について、前記継続期間中、前記目標達成率が「低」であり、ストレス数値が「中」であるとする。前記目標達成率を優先的な評価対象とし、前記目標達成率の評価基準が「中以上(適切と評価)」であり、および前記ストレス数値の評価基準が「中以下(適切と評価)である場合、ストレス数値に関しては、適切であるとして前記初期対話モデルを新たに再選択する必要はないが、優先的な評価対象である前記目標達成率は評価基準を満たしておらず、さらに向上させる必要があることから、前記初期対話モデルは、新たな対話モデルの再選択が必要であると判定される。また、前記目標達成率が「中」であり、ストレス数値が「高」の場合も同様であり、前記目標達成率の評価基準が「中以上(適切と評価)」であり、および前記ストレス数値の評価基準が「中以下(適切と評価)である場合、目標達成率に関しては、適切であるとして前記初期対話モデルを新たに再選択する必要はないが、評価対象である前記ストレス数値は評価基準を満たしておらず、さらに向上させる必要があることから、前記初期対話モデルは、新たな対話モデルの再選択が必要であると判定される。 Then, the dialogue based on the initial dialogue model is continued, and when an arbitrary duration has passed, it is evaluated whether or not the effect amount satisfies the evaluation criteria, and the initial dialogue model is continuously used. or re-select another interaction model. For example, regarding the effect amount, it is assumed that the target achievement rate is "low" and the stress value is "medium" during the duration period. The target achievement rate is a priority evaluation target, the evaluation standard for the target achievement rate is "medium or higher (evaluated as appropriate)", and the evaluation standard for the stress numerical value is "medium or lower (evaluated as appropriate)" , there is no need to newly reselect the initial dialogue model as it is appropriate for the stress numerical value, but the target achievement rate, which is a priority evaluation target, does not meet the evaluation criteria and needs to be further improved. Therefore, it is determined that the initial dialogue model needs to be reselected for a new dialogue model.In addition, when the target achievement rate is "medium" and the stress value is "high", the same is true and when the evaluation criteria for the target achievement rate is "middle or higher (evaluated as appropriate)" and the evaluation criteria for the stress numerical value is "middle or lower (evaluated as appropriate)", the target achievement rate is appropriate However, since the stress numerical value to be evaluated does not satisfy the evaluation criteria and needs to be further improved, the initial dialogue model is It is determined that re-selection of the appropriate interaction model is necessary.
再選択が必要となった場合には、記憶部11から、前記初期対話モデルとは異なる他の対話モデルが選択され、新たに選択された対話モデルに基づく対話が開始される。一方、再選択が不要である場合には、前記初期対話モデルがそのまま再選択され、前記初期対話モデルに基づく対話が継続される。なお、新たに選択された対話モデルについても、入力されるユーザ情報に基づいて、同様の評価が行われ、新たな対話モデルの再選択か否かが、適宜判定される。
When reselection is required, another dialogue model different from the initial dialogue model is selected from the
前記対話の具体例の場合、前記初期対応モデル「褒めて伸ばす対話モデル」によっては、ユーザは、目標が達成できておらず、また、目標達成のモチベーションの維持もできていないことから、例えば、新たな対話モデルとして、「目標が達成できない場合には厳しく接する対話モデル」を選択することもできる。 In the case of the specific example of the dialogue, depending on the initial response model "praise and extend dialogue model", the user is not able to achieve the goal and is not able to maintain the motivation to achieve the goal. As a new dialogue model, it is also possible to select "a dialogue model that treats severely when the goal cannot be achieved".
前記評価基準は、例えば、前記目標達成率および前記ストレス数値のそれぞれに設定することができる。また、前記評価基準は、さらに、前記目標達成率と前記ストレス数値のいずれか一方の結果を、評価において優先的に使用してもよく、例えば、前記目標達成率を優先的に使用することが好ましい。例えば、前記ストレス数値は、その評価基準を満たすが、前記目標達成率は、その評価基準を満たさない場合、前記目標達成率が評価基準を満たさないことをもって、前記対話モデル群から新たな対話モデルを選択すると判定してもよい。 For example, the evaluation criteria can be set for each of the target achievement rate and the stress numerical value. Further, the evaluation criteria may preferentially use the result of either the target achievement rate or the stress numerical value in the evaluation. For example, the goal achievement rate may be preferentially used. preferable. For example, if the stress numerical value satisfies the evaluation criteria but the target achievement rate does not satisfy the evaluation criteria, a new dialogue model is selected from the dialogue model group based on the fact that the target achievement rate does not satisfy the evaluation criteria. may be determined by selecting
[実施形態3]
本実施形態では、前記目標達成率、前記ストレス数値、前記効果量の算出方法、対話モデルの評価の計算方法、対話モデルの再選択の計算方法等について、例示する。なお、これらの算出方法は、例示であって、本発明は、これらには制限されない。
[Embodiment 3]
In the present embodiment, the target achievement rate, the stress numerical value, the method of calculating the effect amount, the method of calculating the evaluation of the dialogue model, the method of calculating the reselection of the dialogue model, and the like will be exemplified. Note that these calculation methods are examples, and the present invention is not limited to these.
(1)目標達成率
前記目標達成率の算出方法は、例えば、下記式があげられる。
(2)ストレス数値
前記ストレス数値の算出方法は、例えば、下記式があげられる。前記ストレス数値の算出方法は、これには制限されず、例えば、画像情報から、ユーザの脈拍を算出し、ストレス数値を算出したり、音声情報から感情を推定して、ストレス数値を算出する方法でもよい。
(3)効果量
前記効果量の算出方法は、例えば、下記式があげられる。
(4)対話モデルの評価
前記対話モデルが不適切か適切かの評価、すなわち、継続するか、再選択するかの評価は、例えば、下記式により評価できる。
(5)対話モデルの再選択
対話モデルの再選択は、例えば、前記効果量、前記アンケート、および対話モデル群の各情報を用いて、下記式により行うことができる。
関数frは、効果量efstまたはefgが0≦の場合、アンケートqustcのユーザの要望に基づいて、modelcを再選択する。この際、現行の対話モデルの良さを失わせないために、例えば、現行の対話モデルの効果量が0以上の項目が類似した新たな対話モデルが再選択される。具体例としてefst=-10、∞efg=10の場合、アンケートqustc(st1、st2、・・・stn)の項目と、対話モデルの項目(st1、st2、・・・stn)の相違度が高く、且つ、アンケートqustc(g1、g2、・・・gn)の項目と、対話モデルの項目(g1、g2、・・・gn)の類似度が高くなる対話モデルを選択することが好ましい。「stn」は、例えば、アンケートにおける質問項目の点数でもよいし、因子負荷量でもよい。 The function f r reselects the model c based on the user's request of the questionnaire quest c when the effect size ef st or ef g is 0≦0. At this time, in order not to lose the goodness of the current dialogue model, for example, a new dialogue model is reselected in which items with effect amounts of 0 or more are similar to the current dialogue model. As a specific example, when ef st =−10 and ∞ ef g =10, the questionnaire quest c (st 1 , st 2 , . . . st n ) items and the dialogue model items (st 1 , st 2 , . st n ) is high, and the items of the questionnaire quest c (g 1 , g 2 , . . . g n ) and the items of the dialogue model (g 1 , g 2 , . It is preferable to select an interaction model with a high degree of similarity. “st n ” may be, for example, the score of a question item in a questionnaire or the factor loading amount.
[実施形態4]
本実施形態のプログラムは、前記本発明の対話適応化方法を、コンピュータ上で実行可能なプログラムである。または、本実施形態のプログラムは、例えば、コンピュータ読み取り可能な記録媒体に記録されてもよい。前記記録媒体としては、特に限定されず、例えば、前述のような記憶媒体等があげられる。
[Embodiment 4]
A program of the present embodiment is a program capable of executing the dialogue adaptation method of the present invention on a computer. Alternatively, the program of this embodiment may be recorded on a computer-readable recording medium, for example. The recording medium is not particularly limited, and includes, for example, the above-described storage medium.
以上、実施形態を参照して本願発明を説明したが、本願発明は、上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。 Although the present invention has been described with reference to the embodiments, the present invention is not limited to the above embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
<付記>
上記の実施形態および実施例の一部または全部は、以下の付記のように記載されうるが、以下には限られない。
(付記1)
記憶部、対話モデル選択部、発話出力部、ユーザ情報入力部、効果量算出部、対話モデル評価部、および対話モデル再選択部を含み、
前記記憶部は、
ユーザの目標達成を促す対話モデルを複数含む対話モデル群を記憶し、
前記対話モデル選択部は、
前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択し、
前記発話出力部は、
選択した前記対話モデルに基づくユーザへの発話情報を出力し、
前記ユーザ情報入力部は、
ユーザ情報を入力し、
前記ユーザ情報は、ユーザからの発話情報を含み、
前記効果量算出部は、
対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出し、
前記対話モデル評価部は、
前記効果量と、評価基準とに基づいて、
選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、
前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価し、
前記対話モデル再選択部は、
選択した対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、
選択した対話モデルを適切と評価した場合、前記選択した対話モデルを継続する、
ことを特徴とする対話適応化装置。
(付記2)
前記効果量算出部は、前記効果量として、前記ユーザ情報に基づいて、前記目標達成率および前記ユーザのストレス数値とを算出する、付記1に記載の対話適応化装置。
(付記3)
前記ユーザ情報が、さらに、ユーザの行動情報を含む、付記1または2に記載の対話適応化装置。
(付記4)
前記ユーザの行動情報が、ユーザの画像情報およびセンシング情報の少なくとも一方である、付記3に記載の対話適応化装置。
(付記5)
前記対話モデル再選択部は、
選択した対話モデルを不適切と評価し、且つ、前記効果量がゼロを超える場合、選択した前記対話モデルに類似の他の対話モデルを再選択し、
選択した対話モデルを不適切と評価し、且つ、前記効果量がゼロ以下の場合、選択した前記対話モデルに非類似の他の対話モデルを再選択する、付記1から4のいずれかに記載の対話適応化装置。
(付記6)
前記対話モデル群の複数の対話モデルは、それぞれ、特徴項目が紐付けて記憶され、
前記対話モデル再選択部は、前記特徴項目に基づいて、類似の他の対話モデルおよび非類似の他の対話モデルを再選択する、付記5に記載の対話適応化装置。
(付記7)
前記記憶部は、
入力された前記ユーザ情報を記憶する、付記1から6のいずれかに記載の対話適応化装置。
(付記8)
前記ユーザ情報入力部は、
さらに、ユーザのアンケート情報を入力し、
前記記憶部は、
入力された前記ユーザ情報を記憶し、
前記対話モデル再選択部は、
前記効果量および前記アンケート情報に基づいて、前記他の対話モデルを再選択する、付記1から7のいずれかに記載の対話適応化装置。
(付記9)
記憶部を使用し、
対話モデル選択工程、発話出力工程、ユーザ情報入力工程、効果量算出工程、対話モデル評価工程、および対話モデル再選択工程を含み、
前記記憶部は、
ユーザの目標達成を促す対話モデルを複数含む対話モデル群が記憶されており、
前記対話モデル選択工程は、
前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択し、
前記発話出力工程は、
選択した前記対話モデルに基づくユーザへの発話情報を出力し、
前記ユーザ情報入力工程は、
ユーザ情報を入力し、
前記ユーザ情報は、ユーザからの発話情報を含み、
前記効果量算出工程は、
対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出し、
前記対話モデル評価工程は、
前記効果量と、評価基準とに基づいて、
選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、
前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価し、
前記対話モデル再選択工程は、
選択した対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、
選択した対話モデルを適切と評価した場合、前記選択した対話モデルを継続する、
ことを特徴とする対話適応化方法。
(付記10)
前記効果量算出工程は、前記効果量として、前記ユーザ情報に基づいて、前記目標達成率および前記ユーザのストレス数値とを算出する、付記9に記載の対話適応化方法。
(付記11)
前記ユーザ情報が、さらに、ユーザの行動情報を含む、付記9または10に記載の対話適応化方法。
(付記12)
前記ユーザの行動情報が、ユーザの画像情報およびセンシング情報の少なくとも一方である、付記11に記載の対話適応化方法。
(付記13)
前記対話モデル再選択工程は、
選択した対話モデルを不適切と評価し、且つ、前記効果量がゼロを超える場合、選択した前記対話モデルに類似の他の対話モデルを再選択し、
選択した対話モデルを不適切と評価し、且つ、前記効果量がゼロ以下の場合、選択した前記対話モデルに非類似の他の対話モデルを再選択する、付記9から12のいずれかに記載の対話適応化方法。
(付記14)
前記対話モデル群の複数の対話モデルは、それぞれ、特徴項目が紐付けて記憶され、
前記対話モデル選択工程は、前記特徴項目に基づいて、類似の他の対話モデルおよび非類似の他の対話モデルを選択する、付記13に記載の対話適応化方法。
(付記15)
前記記憶部は、
入力された前記ユーザ情報が記憶する、付記9から14のいずれかに記載の対話適応化方法。
(付記16)
前記ユーザ情報入力工程は、
さらに、ユーザのアンケート情報を入力し、
前記記憶部は、
入力された前記ユーザ情報を記憶し、
前記対話モデル再選択工程は、
前記効果量および前記アンケート情報に基づいて、前記他の対話モデルを再選択する、付記9から15のいずれかに記載の対話適応化方法。
(付記17)
付記10から16のいずれかに記載の対話適応化方法をコンピュータに実行させることを特徴とするプログラム。
(付記18)
付記17記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
(付記19)
付記1から8のいずれかに記載の対話適応化装置を含む対話ロボット。
<Appendix>
Some or all of the above-described embodiments and examples can be described as in the following appendices, but are not limited to the following.
(Appendix 1)
A storage unit, a dialogue model selection unit, an utterance output unit, a user information input unit, an effect amount calculation unit, a dialogue model evaluation unit, and a dialogue model re-selection unit,
The storage unit
Storing a dialogue model group including a plurality of dialogue models that encourage a user to achieve a goal;
The dialogue model selection unit
selecting an arbitrary dialogue model as an initial dialogue model from the dialogue model group;
The speech output unit is
outputting utterance information to the user based on the selected interaction model;
The user information input unit
Enter your user information,
The user information includes utterance information from the user,
The effect amount calculation unit is
calculating a user's goal achievement rate based on the user information as an effect amount indicating the effect of the interaction model;
The dialogue model evaluation unit
Based on the effect size and evaluation criteria,
evaluating the dialogue model as inappropriate if the effect size of the selected dialogue model does not meet the evaluation criteria;
evaluating the dialogue model as appropriate if the effect size of the selected dialogue model satisfies the evaluation criteria;
The dialogue model reselection unit
if the selected dialogue model is evaluated as inappropriate, selecting another dialogue model from the dialogue model group;
If the selected interaction model is evaluated as appropriate, continue with the selected interaction model;
A dialog adaptation device characterized by:
(Appendix 2)
2. The dialogue adaptation apparatus according to Supplementary Note 1, wherein the effect amount calculation unit calculates, as the effect amount, the target achievement rate and the user's stress numerical value based on the user information.
(Appendix 3)
3. A dialogue adaptation apparatus according to any one of the appendices 1 or 2, wherein the user information further comprises user behavior information.
(Appendix 4)
3. The dialogue adaptation apparatus according to appendix 3, wherein the user's behavior information is at least one of user's image information and sensing information.
(Appendix 5)
The dialogue model reselection unit
If the selected interaction model is evaluated as inappropriate and the effect size is greater than zero, reselecting another interaction model similar to the selected interaction model;
5. The method of claim 1, wherein if the selected interaction model is evaluated as inappropriate and the effect size is less than or equal to zero, reselecting another interaction model that is dissimilar to the selected interaction model. dialogue adaptor.
(Appendix 6)
each of the plurality of dialogue models in the dialogue model group is associated with a characteristic item and stored;
6. The dialogue adaptation apparatus according to appendix 5, wherein the dialogue model reselection unit reselects another similar dialogue model and another dissimilar dialogue model based on the feature item.
(Appendix 7)
The storage unit
7. A dialogue adaptation device according to any one of appendices 1 to 6, wherein said input user information is stored.
(Appendix 8)
The user information input unit
In addition, enter the user's questionnaire information,
The storage unit
storing the input user information;
The dialogue model reselection unit
8. The dialogue adaptation device according to any one of appendices 1 to 7, wherein the other dialogue model is reselected based on the effect amount and the questionnaire information.
(Appendix 9)
using the memory
including a dialog model selection step, an utterance output step, a user information input step, an effect amount calculation step, a dialog model evaluation step, and a dialog model re-selection step;
The storage unit
A dialogue model group including a plurality of dialogue models that encourage the user to achieve a goal is stored,
The interaction model selection step includes:
selecting an arbitrary dialogue model as an initial dialogue model from the dialogue model group;
The speech output step includes:
outputting utterance information to the user based on the selected interaction model;
The user information input step includes:
Enter your user information,
The user information includes utterance information from the user,
The effect amount calculation step includes:
calculating a user's goal achievement rate based on the user information as an effect amount indicating the effect of the interaction model;
The dialogue model evaluation step includes:
Based on the effect size and evaluation criteria,
evaluating the dialogue model as inappropriate if the effect size of the selected dialogue model does not meet the evaluation criteria;
evaluating the dialogue model as appropriate if the effect size of the selected dialogue model satisfies the evaluation criteria;
The interaction model reselection step includes:
if the selected dialogue model is evaluated as inappropriate, selecting another dialogue model from the dialogue model group;
If the selected interaction model is evaluated as appropriate, continue with the selected interaction model;
A dialogue adaptation method characterized by:
(Appendix 10)
10. The dialogue adaptation method according to appendix 9, wherein the effect amount calculating step calculates, as the effect amount, the target achievement rate and the user's stress numerical value based on the user information.
(Appendix 11)
11. A dialog adaptation method according to
(Appendix 12)
12. The dialogue adaptation method according to
(Appendix 13)
The interaction model reselection step includes:
If the selected interaction model is evaluated as inappropriate and the effect size is greater than zero, reselecting another interaction model similar to the selected interaction model;
13. Any of clauses 9 to 12, wherein if the selected interaction model is evaluated as inappropriate and the effect size is less than or equal to zero, then reselecting another interaction model that is dissimilar to the selected interaction model. Dialogue adaptation method.
(Appendix 14)
each of the plurality of dialogue models in the dialogue model group is associated with a characteristic item and stored;
14. The dialogue adaptation method according to
(Appendix 15)
The storage unit
15. A dialogue adaptation method according to any one of appendices 9 to 14, wherein said input user information is stored.
(Appendix 16)
The user information input step includes:
In addition, enter the user's questionnaire information,
The storage unit
storing the input user information;
The interaction model reselection step includes:
16. The dialogue adaptation method according to any one of appendices 9 to 15, wherein the other dialogue model is reselected based on the effect size and the questionnaire information.
(Appendix 17)
17. A program for causing a computer to execute the dialogue adaptation method according to any one of
(Appendix 18)
A computer-readable recording medium recording the program according to
(Appendix 19)
9. An interactive robot comprising a dialogue adaptation device according to any one of appendices 1 to 8.
本発明によれば、ユーザに対して選択した対話モデルを、ユーザからの情報に基づく効果量によって評価するため、例えば、ユーザの目標達成につながっていない場合には、目標達成につながるより適切な対話モデルを再度選択し、それに基づくユーザへの発話情報をユーザに出力できる。このため、例えば、人手不足の現場においても、ユーザの目標達成につながる最適な対話モデルに基づく対話が可能となる。また、外出が困難なユーザに対しても、同様に、ユーザが目標を達成するための適した対話が可能となる。 According to the present invention, the interaction model selected for the user is evaluated by the amount of effect based on the information from the user. A dialogue model can be selected again, and utterance information to the user based on it can be output to the user. For this reason, for example, even in a field where there is a shortage of manpower, it is possible to have a dialogue based on an optimum dialogue model that leads to the achievement of the user's goal. In addition, even for users who have difficulty going out, it is possible to have conversations suitable for achieving their goals.
10 対話適応化装置
11 記憶部
12 対話モデル選択部
13 発話出力部
14 ユーザ情報入力部
15 効果量算出部
16 対話モデル評価部
17 対話モデル再選択部
10
Claims (10)
前記記憶部は、
ユーザの目標達成を促す対話モデルを複数含む対話モデル群を記憶し、
前記対話モデル選択部は、
前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択し、
前記発話出力部は、
選択した前記対話モデルに基づくユーザへの発話情報を出力し、
前記ユーザ情報入力部は、
ユーザ情報を入力し、
前記ユーザ情報は、ユーザからの発話情報を含み、
前記効果量算出部は、
対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出し、
前記対話モデル評価部は、
前記効果量と、評価基準とに基づいて、
選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、
前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価し、
前記対話モデル再選択部は、
選択した対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、
選択した対話モデルを適切と評価した場合、前記選択した対話モデルを継続する、
ことを特徴とする対話適応化装置。 A storage unit, a dialogue model selection unit, an utterance output unit, a user information input unit, an effect amount calculation unit, a dialogue model evaluation unit, and a dialogue model re-selection unit,
The storage unit
Storing a dialogue model group including a plurality of dialogue models that encourage a user to achieve a goal;
The dialogue model selection unit
selecting an arbitrary dialogue model as an initial dialogue model from the dialogue model group;
The speech output unit is
outputting utterance information to the user based on the selected interaction model;
The user information input unit
Enter your user information,
The user information includes utterance information from the user,
The effect amount calculation unit is
calculating a user's goal achievement rate based on the user information as an effect amount indicating the effect of the interaction model;
The dialogue model evaluation unit
Based on the effect size and evaluation criteria,
evaluating the dialogue model as inappropriate if the effect size of the selected dialogue model does not meet the evaluation criteria;
evaluating the dialogue model as appropriate if the effect size of the selected dialogue model satisfies the evaluation criteria;
The dialogue model reselection unit
if the selected dialogue model is evaluated as inappropriate, selecting another dialogue model from the dialogue model group;
If the selected interaction model is evaluated as appropriate, continue with the selected interaction model;
A dialog adaptation device characterized by:
選択した対話モデルを不適切と評価し、且つ、前記効果量がゼロを超える場合、選択した前記対話モデルに類似の他の対話モデルを再選択し、
選択した対話モデルを不適切と評価し、且つ、前記効果量がゼロ以下の場合、選択した前記対話モデルに非類似の他の対話モデルを再選択する、請求項1から4のいずれか一項に記載の対話適応化装置。 The dialogue model reselection unit
If the selected interaction model is evaluated as inappropriate and the effect size is greater than zero, reselecting another interaction model similar to the selected interaction model;
5. If the selected interaction model is evaluated as inappropriate and the effect size is less than or equal to zero, reselecting another interaction model that is dissimilar to the selected interaction model. A dialog adaptation apparatus as described in .
前記対話モデル再選択部は、前記特徴項目に基づいて、類似の他の対話モデルおよび非類似の他の対話モデルを再選択する、請求項5に記載の対話適応化装置。 each of the plurality of dialogue models in the dialogue model group is associated with a characteristic item and stored;
6. The dialogue adaptation apparatus according to claim 5, wherein said dialogue model reselection unit reselects another similar dialogue model and another dissimilar dialogue model based on said feature item.
さらに、ユーザのアンケート情報を入力し、
前記記憶部は、
入力された前記ユーザ情報を記憶し、
前記対話モデル再選択部は、
前記効果量および前記アンケート情報に基づいて、前記他の対話モデルを再選択する、請求項1から6のいずれか一項に記載の対話適応化装置。 The user information input unit
In addition, enter the user's questionnaire information,
The storage unit
storing the input user information;
The dialogue model reselection unit
7. The dialogue adaptation device according to any one of claims 1 to 6, wherein said other dialogue model is reselected based on said effect amount and said questionnaire information.
対話モデル選択工程、発話出力工程、ユーザ情報入力工程、効果量算出工程、対話モデル評価工程、および対話モデル再選択工程を含み、
前記記憶部は、
ユーザの目標達成を促す対話モデルを複数含む対話モデル群が記憶されており、
前記対話モデル選択工程は、
前記対話モデル群から、初期対話モデルとして任意の対話モデルを選択し、
前記発話出力工程は、
選択した前記対話モデルに基づくユーザへの発話情報を出力し、
前記ユーザ情報入力工程は、
ユーザ情報を入力し、
前記ユーザ情報は、ユーザからの発話情報を含み、
前記効果量算出工程は、
対話モデルの効果を示す効果量として、前記ユーザ情報に基づいて、ユーザの目標達成率を算出し、
前記対話モデル評価工程は、
前記効果量と、評価基準とに基づいて、
選択した対話モデルの効果量が前記評価基準を満たしていない場合、前記対話モデルを不適切と評価し、
前記選択した対話モデルの効果量が前記評価基準を満たしている場合、前記対話モデルを適切と評価し、
前記対話モデル再選択工程は、
選択した対話モデルを不適切と評価した場合、前記対話モデル群から他の対話モデルを選択し、
選択した対話モデルを適切と評価した場合、前記選択した対話モデルを継続する、
ことを特徴とする対話適応化方法。 using the memory
including a dialog model selection step, an utterance output step, a user information input step, an effect amount calculation step, a dialog model evaluation step, and a dialog model re-selection step;
The storage unit
A dialogue model group including a plurality of dialogue models that encourage the user to achieve a goal is stored,
The interaction model selection step includes:
selecting an arbitrary dialogue model as an initial dialogue model from the dialogue model group;
The speech output step includes:
outputting utterance information to the user based on the selected interaction model;
The user information input step includes:
Enter your user information,
The user information includes utterance information from the user,
The effect amount calculation step includes:
calculating a user's goal achievement rate based on the user information as an effect amount indicating the effect of the interaction model;
The dialogue model evaluation step includes:
Based on the effect size and evaluation criteria,
evaluating the dialogue model as inappropriate if the effect size of the selected dialogue model does not meet the evaluation criteria;
evaluating the dialogue model as appropriate if the effect size of the selected dialogue model satisfies the evaluation criteria;
The interaction model reselection step includes:
if the selected dialogue model is evaluated as inappropriate, selecting another dialogue model from the dialogue model group;
If the selected interaction model is evaluated as appropriate, continue with the selected interaction model;
A dialogue adaptation method characterized by:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019049071A JP7294637B2 (en) | 2019-03-15 | 2019-03-15 | Dialogue adaptation device, dialogue adaptation method, program, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019049071A JP7294637B2 (en) | 2019-03-15 | 2019-03-15 | Dialogue adaptation device, dialogue adaptation method, program, and recording medium |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020149024A JP2020149024A (en) | 2020-09-17 |
JP7294637B2 true JP7294637B2 (en) | 2023-06-20 |
Family
ID=72430103
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019049071A Active JP7294637B2 (en) | 2019-03-15 | 2019-03-15 | Dialogue adaptation device, dialogue adaptation method, program, and recording medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7294637B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023095337A1 (en) * | 2021-11-29 | 2023-06-01 | 日本電信電話株式会社 | Estrangement act prediction device, estrangement act prediction method, and program |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008097082A (en) | 2006-10-06 | 2008-04-24 | Mitsubishi Electric Corp | Voice interaction apparatus |
-
2019
- 2019-03-15 JP JP2019049071A patent/JP7294637B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008097082A (en) | 2006-10-06 | 2008-04-24 | Mitsubishi Electric Corp | Voice interaction apparatus |
Also Published As
Publication number | Publication date |
---|---|
JP2020149024A (en) | 2020-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6755304B2 (en) | Information processing device | |
US10020007B2 (en) | Conversation analysis device, conversation analysis method, and program | |
Möller et al. | Evaluating spoken dialogue systems according to de-facto standards: A case study | |
JP7279098B2 (en) | Dialogue system, dialogue method and dialogue program | |
US8972265B1 (en) | Multiple voices in audio content | |
CN107053186A (en) | Interface, robot, dialogue method and storage medium | |
KR101615848B1 (en) | Method and computer program of recommending dialogue sticker based on similar situation detection | |
EP3543914A1 (en) | Techniques for improving turn-based automated counseling to alter behavior | |
JP7132090B2 (en) | Dialogue system, dialogue device, dialogue method, and program | |
CN109461459A (en) | Speech assessment method, apparatus, computer equipment and storage medium | |
JP6715410B2 (en) | Evaluation method, evaluation device, evaluation program, and evaluation system | |
JP2008262120A (en) | Utterance evaluation device and program | |
JP7294637B2 (en) | Dialogue adaptation device, dialogue adaptation method, program, and recording medium | |
CN109727091B (en) | Product recommendation method, device, medium and server based on conversation robot | |
JP2020160425A (en) | Evaluation system, evaluation method, and computer program | |
JP2004021121A (en) | Voice interaction controller unit | |
JP5782562B2 (en) | Recommendation creation system | |
JP2023036600A (en) | Recommendation device, recommendation method, and program | |
CN107067878B (en) | Method and device for guiding user to perform exercise | |
JP2011170622A (en) | Content providing system, content providing method, and content providing program | |
WO2020196743A1 (en) | Evaluation system and evaluation method | |
US8809664B2 (en) | Support function recommending apparatus, a support function recommending method, a support function recommending system, and a recording medium | |
JP7414633B2 (en) | Search system, search method, and program | |
JP7135607B2 (en) | Information processing device, information processing method and program | |
JP2012014507A (en) | Discussion soundness calculation device, discussion soundness calculation method and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20191025 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220208 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230601 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7294637 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |