JP2022067684A - Interactive communication device, apparatus explanation support system, and apparatus explanation provision method - Google Patents
Interactive communication device, apparatus explanation support system, and apparatus explanation provision method Download PDFInfo
- Publication number
- JP2022067684A JP2022067684A JP2020176396A JP2020176396A JP2022067684A JP 2022067684 A JP2022067684 A JP 2022067684A JP 2020176396 A JP2020176396 A JP 2020176396A JP 2020176396 A JP2020176396 A JP 2020176396A JP 2022067684 A JP2022067684 A JP 2022067684A
- Authority
- JP
- Japan
- Prior art keywords
- data
- question
- explanation
- device user
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 title claims abstract description 42
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 17
- 238000000034 method Methods 0.000 title claims description 15
- 230000004044 response Effects 0.000 claims abstract description 31
- 230000005540 biological transmission Effects 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 9
- 230000008439 repair process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 239000004065 semiconductor Substances 0.000 description 8
- 238000007689 inspection Methods 0.000 description 7
- 238000010295 mobile communication Methods 0.000 description 6
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000010485 coping Effects 0.000 description 2
- 230000008451 emotion Effects 0.000 description 2
- 239000003595 mist Substances 0.000 description 2
- UGFAIRIUMAVXCW-UHFFFAOYSA-N Carbon monoxide Chemical compound [O+]#[C-] UGFAIRIUMAVXCW-UHFFFAOYSA-N 0.000 description 1
- 241001122315 Polites Species 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 229910002091 carbon monoxide Inorganic materials 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
本発明は、対話型コミュニケーション装置、機器説明支援システム及び機器説明提供方法に関する。 The present invention relates to an interactive communication device, a device explanation support system, and a device explanation providing method.
特許文献1には、家電機器等の電子機器に関する取扱説明に関する情報を登録するロボットが、ユーザからの問合せの内容に応じた取扱説明に関する情報を提供する技術が開示されている。
今日、家庭内で使用するロボットが実用化されている。ただし、ロボットだけで、機器を操作するユーザ(以下「機器ユーザ」という)の要望の全てに応えることは難しい。例えば特許文献1に記載のロボットによる情報の提供は、事前に想定された設問との関係で定まっており、想定されていない設問への対応は難しい。この場合には、人間の担当者による支援が必要になる。
また、現場で機器の修理や点検等を実施する作業者による注意事項等の説明をロボットに代行させれば、作業者の負担を軽減できる。しかし、その場合でも、ロボットに機器ユーザからの全ての質問を対応させることは難しく、最終的には人間の担当者による支援が必要になる。
Today, robots used in the home are in practical use. However, it is difficult for a robot alone to meet all the requests of a user who operates a device (hereinafter referred to as a "device user"). For example, the provision of information by a robot described in
In addition, if the robot is used to explain the precautions and the like by the worker who repairs and inspects the equipment at the site, the burden on the worker can be reduced. However, even in that case, it is difficult for the robot to respond to all the questions from the device user, and ultimately, the support of a human person in charge is required.
本発明は、機器に関する説明を行う担当者の労力の軽減を図りつつ、機器ユーザに対する適切な情報の提供を実現することを目的とする。 An object of the present invention is to reduce the labor of a person in charge of explaining a device and to provide appropriate information to a device user.
請求項1に記載の発明は、機器に関する質問データと説明データとを関連付けて記憶する記憶手段と、記憶された複数の前記説明データの中から、機器ユーザからの質問に対応する当該説明データを選択する選択手段と、機器ユーザからの質問に応じて機器の担当者に通知する通知手段と、通知を受けた前記担当者からの回答データを取得する取得手段と、選択した前記説明データ又は取得した前記回答データを音声により機器ユーザに提供する提供手段と、を有する対話型コミュニケーション装置である。
請求項2に記載の発明は、前記記憶手段は、前記回答データを、機器ユーザの前記質問データに対する前記説明データに関連付けて記憶する、請求項1記載の対話型コミュニケーション装置である。
請求項3に記載の発明は、前記通知手段は、機器ユーザからの前記質問の内容、又は、提供した前記説明データ又は前記回答データに対する機器ユーザからの応答の内容が予め定められた条件を満たす場合、前記担当者に通知する、請求項1記載の対話型コミュニケーション装置である。
請求項4に記載の発明は、機器ユーザからの質問に対して自律的に対応する対話型コミュニケーション装置から、機器ユーザの質問データを取得した場合に、当該質問データに対する回答データの入力を機器の担当者から受け付ける受付手段と、受け付けた前記回答データを、前記対話型コミュニケーション装置に送信する送信手段と、を有する機器説明支援システムである。
請求項5に記載の発明は、機器ユーザに対し、機器に関する説明を対話形式で提供する対話型コミュニケーション装置を利用する機器説明提供方法であって、コンピュータは、前記機器に関する説明を音声により機器ユーザに提供するために、会話に関する情報を取得し、前記機器の担当者が行う作業の内容に応じて予め定められている開始条件を取得し、前記会話に関する情報が前記開始条件に合致するか否かを判定し、前記会話に関する情報が前記開始条件に合致する場合、機器ユーザに対する前記機器に関する説明の提供を開始する機器説明提供方法である。
The invention according to
The invention according to claim 2 is the interactive communication device according to
In the invention according to claim 3, the notification means satisfies a predetermined condition that the content of the question from the device user or the content of the response from the device user to the provided explanatory data or the response data is satisfied. In this case, the interactive communication device according to
According to the fourth aspect of the present invention, when the question data of the device user is acquired from the interactive communication device that autonomously responds to the question from the device user, the input of the answer data to the question data is input to the device. It is a device explanation support system having a reception means for receiving from a person in charge and a transmission means for transmitting the received response data to the interactive communication device.
The invention according to claim 5 is a method of providing a device explanation using an interactive communication device that interactively provides a device user with an explanation about the device, and the computer gives the device user an explanation about the device by voice. In order to provide information about the conversation, whether or not the information about the conversation meets the start condition by acquiring the start condition predetermined according to the content of the work performed by the person in charge of the device. This is a device explanation providing method for starting to provide an explanation about the device to the device user when it is determined whether the information is related to the conversation and the start condition is satisfied.
本発明によれば、機器に関する説明を行う担当者の労力の軽減を図りつつ、機器ユーザに対する適切な情報の提供を実現できる。 According to the present invention, it is possible to provide appropriate information to a device user while reducing the labor of a person in charge of explaining the device.
以下、図面を参照して、本発明の実施の形態を説明する。
<実施の形態1>
<システムの構成>
図1は、実施の形態1で想定するコミュニケーションシステム1の構成例を示す図である。
図1に示すコミュニケーションシステム1は、家庭内で使用される端末装置10と、通信路20と、オペレータ31が操作する情報端末30とで構成されている。
図1に示す端末装置10は1台であるが複数台でもよい。また、図1に示す情報端末30も1台であるが複数台でもよい。
ここでのオペレータ31は、担当者の一例である。本実施の形態におけるオペレータ31は、ヘルプデスクやサービスセンタ等で勤務するスタッフであり、遠隔地から機器ユーザ11の質問に対応する。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
<
<System configuration>
FIG. 1 is a diagram showing a configuration example of the
The
Although the number of
The
図1に示す端末装置10は、ロボットの形状を有している。もっとも、端末装置10の形状はロボットに限らず、例えば動物、ぬいぐるみ、乗り物、花の形状でもよい。また、端末装置10は、スマートスピーカ等で採用されている筒型の形状や箱型の形状でもよい。
本実施の形態に端末装置10は、機器ユーザ11との対話又は会話を通じて、機器ユーザ11に提供する機器の操作や対処に関する説明を自律的に特定し、音声により提供する。本実施の形態では、対話と会話を厳密には区別しない。
The
In the present embodiment, the
もっとも、機器ユーザ11からの質問の内容、又は、機器ユーザ11からの応答の内容が予め定められた条件を満たす場合、端末装置10は、機器ユーザ11を支援するサービス(以下「支援サービス」という)を提供するオペレータ31からの回答を情報端末30から取得し、機器ユーザ11に提供する。支援サービスは、有償に限らず、無償でも構わない。
なお、機器ユーザ11からの「質問の内容」が予め定められた条件を満たす場合には、例えば、特定された質問の内容に対応する説明が端末装置10に見つからない場合、質問の内容自体が不明確な場合がある。
However, if the content of the question from the
If the "question content" from the
また、機器ユーザ11からの「応答の内容」が予め定められた条件を満たす場合には、例えば、説明を理解できない等のフィードバックが機器ユーザ11からあった場合、説明された対処を実施しても状況が改善しない等のフィードバックが機器ユーザ11からあった場合がある。
なお、端末装置10は、機器ユーザ11の所有物でもよいが、レンタルされていてもよい。レンタルの場合、有償か無償かは問わない。
本実施の形態における端末装置10は、対話型コミュニケーション装置の一例である。
Further, if the "contents of the response" from the
The
The
本実施の形態の場合、通信路20には、インターネットや移動通信システムを使用する。移動通信システムは、第4世代(すなわち4G)、第5世代(すなわち5G)、第6世代(すなわち6G)のいずれでもよい。
もっとも、移動通信システムを用いた通信が可能であるのは、端末装置10にSIM(=Subscriber Identity Module)カードが装着されているか、電子的に発行されたSIM情報が不図示の半導体メモリに記憶されている場合に限られる。
In the case of this embodiment, the Internet or a mobile communication system is used for the
However, communication using the mobile communication system is possible because the
端末装置10が家庭内のネットワーク環境に接続されている場合、端末装置10は、インターネット経由で機器ユーザ11の音声を認識する不図示のサーバ(以下「音声認識サーバ」ともいう)と通信することも可能である。なお、端末装置10と家庭内のネットワーク環境との接続には、例えばWifi(登録商標)による接続の他、ワイヤレスUSB(=Universal Serial Bus)による接続、デザリングによる接続、有線ケーブルの接続を使用する。
また、端末装置10が家庭内のネットワーク環境に接続されていない場合、端末装置10は、移動通信システム経由で情報端末30や音声認識サーバと通信してもよい。
When the
Further, when the
図1における情報端末30は、質問の対象である機器のメーカや問い合わせに関するサービスを提供する事業者のオペレータ31が操作するコンピュータである。情報端末30は、デスクトップ型のコンピュータでもよいし、ノート型のコンピュータでもよいし、タブレット型のコンピュータでもよいし、スマートフォンやウェアラブル型のコンピュータでもよい。本実施の形態における情報端末30は、機器説明支援システムの一例である。
The
本実施の形態では、機器として、家庭内に設置されているガス機器を想定する。ガス機器には、例えばガスコンロ、ガスヒータ、ガス乾燥機、ガス給湯器、湯沸かし器、家庭用燃料電池、ガス温水床暖房、浴室暖房乾燥機、食器洗い乾燥機、ガスエアコンがある。
また、機器の説明を必要とする場面には、例えば住宅の購入予定者や住宅に入居した直後の居住者が、住宅に設置されている機器の使用法が分からない場合がある。もっとも、機器の説明を必要とする場面には、長年居住している生活者にも起こり得る。例えば機器が正常に動作しない場面である。
In this embodiment, it is assumed that the gas appliance installed in the home is used as the apparatus. Gas appliances include, for example, a gas stove, a gas heater, a gas dryer, a gas water heater, a water heater, a household fuel cell, a gas hot water floor heater, a bathroom heater / dryer, a dishwasher / dryer, and a gas air conditioner.
In addition, in situations where an explanation of the equipment is required, for example, a person who plans to purchase a house or a resident who has just moved into the house may not know how to use the equipment installed in the house. However, situations that require explanation of the equipment can occur even for consumers who have lived for many years. For example, it is a scene where the device does not operate normally.
<端末装置の構成>
図2は、端末装置10の外観例を説明する図である。図1に示したように、本実施の形態における端末装置10の外観は2足歩行型のロボットである。もっとも、端末装置10が実際に歩行可能である必要はない。ただし、不図示の車輪等により、端末装置10の移動が可能でもよい。
<Configuration of terminal device>
FIG. 2 is a diagram illustrating an example of the appearance of the
端末装置10は、情報を送受信する通信アンテナ101と、画像を撮像するカメラ102と、音声を取得するマイクロフォン103と、情報を表示するディスプレイ104と、音声等の音を出力するスピーカ105と、ユーザが操作を行う操作ボタン106と、人の存在を検知する人感センサ107と、装置全体の制御を行う制御部108とを備える。
The
本実施の形態の場合、通信アンテナ101はデザインの一部として現れているが、筐体内に含まれていてもよい。
カメラ102による撮像は、動画でも静止画でもよい。本実施の形態の場合、カメラ102は、ロボットの左目に設けられているが、取り付け位置は任意である。因みに、取り付けられるカメラ102の数は、複数でもよい。
マイクロフォン103は、ロボットの右目に設けられているが、取り付け位置は任意である。マイクロフォン103の数も複数でもよい。
In the case of this embodiment, the
The image taken by the
The
ディスプレイ104は、ロボットの胸部に設けられている。ディスプレイ104は、タッチパネルでもよい。もっとも、ディスプレイ104を設けない構成も可能である。
操作ボタン106は、カメラ102による録画を指示する録画ボタン106aと、他の端末装置10や情報端末30(図1参照)から受信した情報の再生を指示する再生ボタン106bと、端末装置10の設定等に用いるメニューボタン106cとを備えている。
本実施の形態の場合、録画ボタン106aが操作される画像が記録だけでなく、音も記録される。もっとも、録画ボタン106aに代えて、又は、録画ボタン106aとは別に録音ボタンを用意してもよい。
The
The
In the case of the present embodiment, not only the image in which the
制御部108は、プログラムの実行を通じて各種の機能を実現するCPU(=Central Processing Unit)と、半導体メモリで構成される。半導体メモリは、BIOS(=Basic Input Output System)等が記憶されたROM(=Read Only Memory)と、主記憶装置として用いられるRAM(=Random Access Memory)とを有している。また、制御部108は、補助記憶装置としての半導体メモリも有している。補助記憶装置としての半導体メモリには、質問データに説明データを対応付けたデータテーブルやプログラムが記憶されている。補助記憶装置としての半導体メモリは、書き換えが可能な不揮発性のメモリである。
The
<端末装置と情報端末の機能構成>
図3は、実施の形態1で使用する端末装置10と情報端末30の機能構成の一例を示す図である。図3に示す機能は、本実施の形態に関連する機能のみを選択的に表している。
<Functional configuration of terminal devices and information terminals>
FIG. 3 is a diagram showing an example of the functional configuration of the
<端末装置の構成>
端末装置10は、機器ユーザ11(図1参照)から質問を受け付ける質問受付部111と、質問データに関連付けられている説明データを記憶する説明記憶部112と、機器ユーザから受け付けた質問データに対応する説明データを説明記憶部112から読み出して出力する説明選択部113と、質問に対応する説明データが説明記憶部112に見つからない場合等に遠隔地のオペレータに回答を求める質問通知部114と、オペレータからの回答を情報端末30から取得する回答取得部115と、説明データ又は回答データを音声により出力する説明提供部116と、を有している。
<Configuration of terminal device>
The
本実施の形態における質問受付部111は、マイクロフォン103を通じて取得された機器ユーザ11の音声を解析し、質問の内容を特定する。具体的には、質問受付部111は、取得された音声を通信路20(図1参照)経由で不図示の音声認識サーバに送信し、質問データを取得する。質問データは、例えばテキストデータの形式で与えられる。もっとも、質問データは、説明記憶部112に記憶されている質問データを特定する符号でもよい。
なお、端末装置10内で音声認識を実行できる場合、音声認識サーバとの通信は不要である。
The
If voice recognition can be executed in the
説明記憶部112は、質問データに説明データを対応付けたデータテーブルを記憶する。説明記憶部112は、半導体メモリの記憶領域の一部である。説明記憶部112は、記憶手段の一例である。
図4は、説明記憶部112のデータ構造の一例を示す図である。図4の場合、説明記憶部112は、識別番号に紐づけて、質問データと、対応する説明データと、回答データが記憶される。もっとも、回答データは、オペレータ31(図1参照)による回答があった場合に限られる。
The
FIG. 4 is a diagram showing an example of the data structure of the
図4の場合、識別番号の「1001」と「1002」には、質問データと説明データが記憶されている。
識別番号の「1003」には、質問データと回答データが記憶されている。この例は、新規の質問データについて回答データが与えられた場合に対応する。
識別番号の「1004」には、質問データと説明データと回答データが記憶される。この例は、既存の質問データと説明データの組み合わせに対して、回答データが補足的に与えられた場合等に対応する。
In the case of FIG. 4, question data and explanatory data are stored in the identification numbers "1001" and "1002".
Question data and answer data are stored in the identification number "1003". This example corresponds to the case where answer data is given for new question data.
Question data, explanation data, and answer data are stored in the identification number "1004". This example corresponds to the case where the answer data is supplementarily given to the combination of the existing question data and the explanation data.
説明選択部113は、取得した質問データと説明記憶部112に記憶されている質問データとを照合し、又は、取得した質問データで説明記憶部112を検索し、機器ユーザの質問の内容に合致する質問データを抽出する。説明選択部113は、選択手段の一例である。
説明選択部113は、例えば意味検索エンジンを使用し、機器ユーザの質問の内容に合致する質問データを特定する。質問データが特定されると、質問データに対応付けられている説明データも自動的に特定される。
The
The
この他、機器ユーザ11の質問の内容に合致する質問データの検索には、例えば人工知能を使用してもよい。音声による質問やテキスト化された質問を入力すると、合致する質問データを出力する学習モデルを用いてもよいし、質問データの検索に使用するキーワードを出力する学習モデルを使用してもよい。
また、質問の内容に合致する質問データを特定する処理には、不図示のサーバを使用してもよい。また、機器ユーザ11の質問の内容に合致する説明データを、音声による質問やテキスト化された質問から直接特定してもよい。
In addition, for example, artificial intelligence may be used to search for question data that matches the content of the question of the
Further, a server (not shown) may be used for the process of identifying the question data that matches the content of the question. Further, the explanatory data matching the content of the question of the
質問データが見つかった場合、説明選択部113は、説明記憶部112から対応する説明データを取得する。
質問の内容に合致する質問データが見つからない場合、説明選択部113は、質問受付部111を通じ、該当する質問が存在しないことをフィードバックし、質問の内容の絞り込みや表現の変更を求めてもよい。
When the question data is found, the
When the question data matching the content of the question is not found, the
具体的には、機器ユーザ11との対話又は会話を通じて機器ユーザ11の質問の内容を絞り込む。この会話は、スマートスピーカにおける会話と同様、音声認識サーバを用いて実行する。
なお、機器ユーザの質問の内容に合致する質問データが見つからない場合等、予め定められた条件を満たす場合、説明選択部113は、音声の質問又はテキスト化された質問を質問通知部114に与える。
Specifically, the content of the question of the
If a predetermined condition is satisfied, such as when question data matching the content of the question of the device user cannot be found, the
質問通知部114は、説明選択部113からテキスト化された質問が与えられた場合、オペレータ31が操作する情報端末30に対してテキスト化された質問を送信する。もっとも、テキスト化された質問に代えて、又は、テキスト化された質問と一緒に機器ユーザ11の音声を送信してもよい。音声は、例えば録画ボタン106aが押されている期間に録音された音声である。もっとも、音声は、いわゆるスマートスピーカと同様、端末装置30を起動するワード(すなわち「起動ワード」)の検知後に録音された音声でもよい。質問通知部114は、通知手段の一例である。
When the
回答取得部115は、情報端末30から取得した回答データを、説明記憶部112と説明提供部116に与える。回答データを説明記憶部112に与えるのは、次回の説明において説明データとして使用できるようにするためである。従って、オペレータ31から取得した回答を次回の説明に使用しない場合には、説明記憶部112に与える処理は不要となる。回答取得部115は、取得手段の一例である。
The
説明提供部116は、説明選択部113から説明データが与えられる場合には、説明データに対応する音声をスピーカ105(図2参照)から出力し、回答取得部115から回答データが与えられる場合には、回答データに対応する音声をスピーカ105から出力する。もっとも、質問データや回答データがテキストデータではなく音声で与えられる場合には、テキストデータを音声データに変換する処理は不要である。
本実施の形態の場合、機器ユーザ11に対する説明や回答は、基本的に音声で行うが、ディスプレイ104(図2参照)に説明や回答を表示してもよい。因みに、端末装置10が受け付けた質問の内容もディスプレイ104に表示してもよい。説明提供部116は、提供手段の一例である。
When the explanation data is given from the
In the case of the present embodiment, the explanation and the answer to the
<情報端末の構成>
情報端末30は、端末装置10から質問を受け付ける質問受付部301と、オペレータ31からの回答を受け付ける回答受付部302と、受け付けた回答を端末装置10に送信する回答送信部303とを有している。これらの機能は、不図示のCPUによるプログラムの実行を通じて実現される。
<Configuration of information terminal>
The
質問受付部301は、端末装置10から質問を受信した場合に、質問の受信をオペレータ31に通知する。なお、端末装置10が送信した質問は、不図示のサーバが一括的に受信し、担当者に決定されたオペレータ31が操作する情報端末30に対して転送されてもよい。
When the
回答受付部302は、オペレータ31からの回答を受け付けると、回答データを回答送信部303に与える。回答受付部302は、テキストデータの入力として回答データを受け付けてもよいし、音声の入力として回答データを受け付けてもよい。回答受付部302は、受付手段の一例である。
回答送信部303は、受け付けた回答データを端末装置10に送信する。回答送信部303は、送信手段の一例である。
When the
The
<処理動作>
図5は、実施の形態1で使用する端末装置10が実行する処理動作を説明するフローチャートである。なお、図5に示す処理動作は、制御部108(図2参照)によるプログラムの実行を通じて実現される。なお、図中における記号のSはステップを表している。
まず、起動した端末装置10は、音声を検知したか否かを判定する(ステップ1)。
<Processing operation>
FIG. 5 is a flowchart illustrating a processing operation executed by the
First, the activated
端末装置10の起動は、前述したように、録画ボタン106aの操作や起動ワードの検知により実行される。ステップ1で否定結果が得られている間、端末装置10はステップ1の判定を繰り返す。本実施の形態では、機器ユーザの音声を想定する。機器ユーザは、サービスを利用する機器のユーザであればよく、音声による本人認証等は必要としない。
As described above, the
ステップ1で肯定結果が得られると、端末装置 10は、音声を解析して内容を特定する(ステップ2)。
次に、端末装置10は、特定された内容が機器に関する質問か否かを判定する(ステップ3)。機器に関する質問には、例えば機器の操作方法の質問やトラブル等への対処方法の質問がある。本実施の形態の場合、支援サービスの対象である機器を想定している。
When a positive result is obtained in
Next, the
図5の場合、機器に関する質問ではない場合、端末装置10は、ステップ3で否定結果を得、ステップ1に戻る。ステップ3で否定結果を得る場合には、例えば不図示の他の端末装置10へのメッセージの送信がある。また、支援サービスの対象外の機器に対する質問の場合もステップ3で否定結果が得られる。
ステップ3で肯定結果が得られた場合、端末装置10は、質問に対応する説明があるか否かを判定する(ステップ4)。
In the case of FIG. 5, if the question is not about the device, the
If an affirmative result is obtained in step 3, the
質問に対応する説明が説明記憶部112に見つかった場合、端末装置10は、ステップ4で肯定結果を得、特定された質問に対応する説明又は回答を読み出す(ステップ5)。例えば「ミストサウナの使い方を教えて」との質問に対し、ミストサウナの使い方に関する説明データを読み出す。
この後、端末装置10は、読み出した説明データを音声により提供する(ステップ6)。
When the explanation corresponding to the question is found in the
After that, the
一方、ステップ4で否定結果が得られた場合、端末装置10は、特定された質問を担当者であるオペレータに通知する(ステップ7)。例えば機器ユーザが「Aボタンを押しても反応しなくなった」と発話した場合、「B機械が急に動かなくなった」と発話した場合、「説明の意味が分からない」と発話した場合等である。これらの場合、端末装置10は、支援サービス側のオペレータ31に通知する。
On the other hand, if a negative result is obtained in step 4, the
次に、端末装置10は、オペレータ31から回答データを取得する(ステップ8)。回答データは、テキストデータ又は音声データとして取得される。
続いて、端末装置10は、取得した回答データを質問データに対応する説明データに関連付けて記憶する(ステップ9)。その後、端末装置10は、読み出した回答データを音声により提供する(ステップ6)。
Next, the
Subsequently, the
なお、端末装置10には、機器ユーザ11の音声や画像を通じて、機器ユーザ11の現在の感情や緊張度合いを分析し、機器ユーザ11に対する話し方を変更してもよい。例えば感情的になっている機器ユーザ11に対しては、丁寧な口調の説明データや回答データを選択してもよい。また、予め用意されている説明データや回答データの出力の前に、共感を示す言葉を追加してもよい。
また、機器ユーザが急いでいると分析された場合には、説明データや回答データの再生スピードを標準のスピードより上げてもよい。
なお、これらの分析には、不図示のサーバで実行される人工知能を用いてもよい。
The
Further, when it is analyzed that the device user is in a hurry, the reproduction speed of the explanation data and the response data may be increased from the standard speed.
Note that artificial intelligence executed on a server (not shown) may be used for these analyzes.
以上説明したように、本実施の形態における端末装置10は、機器ユーザ11からの質問や問い合わせの内容に対応する説明データを自律的に選択して応答し、機器ユーザの質問の内容が予め定められた条件を満たす場合に限り、オペレータ31から回答を取得して応答する。
このため、オペレータ31は、全ての質問に対して応答する必要がなく、労力の軽減が実現される。一方で、機器ユーザ11からの質問等の内容に対して適当な説明が難しい場合には、自動的にオペレータ31に回答を求めることができるので、機器ユーザ11への適切な情報が可能になる。すなわち、本実施の形態の場合、機器ユーザ11の操作がなくても、オペレータ31からの回答の取得することができる。
As described above, the
Therefore, the
<実施の形態2>
図6は、実施の形態2で想定するコミュニケーションシステム1Aの構成例を示す図である。図6には、図1との対応部分に対応する符号を付して示している。
図6に示すコミュニケーションシステム1Aには、サーバ40が配置されている。図6に示すサーバ40は、機器ユーザ11の質問を受け付ける端末装置10との連携により、前述した支援サービスを提供する。
本実施の形態におけるサーバ40には、質問データに説明データと回答データを対応付けた説明記憶部112(図3参照)が記憶されている。このため、本実施の形態における端末装置10には、説明記憶部112を設けずに済む。
<Embodiment 2>
FIG. 6 is a diagram showing a configuration example of the
A
The
本実施の形態におけるサーバ40は、質問データに対してオペレータの回答データが必要となった場合、質問データと回答データを教師データとして用い、質問データに対応付ける説明データを機械学習する機能も設けられている。このため、次回以降の質問で使用する説明データの内容を自動的に改善することが可能になる。
When the operator's answer data is required for the question data, the
また、本実施の形態の場合、複数の機器ユーザ11からの質問データをサーバ40に集約できる。このため、機器ユーザ11毎に機械学習を実行する場合に比して、機械学習を効率的に進めることができる。また、機械学習の精度も高めることができる。
なお、説明記憶部112は、端末装置10とサーバ40の両方に設けてもよい。この場合、サーバ40側で機械学習された説明記憶部112で、端末装置10側の説明記憶部112を更新してもよい。
Further, in the case of the present embodiment, question data from a plurality of
The
なお、端末装置10には質問受付部111(図3参照)と説明提供部116(図3参照)だけを設け、説明記憶部112(図3参照)、説明選択部113(図3参照)、質問通知部114(図3参照)、回答取得部115(図3参照)をサーバ40に設けてもよい。この場合のサーバ40は、対話型コミュニケーション装置の一例となる。
The
<実施の形態3>
<システムの構成>
本実施の形態では、実施の形態1で説明した端末装置10(図1参照)を、機器ユーザ11が使用するガス機器等の修理や点検等にも活用する。
前述したように、機器の修理や点検等を実施する作業者に求められる作業は多い。例えば機器の修理や点検等の作業に加え、機器ユーザ11に対する作業の内容の説明、機器の使い方の説明、故障した場合の対処法の説明、機器の交換や販売に関する説明が求められる。また、多くの場合、作業と説明は別々に行われるため、作業者が機器ユーザ11の自宅に滞在する時間が長くなる。
<Embodiment 3>
<System configuration>
In the present embodiment, the terminal device 10 (see FIG. 1) described in the first embodiment is also used for repairing or inspecting the gas appliance or the like used by the
As mentioned above, there are many tasks required of workers who repair or inspect equipment. For example, in addition to work such as repair and inspection of equipment, explanation of the contents of work to
そこで、本実施の形態では、定型的な説明については端末装置10を活用し、作業者が機器ユーザ11と会話する場面を、機器ユーザ11からの質問に対する回答や説明に対する理解の確認に限定する。
すなわち、本実施の形態では、説明と作業が並列的に実行される時間を増やし、現場で作業する作業者の負担の軽減を図る。同時に、作業者との会話を極力避けたい機器ユーザ11に対しても、必要な説明の時間を確保する。なお、作業者は、担当者の一例である。
Therefore, in the present embodiment, the
That is, in the present embodiment, the time during which the explanation and the work are executed in parallel is increased, and the burden on the worker working at the site is reduced. At the same time, the necessary explanation time is secured for the
図7は、実施の形態3で想定するコミュニケーションシステム1Bの構成例を示す図である。図7には、図1との対応部分に対応する符号を付して示している。
図7に示すコミュニケーションシステム1Bでは、ガス機器の修理や点検等を請け負った事業者の作業者51が端末装置10を持って、機器ユーザ11の自宅を訪問する場面を想定している。なお、ここでのガス機器の修理や点検等には、ガスメータの元栓を開く作業も含まれる。
FIG. 7 is a diagram showing a configuration example of the
In the
本実施の形態における端末装置10は、ガス機器の修理や点検等の間だけ、機器ユーザ11に貸し出される。もっとも、作業の終了後も、端末装置10をそのまま機器ユーザ11に貸し出すことも可能であるし、販売することも可能である。
また、機器ユーザ11が既に使用している端末装置10を、本実施の形態で説明する使い方に活用することも可能である。その場合には、該当する端末装置10を、作業者51が携帯する携帯型の端末(以下「携帯端末」という)50に連携させる必要がある。携帯端末50には、例えばスマートフォン、タブレット型の端末、ウェアラブル型のコンピュータを使用する。
The
It is also possible to utilize the
修理や点検等の対象であるガスメータ60やガス機器61は、例えば屋外に設置される等、必ずしも機器ユーザ11と同じ場所に存在するとは限らない。また、屋内に設置されているガス機器61もあるが、ガス機器61と機器ユーザ11が常に同じ場所にいるとは限らない。
そこで、図7では、機器ユーザ11がいる場所と修理や点検等の作業を行う作業者51がいる場所を異なる囲みで表している。
The
Therefore, in FIG. 7, the place where the
本実施の形態の場合、携帯端末50と端末装置10とは通信が可能であり、作業中の作業者51は、これらの機器を通じて機器ユーザ11との会話が可能である。
本実施の形態の場合、携帯端末50と端末装置10との通信には、例えばWiFi(登録商標)、ブルートゥース(登録商標)、移動通信システムその他を使用する。ここでのWiFi(登録商標)は、家庭内のネットワーク環境でもよいし、作業者51が持参する端末をアクセスポイントとするネットワーク環境でもよい。
In the case of the present embodiment, the
In the case of the present embodiment, for example, WiFi (registered trademark), Bluetooth (registered trademark), mobile communication system and the like are used for communication between the
<端末装置の機能構成>
図8は、実施の形態3で使用する端末装置10の機能構成の一例を示す図である。図8には、図3との対応部分に対応する符号を付して示している。図8に示す機能は、本実施の形態に関連する機能のみを選択的に表している。
<Functional configuration of terminal device>
FIG. 8 is a diagram showing an example of the functional configuration of the
端末装置10は、機器ユーザ11(図7参照)や作業者51(図7参照)の音声を会話に関する情報(以下「会話情報」という)として取得する会話情報取得部121と、作業の内容に応じた説明項目の指示を作業者51から受け付ける説明項目受付部122と、説明項目に応じて予め定められている開始条件を取得する開始条件取得部123と、説明の開始条件を満たす会話の出現を判定する開始判定部124と、作業内容に応じた説明データを記憶する説明記憶部125と、開始条件を満たす場合に1又は複数の説明データを読み出して機器ユーザ11に提供する説明提供部126と、会話情報を録音する会話録音部127と、機器ユーザ11の音声を作業者51が携帯する携帯端末50に通知する音声通知部128と、説明の進捗を作業者51が携帯する携帯端末50に通知する進捗通知部129と、を有している。
The
本実施の形態における会話情報取得部121は、マイクロフォン103(図2参照)を通じて取得された機器ユーザ11の音声や作業者51の音声の内容を特定する。この会話情報取得部121も、取得された音声を例えば音声認識サーバに送信し、音声に対応するテキストデータを取得する。
The conversation
説明項目受付部122は、携帯端末50やディスプレイ104(図2参照)を通じて作業者51が選択した説明項目を受け付ける。選択項目は、例えば操作画面にチェックボックス付きで表示されている。選択項目の選択は、チェックボックスに対するチェックにより指定される。選択項目は、作業単位で与えられても良いし、説明する項目別に与えられてもよい。
The explanation
開始条件取得部123は、例えば選択された説明項目の再生の開始を指示する音声を開始条件として取得する。開始条件には、例えば「説明を開始してください」、「作業を行います」、「作業を開始します」のように様々な作業に共通する言葉の他、説明項目の内容を表す言葉でもよい。例えば「ガスを安全にご利用いただくために注意すべき事項」を開始条件とする。
The start
開始判定部124は、会話情報取得部121で取得された会話情報と開始条件とを照合し、開始条件を満たすか否かを判定する。もっとも、再生ボタン106b(図2参照)が操作された場合には、開始条件が満たされるとみなしてもよい。
説明記憶部125は、作業者51が担当する作業に関する説明データを記憶している。また、インターネットとの接続が可能な場合、不図示のサーバから説明データを説明記憶部125にダウンロードしてもよい。ここでのダウンロードは、選択の可能性がある全ての説明データでもよいし、説明の対象に選択された説明データだけでもよい。
The
The
説明提供部126は、開始指示が与えられると、選択された説明項目に対応する説明データを読み出し、機器ユーザ11に提供する。具体的には、説明提供部126は、スピーカ105から説明を出力する。なお、機器ユーザ11の本人認証は不要である。
会話録音部127は、説明に対する機器ユーザ11からの応答や質問を不図示の半導体メモリに録音する。
When the start instruction is given, the
The
音声通知部128は、録音された応答や質問を作業者51が携帯する携帯端末50に通知する。作業中の作業者51に通知される音声に質問が含まれる場合、作業者51は、実施の形態1で説明した機能を活用して回答データを送信する。なお、質問の内容が既存の説明データで対応可能な場合には、実施の形態1と同様、端末装置10が自律的に説明を出力してもよい。
The
進捗通知部129は、端末装置10による説明の進捗の状況を携帯端末50に通知する。この通知により、作業者51は、説明の進捗を把握しながら、修理や点検等の作業を実施することができる。
なお、通知の内容には、個々の説明に要する時間の表示が含まれる。
The
The content of the notification includes an indication of the time required for each explanation.
<処理動作>
図9は、実施の形態3で使用する端末装置10が実行する処理動作を説明するフローチャートである。なお、図9に示す処理動作は、制御部108(図2参照)によるプログラムの実行を通じて実現される。なお、図中における記号のSはステップを表している。
<Processing operation>
FIG. 9 is a flowchart illustrating a processing operation executed by the
図9に示す処理動作は、機器に関する説明を提供する方法(すなわち「機器説明提供方法」)の一例である。
図9に示す処理動作は、例えば作業者51が端末装置10を起動することで開始される。例えば現場に到着した作業者51は、修理や点検等の対象である機器を確認し、端末装置10を起動する。
The processing operation shown in FIG. 9 is an example of a method for providing an explanation about a device (that is, a “device description providing method”).
The processing operation shown in FIG. 9 is started, for example, when the
最初に、端末装置10は、作業者51が選択した説明項目を受け付ける(ステップ11)。なお、説明項目の選択は訪問前に行われてもよいし、遠隔で実行されてもよい。例えば作業者51が操作する携帯端末50からの通信により設定されてもよい。
選択された説明項目については、説明に要する時間の情報が示されてもよい。
次に、端末装置10は、説明項目に応じて定められている開始条件を取得する(ステップ12)。
First, the
For the selected explanatory item, information on the time required for explanation may be shown.
Next, the
その後、端末装置10は、音声を検知したか否かを判定する(ステップ13)。ステップ13で否定結果が得られている間、端末装置10はステップ13の判定を繰り返す。
一方、ステップ13で肯定結果が得られた場合、端末装置10は、音声を解析して音の内容を特定する(ステップ14)。
After that, the
On the other hand, when an affirmative result is obtained in step 13, the
その後、端末装置10は、開始条件を満たすか否かを判定する(ステップ15)。例えば作業者51は、作業に先立って「これから、このロボットが、『ガスを安全にご利用いただくために注意すべき事項』のご説明をします。その間に、私は、ガスが使用できるための作業を行います。」と伝えると、端末装置10は、この音声中に開始条件を満たす言葉が含まれるか否かを判定する。
なお、機器ユーザ11が「説明を始めて」との言葉を発したか否かを判定してもよい。
After that, the
It should be noted that it may be determined whether or not the
ステップ15で否定結果が得られている間、端末装置10はステップ13に戻る。
一方、ステップ15で肯定結果が得られた場合、端末装置10は、説明の提供を開始する(ステップ16)。
このとき、作業者51は、既に作業を開始している。例えばガスの使用の開始に伴う作業の場合、作業者51は、ガスメータの元栓を開き、機器ユーザ11の自宅内で点火の確認試験等を行う。また、風呂釜、湯沸器などのガス機器を対象に、排気ガス中に含まれる一酸化炭素の濃度を測定する。
While the negative result is obtained in step 15, the
On the other hand, if a positive result is obtained in step 15, the
At this time, the
説明を開始した端末装置10は、説明の進捗を作業者51に通知する(ステップ17)。
また、端末装置10は、説明した内容に関する理解を機器ユーザに確認する(ステップ18)。
この確認は、説明の区切り毎に実行される。例えば「今までの説明は解りましたか?」との問い合わせを挿入し、機器ユーザ11からの応答を録音する。ここでの問い合わせや応答も会話の一例である。
The
Further, the
This confirmation is performed at each description break. For example, insert the inquiry "Did you understand the explanation so far?" And record the response from the
機器ユーザ11からの応答は、説明項目に紐づけて記録する。これにより、改めてチェック書類への記入を省略することが可能になる。
なお、ステップ18における確認の記録は、作業者51が携帯する携帯端末50にも記録される。この記録は、作業者51の作業記録としても保存される。
The response from the
The confirmation record in step 18 is also recorded in the
確認された機器ユーザ11の理解が否定的であった場合、端末装置10は、機器ユーザ11が気になっている事項を聞き出すための言葉を追加的に出力する。例えば「何がわかりにくかったですか?」等の言葉を出力し、機器ユーザ11の発話を促す。
If the confirmed understanding of the
次に、端末装置10は、機器ユーザ11から質問があるか否かを判定する(ステップ19)。ここでの質問には、機器ユーザ11が知りたい情報や疑問とする内容が含まれる。
ステップ19で肯定結果が得られた場合、端末装置10は、機器ユーザ11の質問を録音し、作業者51に通知する(ステップ20)。
Next, the
If an affirmative result is obtained in step 19, the
この通知により、作業者51は、作業中でも、作業を中断して機器ユーザ11に追加の説明を行うことが可能になる。追加の説明は、作業者51の音声によっても可能であるし、携帯端末50に対する文字の入力によっても可能である。これにより、お客様へのサービスが向上される。
なお、通知の内容や対応時の会話も端末装置10で録音され、携帯端末50に通知される。ここでの説明も作業記録として用いられる。
With this notification, the
The content of the notification and the conversation at the time of correspondence are also recorded by the
実施の形態1で説明したように、端末装置10による自律的な対応で完結可能な場合には、作業者51への通知は必ずしも必要でない。また、実施の形態1の場合と同様に、機器ユーザ11の感情や緊張度合いを分析し、説明データや回答データの話し方を変更する機能を用意してもよい。
一方、ステップ19で否定結果が得られた場合、端末装置10は、ステップ20をスキップしてステップ21に進む。
As described in the first embodiment, when the
On the other hand, if a negative result is obtained in step 19, the
この後、端末装置10は、説明の終了か否かを判定する(ステップ21)。ステップ11で選択された全ての説明項目について説明が終了した場合、ステップ21で肯定結果が得られる。この場合、端末装置10は、一連の動作を終了する。
一方、説明事項が残る場合、ステップ21で否定結果が得られる。ステップ21で否定結果が得られた場合、端末装置10は、ステップ13に戻る。
After that, the
On the other hand, if the explanation remains, a negative result is obtained in step 21. If a negative result is obtained in step 21, the
<家庭内のネットワークに接続できない場合の構成>
図10は、実施の形態3で使用する端末装置10が家庭内のネットワーク環境に接続されていない場合に通信路20上のサーバ70に接続するための通信経路を説明する図である。図10には、図7との対応部分に対応する符号を付して示している。
<Configuration when you cannot connect to the home network>
FIG. 10 is a diagram illustrating a communication path for connecting to the
端末装置10が家庭内のネットワーク環境を通じて通信路20に接続できない場合や移動通信システムに接続できない場合に、音声認識等のサービスを利用するためにサーバ70に接続するには、作業者51が携帯する携帯端末50を通じてサーバ70に接続すればよい。
また、携帯端末50に代えて、作業者51が持参する不図示の端末をアクセスポイントを用いて通信路20に接続してもよい。
When the
Further, instead of the
<他の実施の形態>
以上、本発明の実施の形態について説明したが、本発明の技術的範囲は、前述の実施の形態に記載の範囲に限定されない。前述した実施の形態に、種々の変更又は改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。
<Other embodiments>
Although the embodiments of the present invention have been described above, the technical scope of the present invention is not limited to the scope described in the above-described embodiments. It is clear from the description of the claims that the above-mentioned embodiments with various modifications or improvements are also included in the technical scope of the present invention.
前述の実施の形態1の場合、端末装置10(図1参照)を機器ユーザ11から質問があった場合における説明や回答に使用し、実施の形態3の場合、作業者51が選択した説明項目についての説明に使用しているが、ガス機器のメンテナンス時期の連絡や料金の支払い状況の説明等の各種サービスへの利用も可能である。
In the case of the above-described first embodiment, the terminal device 10 (see FIG. 1) is used for explanation and answer when a question is asked by the
前述の実施の形態においては、機器として、ガス機器を想定しているが、例えば住宅設備や電化製品を含めてもよい。住宅設備には、例えばキッチンの設備、バスルームの設備、洗面台の設備、トイレの設備、照明の設備、空調設備、太陽光発電設備、太陽光温水器、エレベータ、給湯設備がある。また、電化製品には、例えば冷蔵庫、調理家電、エアコン、照明、プリンタ、コンピュータを含めてもよい。 In the above-described embodiment, gas appliances are assumed as the equipment, but for example, housing equipment and electric appliances may be included. Housing equipment includes, for example, kitchen equipment, bathroom equipment, washbasin equipment, toilet equipment, lighting equipment, air conditioning equipment, photovoltaic power generation equipment, solar water heaters, elevators, and hot water supply equipment. Further, the electric appliances may include, for example, a refrigerator, a cooking appliance, an air conditioner, a lighting, a printer, and a computer.
1、1A、1B…コミュニケーションシステム、10…端末装置、11…機器ユーザ、20…通信路、30…情報端末、31…オペレータ、40、70…サーバ、50…携帯端末、51…作業者、60…ガスメータ、61…ガス機器 1, 1A, 1B ... Communication system, 10 ... Terminal device, 11 ... Device user, 20 ... Communication path, 30 ... Information terminal, 31 ... Operator, 40, 70 ... Server, 50 ... Mobile terminal, 51 ... Worker, 60 … Gas meter, 61… Gas equipment
Claims (5)
記憶された複数の前記説明データの中から、機器ユーザからの質問に対応する当該説明データを選択する選択手段と、
機器ユーザからの質問に応じて機器の担当者に通知する通知手段と、
通知を受けた前記担当者からの回答データを取得する取得手段と、
選択した前記説明データ又は取得した前記回答データを音声により機器ユーザに提供する提供手段と、
を有する対話型コミュニケーション装置。 A storage means for storing question data and explanation data related to the device in association with each other,
A selection means for selecting the explanatory data corresponding to the question from the device user from the plurality of stored explanatory data, and
Notification means to notify the person in charge of the device in response to a question from the device user,
An acquisition method for acquiring response data from the person in charge who received the notification,
Providing means for providing the selected explanatory data or the acquired response data to the device user by voice, and
Interactive communication device with.
請求項1記載の対話型コミュニケーション装置。 The storage means stores the answer data in association with the explanatory data for the question data of the device user.
The interactive communication device according to claim 1.
請求項1記載の対話型コミュニケーション装置。 The notification means notifies the person in charge when the content of the question from the device user or the content of the response from the device user to the provided explanatory data or the response data satisfies a predetermined condition.
The interactive communication device according to claim 1.
受け付けた前記回答データを、前記対話型コミュニケーション装置に送信する送信手段と、
を有する機器説明支援システム。 When the question data of the device user is acquired from the interactive communication device that autonomously responds to the question from the device user, the reception means for accepting the input of the answer data to the question data from the person in charge of the device.
A transmission means for transmitting the received response data to the interactive communication device, and
Equipment explanation support system with.
コンピュータは、
前記機器に関する説明を音声により機器ユーザに提供するために、会話に関する情報を取得し、
前記機器の担当者が行う作業の内容に応じて予め定められている開始条件を取得し、
前記会話に関する情報が前記開始条件に合致するか否かを判定し、
前記会話に関する情報が前記開始条件に合致する場合、機器ユーザに対する前記機器に関する説明の提供を開始する
機器説明提供方法。 It is a device explanation providing method using an interactive communication device that interactively provides an explanation about the device to the device user.
Computer
In order to provide the device user with an explanation about the device by voice, information about the conversation is acquired.
Acquire predetermined start conditions according to the content of the work performed by the person in charge of the equipment, and obtain
It is determined whether or not the information regarding the conversation meets the start condition, and the information is determined.
A device description providing method for starting to provide a description of the device to a device user when the information related to the conversation meets the start condition.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020176396A JP2022067684A (en) | 2020-10-21 | 2020-10-21 | Interactive communication device, apparatus explanation support system, and apparatus explanation provision method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020176396A JP2022067684A (en) | 2020-10-21 | 2020-10-21 | Interactive communication device, apparatus explanation support system, and apparatus explanation provision method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022067684A true JP2022067684A (en) | 2022-05-09 |
Family
ID=81456183
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020176396A Pending JP2022067684A (en) | 2020-10-21 | 2020-10-21 | Interactive communication device, apparatus explanation support system, and apparatus explanation provision method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022067684A (en) |
-
2020
- 2020-10-21 JP JP2020176396A patent/JP2022067684A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10152976B2 (en) | Device control method, display control method, and purchase settlement method | |
CN112513833B (en) | Electronic device and method for providing artificial intelligence services based on pre-synthesized dialogs | |
US10832674B2 (en) | Voice data processing method and electronic device supporting the same | |
US10810529B2 (en) | Directing an inspector through an inspection | |
JP7059929B2 (en) | Information processing equipment | |
EP2908281A1 (en) | Product information provision system, product information provision device, and product information output device | |
JP6462628B2 (en) | Product sales support system and product sales support method | |
JP6920773B1 (en) | Information provision method, information provision system, information provision device and computer program | |
CN111179935A (en) | Voice quality inspection method and device | |
KR20190127372A (en) | Electronic device and method for executing function of electronic device | |
CN112567718A (en) | Electronic device for performing tasks including calls in response to user speech and method of operation | |
JP2014081693A (en) | Commodity information provision system, commodity information provision device, and commodity information output device | |
JP5220953B1 (en) | Product information providing system, product information providing device, and product information output device | |
EP3800561A1 (en) | Electronic device and control method for electronic device | |
KR102511517B1 (en) | Voice input processing method and electronic device supportingthe same | |
KR102421745B1 (en) | System and device for generating TTS model | |
JP2022067684A (en) | Interactive communication device, apparatus explanation support system, and apparatus explanation provision method | |
CN106802941B (en) | A kind of generation method and equipment of reply message | |
CN106571143A (en) | Method and device for controlling intelligent device | |
KR102519635B1 (en) | Method for displaying an electronic document for processing a voice command and electronic device thereof | |
JP2020052857A (en) | Estimation system and estimation method | |
JPWO2019244304A1 (en) | Device control signal registration device, device control signal registration system, device control signal registration method, and device control signal registration program | |
JP7258686B2 (en) | Information processing system, information processing method, and program | |
JPWO2019103007A1 (en) | Information processing device and information processing method | |
KR20210052972A (en) | Apparatus and method for supporting voice agent involving multiple users |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230524 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240313 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240528 |