JP2022067684A - Interactive communication device, apparatus explanation support system, and apparatus explanation provision method - Google Patents

Interactive communication device, apparatus explanation support system, and apparatus explanation provision method Download PDF

Info

Publication number
JP2022067684A
JP2022067684A JP2020176396A JP2020176396A JP2022067684A JP 2022067684 A JP2022067684 A JP 2022067684A JP 2020176396 A JP2020176396 A JP 2020176396A JP 2020176396 A JP2020176396 A JP 2020176396A JP 2022067684 A JP2022067684 A JP 2022067684A
Authority
JP
Japan
Prior art keywords
data
question
explanation
device user
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020176396A
Other languages
Japanese (ja)
Inventor
公太 平瀬
Kota Hirase
拓也 川田
Takuya Kawada
明子 大野
Akiko Ono
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tokyo Gas Co Ltd
Original Assignee
Tokyo Gas Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tokyo Gas Co Ltd filed Critical Tokyo Gas Co Ltd
Priority to JP2020176396A priority Critical patent/JP2022067684A/en
Publication of JP2022067684A publication Critical patent/JP2022067684A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)

Abstract

To embody provision of appropriate information to an apparatus user while reducing burden of a person in charge of giving an explanation pertaining to an apparatus.SOLUTION: An interactive communication device comprises: storage means for associating and storing questioning data and explanatory data that are pertaining to an apparatus; selection means for, from the stored plurality of explanatory data, selecting the explanatory data corresponding to a question from an apparatus user; notification means for notifying a person in charge of the apparatus of a question in response to the question from the apparatus user; obtainment means for obtaining answer data from the person in charge who has received the notification; and provision means for providing the apparatus user with the selected explanatory data or the obtained answer data by voice.SELECTED DRAWING: Figure 5

Description

本発明は、対話型コミュニケーション装置、機器説明支援システム及び機器説明提供方法に関する。 The present invention relates to an interactive communication device, a device explanation support system, and a device explanation providing method.

特許文献1には、家電機器等の電子機器に関する取扱説明に関する情報を登録するロボットが、ユーザからの問合せの内容に応じた取扱説明に関する情報を提供する技術が開示されている。 Patent Document 1 discloses a technique in which a robot that registers information on handling instructions for electronic devices such as home appliances provides information on handling instructions according to the content of an inquiry from a user.

特開2009-116493号公報Japanese Unexamined Patent Publication No. 2009-1164943

今日、家庭内で使用するロボットが実用化されている。ただし、ロボットだけで、機器を操作するユーザ(以下「機器ユーザ」という)の要望の全てに応えることは難しい。例えば特許文献1に記載のロボットによる情報の提供は、事前に想定された設問との関係で定まっており、想定されていない設問への対応は難しい。この場合には、人間の担当者による支援が必要になる。
また、現場で機器の修理や点検等を実施する作業者による注意事項等の説明をロボットに代行させれば、作業者の負担を軽減できる。しかし、その場合でも、ロボットに機器ユーザからの全ての質問を対応させることは難しく、最終的には人間の担当者による支援が必要になる。
Today, robots used in the home are in practical use. However, it is difficult for a robot alone to meet all the requests of a user who operates a device (hereinafter referred to as a "device user"). For example, the provision of information by a robot described in Patent Document 1 is determined in relation to a question assumed in advance, and it is difficult to respond to an unexpected question. In this case, support from a human representative is required.
In addition, if the robot is used to explain the precautions and the like by the worker who repairs and inspects the equipment at the site, the burden on the worker can be reduced. However, even in that case, it is difficult for the robot to respond to all the questions from the device user, and ultimately, the support of a human person in charge is required.

本発明は、機器に関する説明を行う担当者の労力の軽減を図りつつ、機器ユーザに対する適切な情報の提供を実現することを目的とする。 An object of the present invention is to reduce the labor of a person in charge of explaining a device and to provide appropriate information to a device user.

請求項1に記載の発明は、機器に関する質問データと説明データとを関連付けて記憶する記憶手段と、記憶された複数の前記説明データの中から、機器ユーザからの質問に対応する当該説明データを選択する選択手段と、機器ユーザからの質問に応じて機器の担当者に通知する通知手段と、通知を受けた前記担当者からの回答データを取得する取得手段と、選択した前記説明データ又は取得した前記回答データを音声により機器ユーザに提供する提供手段と、を有する対話型コミュニケーション装置である。
請求項2に記載の発明は、前記記憶手段は、前記回答データを、機器ユーザの前記質問データに対する前記説明データに関連付けて記憶する、請求項1記載の対話型コミュニケーション装置である。
請求項3に記載の発明は、前記通知手段は、機器ユーザからの前記質問の内容、又は、提供した前記説明データ又は前記回答データに対する機器ユーザからの応答の内容が予め定められた条件を満たす場合、前記担当者に通知する、請求項1記載の対話型コミュニケーション装置である。
請求項4に記載の発明は、機器ユーザからの質問に対して自律的に対応する対話型コミュニケーション装置から、機器ユーザの質問データを取得した場合に、当該質問データに対する回答データの入力を機器の担当者から受け付ける受付手段と、受け付けた前記回答データを、前記対話型コミュニケーション装置に送信する送信手段と、を有する機器説明支援システムである。
請求項5に記載の発明は、機器ユーザに対し、機器に関する説明を対話形式で提供する対話型コミュニケーション装置を利用する機器説明提供方法であって、コンピュータは、前記機器に関する説明を音声により機器ユーザに提供するために、会話に関する情報を取得し、前記機器の担当者が行う作業の内容に応じて予め定められている開始条件を取得し、前記会話に関する情報が前記開始条件に合致するか否かを判定し、前記会話に関する情報が前記開始条件に合致する場合、機器ユーザに対する前記機器に関する説明の提供を開始する機器説明提供方法である。
The invention according to claim 1 is a storage means for storing question data related to a device in association with explanatory data, and the explanatory data corresponding to a question from a device user from among the plurality of stored explanatory data. A selection means to be selected, a notification means to notify the person in charge of the device in response to a question from the device user, an acquisition means to acquire response data from the person in charge who received the notification, and the selected explanatory data or acquisition. It is an interactive communication device having a providing means for providing the answer data to the device user by voice.
The invention according to claim 2 is the interactive communication device according to claim 1, wherein the storage means stores the answer data in association with the explanatory data for the question data of the device user.
In the invention according to claim 3, the notification means satisfies a predetermined condition that the content of the question from the device user or the content of the response from the device user to the provided explanatory data or the response data is satisfied. In this case, the interactive communication device according to claim 1, which notifies the person in charge.
According to the fourth aspect of the present invention, when the question data of the device user is acquired from the interactive communication device that autonomously responds to the question from the device user, the input of the answer data to the question data is input to the device. It is a device explanation support system having a reception means for receiving from a person in charge and a transmission means for transmitting the received response data to the interactive communication device.
The invention according to claim 5 is a method of providing a device explanation using an interactive communication device that interactively provides a device user with an explanation about the device, and the computer gives the device user an explanation about the device by voice. In order to provide information about the conversation, whether or not the information about the conversation meets the start condition by acquiring the start condition predetermined according to the content of the work performed by the person in charge of the device. This is a device explanation providing method for starting to provide an explanation about the device to the device user when it is determined whether the information is related to the conversation and the start condition is satisfied.

本発明によれば、機器に関する説明を行う担当者の労力の軽減を図りつつ、機器ユーザに対する適切な情報の提供を実現できる。 According to the present invention, it is possible to provide appropriate information to a device user while reducing the labor of a person in charge of explaining the device.

実施の形態1で想定するコミュニケーションシステムの構成例を示す図である。It is a figure which shows the structural example of the communication system assumed in Embodiment 1. FIG. 端末装置の外観例を説明する図である。It is a figure explaining the appearance example of the terminal apparatus. 実施の形態1で使用する端末装置と情報端末の機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the terminal apparatus and information terminal used in Embodiment 1. FIG. 説明記憶部のデータ構造の一例を示す図である。It is a figure which shows an example of the data structure of the explanatory storage part. 実施の形態1で使用する端末装置が実行する処理動作を説明するフローチャートである。It is a flowchart explaining the processing operation executed by the terminal apparatus used in Embodiment 1. FIG. 実施の形態2で想定するコミュニケーションシステムの構成例を示す図である。It is a figure which shows the configuration example of the communication system assumed in Embodiment 2. FIG. 実施の形態3で想定するコミュニケーションシステムの構成例を示す図である。It is a figure which shows the structural example of the communication system assumed in Embodiment 3. FIG. 実施の形態3で使用する端末装置の機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the terminal apparatus used in Embodiment 3. FIG. 実施の形態3で使用する端末装置が実行する処理動作を説明するフローチャートである。It is a flowchart explaining the processing operation executed by the terminal apparatus used in Embodiment 3. 実施の形態3で使用する端末装置が家庭内のネットワーク環境に接続されていない場合にネットワーク上のサーバに接続するための通信経路を説明する図である。It is a figure explaining the communication path for connecting to a server on a network when the terminal apparatus used in Embodiment 3 is not connected to the network environment in a home.

以下、図面を参照して、本発明の実施の形態を説明する。
<実施の形態1>
<システムの構成>
図1は、実施の形態1で想定するコミュニケーションシステム1の構成例を示す図である。
図1に示すコミュニケーションシステム1は、家庭内で使用される端末装置10と、通信路20と、オペレータ31が操作する情報端末30とで構成されている。
図1に示す端末装置10は1台であるが複数台でもよい。また、図1に示す情報端末30も1台であるが複数台でもよい。
ここでのオペレータ31は、担当者の一例である。本実施の形態におけるオペレータ31は、ヘルプデスクやサービスセンタ等で勤務するスタッフであり、遠隔地から機器ユーザ11の質問に対応する。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
<Embodiment 1>
<System configuration>
FIG. 1 is a diagram showing a configuration example of the communication system 1 assumed in the first embodiment.
The communication system 1 shown in FIG. 1 includes a terminal device 10 used in a home, a communication path 20, and an information terminal 30 operated by an operator 31.
Although the number of terminal devices 10 shown in FIG. 1 is one, a plurality of terminals may be used. Further, although the number of information terminals 30 shown in FIG. 1 is one, a plurality of information terminals 30 may be used.
The operator 31 here is an example of a person in charge. The operator 31 in the present embodiment is a staff member who works at a help desk, a service center, or the like, and responds to a question of the device user 11 from a remote location.

図1に示す端末装置10は、ロボットの形状を有している。もっとも、端末装置10の形状はロボットに限らず、例えば動物、ぬいぐるみ、乗り物、花の形状でもよい。また、端末装置10は、スマートスピーカ等で採用されている筒型の形状や箱型の形状でもよい。
本実施の形態に端末装置10は、機器ユーザ11との対話又は会話を通じて、機器ユーザ11に提供する機器の操作や対処に関する説明を自律的に特定し、音声により提供する。本実施の形態では、対話と会話を厳密には区別しない。
The terminal device 10 shown in FIG. 1 has the shape of a robot. However, the shape of the terminal device 10 is not limited to the robot, and may be, for example, the shape of an animal, a stuffed animal, a vehicle, or a flower. Further, the terminal device 10 may have a tubular shape or a box shape adopted in a smart speaker or the like.
In the present embodiment, the terminal device 10 autonomously identifies an explanation regarding the operation and coping of the device provided to the device user 11 through dialogue or conversation with the device user 11, and provides the explanation by voice. In this embodiment, dialogue and conversation are not strictly distinguished.

もっとも、機器ユーザ11からの質問の内容、又は、機器ユーザ11からの応答の内容が予め定められた条件を満たす場合、端末装置10は、機器ユーザ11を支援するサービス(以下「支援サービス」という)を提供するオペレータ31からの回答を情報端末30から取得し、機器ユーザ11に提供する。支援サービスは、有償に限らず、無償でも構わない。
なお、機器ユーザ11からの「質問の内容」が予め定められた条件を満たす場合には、例えば、特定された質問の内容に対応する説明が端末装置10に見つからない場合、質問の内容自体が不明確な場合がある。
However, if the content of the question from the device user 11 or the content of the response from the device user 11 satisfies a predetermined condition, the terminal device 10 is a service that supports the device user 11 (hereinafter referred to as "support service"). ) Is acquired from the information terminal 30 and provided to the device user 11. The support service is not limited to paid services, but may be free of charge.
If the "question content" from the device user 11 satisfies a predetermined condition, for example, if the terminal device 10 cannot find the explanation corresponding to the specified question content, the question content itself is It may be unclear.

また、機器ユーザ11からの「応答の内容」が予め定められた条件を満たす場合には、例えば、説明を理解できない等のフィードバックが機器ユーザ11からあった場合、説明された対処を実施しても状況が改善しない等のフィードバックが機器ユーザ11からあった場合がある。
なお、端末装置10は、機器ユーザ11の所有物でもよいが、レンタルされていてもよい。レンタルの場合、有償か無償かは問わない。
本実施の形態における端末装置10は、対話型コミュニケーション装置の一例である。
Further, if the "contents of the response" from the device user 11 satisfy the predetermined conditions, for example, if there is feedback from the device user 11 such as not being able to understand the explanation, the described measures are taken. However, there may be feedback from the device user 11 that the situation does not improve.
The terminal device 10 may be owned by the device user 11 or may be rented. In the case of rental, it does not matter whether it is paid or free.
The terminal device 10 in this embodiment is an example of an interactive communication device.

本実施の形態の場合、通信路20には、インターネットや移動通信システムを使用する。移動通信システムは、第4世代(すなわち4G)、第5世代(すなわち5G)、第6世代(すなわち6G)のいずれでもよい。
もっとも、移動通信システムを用いた通信が可能であるのは、端末装置10にSIM(=Subscriber Identity Module)カードが装着されているか、電子的に発行されたSIM情報が不図示の半導体メモリに記憶されている場合に限られる。
In the case of this embodiment, the Internet or a mobile communication system is used for the communication path 20. The mobile communication system may be any of a 4th generation (i.e., 4G), a 5th generation (that is, 5G), and a 6th generation (that is, 6G).
However, communication using the mobile communication system is possible because the terminal device 10 is equipped with a SIM (= Subscriber Identity Module) card, or the electronically issued SIM information is stored in a semiconductor memory (not shown). Only if it has been done.

端末装置10が家庭内のネットワーク環境に接続されている場合、端末装置10は、インターネット経由で機器ユーザ11の音声を認識する不図示のサーバ(以下「音声認識サーバ」ともいう)と通信することも可能である。なお、端末装置10と家庭内のネットワーク環境との接続には、例えばWifi(登録商標)による接続の他、ワイヤレスUSB(=Universal Serial Bus)による接続、デザリングによる接続、有線ケーブルの接続を使用する。
また、端末装置10が家庭内のネットワーク環境に接続されていない場合、端末装置10は、移動通信システム経由で情報端末30や音声認識サーバと通信してもよい。
When the terminal device 10 is connected to a network environment in the home, the terminal device 10 communicates with a server (hereinafter, also referred to as "voice recognition server") (hereinafter, also referred to as "voice recognition server") that does not recognize the voice of the device user 11 via the Internet. Is also possible. For the connection between the terminal device 10 and the network environment in the home, for example, in addition to the connection by Wifi (registered trademark), the connection by wireless USB (= Universal Serial Bus), the connection by tethering, and the connection by the wired cable are used. ..
Further, when the terminal device 10 is not connected to the network environment in the home, the terminal device 10 may communicate with the information terminal 30 or the voice recognition server via the mobile communication system.

図1における情報端末30は、質問の対象である機器のメーカや問い合わせに関するサービスを提供する事業者のオペレータ31が操作するコンピュータである。情報端末30は、デスクトップ型のコンピュータでもよいし、ノート型のコンピュータでもよいし、タブレット型のコンピュータでもよいし、スマートフォンやウェアラブル型のコンピュータでもよい。本実施の形態における情報端末30は、機器説明支援システムの一例である。 The information terminal 30 in FIG. 1 is a computer operated by an operator 31 of a manufacturer of a device to which a question is asked or a business operator who provides a service related to an inquiry. The information terminal 30 may be a desktop computer, a notebook computer, a tablet computer, a smartphone, or a wearable computer. The information terminal 30 in this embodiment is an example of a device explanation support system.

本実施の形態では、機器として、家庭内に設置されているガス機器を想定する。ガス機器には、例えばガスコンロ、ガスヒータ、ガス乾燥機、ガス給湯器、湯沸かし器、家庭用燃料電池、ガス温水床暖房、浴室暖房乾燥機、食器洗い乾燥機、ガスエアコンがある。
また、機器の説明を必要とする場面には、例えば住宅の購入予定者や住宅に入居した直後の居住者が、住宅に設置されている機器の使用法が分からない場合がある。もっとも、機器の説明を必要とする場面には、長年居住している生活者にも起こり得る。例えば機器が正常に動作しない場面である。
In this embodiment, it is assumed that the gas appliance installed in the home is used as the apparatus. Gas appliances include, for example, a gas stove, a gas heater, a gas dryer, a gas water heater, a water heater, a household fuel cell, a gas hot water floor heater, a bathroom heater / dryer, a dishwasher / dryer, and a gas air conditioner.
In addition, in situations where an explanation of the equipment is required, for example, a person who plans to purchase a house or a resident who has just moved into the house may not know how to use the equipment installed in the house. However, situations that require explanation of the equipment can occur even for consumers who have lived for many years. For example, it is a scene where the device does not operate normally.

<端末装置の構成>
図2は、端末装置10の外観例を説明する図である。図1に示したように、本実施の形態における端末装置10の外観は2足歩行型のロボットである。もっとも、端末装置10が実際に歩行可能である必要はない。ただし、不図示の車輪等により、端末装置10の移動が可能でもよい。
<Configuration of terminal device>
FIG. 2 is a diagram illustrating an example of the appearance of the terminal device 10. As shown in FIG. 1, the appearance of the terminal device 10 in the present embodiment is a bipedal walking type robot. However, the terminal device 10 does not have to be actually walkable. However, the terminal device 10 may be movable by a wheel or the like (not shown).

端末装置10は、情報を送受信する通信アンテナ101と、画像を撮像するカメラ102と、音声を取得するマイクロフォン103と、情報を表示するディスプレイ104と、音声等の音を出力するスピーカ105と、ユーザが操作を行う操作ボタン106と、人の存在を検知する人感センサ107と、装置全体の制御を行う制御部108とを備える。 The terminal device 10 includes a communication antenna 101 for transmitting and receiving information, a camera 102 for capturing an image, a microphone 103 for acquiring voice, a display 104 for displaying information, a speaker 105 for outputting sound such as voice, and a user. It is provided with an operation button 106 for operation, a human sensor 107 for detecting the presence of a person, and a control unit 108 for controlling the entire device.

本実施の形態の場合、通信アンテナ101はデザインの一部として現れているが、筐体内に含まれていてもよい。
カメラ102による撮像は、動画でも静止画でもよい。本実施の形態の場合、カメラ102は、ロボットの左目に設けられているが、取り付け位置は任意である。因みに、取り付けられるカメラ102の数は、複数でもよい。
マイクロフォン103は、ロボットの右目に設けられているが、取り付け位置は任意である。マイクロフォン103の数も複数でもよい。
In the case of this embodiment, the communication antenna 101 appears as a part of the design, but may be included in the housing.
The image taken by the camera 102 may be a moving image or a still image. In the case of the present embodiment, the camera 102 is provided in the left eye of the robot, but the mounting position is arbitrary. Incidentally, the number of cameras 102 to be attached may be plural.
The microphone 103 is provided on the right eye of the robot, but the mounting position is arbitrary. The number of microphones 103 may be plural.

ディスプレイ104は、ロボットの胸部に設けられている。ディスプレイ104は、タッチパネルでもよい。もっとも、ディスプレイ104を設けない構成も可能である。
操作ボタン106は、カメラ102による録画を指示する録画ボタン106aと、他の端末装置10や情報端末30(図1参照)から受信した情報の再生を指示する再生ボタン106bと、端末装置10の設定等に用いるメニューボタン106cとを備えている。
本実施の形態の場合、録画ボタン106aが操作される画像が記録だけでなく、音も記録される。もっとも、録画ボタン106aに代えて、又は、録画ボタン106aとは別に録音ボタンを用意してもよい。
The display 104 is provided on the chest of the robot. The display 104 may be a touch panel. However, a configuration without the display 104 is also possible.
The operation button 106 is a setting of a recording button 106a for instructing recording by the camera 102, a playback button 106b for instructing reproduction of information received from another terminal device 10 or an information terminal 30 (see FIG. 1), and a terminal device 10. It is equipped with a menu button 106c used for such as.
In the case of the present embodiment, not only the image in which the record button 106a is operated is recorded, but also the sound is recorded. However, a recording button may be provided in place of the recording button 106a or separately from the recording button 106a.

制御部108は、プログラムの実行を通じて各種の機能を実現するCPU(=Central Processing Unit)と、半導体メモリで構成される。半導体メモリは、BIOS(=Basic Input Output System)等が記憶されたROM(=Read Only Memory)と、主記憶装置として用いられるRAM(=Random Access Memory)とを有している。また、制御部108は、補助記憶装置としての半導体メモリも有している。補助記憶装置としての半導体メモリには、質問データに説明データを対応付けたデータテーブルやプログラムが記憶されている。補助記憶装置としての半導体メモリは、書き換えが可能な不揮発性のメモリである。 The control unit 108 is composed of a CPU (= Central Processing Unit) that realizes various functions through the execution of a program and a semiconductor memory. The semiconductor memory has a ROM (= Read Only Memory) in which a BIOS (= Basic Input Output System) and the like are stored, and a RAM (= Random Access Memory) used as a main storage device. The control unit 108 also has a semiconductor memory as an auxiliary storage device. The semiconductor memory as an auxiliary storage device stores a data table or a program in which explanatory data is associated with question data. The semiconductor memory as an auxiliary storage device is a rewritable non-volatile memory.

<端末装置と情報端末の機能構成>
図3は、実施の形態1で使用する端末装置10と情報端末30の機能構成の一例を示す図である。図3に示す機能は、本実施の形態に関連する機能のみを選択的に表している。
<Functional configuration of terminal devices and information terminals>
FIG. 3 is a diagram showing an example of the functional configuration of the terminal device 10 and the information terminal 30 used in the first embodiment. The functions shown in FIG. 3 selectively represent only the functions related to the present embodiment.

<端末装置の構成>
端末装置10は、機器ユーザ11(図1参照)から質問を受け付ける質問受付部111と、質問データに関連付けられている説明データを記憶する説明記憶部112と、機器ユーザから受け付けた質問データに対応する説明データを説明記憶部112から読み出して出力する説明選択部113と、質問に対応する説明データが説明記憶部112に見つからない場合等に遠隔地のオペレータに回答を求める質問通知部114と、オペレータからの回答を情報端末30から取得する回答取得部115と、説明データ又は回答データを音声により出力する説明提供部116と、を有している。
<Configuration of terminal device>
The terminal device 10 corresponds to a question receiving unit 111 that receives a question from the device user 11 (see FIG. 1), an explanatory storage unit 112 that stores explanatory data associated with the question data, and question data received from the device user. The explanation selection unit 113 that reads out the explanation data to be output from the explanation storage unit 112 and outputs the explanation data, and the question notification unit 114 that asks an operator at a remote location for an answer when the explanation data corresponding to the question cannot be found in the explanation storage unit 112. It has an answer acquisition unit 115 that acquires an answer from an operator from an information terminal 30, and an explanation providing unit 116 that outputs explanation data or answer data by voice.

本実施の形態における質問受付部111は、マイクロフォン103を通じて取得された機器ユーザ11の音声を解析し、質問の内容を特定する。具体的には、質問受付部111は、取得された音声を通信路20(図1参照)経由で不図示の音声認識サーバに送信し、質問データを取得する。質問データは、例えばテキストデータの形式で与えられる。もっとも、質問データは、説明記憶部112に記憶されている質問データを特定する符号でもよい。
なお、端末装置10内で音声認識を実行できる場合、音声認識サーバとの通信は不要である。
The question receiving unit 111 in the present embodiment analyzes the voice of the device user 11 acquired through the microphone 103 and identifies the content of the question. Specifically, the question receiving unit 111 transmits the acquired voice to a voice recognition server (not shown) via the communication path 20 (see FIG. 1), and acquires question data. Question data is given, for example, in the form of text data. However, the question data may be a code for specifying the question data stored in the explanatory storage unit 112.
If voice recognition can be executed in the terminal device 10, communication with the voice recognition server is unnecessary.

説明記憶部112は、質問データに説明データを対応付けたデータテーブルを記憶する。説明記憶部112は、半導体メモリの記憶領域の一部である。説明記憶部112は、記憶手段の一例である。
図4は、説明記憶部112のデータ構造の一例を示す図である。図4の場合、説明記憶部112は、識別番号に紐づけて、質問データと、対応する説明データと、回答データが記憶される。もっとも、回答データは、オペレータ31(図1参照)による回答があった場合に限られる。
The explanation storage unit 112 stores a data table in which the question data is associated with the explanation data. Description The storage unit 112 is a part of the storage area of the semiconductor memory. The explanatory storage unit 112 is an example of storage means.
FIG. 4 is a diagram showing an example of the data structure of the explanatory storage unit 112. In the case of FIG. 4, the explanation storage unit 112 stores the question data, the corresponding explanation data, and the answer data in association with the identification number. However, the response data is limited to the case where the operator 31 (see FIG. 1) responds.

図4の場合、識別番号の「1001」と「1002」には、質問データと説明データが記憶されている。
識別番号の「1003」には、質問データと回答データが記憶されている。この例は、新規の質問データについて回答データが与えられた場合に対応する。
識別番号の「1004」には、質問データと説明データと回答データが記憶される。この例は、既存の質問データと説明データの組み合わせに対して、回答データが補足的に与えられた場合等に対応する。
In the case of FIG. 4, question data and explanatory data are stored in the identification numbers "1001" and "1002".
Question data and answer data are stored in the identification number "1003". This example corresponds to the case where answer data is given for new question data.
Question data, explanation data, and answer data are stored in the identification number "1004". This example corresponds to the case where the answer data is supplementarily given to the combination of the existing question data and the explanation data.

説明選択部113は、取得した質問データと説明記憶部112に記憶されている質問データとを照合し、又は、取得した質問データで説明記憶部112を検索し、機器ユーザの質問の内容に合致する質問データを抽出する。説明選択部113は、選択手段の一例である。
説明選択部113は、例えば意味検索エンジンを使用し、機器ユーザの質問の内容に合致する質問データを特定する。質問データが特定されると、質問データに対応付けられている説明データも自動的に特定される。
The explanation selection unit 113 collates the acquired question data with the question data stored in the explanation storage unit 112, or searches the explanation storage unit 112 with the acquired question data and matches the content of the question of the device user. Extract the question data to be asked. The explanation selection unit 113 is an example of selection means.
The explanation selection unit 113 uses, for example, a semantic search engine to identify question data that matches the content of the question of the device user. When the question data is specified, the explanatory data associated with the question data is also automatically specified.

この他、機器ユーザ11の質問の内容に合致する質問データの検索には、例えば人工知能を使用してもよい。音声による質問やテキスト化された質問を入力すると、合致する質問データを出力する学習モデルを用いてもよいし、質問データの検索に使用するキーワードを出力する学習モデルを使用してもよい。
また、質問の内容に合致する質問データを特定する処理には、不図示のサーバを使用してもよい。また、機器ユーザ11の質問の内容に合致する説明データを、音声による質問やテキスト化された質問から直接特定してもよい。
In addition, for example, artificial intelligence may be used to search for question data that matches the content of the question of the device user 11. When a voice question or a textualized question is input, a learning model that outputs matching question data may be used, or a learning model that outputs keywords used for searching question data may be used.
Further, a server (not shown) may be used for the process of identifying the question data that matches the content of the question. Further, the explanatory data matching the content of the question of the device user 11 may be directly specified from the voice question or the textualized question.

質問データが見つかった場合、説明選択部113は、説明記憶部112から対応する説明データを取得する。
質問の内容に合致する質問データが見つからない場合、説明選択部113は、質問受付部111を通じ、該当する質問が存在しないことをフィードバックし、質問の内容の絞り込みや表現の変更を求めてもよい。
When the question data is found, the explanation selection unit 113 acquires the corresponding explanation data from the explanation storage unit 112.
When the question data matching the content of the question is not found, the explanation selection unit 113 may provide feedback through the question reception unit 111 that the corresponding question does not exist, and request the narrowing down of the content of the question or the change of the expression. ..

具体的には、機器ユーザ11との対話又は会話を通じて機器ユーザ11の質問の内容を絞り込む。この会話は、スマートスピーカにおける会話と同様、音声認識サーバを用いて実行する。
なお、機器ユーザの質問の内容に合致する質問データが見つからない場合等、予め定められた条件を満たす場合、説明選択部113は、音声の質問又はテキスト化された質問を質問通知部114に与える。
Specifically, the content of the question of the device user 11 is narrowed down through a dialogue or a conversation with the device user 11. This conversation is executed using the voice recognition server in the same manner as the conversation on the smart speaker.
If a predetermined condition is satisfied, such as when question data matching the content of the question of the device user cannot be found, the explanation selection unit 113 gives a voice question or a textual question to the question notification unit 114. ..

質問通知部114は、説明選択部113からテキスト化された質問が与えられた場合、オペレータ31が操作する情報端末30に対してテキスト化された質問を送信する。もっとも、テキスト化された質問に代えて、又は、テキスト化された質問と一緒に機器ユーザ11の音声を送信してもよい。音声は、例えば録画ボタン106aが押されている期間に録音された音声である。もっとも、音声は、いわゆるスマートスピーカと同様、端末装置30を起動するワード(すなわち「起動ワード」)の検知後に録音された音声でもよい。質問通知部114は、通知手段の一例である。 When the question notification unit 114 is given a textualized question from the explanation selection unit 113, the question notification unit 114 transmits the textualized question to the information terminal 30 operated by the operator 31. However, the voice of the device user 11 may be transmitted in place of the textualized question or together with the textualized question. The voice is, for example, the voice recorded while the record button 106a is pressed. However, as with the so-called smart speaker, the voice may be the voice recorded after the detection of the word that activates the terminal device 30 (that is, the "activation word"). The question notification unit 114 is an example of notification means.

回答取得部115は、情報端末30から取得した回答データを、説明記憶部112と説明提供部116に与える。回答データを説明記憶部112に与えるのは、次回の説明において説明データとして使用できるようにするためである。従って、オペレータ31から取得した回答を次回の説明に使用しない場合には、説明記憶部112に与える処理は不要となる。回答取得部115は、取得手段の一例である。 The answer acquisition unit 115 gives the answer data acquired from the information terminal 30 to the explanation storage unit 112 and the explanation providing unit 116. The answer data is given to the explanatory storage unit 112 so that it can be used as explanatory data in the next explanation. Therefore, when the answer obtained from the operator 31 is not used for the next explanation, the process of giving to the explanation storage unit 112 becomes unnecessary. The answer acquisition unit 115 is an example of acquisition means.

説明提供部116は、説明選択部113から説明データが与えられる場合には、説明データに対応する音声をスピーカ105(図2参照)から出力し、回答取得部115から回答データが与えられる場合には、回答データに対応する音声をスピーカ105から出力する。もっとも、質問データや回答データがテキストデータではなく音声で与えられる場合には、テキストデータを音声データに変換する処理は不要である。
本実施の形態の場合、機器ユーザ11に対する説明や回答は、基本的に音声で行うが、ディスプレイ104(図2参照)に説明や回答を表示してもよい。因みに、端末装置10が受け付けた質問の内容もディスプレイ104に表示してもよい。説明提供部116は、提供手段の一例である。
When the explanation data is given from the explanation selection unit 113, the explanation providing unit 116 outputs the voice corresponding to the explanation data from the speaker 105 (see FIG. 2), and when the answer data is given from the answer acquisition unit 115. Outputs the voice corresponding to the answer data from the speaker 105. However, when the question data and the answer data are given by voice instead of text data, the process of converting the text data into voice data is unnecessary.
In the case of the present embodiment, the explanation and the answer to the device user 11 are basically given by voice, but the explanation and the answer may be displayed on the display 104 (see FIG. 2). Incidentally, the content of the question received by the terminal device 10 may also be displayed on the display 104. The explanation providing unit 116 is an example of the providing means.

<情報端末の構成>
情報端末30は、端末装置10から質問を受け付ける質問受付部301と、オペレータ31からの回答を受け付ける回答受付部302と、受け付けた回答を端末装置10に送信する回答送信部303とを有している。これらの機能は、不図示のCPUによるプログラムの実行を通じて実現される。
<Configuration of information terminal>
The information terminal 30 has a question receiving unit 301 for receiving a question from the terminal device 10, an answer receiving unit 302 for receiving an answer from the operator 31, and an answer transmitting unit 303 for transmitting the received answer to the terminal device 10. There is. These functions are realized through the execution of a program by a CPU (not shown).

質問受付部301は、端末装置10から質問を受信した場合に、質問の受信をオペレータ31に通知する。なお、端末装置10が送信した質問は、不図示のサーバが一括的に受信し、担当者に決定されたオペレータ31が操作する情報端末30に対して転送されてもよい。 When the question receiving unit 301 receives a question from the terminal device 10, the question receiving unit 301 notifies the operator 31 of the reception of the question. The questions transmitted by the terminal device 10 may be collectively received by a server (not shown) and transferred to the information terminal 30 operated by the operator 31 determined by the person in charge.

回答受付部302は、オペレータ31からの回答を受け付けると、回答データを回答送信部303に与える。回答受付部302は、テキストデータの入力として回答データを受け付けてもよいし、音声の入力として回答データを受け付けてもよい。回答受付部302は、受付手段の一例である。
回答送信部303は、受け付けた回答データを端末装置10に送信する。回答送信部303は、送信手段の一例である。
When the answer receiving unit 302 receives the answer from the operator 31, the answer receiving unit 302 gives the answer data to the answer transmitting unit 303. The answer receiving unit 302 may accept the answer data as the input of the text data, or may accept the answer data as the input of the voice. The response reception unit 302 is an example of reception means.
The response transmission unit 303 transmits the received response data to the terminal device 10. The answer transmission unit 303 is an example of transmission means.

<処理動作>
図5は、実施の形態1で使用する端末装置10が実行する処理動作を説明するフローチャートである。なお、図5に示す処理動作は、制御部108(図2参照)によるプログラムの実行を通じて実現される。なお、図中における記号のSはステップを表している。
まず、起動した端末装置10は、音声を検知したか否かを判定する(ステップ1)。
<Processing operation>
FIG. 5 is a flowchart illustrating a processing operation executed by the terminal device 10 used in the first embodiment. The processing operation shown in FIG. 5 is realized through the execution of the program by the control unit 108 (see FIG. 2). The symbol S in the figure represents a step.
First, the activated terminal device 10 determines whether or not the voice is detected (step 1).

端末装置10の起動は、前述したように、録画ボタン106aの操作や起動ワードの検知により実行される。ステップ1で否定結果が得られている間、端末装置10はステップ1の判定を繰り返す。本実施の形態では、機器ユーザの音声を想定する。機器ユーザは、サービスを利用する機器のユーザであればよく、音声による本人認証等は必要としない。 As described above, the terminal device 10 is activated by operating the recording button 106a or detecting the activation word. While the negative result is obtained in step 1, the terminal device 10 repeats the determination in step 1. In this embodiment, the voice of the device user is assumed. The device user may be a user of the device that uses the service, and does not require voice authentication or the like.

ステップ1で肯定結果が得られると、端末装置 10は、音声を解析して内容を特定する(ステップ2)。
次に、端末装置10は、特定された内容が機器に関する質問か否かを判定する(ステップ3)。機器に関する質問には、例えば機器の操作方法の質問やトラブル等への対処方法の質問がある。本実施の形態の場合、支援サービスの対象である機器を想定している。
When a positive result is obtained in step 1, the terminal device 10 analyzes the voice and specifies the content (step 2).
Next, the terminal device 10 determines whether or not the specified content is a question related to the device (step 3). Questions about the device include, for example, a question about how to operate the device and a question about how to deal with troubles. In the case of this embodiment, it is assumed that the device is the target of the support service.

図5の場合、機器に関する質問ではない場合、端末装置10は、ステップ3で否定結果を得、ステップ1に戻る。ステップ3で否定結果を得る場合には、例えば不図示の他の端末装置10へのメッセージの送信がある。また、支援サービスの対象外の機器に対する質問の場合もステップ3で否定結果が得られる。
ステップ3で肯定結果が得られた場合、端末装置10は、質問に対応する説明があるか否かを判定する(ステップ4)。
In the case of FIG. 5, if the question is not about the device, the terminal device 10 obtains a negative result in step 3 and returns to step 1. If a negative result is obtained in step 3, for example, a message may be transmitted to another terminal device 10 (not shown). Also, in the case of a question about a device that is not covered by the support service, a negative result can be obtained in step 3.
If an affirmative result is obtained in step 3, the terminal device 10 determines whether or not there is an explanation corresponding to the question (step 4).

質問に対応する説明が説明記憶部112に見つかった場合、端末装置10は、ステップ4で肯定結果を得、特定された質問に対応する説明又は回答を読み出す(ステップ5)。例えば「ミストサウナの使い方を教えて」との質問に対し、ミストサウナの使い方に関する説明データを読み出す。
この後、端末装置10は、読み出した説明データを音声により提供する(ステップ6)。
When the explanation corresponding to the question is found in the explanatory storage unit 112, the terminal device 10 obtains an affirmative result in step 4 and reads out the explanation or the answer corresponding to the specified question (step 5). For example, in response to the question "Tell me how to use the mist sauna", read out the explanatory data on how to use the mist sauna.
After that, the terminal device 10 provides the read explanatory data by voice (step 6).

一方、ステップ4で否定結果が得られた場合、端末装置10は、特定された質問を担当者であるオペレータに通知する(ステップ7)。例えば機器ユーザが「Aボタンを押しても反応しなくなった」と発話した場合、「B機械が急に動かなくなった」と発話した場合、「説明の意味が分からない」と発話した場合等である。これらの場合、端末装置10は、支援サービス側のオペレータ31に通知する。 On the other hand, if a negative result is obtained in step 4, the terminal device 10 notifies the operator who is the person in charge of the specified question (step 7). For example, when the device user says "No response even if the A button is pressed", "B machine suddenly stops working", or "I don't understand the meaning of the explanation". .. In these cases, the terminal device 10 notifies the operator 31 on the support service side.

次に、端末装置10は、オペレータ31から回答データを取得する(ステップ8)。回答データは、テキストデータ又は音声データとして取得される。
続いて、端末装置10は、取得した回答データを質問データに対応する説明データに関連付けて記憶する(ステップ9)。その後、端末装置10は、読み出した回答データを音声により提供する(ステップ6)。
Next, the terminal device 10 acquires the response data from the operator 31 (step 8). The answer data is acquired as text data or voice data.
Subsequently, the terminal device 10 stores the acquired answer data in association with the explanatory data corresponding to the question data (step 9). After that, the terminal device 10 provides the read response data by voice (step 6).

なお、端末装置10には、機器ユーザ11の音声や画像を通じて、機器ユーザ11の現在の感情や緊張度合いを分析し、機器ユーザ11に対する話し方を変更してもよい。例えば感情的になっている機器ユーザ11に対しては、丁寧な口調の説明データや回答データを選択してもよい。また、予め用意されている説明データや回答データの出力の前に、共感を示す言葉を追加してもよい。
また、機器ユーザが急いでいると分析された場合には、説明データや回答データの再生スピードを標準のスピードより上げてもよい。
なお、これらの分析には、不図示のサーバで実行される人工知能を用いてもよい。
The terminal device 10 may analyze the current emotions and tensions of the device user 11 through the voice or image of the device user 11 and change the way of speaking to the device user 11. For example, for the device user 11 who is emotional, polite tone explanation data and response data may be selected. In addition, words indicating empathy may be added before the output of the explanation data and the response data prepared in advance.
Further, when it is analyzed that the device user is in a hurry, the reproduction speed of the explanation data and the response data may be increased from the standard speed.
Note that artificial intelligence executed on a server (not shown) may be used for these analyzes.

以上説明したように、本実施の形態における端末装置10は、機器ユーザ11からの質問や問い合わせの内容に対応する説明データを自律的に選択して応答し、機器ユーザの質問の内容が予め定められた条件を満たす場合に限り、オペレータ31から回答を取得して応答する。
このため、オペレータ31は、全ての質問に対して応答する必要がなく、労力の軽減が実現される。一方で、機器ユーザ11からの質問等の内容に対して適当な説明が難しい場合には、自動的にオペレータ31に回答を求めることができるので、機器ユーザ11への適切な情報が可能になる。すなわち、本実施の形態の場合、機器ユーザ11の操作がなくても、オペレータ31からの回答の取得することができる。
As described above, the terminal device 10 in the present embodiment autonomously selects and responds to explanatory data corresponding to the contents of questions and inquiries from the device user 11, and the contents of the questions of the device user are predetermined. Only when the specified condition is satisfied, an answer is obtained from the operator 31 and a response is made.
Therefore, the operator 31 does not have to answer all the questions, and the labor can be reduced. On the other hand, when it is difficult to give an appropriate explanation to the content of the question or the like from the device user 11, the operator 31 can be automatically requested to answer, so that appropriate information to the device user 11 becomes possible. .. That is, in the case of the present embodiment, the answer from the operator 31 can be obtained without the operation of the device user 11.

<実施の形態2>
図6は、実施の形態2で想定するコミュニケーションシステム1Aの構成例を示す図である。図6には、図1との対応部分に対応する符号を付して示している。
図6に示すコミュニケーションシステム1Aには、サーバ40が配置されている。図6に示すサーバ40は、機器ユーザ11の質問を受け付ける端末装置10との連携により、前述した支援サービスを提供する。
本実施の形態におけるサーバ40には、質問データに説明データと回答データを対応付けた説明記憶部112(図3参照)が記憶されている。このため、本実施の形態における端末装置10には、説明記憶部112を設けずに済む。
<Embodiment 2>
FIG. 6 is a diagram showing a configuration example of the communication system 1A assumed in the second embodiment. FIG. 6 is shown with reference numerals corresponding to the portions corresponding to those in FIG.
A server 40 is arranged in the communication system 1A shown in FIG. The server 40 shown in FIG. 6 provides the above-mentioned support service in cooperation with the terminal device 10 that receives the question of the device user 11.
The server 40 in the present embodiment stores an explanatory storage unit 112 (see FIG. 3) in which explanatory data and answer data are associated with question data. Therefore, the terminal device 10 in the present embodiment does not need to be provided with the explanatory storage unit 112.

本実施の形態におけるサーバ40は、質問データに対してオペレータの回答データが必要となった場合、質問データと回答データを教師データとして用い、質問データに対応付ける説明データを機械学習する機能も設けられている。このため、次回以降の質問で使用する説明データの内容を自動的に改善することが可能になる。 When the operator's answer data is required for the question data, the server 40 in the present embodiment is also provided with a function of using the question data and the answer data as teacher data and machine learning the explanatory data associated with the question data. ing. Therefore, it is possible to automatically improve the content of the explanatory data used in the next and subsequent questions.

また、本実施の形態の場合、複数の機器ユーザ11からの質問データをサーバ40に集約できる。このため、機器ユーザ11毎に機械学習を実行する場合に比して、機械学習を効率的に進めることができる。また、機械学習の精度も高めることができる。
なお、説明記憶部112は、端末装置10とサーバ40の両方に設けてもよい。この場合、サーバ40側で機械学習された説明記憶部112で、端末装置10側の説明記憶部112を更新してもよい。
Further, in the case of the present embodiment, question data from a plurality of device users 11 can be aggregated in the server 40. Therefore, machine learning can be efficiently advanced as compared with the case where machine learning is executed for each device user 11. In addition, the accuracy of machine learning can be improved.
The explanatory storage unit 112 may be provided in both the terminal device 10 and the server 40. In this case, the explanation storage unit 112 on the terminal device 10 side may be updated by the explanation storage unit 112 machine-learned on the server 40 side.

なお、端末装置10には質問受付部111(図3参照)と説明提供部116(図3参照)だけを設け、説明記憶部112(図3参照)、説明選択部113(図3参照)、質問通知部114(図3参照)、回答取得部115(図3参照)をサーバ40に設けてもよい。この場合のサーバ40は、対話型コミュニケーション装置の一例となる。 The terminal device 10 is provided with only the question receiving unit 111 (see FIG. 3) and the explanation providing unit 116 (see FIG. 3), and the explanation storage unit 112 (see FIG. 3), the explanation selection unit 113 (see FIG. 3), and the explanation selection unit 113 (see FIG. 3). The question notification unit 114 (see FIG. 3) and the answer acquisition unit 115 (see FIG. 3) may be provided in the server 40. The server 40 in this case is an example of an interactive communication device.

<実施の形態3>
<システムの構成>
本実施の形態では、実施の形態1で説明した端末装置10(図1参照)を、機器ユーザ11が使用するガス機器等の修理や点検等にも活用する。
前述したように、機器の修理や点検等を実施する作業者に求められる作業は多い。例えば機器の修理や点検等の作業に加え、機器ユーザ11に対する作業の内容の説明、機器の使い方の説明、故障した場合の対処法の説明、機器の交換や販売に関する説明が求められる。また、多くの場合、作業と説明は別々に行われるため、作業者が機器ユーザ11の自宅に滞在する時間が長くなる。
<Embodiment 3>
<System configuration>
In the present embodiment, the terminal device 10 (see FIG. 1) described in the first embodiment is also used for repairing or inspecting the gas appliance or the like used by the device user 11.
As mentioned above, there are many tasks required of workers who repair or inspect equipment. For example, in addition to work such as repair and inspection of equipment, explanation of the contents of work to equipment user 11, explanation of how to use equipment, explanation of coping method in case of failure, explanation of replacement and sale of equipment are required. Further, in many cases, the work and the explanation are performed separately, so that the worker stays at the home of the device user 11 for a long time.

そこで、本実施の形態では、定型的な説明については端末装置10を活用し、作業者が機器ユーザ11と会話する場面を、機器ユーザ11からの質問に対する回答や説明に対する理解の確認に限定する。
すなわち、本実施の形態では、説明と作業が並列的に実行される時間を増やし、現場で作業する作業者の負担の軽減を図る。同時に、作業者との会話を極力避けたい機器ユーザ11に対しても、必要な説明の時間を確保する。なお、作業者は、担当者の一例である。
Therefore, in the present embodiment, the terminal device 10 is utilized for the routine explanation, and the scene where the worker talks with the device user 11 is limited to the answer to the question from the device user 11 and the confirmation of the understanding of the explanation. ..
That is, in the present embodiment, the time during which the explanation and the work are executed in parallel is increased, and the burden on the worker working at the site is reduced. At the same time, the necessary explanation time is secured for the device user 11 who wants to avoid conversation with the worker as much as possible. The worker is an example of a person in charge.

図7は、実施の形態3で想定するコミュニケーションシステム1Bの構成例を示す図である。図7には、図1との対応部分に対応する符号を付して示している。
図7に示すコミュニケーションシステム1Bでは、ガス機器の修理や点検等を請け負った事業者の作業者51が端末装置10を持って、機器ユーザ11の自宅を訪問する場面を想定している。なお、ここでのガス機器の修理や点検等には、ガスメータの元栓を開く作業も含まれる。
FIG. 7 is a diagram showing a configuration example of the communication system 1B assumed in the third embodiment. FIG. 7 is shown with reference numerals corresponding to the portions corresponding to those in FIG.
In the communication system 1B shown in FIG. 7, it is assumed that the worker 51 of the business operator who undertakes the repair and inspection of the gas appliance visits the home of the device user 11 with the terminal device 10. The repair and inspection of gas equipment here includes the work of opening the main plug of the gas meter.

本実施の形態における端末装置10は、ガス機器の修理や点検等の間だけ、機器ユーザ11に貸し出される。もっとも、作業の終了後も、端末装置10をそのまま機器ユーザ11に貸し出すことも可能であるし、販売することも可能である。
また、機器ユーザ11が既に使用している端末装置10を、本実施の形態で説明する使い方に活用することも可能である。その場合には、該当する端末装置10を、作業者51が携帯する携帯型の端末(以下「携帯端末」という)50に連携させる必要がある。携帯端末50には、例えばスマートフォン、タブレット型の端末、ウェアラブル型のコンピュータを使用する。
The terminal device 10 in the present embodiment is rented out to the device user 11 only during repair or inspection of the gas appliance. However, even after the work is completed, the terminal device 10 can be rented to the device user 11 as it is, or can be sold.
It is also possible to utilize the terminal device 10 already used by the device user 11 for the usage described in the present embodiment. In that case, it is necessary to link the corresponding terminal device 10 with a portable terminal (hereinafter referred to as "mobile terminal") 50 carried by the worker 51. For the mobile terminal 50, for example, a smartphone, a tablet-type terminal, or a wearable-type computer is used.

修理や点検等の対象であるガスメータ60やガス機器61は、例えば屋外に設置される等、必ずしも機器ユーザ11と同じ場所に存在するとは限らない。また、屋内に設置されているガス機器61もあるが、ガス機器61と機器ユーザ11が常に同じ場所にいるとは限らない。
そこで、図7では、機器ユーザ11がいる場所と修理や点検等の作業を行う作業者51がいる場所を異なる囲みで表している。
The gas meter 60 and the gas appliance 61, which are the targets of repairs and inspections, do not always exist in the same place as the equipment user 11, for example, they are installed outdoors. Further, although there is a gas appliance 61 installed indoors, the gas appliance 61 and the equipment user 11 are not always in the same place.
Therefore, in FIG. 7, the place where the device user 11 is located and the place where the worker 51 who performs work such as repair or inspection is located are shown by different enclosures.

本実施の形態の場合、携帯端末50と端末装置10とは通信が可能であり、作業中の作業者51は、これらの機器を通じて機器ユーザ11との会話が可能である。
本実施の形態の場合、携帯端末50と端末装置10との通信には、例えばWiFi(登録商標)、ブルートゥース(登録商標)、移動通信システムその他を使用する。ここでのWiFi(登録商標)は、家庭内のネットワーク環境でもよいし、作業者51が持参する端末をアクセスポイントとするネットワーク環境でもよい。
In the case of the present embodiment, the mobile terminal 50 and the terminal device 10 can communicate with each other, and the worker 51 who is working can talk with the device user 11 through these devices.
In the case of the present embodiment, for example, WiFi (registered trademark), Bluetooth (registered trademark), mobile communication system and the like are used for communication between the mobile terminal 50 and the terminal device 10. The WiFi (registered trademark) here may be a network environment in the home or a network environment in which the terminal brought by the worker 51 is used as an access point.

<端末装置の機能構成>
図8は、実施の形態3で使用する端末装置10の機能構成の一例を示す図である。図8には、図3との対応部分に対応する符号を付して示している。図8に示す機能は、本実施の形態に関連する機能のみを選択的に表している。
<Functional configuration of terminal device>
FIG. 8 is a diagram showing an example of the functional configuration of the terminal device 10 used in the third embodiment. FIG. 8 is shown with reference numerals corresponding to the portions corresponding to those in FIG. The functions shown in FIG. 8 selectively represent only the functions related to the present embodiment.

端末装置10は、機器ユーザ11(図7参照)や作業者51(図7参照)の音声を会話に関する情報(以下「会話情報」という)として取得する会話情報取得部121と、作業の内容に応じた説明項目の指示を作業者51から受け付ける説明項目受付部122と、説明項目に応じて予め定められている開始条件を取得する開始条件取得部123と、説明の開始条件を満たす会話の出現を判定する開始判定部124と、作業内容に応じた説明データを記憶する説明記憶部125と、開始条件を満たす場合に1又は複数の説明データを読み出して機器ユーザ11に提供する説明提供部126と、会話情報を録音する会話録音部127と、機器ユーザ11の音声を作業者51が携帯する携帯端末50に通知する音声通知部128と、説明の進捗を作業者51が携帯する携帯端末50に通知する進捗通知部129と、を有している。 The terminal device 10 includes a conversation information acquisition unit 121 that acquires the voices of the device user 11 (see FIG. 7) and the worker 51 (see FIG. 7) as information related to conversation (hereinafter referred to as “conversation information”), and the content of the work. An explanation item receiving unit 122 that receives an instruction of the corresponding explanation item from the worker 51, a start condition acquisition unit 123 that acquires a predetermined start condition according to the explanation item, and a conversation that satisfies the explanation start condition. The start determination unit 124 that determines the start determination unit 124, the explanation storage unit 125 that stores explanatory data according to the work content, and the explanation providing unit 126 that reads out one or more explanatory data and provides the device user 11 when the start condition is satisfied. The conversation recording unit 127 that records conversation information, the voice notification unit 128 that notifies the mobile terminal 50 that the worker 51 carries the voice of the device user 11, and the mobile terminal 50 that the worker 51 carries the progress of the explanation. It has a progress notification unit 129 and a progress notification unit 129.

本実施の形態における会話情報取得部121は、マイクロフォン103(図2参照)を通じて取得された機器ユーザ11の音声や作業者51の音声の内容を特定する。この会話情報取得部121も、取得された音声を例えば音声認識サーバに送信し、音声に対応するテキストデータを取得する。 The conversation information acquisition unit 121 in the present embodiment identifies the content of the voice of the device user 11 and the voice of the worker 51 acquired through the microphone 103 (see FIG. 2). The conversation information acquisition unit 121 also transmits the acquired voice to, for example, a voice recognition server, and acquires text data corresponding to the voice.

説明項目受付部122は、携帯端末50やディスプレイ104(図2参照)を通じて作業者51が選択した説明項目を受け付ける。選択項目は、例えば操作画面にチェックボックス付きで表示されている。選択項目の選択は、チェックボックスに対するチェックにより指定される。選択項目は、作業単位で与えられても良いし、説明する項目別に与えられてもよい。 The explanation item receiving unit 122 receives the explanation item selected by the worker 51 through the mobile terminal 50 or the display 104 (see FIG. 2). The selection item is displayed with a check box on the operation screen, for example. The selection of selection items is specified by a check on the check box. The selection items may be given in units of work or by items to be described.

開始条件取得部123は、例えば選択された説明項目の再生の開始を指示する音声を開始条件として取得する。開始条件には、例えば「説明を開始してください」、「作業を行います」、「作業を開始します」のように様々な作業に共通する言葉の他、説明項目の内容を表す言葉でもよい。例えば「ガスを安全にご利用いただくために注意すべき事項」を開始条件とする。 The start condition acquisition unit 123 acquires, for example, a voice instructing the start of reproduction of the selected explanatory item as a start condition. The start condition includes words that are common to various tasks such as "Please start the explanation", "Do the work", and "Start the work", as well as words that express the contents of the explanation items. good. For example, the starting condition is "Matters to be noted for safe use of gas".

開始判定部124は、会話情報取得部121で取得された会話情報と開始条件とを照合し、開始条件を満たすか否かを判定する。もっとも、再生ボタン106b(図2参照)が操作された場合には、開始条件が満たされるとみなしてもよい。
説明記憶部125は、作業者51が担当する作業に関する説明データを記憶している。また、インターネットとの接続が可能な場合、不図示のサーバから説明データを説明記憶部125にダウンロードしてもよい。ここでのダウンロードは、選択の可能性がある全ての説明データでもよいし、説明の対象に選択された説明データだけでもよい。
The start determination unit 124 collates the conversation information acquired by the conversation information acquisition unit 121 with the start condition, and determines whether or not the start condition is satisfied. However, when the play button 106b (see FIG. 2) is operated, it may be considered that the start condition is satisfied.
The explanatory storage unit 125 stores explanatory data related to the work in charge of the worker 51. Further, when the connection with the Internet is possible, the explanatory data may be downloaded to the explanatory storage unit 125 from a server (not shown). The download here may be all the explanatory data that may be selected, or may be only the explanatory data selected as the object of explanation.

説明提供部126は、開始指示が与えられると、選択された説明項目に対応する説明データを読み出し、機器ユーザ11に提供する。具体的には、説明提供部126は、スピーカ105から説明を出力する。なお、機器ユーザ11の本人認証は不要である。
会話録音部127は、説明に対する機器ユーザ11からの応答や質問を不図示の半導体メモリに録音する。
When the start instruction is given, the explanation providing unit 126 reads out the explanation data corresponding to the selected explanation item and provides it to the device user 11. Specifically, the explanation providing unit 126 outputs the explanation from the speaker 105. It should be noted that the personal authentication of the device user 11 is unnecessary.
The conversation recording unit 127 records a response or a question from the device user 11 to the explanation in a semiconductor memory (not shown).

音声通知部128は、録音された応答や質問を作業者51が携帯する携帯端末50に通知する。作業中の作業者51に通知される音声に質問が含まれる場合、作業者51は、実施の形態1で説明した機能を活用して回答データを送信する。なお、質問の内容が既存の説明データで対応可能な場合には、実施の形態1と同様、端末装置10が自律的に説明を出力してもよい。 The voice notification unit 128 notifies the mobile terminal 50 carried by the worker 51 of the recorded response or question. When the voice notified to the worker 51 during work includes a question, the worker 51 transmits the answer data by utilizing the function described in the first embodiment. If the content of the question can be dealt with by the existing explanatory data, the terminal device 10 may autonomously output the explanation as in the first embodiment.

進捗通知部129は、端末装置10による説明の進捗の状況を携帯端末50に通知する。この通知により、作業者51は、説明の進捗を把握しながら、修理や点検等の作業を実施することができる。
なお、通知の内容には、個々の説明に要する時間の表示が含まれる。
The progress notification unit 129 notifies the mobile terminal 50 of the progress of the explanation by the terminal device 10. By this notification, the worker 51 can carry out work such as repair and inspection while grasping the progress of the explanation.
The content of the notification includes an indication of the time required for each explanation.

<処理動作>
図9は、実施の形態3で使用する端末装置10が実行する処理動作を説明するフローチャートである。なお、図9に示す処理動作は、制御部108(図2参照)によるプログラムの実行を通じて実現される。なお、図中における記号のSはステップを表している。
<Processing operation>
FIG. 9 is a flowchart illustrating a processing operation executed by the terminal device 10 used in the third embodiment. The processing operation shown in FIG. 9 is realized through the execution of the program by the control unit 108 (see FIG. 2). The symbol S in the figure represents a step.

図9に示す処理動作は、機器に関する説明を提供する方法(すなわち「機器説明提供方法」)の一例である。
図9に示す処理動作は、例えば作業者51が端末装置10を起動することで開始される。例えば現場に到着した作業者51は、修理や点検等の対象である機器を確認し、端末装置10を起動する。
The processing operation shown in FIG. 9 is an example of a method for providing an explanation about a device (that is, a “device description providing method”).
The processing operation shown in FIG. 9 is started, for example, when the worker 51 activates the terminal device 10. For example, the worker 51 who arrives at the site confirms the device to be repaired or inspected, and activates the terminal device 10.

最初に、端末装置10は、作業者51が選択した説明項目を受け付ける(ステップ11)。なお、説明項目の選択は訪問前に行われてもよいし、遠隔で実行されてもよい。例えば作業者51が操作する携帯端末50からの通信により設定されてもよい。
選択された説明項目については、説明に要する時間の情報が示されてもよい。
次に、端末装置10は、説明項目に応じて定められている開始条件を取得する(ステップ12)。
First, the terminal device 10 receives the explanatory item selected by the worker 51 (step 11). The selection of the explanatory items may be performed before the visit or may be performed remotely. For example, it may be set by communication from the mobile terminal 50 operated by the worker 51.
For the selected explanatory item, information on the time required for explanation may be shown.
Next, the terminal device 10 acquires the start conditions defined according to the explanatory items (step 12).

その後、端末装置10は、音声を検知したか否かを判定する(ステップ13)。ステップ13で否定結果が得られている間、端末装置10はステップ13の判定を繰り返す。
一方、ステップ13で肯定結果が得られた場合、端末装置10は、音声を解析して音の内容を特定する(ステップ14)。
After that, the terminal device 10 determines whether or not the voice is detected (step 13). While the negative result is obtained in step 13, the terminal device 10 repeats the determination in step 13.
On the other hand, when an affirmative result is obtained in step 13, the terminal device 10 analyzes the voice and identifies the content of the sound (step 14).

その後、端末装置10は、開始条件を満たすか否かを判定する(ステップ15)。例えば作業者51は、作業に先立って「これから、このロボットが、『ガスを安全にご利用いただくために注意すべき事項』のご説明をします。その間に、私は、ガスが使用できるための作業を行います。」と伝えると、端末装置10は、この音声中に開始条件を満たす言葉が含まれるか否かを判定する。
なお、機器ユーザ11が「説明を始めて」との言葉を発したか否かを判定してもよい。
After that, the terminal device 10 determines whether or not the start condition is satisfied (step 15). For example, the worker 51 will explain "Matters to be noted for this robot to use gas safely from now on" prior to the work. In the meantime, I can use gas. The terminal device 10 determines whether or not a word satisfying the start condition is included in the voice.
It should be noted that it may be determined whether or not the device user 11 has issued the word "begin explanation".

ステップ15で否定結果が得られている間、端末装置10はステップ13に戻る。
一方、ステップ15で肯定結果が得られた場合、端末装置10は、説明の提供を開始する(ステップ16)。
このとき、作業者51は、既に作業を開始している。例えばガスの使用の開始に伴う作業の場合、作業者51は、ガスメータの元栓を開き、機器ユーザ11の自宅内で点火の確認試験等を行う。また、風呂釜、湯沸器などのガス機器を対象に、排気ガス中に含まれる一酸化炭素の濃度を測定する。
While the negative result is obtained in step 15, the terminal device 10 returns to step 13.
On the other hand, if a positive result is obtained in step 15, the terminal device 10 starts to provide the explanation (step 16).
At this time, the worker 51 has already started the work. For example, in the case of work accompanying the start of gas use, the worker 51 opens the main plug of the gas meter and conducts an ignition confirmation test or the like in the home of the equipment user 11. In addition, the concentration of carbon monoxide contained in the exhaust gas is measured for gas appliances such as bath kettles and water heaters.

説明を開始した端末装置10は、説明の進捗を作業者51に通知する(ステップ17)。
また、端末装置10は、説明した内容に関する理解を機器ユーザに確認する(ステップ18)。
この確認は、説明の区切り毎に実行される。例えば「今までの説明は解りましたか?」との問い合わせを挿入し、機器ユーザ11からの応答を録音する。ここでの問い合わせや応答も会話の一例である。
The terminal device 10 that has started the explanation notifies the worker 51 of the progress of the explanation (step 17).
Further, the terminal device 10 confirms the understanding of the described contents with the device user (step 18).
This confirmation is performed at each description break. For example, insert the inquiry "Did you understand the explanation so far?" And record the response from the device user 11. Inquiries and responses here are also examples of conversations.

機器ユーザ11からの応答は、説明項目に紐づけて記録する。これにより、改めてチェック書類への記入を省略することが可能になる。
なお、ステップ18における確認の記録は、作業者51が携帯する携帯端末50にも記録される。この記録は、作業者51の作業記録としても保存される。
The response from the device user 11 is recorded in association with the explanatory item. This makes it possible to omit filling out the check documents again.
The confirmation record in step 18 is also recorded in the mobile terminal 50 carried by the worker 51. This record is also stored as a work record of the worker 51.

確認された機器ユーザ11の理解が否定的であった場合、端末装置10は、機器ユーザ11が気になっている事項を聞き出すための言葉を追加的に出力する。例えば「何がわかりにくかったですか?」等の言葉を出力し、機器ユーザ11の発話を促す。 If the confirmed understanding of the device user 11 is negative, the terminal device 10 additionally outputs words for asking the device user 11 for the matter of concern. For example, a word such as "What was difficult to understand?" Is output to encourage the device user 11 to speak.

次に、端末装置10は、機器ユーザ11から質問があるか否かを判定する(ステップ19)。ここでの質問には、機器ユーザ11が知りたい情報や疑問とする内容が含まれる。
ステップ19で肯定結果が得られた場合、端末装置10は、機器ユーザ11の質問を録音し、作業者51に通知する(ステップ20)。
Next, the terminal device 10 determines whether or not there is a question from the device user 11 (step 19). The question here includes information that the device user 11 wants to know and content that the device user 11 has a question about.
If an affirmative result is obtained in step 19, the terminal device 10 records the question of the device user 11 and notifies the worker 51 (step 20).

この通知により、作業者51は、作業中でも、作業を中断して機器ユーザ11に追加の説明を行うことが可能になる。追加の説明は、作業者51の音声によっても可能であるし、携帯端末50に対する文字の入力によっても可能である。これにより、お客様へのサービスが向上される。
なお、通知の内容や対応時の会話も端末装置10で録音され、携帯端末50に通知される。ここでの説明も作業記録として用いられる。
With this notification, the worker 51 can interrupt the work and give an additional explanation to the device user 11 even during the work. Additional explanations can be made by the voice of the worker 51 or by inputting characters to the mobile terminal 50. This will improve the service to our customers.
The content of the notification and the conversation at the time of correspondence are also recorded by the terminal device 10 and notified to the mobile terminal 50. The explanation here is also used as a work record.

実施の形態1で説明したように、端末装置10による自律的な対応で完結可能な場合には、作業者51への通知は必ずしも必要でない。また、実施の形態1の場合と同様に、機器ユーザ11の感情や緊張度合いを分析し、説明データや回答データの話し方を変更する機能を用意してもよい。
一方、ステップ19で否定結果が得られた場合、端末装置10は、ステップ20をスキップしてステップ21に進む。
As described in the first embodiment, when the terminal device 10 can complete the process autonomously, the notification to the worker 51 is not always necessary. Further, as in the case of the first embodiment, a function of analyzing the emotion and tension of the device user 11 and changing the way of speaking the explanation data and the answer data may be provided.
On the other hand, if a negative result is obtained in step 19, the terminal device 10 skips step 20 and proceeds to step 21.

この後、端末装置10は、説明の終了か否かを判定する(ステップ21)。ステップ11で選択された全ての説明項目について説明が終了した場合、ステップ21で肯定結果が得られる。この場合、端末装置10は、一連の動作を終了する。
一方、説明事項が残る場合、ステップ21で否定結果が得られる。ステップ21で否定結果が得られた場合、端末装置10は、ステップ13に戻る。
After that, the terminal device 10 determines whether or not the description has ended (step 21). When the explanation for all the explanatory items selected in step 11 is completed, a positive result is obtained in step 21. In this case, the terminal device 10 ends a series of operations.
On the other hand, if the explanation remains, a negative result is obtained in step 21. If a negative result is obtained in step 21, the terminal device 10 returns to step 13.

<家庭内のネットワークに接続できない場合の構成>
図10は、実施の形態3で使用する端末装置10が家庭内のネットワーク環境に接続されていない場合に通信路20上のサーバ70に接続するための通信経路を説明する図である。図10には、図7との対応部分に対応する符号を付して示している。
<Configuration when you cannot connect to the home network>
FIG. 10 is a diagram illustrating a communication path for connecting to the server 70 on the communication path 20 when the terminal device 10 used in the third embodiment is not connected to the network environment in the home. FIG. 10 is shown with reference numerals corresponding to the portions corresponding to those in FIG. 7.

端末装置10が家庭内のネットワーク環境を通じて通信路20に接続できない場合や移動通信システムに接続できない場合に、音声認識等のサービスを利用するためにサーバ70に接続するには、作業者51が携帯する携帯端末50を通じてサーバ70に接続すればよい。
また、携帯端末50に代えて、作業者51が持参する不図示の端末をアクセスポイントを用いて通信路20に接続してもよい。
When the terminal device 10 cannot connect to the communication path 20 or the mobile communication system through the network environment in the home, the worker 51 carries it to connect to the server 70 in order to use services such as voice recognition. The server 70 may be connected to the server 70 through the mobile terminal 50.
Further, instead of the mobile terminal 50, a terminal (not shown) brought by the worker 51 may be connected to the communication path 20 by using an access point.

<他の実施の形態>
以上、本発明の実施の形態について説明したが、本発明の技術的範囲は、前述の実施の形態に記載の範囲に限定されない。前述した実施の形態に、種々の変更又は改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。
<Other embodiments>
Although the embodiments of the present invention have been described above, the technical scope of the present invention is not limited to the scope described in the above-described embodiments. It is clear from the description of the claims that the above-mentioned embodiments with various modifications or improvements are also included in the technical scope of the present invention.

前述の実施の形態1の場合、端末装置10(図1参照)を機器ユーザ11から質問があった場合における説明や回答に使用し、実施の形態3の場合、作業者51が選択した説明項目についての説明に使用しているが、ガス機器のメンテナンス時期の連絡や料金の支払い状況の説明等の各種サービスへの利用も可能である。 In the case of the above-described first embodiment, the terminal device 10 (see FIG. 1) is used for explanation and answer when a question is asked by the device user 11, and in the case of the third embodiment, the explanation item selected by the worker 51. It is also used for various services such as contacting the maintenance time of gas appliances and explaining the payment status of gas appliances.

前述の実施の形態においては、機器として、ガス機器を想定しているが、例えば住宅設備や電化製品を含めてもよい。住宅設備には、例えばキッチンの設備、バスルームの設備、洗面台の設備、トイレの設備、照明の設備、空調設備、太陽光発電設備、太陽光温水器、エレベータ、給湯設備がある。また、電化製品には、例えば冷蔵庫、調理家電、エアコン、照明、プリンタ、コンピュータを含めてもよい。 In the above-described embodiment, gas appliances are assumed as the equipment, but for example, housing equipment and electric appliances may be included. Housing equipment includes, for example, kitchen equipment, bathroom equipment, washbasin equipment, toilet equipment, lighting equipment, air conditioning equipment, photovoltaic power generation equipment, solar water heaters, elevators, and hot water supply equipment. Further, the electric appliances may include, for example, a refrigerator, a cooking appliance, an air conditioner, a lighting, a printer, and a computer.

1、1A、1B…コミュニケーションシステム、10…端末装置、11…機器ユーザ、20…通信路、30…情報端末、31…オペレータ、40、70…サーバ、50…携帯端末、51…作業者、60…ガスメータ、61…ガス機器 1, 1A, 1B ... Communication system, 10 ... Terminal device, 11 ... Device user, 20 ... Communication path, 30 ... Information terminal, 31 ... Operator, 40, 70 ... Server, 50 ... Mobile terminal, 51 ... Worker, 60 … Gas meter, 61… Gas equipment

Claims (5)

機器に関する質問データと説明データとを関連付けて記憶する記憶手段と、
記憶された複数の前記説明データの中から、機器ユーザからの質問に対応する当該説明データを選択する選択手段と、
機器ユーザからの質問に応じて機器の担当者に通知する通知手段と、
通知を受けた前記担当者からの回答データを取得する取得手段と、
選択した前記説明データ又は取得した前記回答データを音声により機器ユーザに提供する提供手段と、
を有する対話型コミュニケーション装置。
A storage means for storing question data and explanation data related to the device in association with each other,
A selection means for selecting the explanatory data corresponding to the question from the device user from the plurality of stored explanatory data, and
Notification means to notify the person in charge of the device in response to a question from the device user,
An acquisition method for acquiring response data from the person in charge who received the notification,
Providing means for providing the selected explanatory data or the acquired response data to the device user by voice, and
Interactive communication device with.
前記記憶手段は、前記回答データを、機器ユーザの前記質問データに対する前記説明データに関連付けて記憶する、
請求項1記載の対話型コミュニケーション装置。
The storage means stores the answer data in association with the explanatory data for the question data of the device user.
The interactive communication device according to claim 1.
前記通知手段は、機器ユーザからの前記質問の内容、又は、提供した前記説明データ又は前記回答データに対する機器ユーザからの応答の内容が予め定められた条件を満たす場合、前記担当者に通知する、
請求項1記載の対話型コミュニケーション装置。
The notification means notifies the person in charge when the content of the question from the device user or the content of the response from the device user to the provided explanatory data or the response data satisfies a predetermined condition.
The interactive communication device according to claim 1.
機器ユーザからの質問に対して自律的に対応する対話型コミュニケーション装置から、機器ユーザの質問データを取得した場合に、当該質問データに対する回答データの入力を機器の担当者から受け付ける受付手段と、
受け付けた前記回答データを、前記対話型コミュニケーション装置に送信する送信手段と、
を有する機器説明支援システム。
When the question data of the device user is acquired from the interactive communication device that autonomously responds to the question from the device user, the reception means for accepting the input of the answer data to the question data from the person in charge of the device.
A transmission means for transmitting the received response data to the interactive communication device, and
Equipment explanation support system with.
機器ユーザに対し、機器に関する説明を対話形式で提供する対話型コミュニケーション装置を利用する機器説明提供方法であって、
コンピュータは、
前記機器に関する説明を音声により機器ユーザに提供するために、会話に関する情報を取得し、
前記機器の担当者が行う作業の内容に応じて予め定められている開始条件を取得し、
前記会話に関する情報が前記開始条件に合致するか否かを判定し、
前記会話に関する情報が前記開始条件に合致する場合、機器ユーザに対する前記機器に関する説明の提供を開始する
機器説明提供方法。
It is a device explanation providing method using an interactive communication device that interactively provides an explanation about the device to the device user.
Computer
In order to provide the device user with an explanation about the device by voice, information about the conversation is acquired.
Acquire predetermined start conditions according to the content of the work performed by the person in charge of the equipment, and obtain
It is determined whether or not the information regarding the conversation meets the start condition, and the information is determined.
A device description providing method for starting to provide a description of the device to a device user when the information related to the conversation meets the start condition.
JP2020176396A 2020-10-21 2020-10-21 Interactive communication device, apparatus explanation support system, and apparatus explanation provision method Pending JP2022067684A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020176396A JP2022067684A (en) 2020-10-21 2020-10-21 Interactive communication device, apparatus explanation support system, and apparatus explanation provision method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020176396A JP2022067684A (en) 2020-10-21 2020-10-21 Interactive communication device, apparatus explanation support system, and apparatus explanation provision method

Publications (1)

Publication Number Publication Date
JP2022067684A true JP2022067684A (en) 2022-05-09

Family

ID=81456183

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020176396A Pending JP2022067684A (en) 2020-10-21 2020-10-21 Interactive communication device, apparatus explanation support system, and apparatus explanation provision method

Country Status (1)

Country Link
JP (1) JP2022067684A (en)

Similar Documents

Publication Publication Date Title
US10152976B2 (en) Device control method, display control method, and purchase settlement method
CN112513833B (en) Electronic device and method for providing artificial intelligence services based on pre-synthesized dialogs
US10832674B2 (en) Voice data processing method and electronic device supporting the same
US10810529B2 (en) Directing an inspector through an inspection
JP7059929B2 (en) Information processing equipment
EP2908281A1 (en) Product information provision system, product information provision device, and product information output device
JP6462628B2 (en) Product sales support system and product sales support method
JP6920773B1 (en) Information provision method, information provision system, information provision device and computer program
CN111179935A (en) Voice quality inspection method and device
KR20190127372A (en) Electronic device and method for executing function of electronic device
CN112567718A (en) Electronic device for performing tasks including calls in response to user speech and method of operation
JP2014081693A (en) Commodity information provision system, commodity information provision device, and commodity information output device
JP5220953B1 (en) Product information providing system, product information providing device, and product information output device
EP3800561A1 (en) Electronic device and control method for electronic device
KR102511517B1 (en) Voice input processing method and electronic device supportingthe same
KR102421745B1 (en) System and device for generating TTS model
JP2022067684A (en) Interactive communication device, apparatus explanation support system, and apparatus explanation provision method
CN106802941B (en) A kind of generation method and equipment of reply message
CN106571143A (en) Method and device for controlling intelligent device
KR102519635B1 (en) Method for displaying an electronic document for processing a voice command and electronic device thereof
JP2020052857A (en) Estimation system and estimation method
JPWO2019244304A1 (en) Device control signal registration device, device control signal registration system, device control signal registration method, and device control signal registration program
JP7258686B2 (en) Information processing system, information processing method, and program
JPWO2019103007A1 (en) Information processing device and information processing method
KR20210052972A (en) Apparatus and method for supporting voice agent involving multiple users

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230524

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240528