JP2019062374A - Management device, management system, management method, and program - Google Patents

Management device, management system, management method, and program Download PDF

Info

Publication number
JP2019062374A
JP2019062374A JP2017185045A JP2017185045A JP2019062374A JP 2019062374 A JP2019062374 A JP 2019062374A JP 2017185045 A JP2017185045 A JP 2017185045A JP 2017185045 A JP2017185045 A JP 2017185045A JP 2019062374 A JP2019062374 A JP 2019062374A
Authority
JP
Japan
Prior art keywords
user
unit
management
remote control
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017185045A
Other languages
Japanese (ja)
Other versions
JP6706601B2 (en
Inventor
知彦 高橋
Tomohiko Takahashi
知彦 高橋
雅文 博野
Masafumi Hirono
雅文 博野
松木 友明
Tomoaki Matsuki
友明 松木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2017185045A priority Critical patent/JP6706601B2/en
Publication of JP2019062374A publication Critical patent/JP2019062374A/en
Priority to JP2020086676A priority patent/JP6945678B2/en
Application granted granted Critical
Publication of JP6706601B2 publication Critical patent/JP6706601B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To perform notification when a specific user such as a child performs remote control which is no administrator's intention.SOLUTION: A management device 100 includes a receiving unit that receives a remote control command for operating an operation target device from an operation terminal used by a user and identification information for specifying the user and an operation management unit 136 causes a signal output device 500 that outputs a signal to the operation target device to output a signal corresponding to the remote control command received by the receiving unit when an operation content indicated by the remote control command received by the receiving unit is permitted to the user specified by the identification information received by the receiving unit, and notifies the operation terminal of the management user who can change whether to permit the operation content to the user when the operation content indicated by the remote control command received by the receiving unit is permitted to the user specified by the identification information received by the receiving unit.SELECTED DRAWING: Figure 6

Description

本発明は、操作対象装置を操作するための管理装置、管理システム、管理方法及びプログラムに関する。   The present invention relates to a management apparatus, a management system, a management method, and a program for operating an operation target apparatus.

近年、スマートフォン等の携帯端末を用いて、家電製品を屋外から遠隔操作する技術が開発されている。例えば、特許文献1には、ユーザ登録を予め行ったもののみが、通信ネットワークを通じて、エアコンを携帯端末装置から遠隔操作可能とすることが記載されている。   In recent years, a technology has been developed for remotely controlling a home appliance from outside using a mobile terminal such as a smartphone. For example, Patent Document 1 describes that only the user registered in advance can remotely control the air conditioner from the portable terminal device through the communication network.

特開2014−211833号公報JP, 2014-211833, A

こどもがいたずらで家電製品を遠隔操作することに起因して、宅内の電力使用量が過大となることがある。このため、こどもが保護者に許可された家電製品の遠隔操作とは異なる操作を行った場合等に保護者が把握しておきたいという需要がある。   The power consumption of the home may be excessive due to the child remotely operating the home appliance with mischief. For this reason, there is a demand that the guardian wants to know when the child performs an operation different from the remote operation of the home appliance permitted to the parent.

そこで、本発明は、上記の問題に鑑みてなされたものであり、こども等の特定のユーザが管理者の意図とは異なる遠隔操作を行った場合に通知することができる管理装置、管理システム、管理方法又はプログラムを提供することを目的とする。   Therefore, the present invention has been made in view of the above problems, and a management apparatus and a management system that can be notified when a specific user such as a child performs a remote operation different from the intention of the manager. It aims to provide a management method or program.

本発明の第1の態様の管理装置は、ユーザが使用する操作端末からの操作対象装置を操作するための遠隔操作命令と、当該ユーザを特定するための識別情報とを受信する受信部と、前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されている場合に、前記操作対象装置へ信号を出力する信号出力装置に前記受信部が受信した前記遠隔操作命令に対応する信号を出力させ、前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知する操作管理部と、を有する。   A management apparatus according to a first aspect of the present invention is a receiving unit for receiving a remote control instruction for operating an operation target device from an operation terminal used by the user, and identification information for identifying the user. Signal output for outputting a signal to the operation target device when the operation content instructed by the remote control instruction received by the receiving unit is permitted to the user specified by the identification information received by the receiving unit The apparatus outputs a signal corresponding to the remote control instruction received by the reception unit, and the operation content instructed by the remote operation instruction received by the reception unit is specified by the identification information received by the reception unit And an operation management unit configured to notify an operation terminal of a management user who can change whether or not the user is permitted to perform the operation content when the user is not permitted.

前記管理ユーザの前記操作端末の位置を示す位置情報を前記操作端末から取得する端末情報取得部と、前記位置情報に基づいて、前記操作対象装置が設置された所定エリア内に前記管理ユーザの前記操作端末が存在するか否かを判定する判定部と、前記操作管理部は、前記管理ユーザの前記操作端末が前記所定エリア内に存在すると前記判定部において判定した場合に、前記操作内容が前記受信部において受信した前記識別情報により特定されるユーザに許可されているか否かにかかわらず、前記信号出力装置に前記受信部が受信した前記遠隔操作命令に対応する信号を出力させてもよい。   A terminal information acquisition unit for acquiring from the operation terminal position information indicating the position of the operation terminal of the management user, and based on the position information, the management user's in the predetermined area where the operation target device is installed When the determination unit determines whether or not the operation terminal exists, and the operation management unit determines that the operation terminal of the management user is in the predetermined area, the operation content is determined to be the operation content The signal output device may output a signal corresponding to the remote control instruction received by the receiver regardless of whether the user specified by the identification information received by the receiver is permitted or not.

前記操作管理部は、宅内設置用の前記操作端末から前記遠隔操作命令と、当該操作端末を特定するための端末特定情報を前記受信部が受信し、且つ、当該端末特定情報に前記管理ユーザの識別情報が関連付けられていることを条件として、当該遠隔操作命令が指示する操作内容が前記識別情報により特定されるユーザに許可されているか否かにかかわらず、前記信号出力装置に前記受信部が受信した前記遠隔操作命令に対応する信号を出力させてもよい。前記受信部は、音声認証により特定された前記識別情報を受信してもよい。   The operation management unit receives the remote operation instruction and terminal identification information for identifying the operation terminal from the operation terminal for home installation, and the reception unit receives the terminal identification information, and the terminal identification information includes the management user Under the condition that identification information is associated, the signal output apparatus receives the reception content regardless of whether or not the operation content instructed by the remote control instruction is permitted to the user specified by the identification information. A signal corresponding to the received remote control command may be output. The receiving unit may receive the identification information identified by voice authentication.

前記受信部は、音声認識により認識された前記遠隔操作命令を取得し、前記管理装置は、前記遠隔操作命令と、前記信号出力装置に信号を出力させるための制御情報とを関連付けて記憶する記憶部と、音声認識により認識するための遠隔操作命令と、当該遠隔操作命令により指示される操作内容とをそれぞれ指定するユーザの指示を取得する指示取得部と、前記指示取得部が前記管理ユーザ及び前記管理ユーザ以外のユーザのいずれの指示を取得したかにかかわらず、前記指示取得部が取得した前記遠隔操作命令と、前記指示取得部が取得した前記操作内容に対応する前記制御情報とを関連付けて記憶させる操作指示変更部とを更に備えてもよい。   The reception unit acquires the remote control instruction recognized by voice recognition, and the management device stores the remote control instruction and control information for causing the signal output device to output a signal in association with each other. An instruction acquiring unit for acquiring an instruction of a user specifying a remote operation instruction for recognizing by a voice recognition and an operation content instructed by the remote operation instruction; The remote operation instruction acquired by the instruction acquiring unit is associated with the control information corresponding to the operation content acquired by the instruction acquiring unit regardless of which instruction of the user other than the management user is acquired It may further include an operation instruction change unit to be stored.

前記操作管理部は、前記指示取得部が取得した遠隔操作命令を指示したユーザ及び当該ユーザに関連付けられた関連ユーザのいずれかが発した音声により当該遠隔操作命令が認識された場合に、前記指示取得部が取得した操作内容に対応する信号を前記信号出力装置に出力させてもよい。   The operation management unit is configured to receive the remote control instruction when the remote control instruction is recognized by a voice issued by any of the user who instructed the remote control instruction acquired by the instruction acquisition unit and the related user associated with the user. The signal output device may be caused to output a signal corresponding to the operation content acquired by the acquisition unit.

本発明の第2の態様の管理システムは、操作対象装置を遠隔操作するための管理システムであって、前記管理システムは、複数の操作端末と、管理装置と、前記操作対象装置へ信号を出力する信号出力装置とを有し、前記複数の操作端末は、前記操作対象装置を操作するための遠隔操作命令を生成する生成部と、前記遠隔操作命令を前記管理装置へ送信する送信部と、を有し、前記管理装置は、前記遠隔操作命令と、前記操作端末を使用するユーザを特定するための識別情報とを受信する受信部と、前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されている場合に、当該遠隔操作命令に対応する信号を前記信号出力装置に出力させ、前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知する操作管理部と、を有する。   A management system according to a second aspect of the present invention is a management system for remotely operating an operation target device, and the management system outputs signals to a plurality of operation terminals, a management device, and the operation target device. A plurality of operation terminals, a generation unit generating a remote control instruction for operating the operation target apparatus, and a transmission unit transmitting the remote control instruction to the management apparatus; A receiving unit for receiving the remote control command and identification information for specifying a user who uses the operation terminal, and the remote control command received by the receiving unit instructs When the operation content is permitted to the user specified by the identification information received by the receiving unit, a signal corresponding to the remote control instruction is output to the signal output device, and the receiving unit receives the signal before the reception A management user who can change whether or not the operation content is permitted to the user when the operation content instructed by the remote operation instruction is not permitted to the user specified by the identification information received by the reception unit And an operation management unit for notifying the operation terminal of

本発明の第3の態様の管理方法は、ユーザが使用する操作端末からの操作対象装置を操作するための遠隔操作命令と、当該ユーザを特定するための識別情報とを受信するステップと、受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されている場合に、前記操作対象装置へ信号を出力する信号出力装置に当該遠隔操作命令に対応する信号を出力させ、受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知するステップと、を有する。   A management method according to a third aspect of the present invention includes the steps of receiving a remote control instruction for operating an operation target device from an operation terminal used by a user, receiving identification information for specifying the user, and receiving When the operation content indicated by the remote control instruction is permitted to the user specified by the received identification information, the remote control instruction corresponds to a signal output device that outputs a signal to the operation target device. A signal is output, and it is changed whether or not the operation content is permitted to the user when the operation content instructed by the received remote operation instruction is not permitted to the user specified by the received identification information. Notifying the possible management user's operation terminal.

本発明の第4の態様のプログラムは、コンピュータにユーザが使用する操作端末からの操作対象装置を操作するための遠隔操作命令と、当該ユーザを特定するための識別情報とを受信するステップと、受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されている場合に、前記操作対象装置へ信号を出力する信号出力装置に前記遠隔操作命令に対応する信号を出力させ、受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知するステップと、を実行させる。   A program according to a fourth aspect of the present invention comprises the steps of receiving on a computer a remote control instruction for operating an operation target device from an operation terminal used by a user, and identification information for identifying the user. A signal output device that outputs a signal to the operation target device when the operation content instructed by the received remote operation instruction is permitted to the user specified by the received identification information corresponds to the remote operation instruction Signal is output, and if the operation content instructed by the received remote operation instruction is not permitted to the user specified by the received identification information, whether the operation content is permitted to the user or not Notifying the changeable management user's operation terminal.

本発明によれば、こども等の特定のユーザが管理者の意図とは異なる遠隔操作を行った場合に通知することができる。   According to the present invention, it is possible to notify when a specific user such as a child performs remote control different from the administrator's intention.

本発明の実施形態に係る管理システムの概要について説明するための図である。It is a figure for explaining an outline of a management system concerning an embodiment of the present invention. 操作端末の構成を示す図である。It is a figure which shows the structure of an operation terminal. 生成部の動作の例について説明するための図である。It is a figure for demonstrating the example of operation | movement of a production | generation part. 音声認識サーバの構成を示す図である。It is a figure which shows the structure of a speech recognition server. 音声認証部の動作を説明するための図である。It is a figure for demonstrating the operation | movement of a voice authentication part. 管理装置の構成を示す図である。It is a figure which shows the structure of a management apparatus. 判定部の動作について説明するための図である。It is a figure for demonstrating the operation | movement of a determination part. 管理装置の動作の一例を示したフローチャートである。It is the flowchart which showed an example of operation | movement of a management apparatus.

[管理システムSの概要]
図1は、本発明の実施形態に係る管理システムSの概要について説明するための図である。管理システムSは、ユーザの遠隔操作命令により操作対象装置600a及び600bを操作するためのシステムである。管理システムSは、管理装置100、操作端末200a、操作端末200b、操作端末300、音声認識サーバ400、信号出力装置500、操作対象装置600a及び600bを備える。図1の例では、操作端末300、信号出力装置500、操作対象装置600a及び600bは、宅内Nに設置されている。
[Overview of Management System S]
FIG. 1 is a diagram for describing an overview of a management system S according to an embodiment of the present invention. The management system S is a system for operating the operation target devices 600a and 600b according to a user's remote control command. The management system S includes a management device 100, an operation terminal 200a, an operation terminal 200b, an operation terminal 300, a voice recognition server 400, a signal output device 500, and operation target devices 600a and 600b. In the example of FIG. 1, the operation terminal 300, the signal output device 500, and the operation target devices 600a and 600b are installed in the house N.

操作端末200a及び200bは、例えば、スマートフォンである。操作端末200a及び200bは、LTE又はWi−Fi(登録商標)等の無線通信回線を介して、管理装置100に接続されている。操作端末200a及び200bは、操作対象装置600a又は600bを操作するための遠隔操作命令を管理装置100に送信する。遠隔操作命令は、操作端末200a及び200bにより操作する操作対象装置を指定する情報と、指定された操作対象装置に実行させる機能を指示する情報との両方を含む。なお、遠隔操作命令は、操作端末200a及び200bにより操作する操作対象装置を指定する情報、及び指定された操作対象装置に実行させる機能を指定する情報のうち、いずれか一方のみを含んでもよい。操作端末200a及び200bは、操作対象装置600a及び600bと同じ宅内Nから遠隔操作命令を送信してもよく、宅内N以外の場所から遠隔操作命令を送信してもよい。   The operating terminals 200a and 200b are, for example, smartphones. The operation terminals 200a and 200b are connected to the management apparatus 100 via a wireless communication line such as LTE or Wi-Fi (registered trademark). The operation terminals 200a and 200b transmit, to the management device 100, a remote control instruction for operating the operation target device 600a or 600b. The remote control instruction includes both information specifying an operation target device operated by the operation terminals 200a and 200b and information specifying a function to be executed by the specified operation target device. The remote control instruction may include only one of information specifying an operation target device operated by the operation terminals 200a and 200b and information specifying a function to be performed by the specified operation target device. The operation terminals 200a and 200b may transmit the remote control instruction from the same home N as the operation target devices 600a and 600b, or may transmit the remote control instruction from a place other than the home N.

例えば、操作端末200a及び200bは、操作対象装置600a及び600bを操作するためのアプリを起動することにより、操作対象装置600a及び600bを操作するためのユーザの操作入力を受け付ける。操作端末200a及び200bは、受け付けた操作入力に応じた遠隔操作命令と、操作端末200a及び200bを使用するユーザを特定するための識別情報とを管理装置100に送信する。識別情報は、例えば、管理装置100又は音声認識サーバ400を運営する事業者がユーザに割り当てたユーザIDである。本実施の形態の例では、操作端末200a及び200bは、それぞれ一のユーザのみが使用するものとする。   For example, the operation terminals 200a and 200b receive an operation input of a user for operating the operation target devices 600a and 600b by activating an application for operating the operation target devices 600a and 600b. The operation terminals 200a and 200b transmit, to the management device 100, a remote operation instruction according to the received operation input and identification information for specifying a user who uses the operation terminals 200a and 200b. The identification information is, for example, a user ID assigned to the user by the operator operating the management apparatus 100 or the voice recognition server 400. In the example of the present embodiment, it is assumed that only one user uses operation terminals 200a and 200b.

操作端末200a及び200bのうち、操作端末200bは、管理ユーザの操作端末であり、操作端末200aは、管理ユーザ以外の非管理ユーザの操作端末である。管理ユーザは、管理ユーザを含むユーザに遠隔操作命令が指示する操作内容を許可するか否かを変更可能な権限を有するユーザである。非管理ユーザは、ユーザに遠隔操作命令が指示する操作内容を許可するか否かを変更可能な権限を有していないユーザである。   Among the operation terminals 200a and 200b, the operation terminal 200b is an operation terminal of a management user, and the operation terminal 200a is an operation terminal of a non-management user other than the management user. The administrative user is a user who has the authority to change whether or not to permit the user including the administrative user the operation content instructed by the remote operation instruction. The non-administrative user is a user who does not have the authority to change whether to permit the user to perform the operation content instructed by the remote control instruction.

操作端末300は、音声アシスタント機能及び無線通信機能を有する宅内設置用の音声入出力装置であり、いわゆるスマートスピーカである。操作端末300は、例えば、Wi−Fi等の無線通信により宅内Nのルータ(不図示)を介して音声認識サーバ400と接続している。操作端末300は、ユーザが発した音声を電気信号に変換した音声データを生成する。操作端末300は、生成した音声データと、操作端末300を特定するための端末特定情報とを音声認識サーバ400に送信する。端末特定情報は、例えば、操作端末300の物理アドレスである。操作端末300は、音声認識サーバ400と連携することにより、ユーザの発した音声を認識して各種の機能を実行する。   The operation terminal 300 is a voice input / output device for home installation having a voice assistant function and a wireless communication function, and is a so-called smart speaker. The operation terminal 300 is connected to the voice recognition server 400 via, for example, a router (not shown) in the house N by wireless communication such as Wi-Fi. The operation terminal 300 generates voice data in which voice generated by the user is converted into an electric signal. Operation terminal 300 transmits the generated voice data and terminal identification information for identifying operation terminal 300 to speech recognition server 400. The terminal identification information is, for example, a physical address of the operation terminal 300. The operation terminal 300 cooperates with the voice recognition server 400 to recognize voices uttered by the user and execute various functions.

音声認識サーバ400は、操作端末300が生成した音声データ及び端末特定情報を受信する。音声認識サーバ400は、音声認識技術により、受信した音声データから遠隔操作命令を認識する。音声認識サーバ400は、認識した遠隔操作命令を管理装置100へ送信する。   The voice recognition server 400 receives the voice data and the terminal identification information generated by the operation terminal 300. The voice recognition server 400 recognizes a remote control command from the received voice data by voice recognition technology. The voice recognition server 400 transmits the recognized remote control instruction to the management device 100.

また、音声認識サーバ400は、操作端末300に対してユーザが発した起動キーワードの音声認証により、ユーザを特定するためのユーザの識別情報を特定する。起動キーワードは、操作端末300を消費電力の小さい省電力状態から消費電力のより大きい待機状態に移行させるための数文字又は数ワード程度の語句である。ユーザは、操作端末300を操作する前に、操作端末300に対して起動キーワードを発するものとする。音声認識サーバ400は、認識した遠隔操作命令とともに、音声認証により特定したユーザの識別情報を管理装置100へ送信する。   Further, the voice recognition server 400 identifies the identification information of the user for identifying the user by voice authentication of the activation keyword issued by the user to the operation terminal 300. The activation keyword is a word of several characters or several words for shifting the operation terminal 300 from the power saving state with low power consumption to the standby state with high power consumption. Before operating the operation terminal 300, the user issues an activation keyword to the operation terminal 300. The voice recognition server 400 transmits the identification information of the user identified by voice authentication to the management apparatus 100 together with the recognized remote control command.

操作対象装置600a及び600bは、信号出力装置500が出力する信号により制御可能な装置であり、例えば、家電製品である。図1の例では、操作対象装置600aは、エアコンであり、操作対象装置600bは、テレビである。操作対象装置600a及び600bは、赤外線信号によって遠隔操作可能な装置である。   The operation target devices 600a and 600b are devices that can be controlled by a signal output from the signal output device 500, and are, for example, household appliances. In the example of FIG. 1, the operation target device 600a is an air conditioner, and the operation target device 600b is a television. The operation target devices 600a and 600b are devices that can be remotely controlled by infrared signals.

管理装置100は、操作端末200a、200b、音声認識サーバ400及び信号出力装置500と通信する。管理装置100は、操作端末200a、200b及び音声認識サーバ400から遠隔操作命令を受信する。また、管理装置100は、信号出力装置500を制御し、受信した遠隔操作命令に対応する信号を信号出力装置500に出力させることにより、操作対象装置600a又は600bを操作する。   The management device 100 communicates with the operation terminals 200 a and 200 b, the voice recognition server 400 and the signal output device 500. The management device 100 receives a remote control instruction from the operation terminals 200 a and 200 b and the voice recognition server 400. Further, the management device 100 controls the signal output device 500, and operates the operation target device 600a or 600b by causing the signal output device 500 to output a signal corresponding to the received remote control instruction.

管理装置100は、信号出力装置500に信号を出力させるための制御情報を記憶している。管理装置100は、受信した遠隔操作命令により指示された操作内容に対応する制御情報を読み出し、読み出した制御情報により信号出力装置500に信号を出力させる。操作内容は、操作対象の操作対象装置の指定と、この操作対象装置に実行させる機能の指示とを含む。制御情報は、信号出力装置500に登録されている信号パターンのうち、遠隔操作命令により指示された操作内容に対応する信号パターンの信号を信号出力装置500に出力させるための情報である。   The management device 100 stores control information for causing the signal output device 500 to output a signal. The management device 100 reads control information corresponding to the operation content instructed by the received remote control instruction, and causes the signal output device 500 to output a signal based on the read control information. The operation content includes designation of an operation target device to be operated and an instruction of a function to be executed by the operation target device. The control information is information for causing the signal output device 500 to output the signal of the signal pattern corresponding to the operation content instructed by the remote control instruction among the signal patterns registered in the signal output device 500.

また、管理装置100は、遠隔操作命令により操作対象装置600a又は600bを操作することを許可するか否かを決定する。管理装置100は、操作端末200aのユーザに許可された操作内容を指示する遠隔操作命令を操作端末200aから受信した場合には、制御信号を信号出力装置500に送信することにより、遠隔操作命令により指示された操作内容に対応する信号パターンの信号を信号出力装置500に出力させる。一方、管理装置100は、操作端末200aのユーザに許可されていない操作内容を指示する遠隔操作命令を操作端末200aから受信した場合には、制御信号を生成せず、許可されていない操作内容の遠隔操作命令を操作端末200aから受信したことを管理ユーザの操作端末200bに通知する。   Further, the management device 100 determines whether to permit operation of the operation target device 600a or 600b according to a remote control instruction. The management device 100 transmits a control signal to the signal output device 500 when receiving a remote control instruction from the operation terminal 200a for instructing the user of the operation terminal 200a to permit the content of the permitted operation. A signal of a signal pattern corresponding to the instructed operation content is output to the signal output device 500. On the other hand, when the management device 100 receives from the operation terminal 200a a remote control instruction instructing an operation content that is not permitted to the user of the operation terminal 200a, the management device 100 does not generate a control signal. It notifies that the management user's operation terminal 200b has received the remote control instruction from the operation terminal 200a.

信号出力装置500は、操作対象装置600a又は600bを操作するための信号をそれぞれ操作対象装置600a及び600bへ出力する。信号出力装置500は、例えば、赤外線式のリモートコントローラである。信号出力装置500には、操作対象装置ごとの操作内容に対応する信号パターンが登録されている。信号パターンは、例えば、点灯時間及び消灯時間の組み合わせからなる赤外線の点滅パターンである。信号出力装置500は、管理装置100から受信した制御情報により指定された信号パターンの信号を出力する。なお、宅内Nに複数の信号出力装置500が設置されていてもよい。   The signal output device 500 outputs a signal for operating the operation target device 600a or 600b to the operation target devices 600a and 600b, respectively. The signal output device 500 is, for example, an infrared remote controller. In the signal output device 500, a signal pattern corresponding to the operation content of each operation target device is registered. The signal pattern is, for example, an infrared blinking pattern consisting of a combination of lighting time and lighting off time. The signal output device 500 outputs a signal of a signal pattern specified by the control information received from the management device 100. A plurality of signal output devices 500 may be installed in the home N.

[操作端末200の構成]
図2は、操作端末200a及び200bの構成を示す図である。操作端末200a及び200bは、同一の構成を有する。操作端末200a及び200bは、表示部21、通信部22、記憶部23及び制御部24を備える。表示部21は、画像を表示するためのディスプレイである。通信部22は、基地局(不図示)を介する無線通信により、管理装置100と通信するための通信モジュールである。
[Configuration of operation terminal 200]
FIG. 2 is a diagram showing the configuration of operation terminals 200a and 200b. Operation terminals 200a and 200b have the same configuration. The operation terminals 200 a and 200 b include a display unit 21, a communication unit 22, a storage unit 23, and a control unit 24. The display unit 21 is a display for displaying an image. The communication unit 22 is a communication module for communicating with the management apparatus 100 by wireless communication via a base station (not shown).

記憶部23は、ROM(Read Only Memory)及びRAM(Random Access Memory)等の記憶媒体である。記憶部23は、制御部24が実行するプログラムを記憶している。制御部24は、例えばCPU(Central Processing Unit)である。制御部24は、記憶部23に記憶されたプログラムを実行することにより、操作受付部241及び生成部242として機能する。   The storage unit 23 is a storage medium such as a read only memory (ROM) and a random access memory (RAM). The storage unit 23 stores a program to be executed by the control unit 24. The control unit 24 is, for example, a CPU (Central Processing Unit). The control unit 24 functions as the operation reception unit 241 and the generation unit 242 by executing the program stored in the storage unit 23.

操作受付部241は、表示部21に形成されたタッチパネルに対するユーザの操作を受け付ける。生成部242は、操作対象装置600a又は600bを操作するための遠隔操作命令を生成する。例えば、生成部242は、操作対象装置600a及び600bを操作するためのアプリを起動することにより、操作対象装置600aの電源投入操作、操作対象装置600aの設定温度変更操作、操作対象装置600bの電源投入操作等の複数の操作内容を表示部21に表示する。   The operation accepting unit 241 accepts the user's operation on the touch panel formed on the display unit 21. The generation unit 242 generates a remote control instruction for operating the operation target device 600a or 600b. For example, the generation unit 242 activates the application for operating the operation target devices 600a and 600b to turn on the power of the operation target device 600a, change the set temperature of the operation target device 600a, and supply the power of the operation target device 600b. The display unit 21 displays a plurality of operation contents such as a closing operation.

生成部242は、表示部21に表示された操作内容のうち、いずれかの操作内容を選択するユーザ操作を操作受付部241が受け付けた場合に、選択された操作内容を指示する遠隔操作命令を生成する。生成部242は、生成した遠隔操作命令を管理装置100に通信部22を介して送信する。   When the operation reception unit 241 receives a user operation to select one of the operation contents displayed on the display unit 21, the generation unit 242 generates a remote operation instruction to instruct the selected operation content. Generate The generation unit 242 transmits the generated remote control instruction to the management apparatus 100 via the communication unit 22.

図3を参照して、生成部242の動作の例について説明する。図3は、操作対象装置600a及び600bを操作するためのアプリ画面を示す。図3(a)は、操作端末200a又は200bにより操作する操作対象装置を指定する画面を示し、図3(b)は、操作内容を指示するための画面を示す。   An example of the operation of the generation unit 242 will be described with reference to FIG. FIG. 3 shows an application screen for operating the operation target devices 600a and 600b. FIG. 3 (a) shows a screen for specifying an operation target device operated by the operation terminal 200a or 200b, and FIG. 3 (b) shows a screen for specifying an operation content.

図3(a)に示す画面では、操作受付部241は、操作端末200a又は200bにより操作する操作対象装置を指定する操作を受け付ける。左側のアイコンは、操作対象として操作対象装置600aを指定するためのアイコンであり、右側のアイコンは、操作対象として操作対象装置600bを指定するためのアイコンである。   In the screen illustrated in FIG. 3A, the operation receiving unit 241 receives an operation of specifying an operation target device operated by the operation terminal 200a or 200b. The icon on the left side is an icon for specifying the operation target device 600a as an operation target, and the icon on the right side is an icon for specifying the operation target device 600b as an operation target.

操作受付部241は、図3(a)に示す画面において左側のアイコンを選択する操作を受け付けたときに図3(b)に示す画面を表示部21に表示させる。図3(b)には、操作対象装置600aの各種の機能に対応するアイコンが表示されている。例えば、生成部242は、「ON」アイコンを選択する操作を操作受付部241が受け付ければ、操作対象装置600aへの電源を投入することを指示する遠隔操作命令を生成し、生成した遠隔操作命令を管理装置100へ送信する。   The operation reception unit 241 causes the display unit 21 to display the screen shown in FIG. 3B when an operation to select the icon on the left side is received on the screen shown in FIG. 3A. In FIG. 3B, icons corresponding to various functions of the operation target device 600a are displayed. For example, when the operation reception unit 241 receives an operation to select the “ON” icon, the generation unit 242 generates a remote operation instruction instructing to turn on the power to the operation target device 600 a, and the generated remote operation Send an instruction to the management device 100.

[音声認識サーバ400の構成]
図4は、音声認識サーバ400の構成を示す図である。音声認識サーバ400は、通信部41、記憶部42及び制御部43を備える。通信部41は、操作端末300又は管理装置100と通信するための通信インターフェースである。記憶部42は、ROM及びRAM等の記憶媒体である。記憶部42は、制御部43が実行するプログラムを記憶している。
[Configuration of speech recognition server 400]
FIG. 4 is a diagram showing the configuration of the speech recognition server 400. As shown in FIG. The voice recognition server 400 includes a communication unit 41, a storage unit 42, and a control unit 43. The communication unit 41 is a communication interface for communicating with the operation terminal 300 or the management device 100. The storage unit 42 is a storage medium such as a ROM and a RAM. The storage unit 42 stores a program to be executed by the control unit 43.

制御部43は、例えばCPUである。制御部43は、記憶部42に記憶されたプログラムを実行することにより、音声認証部431、音声認識部432及び音声生成部433として機能する。   The control unit 43 is, for example, a CPU. The control unit 43 functions as the voice authentication unit 431, the voice recognition unit 432, and the voice generation unit 433 by executing the program stored in the storage unit 42.

音声認証部431は、操作端末300のユーザの音声認証を行う。音声認証部431は、操作端末300にユーザが発した起動キーワードの音声データ及び操作端末300の端末特定情報を通信部41により受信する。音声認証部431は、受信した起動キーワードの音声データ及び端末特定情報に基づいて、ユーザの識別情報を特定する。   The voice authentication unit 431 performs voice authentication of the user of the operation terminal 300. The voice authentication unit 431 receives voice data of the activation keyword issued by the user on the operation terminal 300 and terminal identification information of the operation terminal 300 by the communication unit 41. The voice authentication unit 431 identifies the identification information of the user based on the received voice data of the activation keyword and the terminal identification information.

図5を参照して、音声認証部431の動作を説明する。図5に示すように、記憶部42には、操作端末300の端末特定情報とユーザの識別情報とに登録音声データを関連付けたテーブルが記憶されている。登録音声データは、ユーザが操作端末300の初期設定時に操作端末300へ発した起動キーワードの音声データである。音声認証部431は、操作端末300の端末特定情報「○△□」を受信した場合に、この端末特定情報「○△□」に関連付けられたユーザの登録音声データをそれぞれ読み出す。音声認証部431は、操作端末300から起動キーワードの音声データを受信し、受信した起動キーワードの音声データと、読み出した登録音声データとの声紋を比較する。   The operation of the voice authentication unit 431 will be described with reference to FIG. As shown in FIG. 5, the storage unit 42 stores a table in which registered voice data is associated with the terminal identification information of the operation terminal 300 and the identification information of the user. The registered voice data is voice data of the activation keyword issued to the operation terminal 300 at the time of initial setting of the operation terminal 300 by the user. When the voice identification unit 431 receives the terminal identification information “○ Δ □” of the operation terminal 300, the voice authentication unit 431 reads the registered voice data of the user associated with the terminal identification information “「 Δ □ ”. The voice authentication unit 431 receives voice data of the activation keyword from the operation terminal 300, and compares the voice data of the received activation keyword with the read registered voice data.

音声認証部431は、記憶部42が記憶している登録音声データのうち、操作端末300から受信した起動キーワードの音声データとの声紋の一致度が閾値より高い登録音声データを特定する。音声認証部431は、特定した登録音声データに関連付けられたユーザの識別情報を特定する。閾値は、例えば、誤ったユーザの識別情報を特定する確率が数パーセント以下となる程度の値である。   The voice authentication unit 431 identifies, among the registered voice data stored in the storage unit 42, registered voice data in which the degree of coincidence of the voiceprint with the voice data of the activation keyword received from the operation terminal 300 is higher than a threshold. The voice authentication unit 431 identifies the identification information of the user associated with the identified registered voice data. The threshold is, for example, a value such that the probability of identifying identification information of an incorrect user is several percent or less.

図5の例では、端末特定情報「○△□」に関連付けられた登録音声データのうち、最上段の登録音声データが、操作端末300から受信した起動キーワードの音声データとの一致度が閾値より高くなるとする。この場合、音声認証部431は、最上段の登録音声データが関連付けられた文字列「ABC」が操作端末300を使用しているユーザの識別情報であると特定する。   In the example of FIG. 5, among the registered voice data associated with the terminal identification information “○ □□”, the degree of coincidence of the registered voice data at the top stage with the voice data of the activation keyword received from the operation terminal 300 Suppose that it becomes high. In this case, the voice authentication unit 431 specifies that the character string “ABC” associated with the topmost registered voice data is identification information of a user who is using the operation terminal 300.

なお、テーブルでは、一のユーザの識別情報に複数の登録音声データを関連付けてもよい。この場合、音声認証部431は、操作端末300から受信した起動キーワードの音声データと、同一のユーザの識別情報に関連付けられた複数の登録音声データとをそれぞれ比較し、同一のユーザの識別情報に関連付けられた複数の登録音声データとの一致度の合計が閾値より高くなるユーザの識別情報を特定する。閾値は、例えば、誤ったユーザの識別情報を特定する確率が数パーセント以下となる程度の値である。   Note that, in the table, a plurality of registered voice data may be associated with identification information of one user. In this case, the voice authentication unit 431 compares the voice data of the activation keyword received from the operation terminal 300 with the plurality of registered voice data associated with the identification information of the same user, respectively, and uses the identification information of the same user. The identification information of the user whose total sum of the matching degree with the plurality of associated registered voice data is higher than a threshold is specified. The threshold is, for example, a value such that the probability of identifying identification information of an incorrect user is several percent or less.

図4の説明に戻る。音声認識部432は、操作端末300及び管理装置100と通信部41により通信する。音声認識部432は、操作端末300から音声データを受信する。音声認識部432は、音声認識技術により、受信した音声データから遠隔操作命令を認識する。例えば、音声認識部432は、音声データから「テレビ点けて」という文字列の遠隔操作命令を認識する。音声認識部432は、認識した遠隔操作命令を管理装置100へ送信する。   It returns to the explanation of FIG. The voice recognition unit 432 communicates with the operation terminal 300 and the management apparatus 100 by the communication unit 41. Voice recognition unit 432 receives voice data from operation terminal 300. The voice recognition unit 432 recognizes a remote control command from the received voice data by voice recognition technology. For example, the voice recognition unit 432 recognizes, from the voice data, a remote control instruction of a character string "TV-ON". The voice recognition unit 432 transmits the recognized remote control instruction to the management apparatus 100.

音声生成部433は、操作端末300に音声を出力させるための音声データを生成する。例えば、音声生成部433は、管理装置100からエラーメッセージ等のメッセージを受信した場合に、受信したメッセージを機械音声により朗読する音声データを生成する。音声生成部433は、生成した音声データを操作端末300に通信部41により送信する。   The sound generation unit 433 generates sound data for causing the operation terminal 300 to output a sound. For example, when the voice generation unit 433 receives a message such as an error message from the management device 100, the voice generation unit 433 generates voice data for reading the received message by machine voice. The voice generation unit 433 transmits the generated voice data to the operation terminal 300 by the communication unit 41.

[管理装置100の構成]
図6は、管理装置100の構成を示す図である。管理装置100は、通信部11、記憶部12及び制御部13を備える。通信部11は、操作端末200a、200b、音声認識サーバ400及び信号出力装置500と通信するための通信インターフェースである。
[Configuration of Management Device 100]
FIG. 6 is a diagram showing the configuration of the management apparatus 100. As shown in FIG. The management device 100 includes a communication unit 11, a storage unit 12, and a control unit 13. The communication unit 11 is a communication interface for communicating with the operation terminals 200a and 200b, the speech recognition server 400, and the signal output device 500.

記憶部12は、ROM及びRAM等の記憶媒体である。記憶部12は、制御部13が実行するプログラムを記憶している。制御部13は、例えばCPUである。制御部13は、記憶部12に記憶されたプログラムを実行することにより、端末情報取得部131、構文解析部132、判定部133、指示取得部134、操作指示変更部135、操作管理部136及び対話生成部137として機能する。   The storage unit 12 is a storage medium such as a ROM and a RAM. The storage unit 12 stores a program that the control unit 13 executes. The control unit 13 is, for example, a CPU. The control unit 13 executes the program stored in the storage unit 12 so that the terminal information acquisition unit 131, the syntax analysis unit 132, the determination unit 133, the instruction acquisition unit 134, the operation instruction change unit 135, the operation management unit 136, It functions as the dialogue generation unit 137.

端末情報取得部131は、操作端末200a、操作端末200b又は音声認識サーバ400と通信部11により通信する。端末情報取得部131は、管理ユーザの操作端末200bの位置を示す位置情報を操作端末200bから受信する。例えば、端末情報取得部131は、操作端末200bの位置情報として、操作端末200bの位置を示すGPS情報を操作端末200bから受信する。また、端末情報取得部131は、操作端末200a、操作端末200b又は音声認識サーバ400からユーザの識別情報を受信する。   The terminal information acquisition unit 131 communicates with the operation terminal 200 a, the operation terminal 200 b or the voice recognition server 400 by the communication unit 11. The terminal information acquisition unit 131 receives, from the operation terminal 200b, position information indicating the position of the operation terminal 200b of the management user. For example, the terminal information acquisition unit 131 receives GPS information indicating the position of the operation terminal 200b from the operation terminal 200b as the position information of the operation terminal 200b. The terminal information acquisition unit 131 also receives identification information of the user from the operation terminal 200 a, the operation terminal 200 b, or the voice recognition server 400.

端末情報取得部131は、契約者情報を取得する。契約者情報は、操作対象装置600a及び600bを遠隔操作命令により操作するための通信事業者のサービスにユーザが加入しているか否かを示し、且つこのサービスの契約期間を示す情報である。記憶部12には、ユーザの識別情報に関連付けて契約者情報が記憶されている。端末情報取得部131は、受信したユーザの識別情報に記憶部12において関連付けられた契約者情報を記憶部12から取得する。   The terminal information acquisition unit 131 acquires contractor information. The contractor information indicates whether the user has subscribed to the service of the telecommunications carrier for operating the operation target devices 600a and 600b by the remote control instruction, and is information indicating the contract period of the service. The storage unit 12 stores contractor information in association with identification information of the user. The terminal information acquisition unit 131 acquires from the storage unit 12 the contractor information associated in the storage unit 12 with the received identification information of the user.

構文解析部132は、音声認識サーバ400からの遠隔操作命令を通信部11により受信する。音声認識部432が音声データから認識した遠隔操作命令は、音声認識の誤り及び言いよどみ等を含んでいる。そこで、構文解析部132は、遠隔操作命令を文節ごとに区切り、文節間の係り受けの整合性を確認することにより、音声認識の誤り又は言いよどみを補正する。構文解析部132は、補正後の遠隔操作命令を判定部133及び操作管理部136に通知する。   The syntax analysis unit 132 receives the remote control instruction from the speech recognition server 400 by the communication unit 11. The remote control command recognized by the speech recognition unit 432 from the speech data includes an error and a speech recognition of speech recognition. Therefore, the syntactic analysis unit 132 separates the remote control instruction for each clause, and corrects the consistency of the dependency between the clauses, thereby correcting the error or the speech recognition of the speech recognition. The syntax analysis unit 132 notifies the determination unit 133 and the operation management unit 136 of the corrected remote control instruction.

判定部133は、操作端末200a又は200bからの遠隔操作命令を通信部11により受信する。また、判定部133は、構文解析部132による補正後の遠隔操作命令を取得する。判定部133は、受信又は取得した遠隔操作命令が示す操作内容が、端末情報取得部131が受信したユーザの識別情報により特定されるユーザに許可されているか否かを判定する。   The determination unit 133 receives the remote control instruction from the operation terminal 200 a or 200 b by the communication unit 11. In addition, the determination unit 133 acquires the remote control instruction after correction by the syntax analysis unit 132. The determination unit 133 determines whether the operation content indicated by the received or acquired remote operation instruction is permitted to the user specified by the identification information of the user received by the terminal information acquisition unit 131.

図7を参照して、判定部133の動作について説明する。図7は、ユーザに許可されている操作内容を示した許可テーブルを示す。例えば、家族における父親であるユーザの識別情報は、「ABC」であり、父親は、ライト、エアコン、テレビの全ての操作対象装置を操作することが許可されている。また、家族におけるこどもであるユーザの識別情報は、「XYZ」であり、こどもは、操作対象装置のうちのライトを操作することが許可されているが、エアコン及びテレビを操作することは許可されていない。   The operation of the determination unit 133 will be described with reference to FIG. FIG. 7 shows a permission table showing the contents of operations permitted by the user. For example, the identification information of the user who is the father in the family is "ABC", and the father is permitted to operate all the operation target devices of the light, the air conditioner, and the television. In addition, the identification information of the user who is a child in the family is “XYZ”, and the child is permitted to operate the light of the operation target device, but the operation of the air conditioner and the television is permitted. Not.

判定部133は、父親からエアコンを操作することを指示する遠隔操作命令を受信した場合には、許可テーブルを参照して、受信した遠隔操作命令が指示する操作内容が父親に許可されていると判定する。一方、判定部133は、こどもからエアコンを操作することを指示する遠隔操作命令を受信した場合には、受信した遠隔操作命令が指示する操作内容がこどもに許可されていないと判定する。   When the determination unit 133 receives a remote control instruction instructing to operate the air conditioner from the father, the determination unit 133 refers to the permission table and determines that the operation content instructed by the received remote control instruction is permitted to the father. judge. On the other hand, when the determination unit 133 receives a remote control instruction instructing to operate the air conditioner from the child, the determination unit 133 determines that the operation content instructed by the received remote control instruction is not permitted to the child.

また、図7に示すように、記憶部12は、ユーザが設定権限を有するか否かを示す情報を記憶している。設定権限は、ユーザに許可された操作内容を変更する権限である。例えば、父親は、設定権限を有する管理ユーザである。一方、母親及びこどもは、設定権限を有していない非管理ユーザである。判定部133は、父親、母親又はこどものいずれかのユーザに許可された操作内容を変更する指示を父親から受信した場合には、指示された操作内容の変更を記憶部12の許可テーブルに適用させる。一方、判定部133は、ユーザに許可された操作内容を変更する指示をこどもから受信した場合には、指示された変更を記憶部12の許可テーブルに適用させない。   Further, as illustrated in FIG. 7, the storage unit 12 stores information indicating whether the user has the setting authority. The setting authority is an authority to change the operation content granted to the user. For example, a father is a management user who has setting authority. On the other hand, mothers and children are non-administrative users who do not have the setting authority. The determination unit 133 applies the change of the instructed operation content to the permission table of the storage unit 12 when the instruction for changing the operation content permitted to any user of the father, the mother or the child is received from the father. Let On the other hand, the determination unit 133 does not apply the instructed change to the permission table of the storage unit 12 when an instruction to change the operation content permitted by the user is received from the child.

なお、本実施の形態の例では、遠隔操作命令による操作をユーザに許可するか否かを操作対象装置ごとに設定する場合の例について説明したが、遠隔操作命令による操作をユーザに許可するか否かを操作対象装置において実行される機能ごとに設定してもよい。例えば、操作端末200aの設定温度を変更する操作、操作端末200aの電源を投入する操作及び操作端末200aの電源を遮断する操作がこどもに許可されており、且つ操作端末200aの冷房機能と暖房機能とを切り替える操作がこどもに許可されていない許可テーブルを記憶部12が記憶していてもよい。   In the example of the present embodiment, an example of setting whether or not to permit the operation by the remote control instruction to the user is described for each operation target device, but whether to permit the user to perform the operation by the remote control instruction Whether or not to set may be set for each function executed in the operation target device. For example, an operation to change the set temperature of the operation terminal 200a, an operation to turn on the power of the operation terminal 200a, and an operation to shut off the power of the operation terminal 200a are permitted to the child, and the cooling function and the heating function of the operation terminal 200a The storage unit 12 may store a permission table in which the child is not permitted to perform the operation of switching between and.

図6の説明に戻る。判定部133は、端末情報取得部131が取得した位置情報に基づいて、管理ユーザの操作端末200bが所定エリア内に存在するか否かを判定する。所定エリアは、操作対象装置600a及び600bが設置されたエリアであり、例えば、宅内Nである。   It returns to the explanation of FIG. The determination unit 133 determines, based on the position information acquired by the terminal information acquisition unit 131, whether the operation terminal 200b of the management user is present in a predetermined area. The predetermined area is an area in which the operation target devices 600a and 600b are installed, and is, for example, in-home N.

より詳しくは、判定部133は、端末情報取得部131が取得したGPS情報が示す位置が、管理ユーザの識別情報に関連付けて記憶部12が記憶している位置から所定距離以内であるか否かを判定する。所定距離は、GPSの測定誤差を考慮した値であり、例えば、50メートルである。判定部133は、端末情報取得部131が取得したGPS情報が示す位置が、管理ユーザの識別情報に関連付けて記憶部12が記憶している位置から所定距離以内である場合に、管理ユーザの操作端末200bが所定エリア内に存在すると判定する。一方、端末情報取得部131が取得したGPS情報が示す位置が、管理ユーザの識別情報に関連付けて記憶部12が記憶している位置から所定距離より遠い場合に、管理ユーザの操作端末200bが所定エリア内に存在しないと判定する。   More specifically, the determination unit 133 determines whether the position indicated by the GPS information acquired by the terminal information acquisition unit 131 is within a predetermined distance from the position stored in the storage unit 12 in association with the management user identification information. Determine The predetermined distance is a value in consideration of the measurement error of GPS, and is, for example, 50 meters. When the position indicated by the GPS information acquired by the terminal information acquisition unit 131 is within a predetermined distance from the position stored in the storage unit 12 in association with the identification information of the management user, the determination unit 133 operates the management user It is determined that the terminal 200b exists in a predetermined area. On the other hand, when the position indicated by the GPS information acquired by the terminal information acquisition unit 131 is farther than a predetermined distance from the position stored in the storage unit 12 in association with the identification information of the management user, the operation terminal 200b of the management user is predetermined. It determines that it does not exist in the area.

また、判定部133は、位置情報が操作端末200bのIPアドレスである場合には、宅内Nに形成されたローカルネットワーク内に操作端末200bが属しているか否かを判定する。例えば、宅内Nに形成されたローカルネットワークの信号出力装置500のIPアドレスが記憶部12に予め記憶されており、判定部133は、記憶部12内の信号出力装置500のIPアドレスと操作端末200bのIPアドレスとを比較する。   If the position information is the IP address of the operation terminal 200b, the determination unit 133 determines whether the operation terminal 200b belongs to the local network formed in the home N. For example, the IP address of the signal output device 500 of the local network formed in the home N is stored in advance in the storage unit 12, and the determination unit 133 determines the IP address of the signal output device 500 in the storage unit 12 and the operation terminal 200b. Compare with the IP address of.

判定部133は、記憶部12内のゲートウェイのIPアドレスと操作端末200bのIPアドレスが一致する場合には、管理ユーザの操作端末200bが所定エリア内に存在すると判定する。一方、判定部133は、記憶部12内のゲートウェイのIPアドレスと操作端末200bのIPアドレスが一致しない場合には、管理ユーザの操作端末200bが所定エリア内に存在しないと判定する。   When the IP address of the gateway in the storage unit 12 matches the IP address of the operation terminal 200b, the determination unit 133 determines that the operation terminal 200b of the management user exists in the predetermined area. On the other hand, when the IP address of the gateway in the storage unit 12 and the IP address of the operation terminal 200b do not match, the determination unit 133 determines that the operation terminal 200b of the management user does not exist in the predetermined area.

また、判定部133は、端末情報取得部131が取得した契約者情報を参照して、端末情報取得部131が受信した識別情報により特定されるユーザ及びこのユーザの関連ユーザが操作対象装置600a及び600bを操作するための通信事業者のサービスに加入しているか、及び、契約期間が終了していないかを判定する。関連ユーザは、例えば、ユーザと同一世帯又は同じ住所のユーザである。   Further, the determination unit 133 refers to the contractor information acquired by the terminal information acquisition unit 131, and the user specified by the identification information received by the terminal information acquisition unit 131 and the related user of the user operate the operation target device 600a and It is determined whether the service of the carrier for operating 600b is subscribed and whether the contract period has not ended. The related user is, for example, a user of the same household or the same address as the user.

指示取得部134は、音声認識により認識するための遠隔操作命令と、当該遠隔操作命令により指示される操作内容とをそれぞれ指定するユーザの指示を通信部11により取得する。例えば、ユーザは、操作端末200a又は200bのアプリにおいて、音声認識により認識するための遠隔操作命令を文字入力により指定する。   The instruction acquisition unit 134 acquires, through the communication unit 11, a user's instruction to designate a remote control instruction for recognition by voice recognition and an operation content instructed by the remote control instruction. For example, in the application of the operation terminal 200a or 200b, the user designates a remote control instruction for recognition by voice recognition by character input.

また、ユーザは、操作端末200a又は200bのアプリにおいて、遠隔操作命令により指示される操作内容を指定する。より詳しくは、指示取得部134は、宅内Nに設置されている複数の操作対象装置を操作するための制御情報を記憶部12から読み出し、読み出した制御情報のリストを操作端末200a又は200bに送信する。操作端末200a又は200bの操作受付部241は、受信したリストにおいて示された制御情報に対応する各操作対象装置の操作内容を操作端末200a又は200bの表示部21に提示する。   In addition, the user designates the operation content instructed by the remote operation instruction in the application of the operation terminal 200a or 200b. More specifically, the instruction acquisition unit 134 reads control information for operating a plurality of operation target devices installed in the home N from the storage unit 12, and transmits the list of the read control information to the operation terminal 200a or 200b. Do. The operation accepting unit 241 of the operation terminal 200a or 200b presents the operation content of each operation target device corresponding to the control information indicated in the received list on the display unit 21 of the operation terminal 200a or 200b.

ユーザは、提示された各操作対象装置の操作内容の一覧において遠隔操作命令により指示する操作内容を指定する。操作受付部241は、ユーザが遠隔操作命令及び操作内容を指定した後に、ユーザが指定した遠隔操作命令及び操作内容とともに、ユーザの識別情報を管理装置100へ送信する。端末情報取得部131は、ユーザの識別情報を受信し、指示取得部134は、遠隔操作命令及び操作内容を取得する。   The user designates the operation content to be instructed by the remote control instruction in the list of the operation content of each presented operation target device. After the user designates the remote operation instruction and the operation content, the operation accepting unit 241 transmits the identification information of the user to the management apparatus 100 together with the remote operation instruction and the operation content specified by the user. The terminal information acquisition unit 131 receives the identification information of the user, and the instruction acquisition unit 134 acquires the remote control instruction and the operation content.

操作指示変更部135は、指示取得部134が取得した遠隔操作命令を記憶部12に記憶させる。音声認識による遠隔操作命令により操作対象装置600a及び600bを操作する場合には、各ユーザが使いやすい呼称を遠隔操作命令として用いることができれば、操作端末300による遠隔操作命令の利便性がより高くなることが期待できる。例えば、宅内Nにエアコンが2台設置されている場合に、「リビングのエアコンをつける」等のエアコンの設置場所等に対応する呼称をこのエアコンの操作を指示する遠隔操作命令に用いれば、音声認識による遠隔操作命令の利便性が向上する。そこで、操作指示変更部135は、指示取得部134が取得した遠隔操作命令と、指示取得部134が取得した操作内容に対応する制御情報とを関連付けて記憶部12に記憶させる。   The operation instruction change unit 135 causes the storage unit 12 to store the remote operation instruction acquired by the instruction acquisition unit 134. In the case of operating the operation target devices 600a and 600b by a remote control instruction by voice recognition, the convenience of the remote control instruction by the operation terminal 300 is further enhanced if the user-friendly name can be used as the remote control instruction. Can be expected. For example, when two air conditioners are installed in the house N, if the name corresponding to the installation location of the air conditioner such as "turn on the air conditioner in the living room" is used for the remote control command instructing the operation of this air conditioner, The convenience of the remote control instruction by recognition is improved. Therefore, the operation instruction changing unit 135 stores the remote operation instruction acquired by the instruction acquiring unit 134 and the control information corresponding to the operation content acquired by the instruction acquiring unit 134 in the storage unit 12 in association with each other.

このとき、操作指示変更部135は、指示取得部134において管理ユーザ及び非管理ユーザのいずれの指示を取得したかにかかわらず、遠隔操作命令と制御情報とを関連付ける。操作指示変更部135は、複数の遠隔操作命令を同一の制御情報に関連付けて記憶部12に記憶させてもよい。   At this time, the operation instruction change unit 135 associates the remote operation instruction with the control information regardless of which instruction of the management user or the non-management user is acquired by the instruction acquisition unit 134. The operation instruction change unit 135 may store a plurality of remote operation instructions in the storage unit 12 in association with the same control information.

通常、指示取得部134が取得した遠隔操作命令を指示したユーザがこの遠隔操作命令を使用する可能性が高い。そこで、操作指示変更部135は、記憶部12に記憶させる遠隔操作命令に端末情報取得部131が受信したユーザの識別情報を関連付ける。   Usually, there is a high possibility that the user who has instructed the remote control instruction acquired by the instruction acquisition unit 134 uses this remote control instruction. Therefore, the operation instruction change unit 135 associates the identification information of the user received by the terminal information acquisition unit 131 with the remote operation instruction stored in the storage unit 12.

操作管理部136は、判定部133が通信部11により受信した遠隔操作命令又は構文解析部132による補正後の遠隔操作命令を取得する。操作管理部136は、通信部11により信号出力装置500を制御して、取得した遠隔操作命令が指示する操作内容に対応する信号を出力させる。   The operation management unit 136 acquires the remote control instruction that the determination unit 133 has received by the communication unit 11 or the corrected remote control instruction by the syntax analysis unit 132. The operation management unit 136 causes the communication unit 11 to control the signal output device 500 to output a signal corresponding to the operation content instructed by the acquired remote control instruction.

記憶部12には、信号出力装置500に信号を出力させるための制御情報が、遠隔操作命令に関連付けて記憶されている。例えば、ユーザは、操作対象装置を操作するための通信事業者のサービスに加入するとき又は信号出力装置500等を購入するときに、宅内Nに設置されている各操作対象装置の型番を通信事業者に通知する。通信事業者は、通知された型番の操作対象装置を操作するための制御情報を遠隔操作命令に関連付けて記憶部12に記憶させる。また、ユーザが、操作端末200a又は200bのアプリにおいて宅内Nに設置されている操作対象装置の型番を入力してもよい。この場合、操作端末200a又は200bが管理装置100へ型番を通知し、操作管理部136が、通知された型番の操作対象装置を操作するための制御情報を遠隔操作命令に関連付けて記憶部12に記憶させてもよい。   Control information for causing the signal output device 500 to output a signal is stored in the storage unit 12 in association with the remote control instruction. For example, when a user subscribes to the service of a telecommunications carrier for operating the operation target device or purchases the signal output device 500 etc., the communication business number of each operation target device installed in the home N Notify the person. The communication operator associates control information for operating the operation target device of the notified model number with the remote control instruction and stores the control information in the storage unit 12. Also, the user may input the model number of the operation target device installed in the home N in the application of the operation terminal 200a or 200b. In this case, the operation terminal 200a or 200b notifies the management apparatus 100 of the model number, and the operation management unit 136 associates the control information for operating the operation target device of the notified model number with the remote control instruction in the storage unit 12. It may be stored.

操作管理部136は、遠隔操作命令に記憶部12において関連付けられた制御情報を読み出し、読み出した制御情報により信号出力装置500に信号を出力させる。また、操作管理部136は、判定部133又は構文解析部132から取得した遠隔操作命令が示す操作内容が、端末情報取得部131が受信したユーザ識別情報により特定されるユーザに許可されていると判定部133において判定した場合に、遠隔操作命令に関連付けられた制御情報により信号出力装置500に信号を出力させる。   The operation management unit 136 reads control information associated with the remote control instruction in the storage unit 12 and causes the signal output device 500 to output a signal based on the read control information. In addition, when the operation management unit 136 permits the operation content indicated by the remote operation instruction acquired from the determination unit 133 or the syntax analysis unit 132 to the user specified by the user identification information received by the terminal information acquisition unit 131 When the determination unit 133 makes a determination, the signal output device 500 is caused to output a signal based on control information associated with the remote control instruction.

また、操作管理部136は、判定部133又は構文解析部132から取得した遠隔操作命令が示す操作内容が、端末情報取得部131が受信したユーザ識別情報により特定されるユーザに許可されていないと判定部133において判定した場合に、信号出力装置500に信号を出力させない。ユーザが許可されていない操作内容について操作対象装置600a又は600bを操作するには、管理ユーザが、ユーザにこの操作内容を許可するように、許可テーブルを変更する必要がある。そこで、操作管理部136は、許可されていない操作内容を指示する遠隔操作命令を操作端末200aから受信したことを管理ユーザの操作端末200bに通信部11により通知する。   Further, the operation management unit 136 determines that the operation content indicated by the remote operation instruction acquired from the determination unit 133 or the syntax analysis unit 132 is not permitted to the user specified by the user identification information received by the terminal information acquisition unit 131. When the determination unit 133 makes a determination, the signal output device 500 does not output a signal. In order to operate the operation target device 600a or 600b for the operation content for which the user is not permitted, the management user needs to change the permission table so as to allow the user to perform the operation content. Therefore, the operation management unit 136 notifies the operation terminal 200b of the management user via the communication unit 11 that the remote operation instruction for instructing the content of the unauthorized operation is received from the operation terminal 200a.

また、管理ユーザの操作端末200bが所定エリア内に存在すると判定部133が判定した場合には、宅内Nの操作対象装置600a及び600bは、管理ユーザの管理下にあるとみなすことができる。そこで、操作管理部136は、管理ユーザの操作端末200bが所定エリア内に存在すると判定部133が判定した場合には、判定部133又は構文解析部132から取得した遠隔操作命令に関連付けられた制御情報に基づく信号を信号出力装置500に出力させる。操作管理部136は、管理ユーザの操作端末200bが所定エリア内に存在すると判定部133が判定した場合には、判定部133又は構文解析部132から取得した遠隔操作命令が示す操作内容がユーザに許可されているか否かを考慮しない。   In addition, when the determination unit 133 determines that the operation terminal 200b of the management user exists in the predetermined area, the operation target devices 600a and 600b of the in-home N can be considered to be under management of the management user. Therefore, when the determination unit 133 determines that the operation terminal 200b of the management user exists in the predetermined area, the operation management unit 136 performs control associated with the remote control instruction acquired from the determination unit 133 or the syntax analysis unit 132. A signal based on the information is output to the signal output device 500. When the determination unit 133 determines that the operation terminal 200b of the management user is present in the predetermined area, the operation management unit 136 determines to the user the operation content indicated by the remote operation instruction acquired from the determination unit 133 or the syntax analysis unit 132. It does not consider whether it is permitted or not.

また、操作端末300は、宅内設置用であるため、操作端末300の端末特定情報に管理ユーザの識別情報が関連付けられていれば、管理ユーザが管理可能な場所に設置されているとみなすことができる。このため、操作端末200a及び200bによる遠隔操作命令と比べれば、操作端末300による遠隔操作命令を制限する必要性は小さい。そこで、操作管理部136は、操作端末300の端末特定情報に管理ユーザの識別情報が関連付けられていることを条件として、操作端末300からの遠隔操作命令が指示する操作内容が操作端末300のユーザに許可されていない場合でも、この遠隔操作命令を許容してもよい。   Further, since the operation terminal 300 is for home installation, if the identification information of the management user is associated with the terminal identification information of the operation terminal 300, it may be regarded as being installed at a manageable location by the management user. it can. For this reason, compared with the remote control instruction from the operation terminals 200a and 200b, the necessity of limiting the remote control instruction from the operation terminal 300 is small. Therefore, the operation management unit 136 sets the operation content indicated by the remote operation instruction from the operation terminal 300 to the user of the operation terminal 300 on condition that the identification information of the management user is associated with the terminal identification information of the operation terminal 300. This remote control instruction may be permitted even if not permitted.

操作管理部136は、操作端末300の端末特定情報を通信部11により受信する。記憶部12には、管理ユーザの識別情報に関連付けられた宅内用の操作端末の端末特定情報が記憶されている。操作管理部136は、受信した端末特定情報が、管理ユーザの識別情報に関連付けられた端末特定情報と一致するか否かを判定する。操作管理部136は、受信した端末特定情報が、管理ユーザの識別情報に関連付けられた端末特定情報と一致する場合に、構文解析部132から取得した遠隔操作命令に関連付けられた制御情報により、信号出力装置500に信号を出力させてもよい。この場合、操作管理部136は、端末情報取得部131が受信した識別情報により特定されたユーザに遠隔操作命令が指示する操作内容が許可されているか否かを考慮しなくてもよい。   The operation management unit 136 receives the terminal identification information of the operation terminal 300 by the communication unit 11. The storage unit 12 stores terminal identification information of the in-home operation terminal associated with the identification information of the management user. The operation management unit 136 determines whether the received terminal identification information matches the terminal identification information associated with the management user identification information. When the received terminal identification information matches the terminal identification information associated with the management user identification information, the operation management unit 136 sends a signal according to the control information associated with the remote control instruction acquired from the syntax analysis unit 132. The output device 500 may output a signal. In this case, the operation management unit 136 may not consider whether or not the operation content instructed by the remote operation instruction is permitted to the user specified by the identification information received by the terminal information acquisition unit 131.

また、操作管理部136は、端末情報取得部131が受信した識別情報により特定されるユーザ及びこのユーザの関連ユーザがいずれも操作対象装置600a及び600bを操作するための通信事業者のサービスに加入していないと判定部133が判定した場合、及びこのサービスの契約期間が終了していると判定部133が判定した場合には、信号出力装置500に信号を出力させない。   In addition, the operation management unit 136 subscribes to the service of the communication carrier for the user specified by the identification information received by the terminal information acquisition unit 131 and the related user of the user to operate the operation target devices 600a and 600b. If the determination unit 133 determines that the service has not been performed, and if the determination unit 133 determines that the contract period of the service has ended, the signal output device 500 does not output a signal.

また、操作管理部136は、構文解析部132から取得した遠隔操作命令が、操作指示変更部135がユーザの指示に基づいて記憶部12に記憶させた遠隔操作命令である場合には、記憶部12に記憶されている遠隔操作命令に関連付けられた識別情報を読み出す。操作管理部136は、端末情報取得部131が受信した識別情報と、記憶部12に記憶されている遠隔操作命令に関連付けられた識別情報とが一致するか否かを判定する。   In addition, when the remote control instruction acquired from the syntax analysis unit 132 is the remote control instruction stored in the storage unit 12 based on the user's instruction, the operation management unit 136 stores the remote control instruction. The identification information associated with the remote control command stored in 12 is read out. The operation management unit 136 determines whether or not the identification information received by the terminal information acquisition unit 131 matches the identification information associated with the remote control instruction stored in the storage unit 12.

操作管理部136は、端末情報取得部131が受信した識別情報と、記憶部12に記憶されている遠隔操作命令に関連付けられた識別情報とが一致し、且つ端末情報取得部131が受信した識別情報により特定されるユーザに遠隔操作命令が指示する操作内容が許可されていることを条件として、この操作内容に対応する信号を出力させる。一方、操作管理部136は、端末情報取得部131が受信した識別情報と、記憶部12に記憶されている遠隔操作命令に関連付けられた識別情報とが一致しない場合、及び、端末情報取得部131が受信した識別情報により特定されるユーザに遠隔操作命令が指示する操作内容が許可されていない場合には、取得した遠隔操作命令が指示する操作内容に対応する信号を出力させない。   The operation management unit 136 is configured such that the identification information received by the terminal information acquisition unit 131 matches the identification information associated with the remote operation instruction stored in the storage unit 12 and the identification received by the terminal information acquisition unit 131 A signal corresponding to the operation content is output on condition that the operation content instructed by the remote operation instruction is permitted to the user specified by the information. On the other hand, when the identification information received by the terminal information acquisition unit 131 does not match the identification information associated with the remote control instruction stored in the storage unit 12, the operation management unit 136 does not match the terminal information acquisition unit 131. When the operation content instructed by the remote operation instruction is not permitted to the user specified by the received identification information, the signal corresponding to the operation content instructed by the acquired remote operation instruction is not output.

また、ユーザと、このユーザの関連ユーザとが、宅内設置用の操作端末300を共有して使用することがある。ユーザ及び関連ユーザが、操作端末300により同一の遠隔操作命令を用いることが可能であれば、ユーザごとに遠隔操作命令及び操作内容を指示する必要がない。そこで、操作管理部136は、取得した遠隔操作命令に関連付けられたユーザの識別情報又はこのユーザの関連ユーザの識別情報を端末情報取得部131が受信し、且つ端末情報取得部131が受信した識別情報により特定されるユーザに遠隔操作命令が指示する操作内容が許可されていることを条件として、この操作内容に対応する信号を出力させてもよい。   In addition, the user and the related user of the user may share and use the operation terminal 300 for home installation. If the user and the related user can use the same remote control instruction by the operation terminal 300, it is not necessary to indicate the remote control instruction and the operation content for each user. Therefore, the operation management unit 136 receives the identification information of the user associated with the acquired remote operation instruction or the identification information of the related user of this user, and the identification received by the terminal information acquisition unit 131 A signal corresponding to the operation content may be output on condition that the operation content instructed by the remote operation instruction is permitted to the user specified by the information.

操作管理部136は、構文解析部132から取得した遠隔操作命令に対応する制御情報が記憶部12に記憶されていない場合には、対話生成部137に通知する。対話生成部137は、操作端末300のユーザに通知するメッセージを生成する。例えば、対話生成部137は、構文解析部132から取得した遠隔操作命令に対応する制御情報が記憶部12に記憶されていない場合に、操作端末300のユーザに遠隔操作命令の音声入力をやり直すことを要求するエラーメッセージを生成する。対話生成部137は、生成したエラーメッセージを通信部11により音声認識サーバ400へ送信する。   When the control information corresponding to the remote control instruction acquired from the syntax analysis unit 132 is not stored in the storage unit 12, the operation management unit 136 notifies the dialogue generation unit 137. Dialogue generation unit 137 generates a message for notifying the user of operation terminal 300. For example, when the control information corresponding to the remote control instruction acquired from the syntax analysis unit 132 is not stored in the storage unit 12, the dialogue generation unit 137 performs again the voice input of the remote control instruction to the user of the operation terminal 300. Generate an error message to request The dialogue generation unit 137 transmits the generated error message to the speech recognition server 400 by the communication unit 11.

[管理装置100の処理手順]
図8は、管理装置100の動作の一例を示したフローチャートである。この処理手順は、操作端末200a又は200bの生成部242が遠隔操作命令を管理装置100に送信したときに開始する。
[Processing Procedure of Management Device 100]
FIG. 8 is a flowchart showing an example of the operation of the management apparatus 100. This processing procedure starts when the generation unit 242 of the operation terminal 200 a or 200 b transmits a remote control instruction to the management device 100.

まず、判定部133は、操作端末200a又は200bからの遠隔操作命令を通信部11により受信する(S101)。また、端末情報取得部131は、ユーザの識別情報を通信部11により受信する(S102)。判定部133は、受信した遠隔操作命令が示す操作内容が、端末情報取得部131が受信した識別情報により特定されるユーザに許可されているか否かを判定する(S103)。   First, the determination unit 133 receives the remote control instruction from the operation terminal 200a or 200b by the communication unit 11 (S101). Further, the terminal information acquisition unit 131 receives the identification information of the user by the communication unit 11 (S102). The determination unit 133 determines whether the operation content indicated by the received remote control instruction is permitted to the user specified by the identification information received by the terminal information acquisition unit 131 (S103).

また、端末情報取得部131は、受信した遠隔操作命令が示す操作内容が特定されたユーザに許可されていないと判定部133が判定した場合に(S103のNO)、管理ユーザの操作端末200bの位置情報を操作端末200bから取得する(S104)。   In addition, when the determination unit 133 determines that the operation content indicated by the received remote operation instruction is not permitted to the specified user (NO in S103), the terminal information acquisition unit 131 of the operation terminal 200b of the management user Position information is acquired from the operation terminal 200b (S104).

判定部133は、端末情報取得部131が取得した位置情報に基づいて、管理ユーザの操作端末200bが所定エリア内に存在するか否かを判定する(S105)。操作管理部136は、管理ユーザの操作端末200bが所定エリア内に存在しないと判定部133が判定した場合には(S105のNO)、信号出力装置500に信号を出力させない。更に、操作管理部136は、許可されていない操作内容を指示する遠隔操作命令を操作端末200aから受信したことを管理ユーザの操作端末200bに通知する(S106)。   Based on the position information acquired by the terminal information acquisition unit 131, the determination unit 133 determines whether the operation terminal 200b of the management user is present in the predetermined area (S105). When the determination unit 133 determines that the operation terminal 200b of the management user does not exist in the predetermined area (NO in S105), the operation management unit 136 does not cause the signal output device 500 to output a signal. Furthermore, the operation management unit 136 notifies the operation terminal 200b of the management user that the remote operation instruction for instructing the operation content not permitted is received from the operation terminal 200a (S106).

操作管理部136は、ステップS103の判定において受信した遠隔操作命令が示す操作内容が特定されたユーザに許可されていると判定部133において判定した場合に(S103のYES)、判定部133が受信した遠隔操作命令に関連付けられた制御情報により、信号出力装置500に信号を出力させる。ステップS105の判定において管理ユーザの操作端末200bが所定エリア内に存在すると判定部133が判定した場合には、仮に操作対象装置600a又は600bが管理ユーザの意図に反する操作内容で操作されたとしても、管理ユーザが操作を取り消すことができる。そこで、操作管理部136は、ステップS105の判定において管理ユーザの操作端末200bが所定エリア内に存在すると判定部133が判定した場合には(S105のYES)、判定部133において受信した遠隔操作命令に関連付けられた制御情報に基づく信号を信号出力装置500に出力させ(S107)、処理を終了する。   If the operation management unit 136 determines in the determination unit 133 that the operation content indicated by the remote operation instruction received in the determination in step S103 is permitted to the specified user (YES in S103), the determination unit 133 receives The signal output device 500 is caused to output a signal according to the control information associated with the remote control instruction. If the determination unit 133 determines that the operation terminal 200b of the management user exists in the predetermined area in the determination of step S105, even if the operation target device 600a or 600b is operated with an operation content contrary to the management user's intention. , Admin user can cancel the operation. Therefore, if the determination unit 133 determines that the operation terminal 200b of the management user is present in the predetermined area in the determination of step S105 (YES in S105), the operation management unit 136 determines that the remote control instruction received in the determination unit 133 is The signal output device 500 is caused to output a signal based on the control information associated with the (S107), and the process is ended.

[本発明による効果]
本実施の形態によれば、操作管理部136は、通信部11が受信した遠隔操作命令が指示する操作内容が、通信部11が受信した識別情報により特定されるユーザに許可されていない場合に、当該ユーザに操作内容を許可するか否かを変更可能な管理ユーザの操作端末200bに通知する。このような構成により、管理ユーザは、ユーザが許可されていない操作内容の遠隔操作命令を管理装置100に送信したか否かを把握することができる。
[Effects of the Invention]
According to the present embodiment, when the operation content instructed by the remote control instruction received by the communication unit 11 is not permitted to the user specified by the identification information received by the communication unit 11, the operation management unit 136 The control terminal 200b of the changeable management user is notified as to whether or not the user is permitted to perform the operation. With such a configuration, the management user can grasp whether or not the remote control instruction of the operation content for which the user is not permitted is transmitted to the management apparatus 100.

また、本実施の形態によれば、操作管理部136は、管理ユーザの操作端末200bが所定エリア内に存在すると判定部133において判定した場合に、操作内容が通信部11において受信した識別情報により特定されるユーザに許可されているか否かにかかわらず、信号出力装置500に通信部11が受信した遠隔操作命令に対応する信号を出力させる。   Further, according to the present embodiment, when the operation management unit 136 determines in the determination area 133 that the operation terminal 200b of the management user is in the predetermined area, the operation content is based on the identification information received by the communication unit 11. The signal output device 500 is caused to output a signal corresponding to the remote control instruction received by the communication unit 11 regardless of whether or not the user specified is permitted.

管理ユーザが所定エリア内にいる状態では、操作対象装置600a又は600bが管理ユーザの意図に反する操作内容で操作された場合でも、管理ユーザが操作を取り消すことができる。そこで、管理ユーザの操作端末200bが所定エリア内に存在すると判定部133において判定した場合には、ユーザに許可されていない操作内容を指示する遠隔操作命令を許容することにより、遠隔操作命令により操作対象装置600a又は600bを操作する利便性を優先することができる。   In the state where the management user is in the predetermined area, even when the operation target device 600a or 600b is operated with operation content contrary to the management user's intention, the management user can cancel the operation. Therefore, when the determination unit 133 determines that the operation terminal 200b of the management user is present in the predetermined area, the remote control instruction is performed by allowing the remote control instruction to instruct an operation content not permitted to the user. It is possible to prioritize the convenience of operating the target device 600a or 600b.

また、宅内設置用の操作端末300の端末特定情報に管理ユーザの識別情報が関連付けられていれば、操作端末300が管理ユーザの管理可能な場所に設置されているとみなすことができる。そこで、本実施の形態では、操作管理部136は、操作端末300の端末特定情報に管理ユーザの識別情報が関連付けられていることを条件として、遠隔操作命令が指示する操作内容がユーザに許可されていない場合であっても操作端末300からの遠隔操作命令を許容する。このため、操作端末300の操作性を向上させることができる。   In addition, if the identification information of the management user is associated with the terminal identification information of the operation terminal 300 for installation in the home, it can be considered that the operation terminal 300 is installed at a location manageable by the management user. Therefore, in the present embodiment, the operation management unit 136 permits the user to perform the operation content instructed by the remote operation instruction on condition that the identification information of the management user is associated with the terminal identification information of the operation terminal 300. Even if not, the remote control instruction from the operation terminal 300 is permitted. Therefore, the operability of the operation terminal 300 can be improved.

また、本実施の形態によれば、操作指示変更部135は、指示取得部134が管理ユーザ及び管理ユーザ以外のユーザのいずれの指示を取得したかにかかわらず、指示取得部134が取得した遠隔操作命令と、指示取得部134が取得した操作内容に対応する制御情報とを関連付けて記憶部12に記憶させる。このような構成により、管理ユーザ及び非管理ユーザの両方が、使いやすい呼称を遠隔命令として用いることができるので、操作端末300による遠隔操作命令の利便性がより高くなることが期待できる。   Further, according to the present embodiment, the operation instruction changing unit 135 is configured to acquire the remote command acquired by the instruction acquiring unit 134 regardless of whether the instruction acquiring unit 134 acquires any of the instructions from the management user and the user other than the management user. The storage unit 12 stores the operation command and the control information corresponding to the operation content acquired by the instruction acquisition unit 134 in association with each other. With such a configuration, since both the management user and the non-management user can use an easy-to-use name as the remote command, it can be expected that the convenience of the remote control command by the operation terminal 300 will be higher.

また、本実施の形態によれば、操作管理部136は、指示取得部134が取得した遠隔操作命令を指示したユーザ及び当該ユーザに関連付けられた関連ユーザのいずれかが発した音声により当該遠隔操作命令が認識された場合に、指示取得部134が取得した操作内容に対応する信号を信号出力装置500に出力させる。このような構成により、ユーザ及び関連ユーザが操作端末300により同一の遠隔操作命令を用いることができるので、ユーザごとに遠隔操作命令及び操作内容を指示する必要がない。   Further, according to the present embodiment, the operation management unit 136 performs the remote operation by the user who instructed the remote operation instruction acquired by the instruction acquisition unit 134 or the voice emitted by any one of the related users associated with the user. When the command is recognized, the control unit causes the signal output device 500 to output a signal corresponding to the operation content acquired by the instruction acquisition unit 134. With such a configuration, the user and the related user can use the same remote control instruction by the operation terminal 300, so there is no need to instruct the remote control instruction and the operation content for each user.

なお、本実施の形態では、管理装置100が一台のサーバである場合の例について説明したが本発明はこれに限定されない。例えば、管理装置100は、クラウドベースのサーバであってもよい。例えば、端末情報取得部131は、構文解析部132、判定部133、指示取得部134、操作指示変更部135、操作管理部136及び対話生成部137とは別のサーバが備えていてもよい。   In the present embodiment, an example in which the management apparatus 100 is a single server has been described, but the present invention is not limited to this. For example, the management device 100 may be a cloud-based server. For example, the terminal information acquisition unit 131 may be provided in a server different from the syntax analysis unit 132, the determination unit 133, the instruction acquisition unit 134, the operation instruction change unit 135, the operation management unit 136, and the dialogue generation unit 137.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。特に、装置の分散・統合の具体的な実施形態は以上に図示するものに限られず、その全部又は一部について、種々の付加等に応じて、又は、機能負荷に応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It is apparent to those skilled in the art that various changes or modifications can be added to the above embodiment. In particular, the specific embodiment of the distribution and integration of the devices is not limited to the one illustrated above, and all or part of the specific embodiments according to various additions or the like or according to the functional load, in arbitrary units. It can be configured to be distributed or integrated functionally or physically.

11・・・通信部
12・・・記憶部
13・・・制御部
21・・・表示部
22・・・通信部
23・・・記憶部
24・・・制御部
41・・・通信部
42・・・記憶部
43・・・制御部
100・・・管理装置
131・・・端末情報取得部
132・・・構文解析部
133・・・判定部
134・・・指示取得部
135・・・操作指示変更部
136・・・操作管理部
137・・・対話生成部
200・・・操作端末
200a・・・操作端末
200b・・・操作端末
241・・・操作受付部
242・・・生成部
300・・・操作端末
400・・・音声認識サーバ
431・・・音声認証部
432・・・音声認識部
433・・・音声生成部
500・・・信号出力装置
600a・・・操作対象装置
600b・・・操作対象装置
11 ... communication unit 12 ... storage unit 13 ... control unit 21 ... display unit 22 ... communication unit 23 ... storage unit 24 ... control unit 41 ... communication unit 42 Storage unit 43 Control unit 100 Management device 131 Terminal information acquisition unit 132 Syntax analysis unit 133 Determination unit 134 Instruction acquisition unit 135 Operation instruction Change unit 136 ... Operation management unit 137 ... Dialogue generation unit 200 ... Operation terminal 200a ... Operation terminal 200b ... Operation terminal 241 ... Operation reception unit 242 ... Generation unit 300 ... · Operation terminal 400 ··· Speech recognition server 431 · · · Speech recognition unit 432 ··· Speech recognition unit 433 ··· Voice generation unit 500 ··· Signal output device 600a · · · Operation target device 600b · · · Operation Target device

Claims (9)

ユーザが使用する操作端末からの操作対象装置を操作するための遠隔操作命令と、当該ユーザを特定するための識別情報とを受信する受信部と、
前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されている場合に、前記操作対象装置へ信号を出力する信号出力装置に前記受信部が受信した前記遠隔操作命令に対応する信号を出力させ、前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知する操作管理部と、を有する、
管理装置。
A remote control instruction for operating the operation target device from the operation terminal used by the user, and a receiving unit for receiving identification information for specifying the user;
Signal output for outputting a signal to the operation target device when the operation content instructed by the remote control instruction received by the receiving unit is permitted to the user specified by the identification information received by the receiving unit The apparatus outputs a signal corresponding to the remote control instruction received by the reception unit, and the operation content instructed by the remote operation instruction received by the reception unit is specified by the identification information received by the reception unit And an operation management unit that notifies an operation terminal of a management user who can change whether or not the user is permitted to perform the operation content if the user is not permitted.
Management device.
前記管理ユーザの前記操作端末の位置を示す位置情報を前記操作端末から取得する端末情報取得部と、
前記位置情報に基づいて、前記操作対象装置が設置された所定エリア内に前記管理ユーザの前記操作端末が存在するか否かを判定する判定部と、
前記操作管理部は、前記管理ユーザの前記操作端末が前記所定エリア内に存在すると前記判定部において判定した場合に、前記操作内容が前記受信部において受信した前記識別情報により特定されるユーザに許可されているか否かにかかわらず、前記信号出力装置に前記受信部が受信した前記遠隔操作命令に対応する信号を出力させる、
請求項1に記載の管理装置。
A terminal information acquisition unit which acquires position information indicating the position of the operation terminal of the management user from the operation terminal;
A determination unit that determines whether the operation terminal of the management user is present in a predetermined area where the operation target device is installed, based on the position information;
The operation management unit permits the user whose operation content is specified by the identification information received by the reception unit when the determination unit determines that the operation terminal of the management user is present in the predetermined area. Control the signal output device to output a signal corresponding to the remote control command received by the receiver regardless of whether the remote control command is received or not,
The management device according to claim 1.
前記操作管理部は、宅内設置用の前記操作端末から前記遠隔操作命令と、当該操作端末を特定するための端末特定情報を前記受信部が受信し、且つ、当該端末特定情報に前記管理ユーザの識別情報が関連付けられていることを条件として、当該遠隔操作命令が指示する操作内容が前記識別情報により特定されるユーザに許可されているか否かにかかわらず、前記信号出力装置に前記受信部が受信した前記遠隔操作命令に対応する信号を出力させる、
請求項2に記載の管理装置。
The operation management unit receives the remote operation instruction and terminal identification information for identifying the operation terminal from the operation terminal for home installation, and the reception unit receives the terminal identification information, and the terminal identification information includes the management user Under the condition that identification information is associated, the signal output apparatus receives the reception content regardless of whether or not the operation content instructed by the remote control instruction is permitted to the user specified by the identification information. Output a signal corresponding to the received remote control command,
The management device according to claim 2.
前記受信部は、音声認証により特定された前記識別情報を受信する、請求項1から3のいずれか一項に記載の管理装置。   The management apparatus according to any one of claims 1 to 3, wherein the receiving unit receives the identification information specified by voice authentication. 前記受信部は、音声認識により認識された前記遠隔操作命令を取得し、
前記遠隔操作命令と、前記信号出力装置に信号を出力させるための制御情報とを関連付けて記憶する記憶部と、
音声認識により認識するための遠隔操作命令と、当該遠隔操作命令により指示される操作内容とをそれぞれ指定するユーザの指示を取得する指示取得部と、
前記指示取得部が前記管理ユーザ及び前記管理ユーザ以外のユーザのいずれの指示を取得したかにかかわらず、前記指示取得部が取得した前記遠隔操作命令と、前記指示取得部が取得した前記操作内容に対応する前記制御情報とを関連付けて記憶させる操作指示変更部とを更に備える、
請求項4に記載の管理装置。
The receiving unit acquires the remote control instruction recognized by voice recognition;
A storage unit that associates and stores the remote control instruction and control information for causing the signal output device to output a signal;
An instruction acquisition unit which acquires a user's instruction for specifying a remote control instruction for recognition by voice recognition and an operation content specified by the remote control instruction;
The remote operation instruction acquired by the instruction acquiring unit and the operation content acquired by the instruction acquiring unit regardless of which instruction of the management user or the user other than the management user acquires the instruction acquiring unit And an operation instruction change unit that associates and stores the control information corresponding to
The management apparatus according to claim 4.
前記操作管理部は、前記指示取得部が取得した遠隔操作命令を指示したユーザ及び当該ユーザに関連付けられた関連ユーザのいずれかが発した音声により当該遠隔操作命令が認識された場合に、前記指示取得部が取得した操作内容に対応する信号を前記信号出力装置に出力させる、請求項5に記載の管理装置。   The operation management unit is configured to receive the remote control instruction when the remote control instruction is recognized by a voice issued by any of the user who instructed the remote control instruction acquired by the instruction acquisition unit and the related user associated with the user. The management device according to claim 5, wherein a signal corresponding to the content of the operation acquired by the acquisition unit is output to the signal output device. 操作対象装置を遠隔操作するための管理システムであって、
前記管理システムは、複数の操作端末と、管理装置と、前記操作対象装置へ信号を出力する信号出力装置とを有し、
前記複数の操作端末は、
前記操作対象装置を操作するための遠隔操作命令を生成する生成部と、
前記遠隔操作命令を前記管理装置へ送信する送信部と、
を有し、
前記管理装置は、
前記遠隔操作命令と、前記操作端末を使用するユーザを特定するための識別情報とを受信する受信部と、
前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されている場合に、当該遠隔操作命令に対応する信号を前記信号出力装置に出力させ、前記受信部が受信した前記遠隔操作命令が指示する操作内容が、前記受信部が受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知する操作管理部と、を有する、
管理システム。
A management system for remotely operating an operation target device, comprising:
The management system includes a plurality of operation terminals, a management device, and a signal output device that outputs a signal to the operation target device.
The plurality of operation terminals are
A generation unit that generates a remote control instruction for operating the operation target device;
A transmitter configured to transmit the remote control instruction to the management device;
Have
The management device is
A receiving unit that receives the remote control instruction and identification information for specifying a user who uses the operation terminal;
When the operation content instructed by the remote control instruction received by the reception unit is permitted to the user specified by the identification information received by the reception unit, the signal corresponding to the remote operation instruction is the signal When the operation content instructed by the remote control instruction received by the receiving unit is not output to the output device and the user specified by the identification information received by the receiving unit is not permitted, the operation is performed by the user An operation management unit for notifying an operation terminal of a changeable management user whether or not to permit the content;
Management system.
ユーザが使用する操作端末からの操作対象装置を操作するための遠隔操作命令と、当該ユーザを特定するための識別情報とを受信するステップと、
受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されている場合に、前記操作対象装置へ信号を出力する信号出力装置に当該遠隔操作命令に対応する信号を出力させ、受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知するステップと、を有する、
管理方法。
Receiving a remote control instruction for operating the operation target device from the operation terminal used by the user, and identification information for identifying the user;
When the operation content instructed by the received remote control instruction is permitted to the user specified by the received identification information, the remote control instruction corresponds to the signal output device that outputs a signal to the operation target device Signal is output, and if the operation content instructed by the received remote operation instruction is not permitted to the user specified by the received identification information, whether the operation content is permitted to the user or not Notifying the changeable management user's operation terminal;
Management method.
コンピュータに
ユーザが使用する操作端末からの操作対象装置を操作するための遠隔操作命令と、当該ユーザを特定するための識別情報とを受信するステップと、
受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されている場合に、前記操作対象装置へ信号を出力する信号出力装置に前記遠隔操作命令に対応する信号を出力させ、受信した前記遠隔操作命令が指示する操作内容が、受信した前記識別情報により特定されるユーザに許可されていない場合に、当該ユーザに前記操作内容を許可するか否かを変更可能な管理ユーザの操作端末に通知するステップと、を実行させる、
プログラム。
Receiving on the computer a remote control instruction for operating the operation target device from the operation terminal used by the user, and identification information for specifying the user;
A signal output device that outputs a signal to the operation target device when the operation content instructed by the received remote operation instruction is permitted to the user specified by the received identification information corresponds to the remote operation instruction Signal is output, and if the operation content instructed by the received remote operation instruction is not permitted to the user specified by the received identification information, whether the operation content is permitted to the user or not Notifying the changeable management user's operation terminal;
program.
JP2017185045A 2017-09-26 2017-09-26 Management device, management system, management method and program Active JP6706601B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017185045A JP6706601B2 (en) 2017-09-26 2017-09-26 Management device, management system, management method and program
JP2020086676A JP6945678B2 (en) 2017-09-26 2020-05-18 Management equipment, management methods and programs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017185045A JP6706601B2 (en) 2017-09-26 2017-09-26 Management device, management system, management method and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020086676A Division JP6945678B2 (en) 2017-09-26 2020-05-18 Management equipment, management methods and programs

Publications (2)

Publication Number Publication Date
JP2019062374A true JP2019062374A (en) 2019-04-18
JP6706601B2 JP6706601B2 (en) 2020-06-10

Family

ID=66177730

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017185045A Active JP6706601B2 (en) 2017-09-26 2017-09-26 Management device, management system, management method and program

Country Status (1)

Country Link
JP (1) JP6706601B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7143378B2 (en) 2020-01-23 2022-09-28 バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド Device Interaction Methods, Rights Management Methods, Interactive Devices and Clients
DE102020107954B4 (en) 2019-03-28 2023-07-20 Mitutoyo Corporation OPTICAL ENCODER AND CALCULATION METHOD FOR AN OPTICAL ENCODER
JP7466438B2 (en) 2020-12-28 2024-04-12 株式会社Lixil Control device, control system, control method and program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002291057A (en) * 2001-03-22 2002-10-04 J-Phone West Co Ltd Remote controller
JP2003289587A (en) * 2002-03-28 2003-10-10 Fujitsu Ltd Appliance control apparatus and method therefor
JP2007235613A (en) * 2006-03-01 2007-09-13 Murata Mach Ltd Remote controller
JP2009010673A (en) * 2007-06-28 2009-01-15 Panasonic Corp Portable communication terminal device, and equipment remote control system
JP2015080189A (en) * 2014-05-13 2015-04-23 株式会社 ディー・エヌ・エー Information processing device and information processing program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002291057A (en) * 2001-03-22 2002-10-04 J-Phone West Co Ltd Remote controller
JP2003289587A (en) * 2002-03-28 2003-10-10 Fujitsu Ltd Appliance control apparatus and method therefor
JP2007235613A (en) * 2006-03-01 2007-09-13 Murata Mach Ltd Remote controller
JP2009010673A (en) * 2007-06-28 2009-01-15 Panasonic Corp Portable communication terminal device, and equipment remote control system
JP2015080189A (en) * 2014-05-13 2015-04-23 株式会社 ディー・エヌ・エー Information processing device and information processing program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020107954B4 (en) 2019-03-28 2023-07-20 Mitutoyo Corporation OPTICAL ENCODER AND CALCULATION METHOD FOR AN OPTICAL ENCODER
JP7143378B2 (en) 2020-01-23 2022-09-28 バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド Device Interaction Methods, Rights Management Methods, Interactive Devices and Clients
JP7466438B2 (en) 2020-12-28 2024-04-12 株式会社Lixil Control device, control system, control method and program

Also Published As

Publication number Publication date
JP6706601B2 (en) 2020-06-10

Similar Documents

Publication Publication Date Title
US9547980B2 (en) Smart gateway, smart home system and smart controlling method thereof
US20140121786A1 (en) Smart gateway, smart home system and smart remote control method thereof
US9960959B2 (en) Methods and systems for transmitting information between electronic devices
US20140129006A1 (en) Smart gateway, smart home system and smart controlling method thereof
US20080026725A1 (en) Gateway device for remote control and method for the same
JP6721446B2 (en) Control system and control method
JP6425000B2 (en) Remote control system
JP6422174B2 (en) Home appliance control method and system, server, and computer program
KR20150059081A (en) Method and apparatus for controlling a group of home devices in a home network system
TW201328249A (en) Remote control system and method thereof
CN105467846A (en) Intelligent household appliance control method and system
US20210167984A1 (en) Method for controlling an air conditioner, communication control method, and communication system
JP6706601B2 (en) Management device, management system, management method and program
AU2013364730B2 (en) System and method of controlling surrounding devices, based on topology
JP2015186096A (en) Communication system, relay device, control device, server device, control method, and information processing method
CN110291795A (en) Managing device, display switching system and air-conditioning system
JP2001251312A (en) Access management unit for home network connection device
US20220014885A1 (en) Environment control system for controlling environmental conditions in a building
JP6181486B2 (en) Communication system, server device, portable terminal device, and information processing method
CN105487387A (en) Intelligent household control method and device
JP6945678B2 (en) Management equipment, management methods and programs
JP6611103B2 (en) Remote control system and server
JP2017068511A (en) Instrument management method and instrument management device
KR102660444B1 (en) Village broadcasting system using emergency call button
KR101333656B1 (en) Building automation system using near field communication

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190308

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200204

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200403

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200421

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200518

R150 Certificate of patent or registration of utility model

Ref document number: 6706601

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150