JP6045982B2 - Operation support device, operation support system, and program - Google Patents

Operation support device, operation support system, and program Download PDF

Info

Publication number
JP6045982B2
JP6045982B2 JP2013115629A JP2013115629A JP6045982B2 JP 6045982 B2 JP6045982 B2 JP 6045982B2 JP 2013115629 A JP2013115629 A JP 2013115629A JP 2013115629 A JP2013115629 A JP 2013115629A JP 6045982 B2 JP6045982 B2 JP 6045982B2
Authority
JP
Japan
Prior art keywords
content
information
environment
unit
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013115629A
Other languages
Japanese (ja)
Other versions
JP2014236309A (en
Inventor
剛堂 入鹿山
剛堂 入鹿山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Priority to JP2013115629A priority Critical patent/JP6045982B2/en
Publication of JP2014236309A publication Critical patent/JP2014236309A/en
Application granted granted Critical
Publication of JP6045982B2 publication Critical patent/JP6045982B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、機器の操作を支援する技術に関する。   The present invention relates to a technique for supporting operation of a device.

家電などの機器の操作を支援するために、ユーザの状況に応じて自動的に機器を制御する技術が提案されている。例えば、特許文献１には、ユーザの生活習慣、生活環境あるいは嗜好に応じて各種機器を制御する技術が記載されている。   In order to support the operation of a device such as a home appliance, a technology for automatically controlling the device according to a user's situation has been proposed. For example, Patent Document 1 describes a technique for controlling various devices according to a user's lifestyle, living environment, or preference.

特開２００３−１１１１５７号公報JP 2003-111157 A

しかしながら、特許文献１に記載された技術では、統合コントローラを用いて手動で機器を操作する場合には、結局、従来通り決められた操作を行わなければならない。特に、統合コントローラを用いて複数の機器を操作するような場合には、何度もボタン操作を行わなければならず、手間である。
本発明は、ユーザの現在の行動内容と機器の現在の環境とに適した操作を通信端末上で簡単に実施できるようにすることを目的とする。 However, in the technique described in Patent Document 1, when a device is manually operated using the integrated controller, an operation determined as before must be performed after all. In particular, when a plurality of devices are operated using the integrated controller, the buttons must be operated many times, which is troublesome.
An object of the present invention is to enable an operation suitable for a user's current action content and a current environment of a device to be easily performed on a communication terminal.

本発明は、ユーザによる機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部と、前記ユーザによって所持される通信端末の位置を表す位置情報を取得する位置情報取得部と、前記位置情報取得部により取得された前記位置情報に基づいてユーザの行動の内容を判定する行動判定部と、前記機器の環境を表す環境情報を取得する環境情報取得部と、前記記憶部に記憶された前記履歴情報に基づいて、前記行動判定部により判定された前記行動の内容と前記環境情報取得部により取得された前記環境情報が表す環境とに対応する操作の内容を決定する決定部と、前記決定部により決定された前記操作の内容を表す操作情報を前記通信端末に出力する出力部とを備える操作支援装置を提供する。   The present invention includes an operation information representing the content of the operation of the device by the user, environmental information representing the environment of the device at the time of the operation, and behavior information representing the content of the action of the user at the time of the operation Based on the location information acquired by the storage unit that stores history information related to the operation of the user, the location information acquisition unit that acquires the location information indicating the location of the communication terminal possessed by the user, and the location information acquisition unit Determined by the behavior determination unit based on the behavior determination unit that determines the content of the user's behavior, the environmental information acquisition unit that acquires environmental information representing the environment of the device, and the history information stored in the storage unit A determination unit that determines the content of the operation corresponding to the content of the action that has been performed and the environment represented by the environment information acquired by the environment information acquisition unit, and the operation that has been determined by the determination unit Providing operation support apparatus and an output unit that outputs operation information indicating the content to the communication terminal.

前記操作支援装置において、前記履歴情報は、前記操作が行われた時刻を含み、前記決定部は、所定の時間内に行われた複数の操作の内容を決定してもよい。   In the operation support apparatus, the history information may include a time when the operation is performed, and the determination unit may determine the contents of a plurality of operations performed within a predetermined time.

前記操作支援装置において、前記履歴情報は、前記操作が行われた日付、時刻又は曜日を含み、前記決定部は、前記位置情報取得部により前記位置情報が取得された日付、時刻又は曜日に対応する操作の内容を決定してもよい。   In the operation support apparatus, the history information includes a date, time, or day of the week when the operation is performed, and the determination unit corresponds to the date, time, or day of the week when the position information is acquired by the position information acquisition unit. The content of the operation to be performed may be determined.

前記操作支援装置において、前記環境情報は、温度、湿度、照度、空気を構成する気体の濃度、又は人の有無を表す情報を含んでもよい。   In the operation support apparatus, the environment information may include information indicating temperature, humidity, illuminance, a concentration of gas constituting air, or presence / absence of a person.

また、本発明は、サーバ装置と、通信端末とを備え、前記サーバ装置は、ユーザによる機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部と、前記ユーザによって所持される前記通信端末の位置を表す位置情報を取得する位置情報取得部と、前記位置情報取得部により取得された前記位置情報に基づいてユーザの行動の内容を判定する行動判定部と、前記機器の環境を表す環境情報を取得する環境情報取得部と、前記記憶部に記憶された前記履歴情報に基づいて、前記行動判定部により判定された前記行動の内容と前記環境情報取得部により取得された前記環境情報が表す環境とに対応する操作の内容を決定する決定部と、前記決定部により決定された前記操作の内容を表す操作情報を前記通信端末に出力する出力部とを備え、前記通信端末は、前記出力部により出力された前記操作情報に基づいて操作用の画像を表示する表示部を備える操作支援システムを提供する。   In addition, the present invention includes a server device and a communication terminal, and the server device includes operation information indicating the operation content of the device by the user, environment information indicating the environment of the device at the time of the operation, and the operation A storage unit for storing history information regarding the operation of the device, including behavior information representing the content of the user's behavior at the time, and position information acquisition for obtaining position information representing the position of the communication terminal possessed by the user A behavior determination unit that determines the content of the user's behavior based on the location information acquired by the location information acquisition unit, an environment information acquisition unit that acquires environment information representing the environment of the device, and the storage An operation corresponding to the content of the action determined by the action determination unit and the environment represented by the environment information acquired by the environment information acquisition unit based on the history information stored in the unit A determination unit that determines content; and an output unit that outputs operation information representing the content of the operation determined by the determination unit to the communication terminal, wherein the communication terminal outputs the operation output by the output unit An operation support system including a display unit that displays an operation image based on information is provided.

また、本発明は、制御装置と、サーバ装置と、通信端末とを備え、前記制御装置は、機器の環境を検出し、当該検出した環境を表す環境情報を生成する検出部を備え、前記サーバ装置は、ユーザによる前記機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部と、前記ユーザによって所持される前記通信端末の位置を表す位置情報を取得する位置情報取得部と、前記位置情報取得部により取得された前記位置情報に基づいてユーザの行動の内容を判定する行動判定部と、前記検出部によって生成された前記環境情報を取得する環境情報取得部と、前記記憶部に記憶された前記履歴情報に基づいて、前記行動判定部により判定された前記行動の内容と前記環境情報取得部により取得された前記環境情報が表す環境とに対応する操作の内容を決定する決定部と、前記決定部により決定された前記操作の内容を表す操作情報を前記通信端末に出力する出力部とを備え、前記通信端末は、前記出力部により出力された前記操作情報に基づいて操作用の画像を表示する表示部を備える操作支援システムを提供する。   In addition, the present invention includes a control device, a server device, and a communication terminal, and the control device includes a detection unit that detects an environment of the device and generates environment information representing the detected environment, and the server The apparatus includes operation information representing the content of the operation of the device by the user, environment information representing the environment of the device at the time of the operation, and behavior information representing the content of the user's action at the time of the operation. Based on the location information acquired by the storage unit that stores history information related to the operation of the user, the location information acquisition unit that acquires location information indicating the location of the communication terminal possessed by the user, and the location information acquisition unit Based on the history information stored in the storage unit, an action information determination unit that determines the content of the user action, an environment information acquisition unit that acquires the environment information generated by the detection unit, A determination unit that determines the content of the operation corresponding to the content of the behavior determined by the behavior determination unit and the environment represented by the environmental information acquired by the environment information acquisition unit, and the determination unit determined by the determination unit An operation unit including an output unit that outputs operation information representing operation content to the communication terminal, and the communication terminal includes a display unit that displays an operation image based on the operation information output by the output unit. Provide support system.

前記操作支援システムにおいて、前記記憶部は、前記通信端末上で行われた前記機器の操作に関する履歴情報、又はリモートコントローラを用いて行われた前記機器の操作に関する履歴情報を記憶してもよい。   In the operation support system, the storage unit may store history information regarding the operation of the device performed on the communication terminal or history information regarding the operation of the device performed using a remote controller.

また、本発明は、ユーザによる機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部を備えるコンピュータに、前記ユーザによって所持される通信端末の位置を表す位置情報を取得するステップと、前記取得された位置情報に基づいてユーザの行動の内容を判定するステップと、前記機器の環境を表す環境情報を取得するステップと、前記記憶部に記憶された前記履歴情報に基づいて、前記判定された行動の内容と前記取得された環境情報が表す環境とに対応する操作の内容を決定するステップと、前記決定された操作の内容を表す操作情報を前記通信端末に出力するステップとを実行させるためのプログラムを提供する。   In addition, the present invention includes operation information representing the content of the device operation by the user, environment information representing the environment of the device at the time of the operation, and behavior information representing the content of the user's behavior at the time of the operation. A step of acquiring position information indicating the position of a communication terminal possessed by the user in a computer including a storage unit that stores history information relating to operation of the device, and the action of the user based on the acquired position information A step of determining content; a step of acquiring environmental information representing the environment of the device; and the content of the determined action and the acquired environmental information based on the history information stored in the storage unit. A step of determining a content of an operation corresponding to an environment to be represented and a step of outputting operation information representing the content of the determined operation to the communication terminal To provide a program.

本発明によれば、ユーザの現在の行動内容と機器の現在の環境とに適した操作を通信端末上で簡単に実施することができる。   ADVANTAGE OF THE INVENTION According to this invention, operation suitable for a user's present action content and the present environment of an apparatus can be easily implemented on a communication terminal.

実施形態に係る遠隔操作システムの全体構成を示す図である。It is a figure showing the whole remote control system composition concerning an embodiment. 通信端末のハードウェア構成を示す図である。It is a figure which shows the hardware constitutions of a communication terminal. 通信端末の機能構成を示す図である。It is a figure which shows the function structure of a communication terminal. サーバ装置のハードウェア構成を示す図である。It is a figure which shows the hardware constitutions of a server apparatus. 履歴情報の一例を示す図である。It is a figure which shows an example of log | history information. 行動定義テーブルの一例を示す図である。It is a figure which shows an example of an action definition table. サーバ装置の機能構成を示す図である。It is a figure which shows the function structure of a server apparatus. 制御装置のハードウェア構成を示す図である。It is a figure which shows the hardware constitutions of a control apparatus. 制御信号データベースの一例を示す図である。It is a figure which shows an example of a control signal database. 制御装置の機能構成を示す図である。It is a figure which shows the function structure of a control apparatus. 履歴記録処理を示すシーケンスチャートである。It is a sequence chart which shows a history recording process. 表示処理を示すシーケンスチャートである。It is a sequence chart which shows a display process. 操作の内容の出現回数の一例を示す図である。It is a figure which shows an example of the frequency | count of appearance of the content of operation. 操作画面の一例を示す図である。It is a figure which shows an example of an operation screen. 変形例に係る操作画面の一例を示す図である。It is a figure which shows an example of the operation screen which concerns on a modification. 変形例に係る操作画面の一例を示す図である。It is a figure which shows an example of the operation screen which concerns on a modification. 変形例に係る操作画面の一例を示す図である。It is a figure which shows an example of the operation screen which concerns on a modification.

１．構成
（１）システム全体の構成
図１は、本実施形態に係る遠隔操作システム１の全体構成を示す図である。遠隔操作システム１は、本発明に係る操作支援システムの一例である。遠隔操作システム１は、通信端末１０と、サーバ装置２０と、制御装置３０とを備える。通信端末１０、サーバ装置２０及び制御装置３０は、移動体通信網やインターネットを含むネットワーク２を介して接続される。 1. Configuration (1) Overall Configuration of System FIG. 1 is a diagram showing an overall configuration of a remote control system 1 according to the present embodiment. The remote operation system 1 is an example of an operation support system according to the present invention. The remote operation system 1 includes a communication terminal 10, a server device 20, and a control device 30. The communication terminal 10, the server device 20, and the control device 30 are connected via a network 2 including a mobile communication network and the Internet.

通信端末１０は、例えば携帯電話やスマートフォン、タブレット端末である。通信端末１０は、ユーザによって所持され、ユーザの家に設置された複数の機器４０を遠隔操作するときに用いられる。複数の機器４０には、例えばエアコン、照明、テレビ、ヒーター、扇風機、ビデオレコーダ、オーディオプレーヤ、冷蔵庫、洗濯機、風呂給湯器、電気錠、電動シャッタ、電動カーテン、ロボット掃除機、コンピュータ等の、ユーザにより操作される各種の機器４０が含まれる。これらの機器４０は、通信端末１０上の操作によって制御される他、リモートコントローラ５０を用いた操作によっても制御される。   The communication terminal 10 is, for example, a mobile phone, a smartphone, or a tablet terminal. The communication terminal 10 is used by a user to remotely operate a plurality of devices 40 installed in the user's house. The plurality of devices 40 include, for example, an air conditioner, lighting, television, heater, electric fan, video recorder, audio player, refrigerator, washing machine, bath water heater, electric lock, electric shutter, electric curtain, robot cleaner, computer, etc. Various devices 40 operated by the user are included. These devices 40 are controlled not only by operations on the communication terminal 10 but also by operations using the remote controller 50.

制御装置３０は、例えば機器４０が設置された部屋に設置される。制御装置３０は、通信端末１０上で行われた操作に従って機器４０を制御する機能を有する。サーバ装置２０は、通信端末１０と制御装置３０との間で操作信号を中継する機能を有する。また、サーバ装置２０は、ユーザの現在の行動と機器４０の現在の環境とに適した操作の内容を表す操作情報を通信端末１０に提供する機能を有する。   For example, the control device 30 is installed in a room in which the device 40 is installed. The control device 30 has a function of controlling the device 40 in accordance with an operation performed on the communication terminal 10. The server device 20 has a function of relaying an operation signal between the communication terminal 10 and the control device 30. In addition, the server device 20 has a function of providing the communication terminal 10 with operation information representing the content of an operation suitable for the current action of the user and the current environment of the device 40.

（２）通信端末の構成
図２は、通信端末１０のハードウェア構成を示す図である。通信端末１０は、ＣＰＵ（Central Processing Unit）などのプロセッサ１１と、ＲＡＭ（Random Access Memory）などのメインメモリ１２と、通信部１３と、タッチパネルやキーなどの入力部１４と、液晶ディスプレイなどの表示部１５と、ＧＰＳ（Global Positioning System）受信機などの測位部１６と、フラッシュメモリなどの記憶部１７とを備える。なお、通信端末１０は、これらの構成の他に、音声通話を行うための構成を備えていてもよい。 (2) Configuration of Communication Terminal FIG. 2 is a diagram illustrating a hardware configuration of the communication terminal 10. The communication terminal 10 includes a processor 11 such as a CPU (Central Processing Unit), a main memory 12 such as a RAM (Random Access Memory), a communication unit 13, an input unit 14 such as a touch panel and keys, and a display such as a liquid crystal display. A positioning unit 16 such as a GPS (Global Positioning System) receiver, and a storage unit 17 such as a flash memory. Note that the communication terminal 10 may include a configuration for performing a voice call in addition to these configurations.

プロセッサ１１は、記憶部１７に記憶されたプログラムを実行することにより、通信端末１０の各部を制御する。メインメモリ１２は、プログラムやデータを一時的に記憶する。メインメモリ１２は、プロセッサ１１がプログラムを実行する際の作業領域として用いられる。通信部１３は、ネットワーク２に接続されるインタフェースである。具体的には、ネットワーク２には基地局が含まれており、通信部１３はこの基地局に無線で接続される。通信部１３は、ネットワーク２を介してサーバ装置２０と通信を行う。   The processor 11 controls each unit of the communication terminal 10 by executing a program stored in the storage unit 17. The main memory 12 temporarily stores programs and data. The main memory 12 is used as a work area when the processor 11 executes a program. The communication unit 13 is an interface connected to the network 2. Specifically, the network 2 includes a base station, and the communication unit 13 is wirelessly connected to this base station. The communication unit 13 communicates with the server device 20 via the network 2.

入力部１４は、ユーザの操作に応じた情報をプロセッサ１１に入力する。表示部１５は、各種の情報を表示する。測位部１６は、ＧＰＳを利用して、通信端末１０の現在位置を測定し、測定した位置を表す位置情報を生成する。記憶部１７は、各種のプログラムやデータを記憶する。   The input unit 14 inputs information corresponding to a user operation to the processor 11. The display unit 15 displays various information. The positioning unit 16 measures the current position of the communication terminal 10 using GPS and generates position information representing the measured position. The storage unit 17 stores various programs and data.

図３は、通信端末１０の機能構成を示す図である。通信端末１０は、プロセッサ１１が１又は複数のプログラムを実行することにより、送信部１１１、受信部１１２、表示制御部１１３及び位置情報送信部１１４の機能を実現する。送信部１１１は、機器４０の操作を表す操作信号を、通信部１３を介してサーバ装置２０に送信する。受信部１１２は、通信部１３を介してサーバ装置２０から操作情報を受信する。表示制御部１１３は、受信部１１２によって受信された操作情報に基づいて操作用の画像を表示部１５に表示させる。位置情報送信部１１４は、所定の時間間隔で、測位部１６によって生成された位置情報を、通信部１３を介してサーバ装置２０に送信する。   FIG. 3 is a diagram illustrating a functional configuration of the communication terminal 10. The communication terminal 10 realizes the functions of the transmission unit 111, the reception unit 112, the display control unit 113, and the position information transmission unit 114 when the processor 11 executes one or more programs. The transmission unit 111 transmits an operation signal representing the operation of the device 40 to the server device 20 via the communication unit 13. The receiving unit 112 receives operation information from the server device 20 via the communication unit 13. The display control unit 113 causes the display unit 15 to display an operation image based on the operation information received by the reception unit 112. The position information transmission unit 114 transmits the position information generated by the positioning unit 16 to the server device 20 via the communication unit 13 at predetermined time intervals.

（３）サーバ装置の構成
図４は、サーバ装置２０のハードウェア構成を示す図である。サーバ装置２０は、ＣＰＵなどのプロセッサ２１と、ＲＡＭなどのメインメモリ２２と、通信部２３と、ハードディスクなどの記憶部２４とを備える。 (3) Configuration of Server Device FIG. 4 is a diagram illustrating a hardware configuration of the server device 20. The server device 20 includes a processor 21 such as a CPU, a main memory 22 such as a RAM, a communication unit 23, and a storage unit 24 such as a hard disk.

プロセッサ２１は、記憶部２４に記憶されたプログラムを実行することにより、サーバ装置２０の各部を制御する。メインメモリ２２は、プログラムやデータを一時的に記憶する。メインメモリ２２は、プロセッサ２１がプログラムを実行する際の作業領域として用いられる。通信部２３は、ネットワーク２に接続されるインタフェースである。通信部２３は、ネットワーク２を介して通信端末１０や制御装置３０と通信を行う。記憶部２４は、各種のプログラムやデータを記憶する。また、記憶部２４は、履歴情報２４１と、行動定義テーブル２４２とを記憶する。   The processor 21 controls each unit of the server device 20 by executing a program stored in the storage unit 24. The main memory 22 temporarily stores programs and data. The main memory 22 is used as a work area when the processor 21 executes a program. The communication unit 23 is an interface connected to the network 2. The communication unit 23 communicates with the communication terminal 10 and the control device 30 via the network 2. The storage unit 24 stores various programs and data. In addition, the storage unit 24 stores history information 241 and an action definition table 242.

図５は、履歴情報２４１の一例を示す図である。履歴情報２４１は、機器４０の操作に関する履歴を表す情報である。履歴情報２４１には、日時と、曜日と、操作情報と、環境情報と、行動情報とが含まれる。日時は、機器４０が操作された日付及び時刻である。曜日は、機器４０が操作された曜日である。操作情報は、機器４０の操作の内容を表す情報である。環境情報は、操作時の機器４０の環境を表す情報である。例えば、環境情報には、機器４０が設置された部屋の温度や照度が含まれる。行動情報は、操作時のユーザの行動の内容を表す情報である。   FIG. 5 is a diagram illustrating an example of the history information 241. The history information 241 is information representing a history regarding the operation of the device 40. The history information 241 includes date and time, day of the week, operation information, environment information, and behavior information. The date and time are the date and time when the device 40 is operated. The day of the week is the day of the week when the device 40 is operated. The operation information is information representing the content of the operation of the device 40. The environment information is information representing the environment of the device 40 at the time of operation. For example, the environmental information includes the temperature and illuminance of a room in which the device 40 is installed. The behavior information is information representing the content of the user's behavior at the time of operation.

図６は、行動定義テーブル２４２の一例を示す図である。行動定義テーブル２４２では、ユーザの行動が定義されている。行動定義テーブル２４２には、時間帯と、位置情報と、行動情報とが対応付けて格納される。位置情報は、ユーザの位置を表す情報である。行動情報は、位置情報及び時間帯によって定義されるユーザの行動の内容を表す情報である。   FIG. 6 is a diagram illustrating an example of the behavior definition table 242. The behavior definition table 242 defines user behavior. The behavior definition table 242 stores a time zone, position information, and behavior information in association with each other. The position information is information representing the position of the user. The behavior information is information representing the content of the user's behavior defined by the position information and the time zone.

例えば、ユーザが、自宅から半径７００ｍの位置から自宅から半径５００ｍの位置へと移動した場合には、時間帯に関係なく、ユーザは帰宅中であると考えられる。この場合には、行動定義テーブル２４２には、図６に示すように位置情報「自宅から半径７００ｍの位置から自宅から半径５００ｍの位置」と、時間帯「終日」と、行動情報「帰宅」とが対応付けて格納される。   For example, when the user moves from a home with a radius of 700 m to a home with a radius of 500 m, it is considered that the user is going home regardless of the time zone. In this case, as shown in FIG. 6, the action definition table 242 includes position information “position from radius 700 m from home to radius 500 m from home”, time zone “all day”, and action information “return home”. Are stored in association with each other.

図７は、サーバ装置２０の機能構成を示す図である。サーバ装置２０は、本発明に係る操作支援装置又はコンピュータの一例である。サーバ装置２０は、プロセッサ２１が１又は複数のプログラムを実行することにより、転送部２１２、履歴記録部２１３、位置情報取得部２１４、行動判定部２１５、環境情報取得部２１６、決定部２１７及び出力部２１８の機能を実現する。   FIG. 7 is a diagram illustrating a functional configuration of the server device 20. The server device 20 is an example of an operation support device or a computer according to the present invention. The server device 20 includes a transfer unit 212, a history recording unit 213, a position information acquisition unit 214, an action determination unit 215, an environment information acquisition unit 216, a determination unit 217, and an output by the processor 21 executing one or more programs. The function of the unit 218 is realized.

転送部２１２は、通信部２３を介して、通信端末１０から受信した操作信号を制御装置３０に転送する。履歴記録部２１３は、通信端末１０から受信した操作信号が表す操作に関する操作履歴を記録する。これにより、記憶部２４に履歴情報２４１が記憶される。   The transfer unit 212 transfers the operation signal received from the communication terminal 10 to the control device 30 via the communication unit 23. The history recording unit 213 records an operation history related to the operation represented by the operation signal received from the communication terminal 10. As a result, the history information 241 is stored in the storage unit 24.

位置情報取得部２１４は、通信端末１０の位置を表す位置情報を取得する。行動判定部２１５は、行動定義テーブル２４２を参照し、位置情報取得部２１４により取得された位置情報に基づいてユーザの行動の内容を判定する。環境情報取得部２１６は、機器４０の環境を表す環境情報を取得する。決定部２１７は、履歴情報２４１に基づいて、行動判定部２１５により判定された行動の内容と環境情報取得部２１６により取得された環境情報が表す環境とに対応する操作の内容を決定する。出力部２１８は、決定部２１７により決定された操作の内容を表す操作情報を通信端末１０に出力する。   The position information acquisition unit 214 acquires position information indicating the position of the communication terminal 10. The behavior determination unit 215 refers to the behavior definition table 242 and determines the content of the user's behavior based on the location information acquired by the location information acquisition unit 214. The environment information acquisition unit 216 acquires environment information representing the environment of the device 40. Based on the history information 241, the determination unit 217 determines the content of the operation corresponding to the content of the behavior determined by the behavior determination unit 215 and the environment represented by the environmental information acquired by the environment information acquisition unit 216. The output unit 218 outputs operation information indicating the content of the operation determined by the determination unit 217 to the communication terminal 10.

（４）制御装置の構成
図８は、制御装置３０のハードウェア構成を示す図である。制御装置３０は、ＣＰＵなどのプロセッサ３１と、ＲＡＭなどのメインメモリ３２と、通信部３３と、赤外線発光ダイオードなどの制御信号送信部３４と、フォトダイオードなどの制御信号受信部３５と、温度センサや照度センサなどの各種のセンサ３６と、フラッシュメモリなどの記憶部３７とを備える。 (4) Configuration of Control Device FIG. 8 is a diagram illustrating a hardware configuration of the control device 30. The control device 30 includes a processor 31 such as a CPU, a main memory 32 such as a RAM, a communication unit 33, a control signal transmission unit 34 such as an infrared light emitting diode, a control signal reception unit 35 such as a photodiode, and a temperature sensor. And various sensors 36 such as an illuminance sensor, and a storage unit 37 such as a flash memory.

プロセッサ３１は、記憶部３７に記憶されたプログラムを実行することにより、制御装置３０の各部を制御する。メインメモリ３２は、プログラムやデータを一時的に記憶する。メインメモリ３２は、プロセッサ３１がプログラムを実行する際の作業領域として用いられる。通信部３３は、ネットワーク２に接続されるインタフェースである。通信部３３は、ネットワーク２を介してサーバ装置２０と通信を行う。   The processor 31 controls each unit of the control device 30 by executing a program stored in the storage unit 37. The main memory 32 temporarily stores programs and data. The main memory 32 is used as a work area when the processor 31 executes a program. The communication unit 33 is an interface connected to the network 2. The communication unit 33 communicates with the server device 20 via the network 2.

制御信号送信部３４は、赤外線により、機器４０に制御信号を送信する。制御信号受信部３５は、リモートコントローラ５０から赤外線により機器４０に送信された制御信号を受信する。センサ３６は、機器４０が設置された部屋の温度や照度等の機器４０の環境を検出し、検出した環境を表す環境情報を生成する。センサ３６は、本発明に係る検出部の一例である。記憶部３７は、各種のプログラムやデータを記憶する。また、記憶部３７は、制御信号データベース（以下、「制御信号ＤＢ」という）３７１を記憶する。   The control signal transmission unit 34 transmits a control signal to the device 40 by infrared rays. The control signal receiving unit 35 receives a control signal transmitted from the remote controller 50 to the device 40 by infrared rays. The sensor 36 detects the environment of the device 40 such as the temperature and illuminance of the room in which the device 40 is installed, and generates environment information representing the detected environment. The sensor 36 is an example of a detection unit according to the present invention. The storage unit 37 stores various programs and data. The storage unit 37 also stores a control signal database (hereinafter referred to as “control signal DB”) 371.

図９は、制御信号ＤＢ３７１の一例を示す図である。制御信号ＤＢ３７１は、機器４０に制御信号を送信するときに用いられる。制御信号ＤＢ３７１には、機器４０の識別情報と、操作信号と、制御信号とが対応付けて格納される。機器４０の識別情報は、機器４０を識別する情報である。機器４０の識別情報には、機器４０のメーカー名や機種種別が含まれてもよい。操作信号は、機器４０の操作を表す信号である。制御信号は、機器４０を制御する信号である。   FIG. 9 is a diagram illustrating an example of the control signal DB 371. The control signal DB 371 is used when transmitting a control signal to the device 40. In the control signal DB 371, the identification information of the device 40, the operation signal, and the control signal are stored in association with each other. The identification information of the device 40 is information for identifying the device 40. The identification information of the device 40 may include the manufacturer name and model type of the device 40. The operation signal is a signal representing the operation of the device 40. The control signal is a signal for controlling the device 40.

例えば、制御信号は以下のように取得される。制御信号は、機器４０を遠隔操作するためのサービスの提供者又は制御装置３０のメーカーによって収集され、予めネットワーク２上の格納装置（図示せず）に格納される。ユーザがリモートコントローラ５０を用いて機器４０の操作を行うと、その操作に従ってリモートコントローラ５０から送信された制御信号が制御信号受信部３５によって受信される。この制御信号には、機器４０の識別情報が含まれる。制御装置３０は、制御信号受信部２５によって受信された制御信号に含まれる識別情報に基づいて機器４０を識別し、識別した機器４０を制御するための全ての制御信号を格納装置からダウンロードする。このようにして制御信号を取得すると、制御装置３０は、取得した制御信号を制御信号ＤＢ３７１に格納する。   For example, the control signal is acquired as follows. The control signal is collected by a service provider for remotely operating the device 40 or a manufacturer of the control device 30 and stored in advance in a storage device (not shown) on the network 2. When the user operates the device 40 using the remote controller 50, a control signal transmitted from the remote controller 50 according to the operation is received by the control signal receiving unit 35. This control signal includes identification information of the device 40. The control device 30 identifies the device 40 based on the identification information included in the control signal received by the control signal receiving unit 25, and downloads all control signals for controlling the identified device 40 from the storage device. When the control signal is acquired in this way, the control device 30 stores the acquired control signal in the control signal DB 371.

図１０は、制御装置３０の機能構成を示す図である。制御装置３０は、プロセッサ３１が１又は複数のプログラムを実行することにより、信号受信部３１１、信号送信部３１２及び環境情報送信部３１３の機能を実現する。信号受信部３１１は、機器４０の操作を表す操作信号を、通信部３３を介してサーバ装置２０から受信する。信号送信部３１２は、制御信号ＤＢ３７１を参照し、信号受信部３１１により受信された操作信号に応じて、機器４０を制御する制御信号を、制御信号送信部３４を介して機器４０に送信する。環境情報送信部３１３は、センサ３６によって生成された環境情報を、通信部３３を介してサーバ装置２０に送信する。   FIG. 10 is a diagram illustrating a functional configuration of the control device 30. The control device 30 realizes the functions of the signal reception unit 311, the signal transmission unit 312, and the environment information transmission unit 313 when the processor 31 executes one or more programs. The signal receiving unit 311 receives an operation signal representing the operation of the device 40 from the server device 20 via the communication unit 33. The signal transmission unit 312 refers to the control signal DB 371 and transmits a control signal for controlling the device 40 to the device 40 via the control signal transmission unit 34 in accordance with the operation signal received by the signal reception unit 311. The environment information transmission unit 313 transmits the environment information generated by the sensor 36 to the server device 20 via the communication unit 33.

２．動作
次に、遠隔操作システム１の動作について説明する。遠隔操作システム１では、機器４０の操作履歴を記録する履歴記録処理が行われる。また、遠隔操作システム１では、ユーザが所定の行動を行ったときに、ユーザの現在の行動内容や機器４０の現在の環境に適した操作に用いられるボタン１５２を通信端末１０上に表示する表示処理が行われる。 2. Operation Next, the operation of the remote operation system 1 will be described. In the remote operation system 1, a history recording process for recording an operation history of the device 40 is performed. Further, in the remote operation system 1, when the user performs a predetermined action, a display for displaying on the communication terminal 10 buttons 152 used for an operation suitable for the current action content of the user and the current environment of the device 40. Processing is performed.

（１）履歴記録処理
図１１は、履歴記録処理を示すシーケンスチャートである。ユーザは、機器４０を遠隔操作する場合には、通信端末１０の入力部１４を介して、その操作を表す操作信号を入力する。例えば、照明を点灯する場合には、照明を点灯する操作を表す操作信号Ｓ１が入力される。操作信号が入力されると、ステップＳ１０１の処理が開始される。 (1) History Recording Process FIG. 11 is a sequence chart showing the history recording process. When the user remotely operates the device 40, the user inputs an operation signal representing the operation via the input unit 14 of the communication terminal 10. For example, when the illumination is turned on, an operation signal S1 indicating an operation for turning on the illumination is input. When the operation signal is input, the process of step S101 is started.

ステップＳ１０１において、送信部１１１は、通信部１３を介して、入力された操作信号をサーバ装置２０に送信する。ステップＳ１０２において、サーバ装置２０の転送部２１２は、通信部２３を介して、この操作信号を受信し、受信した操作信号を制御装置３０に転送する。制御装置３０の信号受信部３１１は、通信部３３を介してこの操作信号を受信する。   In step S <b> 101, the transmission unit 111 transmits the input operation signal to the server device 20 via the communication unit 13. In step S <b> 102, the transfer unit 212 of the server device 20 receives this operation signal via the communication unit 23 and transfers the received operation signal to the control device 30. The signal receiving unit 311 of the control device 30 receives this operation signal via the communication unit 33.

ステップＳ１０３において、信号送信部３１２は、信号受信部３１１によって受信された操作信号に対応する制御信号を、制御信号送信部３４を介して制御対象の機器４０に送信する。具体的には、信号送信部３１２は、信号受信部３１１によって受信された操作信号と対応付けて格納された制御信号を制御信号ＤＢ３７１から読み出す。続いて、信号送信部３１２は、制御信号送信部３４を介してこの制御信号を送信する。例えば、サーバ装置２０から操作信号Ｓ１を受信した場合には、図９に示す例では、この操作信号Ｓ１と対応付けて格納された制御信号ｓ１が制御信号ＤＢ３７１から読み出される。この場合、制御信号送信部３４から制御信号ｓ１が送信される。   In step S <b> 103, the signal transmission unit 312 transmits a control signal corresponding to the operation signal received by the signal reception unit 311 to the control target device 40 via the control signal transmission unit 34. Specifically, the signal transmission unit 312 reads out the control signal stored in association with the operation signal received by the signal reception unit 311 from the control signal DB 371. Subsequently, the signal transmission unit 312 transmits this control signal via the control signal transmission unit 34. For example, when the operation signal S1 is received from the server device 20, in the example illustrated in FIG. 9, the control signal s1 stored in association with the operation signal S1 is read from the control signal DB 371. In this case, the control signal s1 is transmitted from the control signal transmitter 34.

ステップＳ１０４において、機器４０は、制御装置３０から受信した制御信号に従って動作する。例えば、照明が制御装置３０から制御信号ｓ１を受信した場合には、照明が点灯する。   In step S <b> 104, the device 40 operates according to the control signal received from the control device 30. For example, when the illumination receives the control signal s1 from the control device 30, the illumination is turned on.

ステップＳ１０５において、サーバ装置２０の環境情報取得部２１６は、センサ３６によって生成された環境情報を制御装置３０から取得する。具体的には、環境情報取得部２１６は、通信部２３を介して環境情報の取得要求を制御装置３０に送信する。制御装置３０の環境情報送信部３１３は、この取得要求に応じて、センサ３６によって生成された環境情報を、通信部３３を介してサーバ装置２０に送信する。サーバ装置２０の環境情報取得部２１６は、通信部２３を介して制御装置３０から環境情報を受信する。   In step S <b> 105, the environment information acquisition unit 216 of the server device 20 acquires the environment information generated by the sensor 36 from the control device 30. Specifically, the environment information acquisition unit 216 transmits an environment information acquisition request to the control device 30 via the communication unit 23. In response to the acquisition request, the environment information transmission unit 313 of the control device 30 transmits the environment information generated by the sensor 36 to the server device 20 via the communication unit 33. The environment information acquisition unit 216 of the server device 20 receives environment information from the control device 30 via the communication unit 23.

ステップＳ１０６において、行動判定部２１５は、行動定義テーブル２４２を参照し、通信端末１０の現在位置と現在時刻とに基づいて、ユーザの現在の行動の内容を判定する。具体的には、通信端末１０は、所定の時間間隔で、測位部１６によって生成された位置情報を、通信部１３を介してサーバ装置２０に送信するようになっている。位置情報取得部２１４は、通信部２３を介してこの位置情報を受信する。行動判定部２１５は、行動定義テーブル２４２を参照して、位置情報取得部２１４によって取得された位置情報が表す位置と現在時刻とに基づいて、ユーザの現在の行動の内容を判定する。   In step S <b> 106, the behavior determination unit 215 refers to the behavior definition table 242 and determines the content of the user's current behavior based on the current position and the current time of the communication terminal 10. Specifically, the communication terminal 10 is configured to transmit the position information generated by the positioning unit 16 to the server device 20 via the communication unit 13 at a predetermined time interval. The position information acquisition unit 214 receives this position information via the communication unit 23. The behavior determination unit 215 refers to the behavior definition table 242 and determines the content of the current behavior of the user based on the position represented by the location information acquired by the location information acquisition unit 214 and the current time.

例えば、通信端末１０から、予め設定された自宅から半径７００ｍの位置を表す位置情報を受信した後に、自宅から半径５００ｍの位置を表す位置情報を受信した場合には、ユーザが、自宅から半径７００ｍの位置から自宅から半径５００ｍの位置に移動したことを意味する。図６に示す例では、行動定義テーブル２４２には、時間帯「終日」及び位置情報「自宅から半径７００ｍの位置から自宅から半径５００ｍの位置」に対応付けて行動情報「帰宅」が格納されている。この場合、ユーザの現在の行動の内容として「帰宅」が判定される。   For example, when receiving position information representing a position with a radius of 500 m from the home after receiving position information representing a position with a radius of 700 m from the home set in advance from the communication terminal 10, the user has a radius of 700 m from the home. It means that it moved from the position of the home to the position of the radius of 500 m. In the example illustrated in FIG. 6, the behavior definition table 242 stores behavior information “return home” in association with time zone “all day” and position information “position from a radius of 700 m from home to a position from a radius of 500 m from home”. Yes. In this case, “return home” is determined as the content of the current action of the user.

ステップＳ１０７において、履歴記録部２１３は、ステップＳ１０２で受信した操作信号が表す操作に関する操作履歴を記録する。具体的には、履歴記録部２１３は、ステップＳ１０２で操作信号を受信した日時及び曜日と、この操作信号に対応する操作情報と、ステップＳ１０５で取得した環境情報と、ステップＳ１０６で判定した行動の内容を表す行動情報とを履歴情報２４１に追加する。   In step S107, the history recording unit 213 records an operation history related to the operation represented by the operation signal received in step S102. Specifically, the history recording unit 213 receives the operation signal in step S102, the date and day of the week, the operation information corresponding to the operation signal, the environment information acquired in step S105, and the action determined in step S106. Action information representing the content is added to the history information 241.

例えば、ステップＳ１０２において２０１３年４月１日（月）１７：００に照明を点灯する操作信号Ｓ１が受信され、ステップＳ１０５において「温度：１５度 照度：３００ルクス」という環境情報が取得され、ステップＳ１０６でユーザの行動の内容として「帰宅」が判定された場合には、図５に示すように、日時「２０１３／０４／０１ １７：００」、曜日「月」、操作情報「照明を点灯」、環境情報「温度：１５度 照度：３００ルクス」及び行動情報「帰宅」が履歴情報２４１に追加される。   For example, in step S102, an operation signal S1 for turning on the illumination is received at 17:00 on Monday, April 1, 2013, and environmental information “temperature: 15 degrees illuminance: 300 lux” is acquired in step S105. If “return home” is determined as the content of the user's action in S106, as shown in FIG. 5, the date and time “2013/04/01 17:00”, the day of the week “Month”, and the operation information “lights on” , Environmental information “temperature: 15 degrees illuminance: 300 lux” and behavior information “return home” are added to the history information 241.

（２）表示処理
図１２は、表示処理を示すシーケンスチャートである。ステップＳ２０１において、通信端末１０の位置情報送信部１１４は、所定の時間間隔で測位部１６によって生成された位置情報を、通信部１３を介してサーバ装置２０に送信する。サーバ装置２０の位置情報取得部２１４は、通信部２３を介してこの位置情報を受信する。 (2) Display Process FIG. 12 is a sequence chart showing the display process. In step S <b> 201, the position information transmission unit 114 of the communication terminal 10 transmits the position information generated by the positioning unit 16 at a predetermined time interval to the server device 20 via the communication unit 13. The location information acquisition unit 214 of the server device 20 receives this location information via the communication unit 23.

ステップＳ２０２において、行動判定部２１５は、行動定義テーブル２４２を参照し、ステップＳ２０１で受信した位置情報が表す位置と現在時刻とに基づいて、ユーザの現在の行動の内容を判定する。例えば、通信端末１０から自宅から半径７００ｍの位置を表す位置情報を受信した後に、自宅から半径５００ｍの位置を表す位置情報を受信した場合には、ユーザが、自宅から半径７００ｍの位置から自宅から半径５００ｍの位置に移動したことを意味する。図６に示す例では、行動定義テーブル２４２には時間帯「終日」及び位置情報「自宅から半径７００ｍの位置から自宅から半径５００ｍの位置」に対応付けて行動情報「帰宅」が格納されている。この場合、ユーザの現在の行動の内容として「帰宅」が判定される。なお、ユーザの現在の行動の内容が、行動定義テーブル２４２に定義された行動の内容以外であると判定された場合には、ステップＳ２０３以降の処理は行われない。   In step S202, the behavior determination unit 215 refers to the behavior definition table 242 and determines the content of the current behavior of the user based on the position represented by the positional information received in step S201 and the current time. For example, when position information representing a position having a radius of 500 m is received from the home after receiving position information representing a position having a radius of 700 m from the home from the communication terminal 10, the user starts from a position having a radius of 700 m from the home. It means that it has moved to a position with a radius of 500 m. In the example illustrated in FIG. 6, the behavior definition table 242 stores the behavior information “return home” in association with the time zone “all day” and the position information “position from a radius of 700 m from home to a position of radius 500 m from home”. . In this case, “return home” is determined as the content of the current action of the user. If it is determined that the content of the user's current behavior is other than the content of the behavior defined in the behavior definition table 242, the processing after step S203 is not performed.

ステップＳ２０３において、環境情報取得部２１６は、上述したステップＳ１０５と同様に、センサ３６によって生成された環境情報を制御装置３０から取得する。   In step S203, the environment information acquisition unit 216 acquires the environment information generated by the sensor 36 from the control device 30 in the same manner as in step S105 described above.

ステップＳ２０４において、決定部２１７は、履歴情報２４１を解析することにより、ステップＳ２０２で判定されたユーザの行動の内容とステップＳ２０３で取得された環境情報が表す環境とに対応する操作の内容を決定する。具体的には、決定部２１７は、履歴情報２４１から、ステップＳ２０２で判定されたユーザの行動の内容とステップＳ２０３で取得された環境情報とに応じて設定された条件を満たす操作の内容を抽出する。続いて、決定部２１７は、抽出した操作の内容において、所定の時間内に行われた複数の操作の内容をグループ化する。なお、所定の時間内に１個の操作しか行われていない場合には、グループ化は行われない。続いて、決定部２１７は、抽出した操作の内容において、グループ化されていない単一の操作内容又はグループ化された複数の操作内容の出現回数を計算し、出現回数が最も多い操作の内容を決定する。   In step S204, the determination unit 217 analyzes the history information 241 to determine the operation content corresponding to the content of the user action determined in step S202 and the environment represented by the environment information acquired in step S203. To do. Specifically, the determination unit 217 extracts from the history information 241 the operation content that satisfies the conditions set according to the content of the user action determined in step S202 and the environmental information acquired in step S203. To do. Subsequently, the determination unit 217 groups the contents of a plurality of operations performed within a predetermined time in the extracted operation contents. Note that grouping is not performed when only one operation is performed within a predetermined time. Subsequently, the determination unit 217 calculates the number of appearances of a single operation content that is not grouped or a plurality of operation details that are grouped in the content of the extracted operation, and determines the content of the operation that has the highest number of appearances. decide.

例えば、ステップＳ２０２で判定されたユーザの行動の内容が「帰宅」であり、ステップＳ２０３で取得された環境情報が「温度：１５度 照度：３００ルクス」である場合には、操作時のユーザの行動の内容が「帰宅」であり、且つ、操作時の機器４０の環境が、温度が１５度を含む許容範囲内であり、照度が３００ルクスを含む許容範囲内であるという条件が設定される。温度の許容範囲は、環境情報が表す温度が１５度の場合には、例えば１３度から１７度の範囲に設定される。照度の許容範囲は、環境情報が表す照度が３００ルクスの場合には、例えば１００ルクスから５００ルクスの範囲に設定される。図５に示す例では、「照明を点灯」という操作は、操作時のユーザの行動の内容が「帰宅」であり、且つ、操作時の機器４０の環境が、「温度：１５度 照度：３００ルクス」であるため、この条件を満たす。また、「エアコンの電源をオン 設定温度：２５度」という操作も、同様にこの条件を満たす。この場合、「照明を点灯」という操作の内容と「エアコンの電源をオン 設定温度：２５度」という操作の内容とが履歴情報２４１から抽出される。   For example, when the content of the user's action determined in step S202 is “return home” and the environmental information acquired in step S203 is “temperature: 15 degrees illuminance: 300 lux”, the user's action at the time of operation A condition is set that the content of the action is “going home”, the environment of the device 40 at the time of operation is within an allowable range including a temperature of 15 degrees, and an illuminance is within an allowable range including 300 lux. . The allowable temperature range is set to a range of 13 degrees to 17 degrees, for example, when the temperature represented by the environment information is 15 degrees. When the illuminance represented by the environmental information is 300 lux, the allowable illuminance range is set to a range of 100 lux to 500 lux, for example. In the example shown in FIG. 5, in the operation “turn on lighting”, the content of the user's action at the time of operation is “return home”, and the environment of the device 40 at the time of operation is “temperature: 15 degrees Illuminance: 300”. "Lux", this condition is satisfied. In addition, an operation of “turning on the power of the air conditioner: set temperature: 25 degrees” also satisfies this condition. In this case, the content of the operation “turn on the illumination” and the content of the operation “turn on the air conditioner power set temperature: 25 degrees” are extracted from the history information 241.

また、図５に示す例では、「照明を点灯」という操作が行われた日時は、「２０１３／０４／０１ １７：００」であり、「エアコンの電源をオン、設定温度：２５度」という操作が行われた日時は「２０１３／０４／０１ １７：０５」である。例えば、所定の時間が１０分である場合には、これらの操作は所定の時間内に行われている。この場合、「照明を点灯」という操作の内容と「エアコンの電源をオン 設定温度：２５度」という操作の内容とがグループ化される。続いて、グループ化されていない単一の操作の内容又はグループ化された複数の操作の内容の出現回数が計算される。   Further, in the example shown in FIG. 5, the date and time when the operation of “lighting on” is performed is “2013/04/01 17:00” and “the power supply of the air conditioner is turned on and the set temperature is 25 degrees”. The date and time when the operation was performed is “2013/04/01 17:05”. For example, when the predetermined time is 10 minutes, these operations are performed within the predetermined time. In this case, the content of the operation “turn on the lighting” and the content of the operation “turn on the air conditioner power set temperature: 25 degrees” are grouped. Subsequently, the number of appearances of the contents of a single operation that is not grouped or the contents of a plurality of operations that are grouped is calculated.

図１３は、操作の内容の出現回数の一例を示す図である。図１３に示す例では、「照明を点灯」及び「エアコンの電源をオン 設定温度：２５度」という操作の内容の出現回数が１０回であり、「照明を点灯」及び「テレビの電源をオン チャンネル：１ｃｈ」という操作の内容の出現回数が５回であり、「照明を点灯」という操作の内容の出現回数が１回である。この場合、「照明を点灯」及び「エアコンの電源をオン 設定温度：２５度」という操作の内容の出現回数が最も多いため、この操作の内容が決定される。   FIG. 13 is a diagram illustrating an example of the number of appearances of operation contents. In the example shown in FIG. 13, the number of appearances of the operations of “lighting on” and “turning on the air conditioner power set temperature: 25 degrees” is 10 times, and “lighting on” and “turning on the TV are on. The number of appearances of the operation content “channel: 1ch” is five times, and the number of appearances of the operation content “turn on lighting” is one. In this case, the contents of this operation are determined because the number of times of the contents of the operations “turn on lighting” and “turn on the power of the air conditioner: set temperature: 25 degrees” appears most frequently.

ステップＳ２０５において、出力部２１８は、ステップＳ２０４で決定された操作の内容を表す操作情報を、通信部２３を介して通信端末１０に送信する。通信端末１０の受信部１１２は、通信部１３を介してこの操作情報を受信する。ステップＳ２０６において、表示制御部１１３は、受信部１１２によって受信された操作情報に基づく操作画面１５１を表示部１５に表示させる。   In step S205, the output unit 218 transmits operation information representing the content of the operation determined in step S204 to the communication terminal 10 via the communication unit 23. The receiving unit 112 of the communication terminal 10 receives this operation information via the communication unit 13. In step S <b> 206, the display control unit 113 causes the display unit 15 to display an operation screen 151 based on the operation information received by the reception unit 112.

図１４は、操作画面１５１の一例を示す図である。この操作画面１５１には、受信部１１２によって受信された操作情報に基づいて作成されたボタン１５２が表示されている。ボタン１５２は、操作用の画像の一例である。このボタン１５２には、「照明を点灯」という操作と、「エアコンの電源をオン 設定温度：２５度」という操作とが割り当てられている。また、操作画面１５１には、ボタン１５２と合わせて、これらの操作の内容が表示されている。   FIG. 14 is a diagram illustrating an example of the operation screen 151. On the operation screen 151, a button 152 created based on the operation information received by the receiving unit 112 is displayed. The button 152 is an example of an operation image. The button 152 is assigned with an operation “turn on illumination” and an operation “turn on the air conditioner power set temperature: 25 degrees”. The operation screen 151 displays the contents of these operations together with the button 152.

この場合、ユーザは、ボタン１５２を押すだけで、照明を点灯する操作と、エアコンの電源オンにして設定温度を２５度にする操作とをまとめて実行することができる。具体的には、ユーザがボタン１５２を押すと、入力部１４を介して照明を点灯する操作を表す操作信号Ｓ１と、エアコンの電源をオンにして設定温度を２５度にする操作を表す操作信号Ｓ２とが入力される。操作信号Ｓ１及びＳ２が入力されると、上述したステップＳ１０１の処理が開始される。これにより、照明が点灯するとともに、エアコンの電源がオンになり、設定温度が２５度になる。   In this case, the user can collectively execute the operation of turning on the illumination and the operation of turning on the air conditioner and setting the set temperature to 25 degrees simply by pressing the button 152. Specifically, when the user presses the button 152, an operation signal S1 representing an operation of turning on the illumination via the input unit 14, and an operation signal representing an operation of turning on the air conditioner and setting the set temperature to 25 degrees. S2 is input. When the operation signals S1 and S2 are input, the process of step S101 described above is started. As a result, the lighting is turned on, the power of the air conditioner is turned on, and the set temperature is 25 degrees.

以上説明した実施形態によれば、ユーザが所定の行動を行ったときに、ユーザの現在の行動及び機器４０の現在の環境に適した操作に用いられるボタン１５２が通信端末１０上に表示される。したがって、ユーザの現在の行動及び機器４０の現在の環境に適した操作を通信端末１０上で簡単に実施することができる。   According to the embodiment described above, when the user performs a predetermined action, the button 152 used for an operation suitable for the user's current action and the current environment of the device 40 is displayed on the communication terminal 10. . Therefore, an operation suitable for the current action of the user and the current environment of the device 40 can be easily performed on the communication terminal 10.

［変形例］
本発明は、上述した実施形態に限定されず、以下のように変形してもよい。また、以下の変形例を互いに組み合わせてもよい。 [Modification]
The present invention is not limited to the above-described embodiment, and may be modified as follows. Further, the following modifications may be combined with each other.

（１）上述した実施形態では、通信端末１０上で行われた操作の履歴が記録される例について説明した。しかし、通信端末１０上で行われた操作の履歴に加えて、リモートコントローラ５０を用いて行われた操作の履歴が記録されてもよい。 (1) In the above-described embodiment, an example in which a history of operations performed on the communication terminal 10 is recorded has been described. However, a history of operations performed using the remote controller 50 may be recorded in addition to a history of operations performed on the communication terminal 10.

ユーザがリモートコントローラ５０を用いて機器４０の操作を行うと、その操作に従ってリモートコントローラ５０から送信された制御信号が制御信号受信部３５によって受信される。制御信号受信部３５によって制御信号が受信されると、制御装置３０は、この制御信号に対応する操作信号を、通信部３３を介してサーバ装置２０に送信する。サーバ装置２０の操作情報取得部２１１は、通信部２３を介してこの操作信号を受信する。履歴記録部２１３は、制御装置３０から受信した操作信号が表す操作に関する操作履歴を記録する。具体的には、履歴記録部２１３は、上述した実施形態と同様に、操作信号を受信した日時及び曜日と、この制御信号に対応する操作情報と、環境情報取得部２１６によって取得された環境情報と、行動判定部２１５によって判定された行動の内容を表す行動情報とを履歴情報２４１に追加する。   When the user operates the device 40 using the remote controller 50, a control signal transmitted from the remote controller 50 according to the operation is received by the control signal receiving unit 35. When the control signal is received by the control signal receiving unit 35, the control device 30 transmits an operation signal corresponding to the control signal to the server device 20 via the communication unit 33. The operation information acquisition unit 211 of the server device 20 receives this operation signal via the communication unit 23. The history recording unit 213 records an operation history related to the operation represented by the operation signal received from the control device 30. Specifically, the history recording unit 213 receives the operation date / time and the day of the week, the operation information corresponding to the control signal, and the environment information acquired by the environment information acquisition unit 216, as in the above-described embodiment. And action information indicating the content of the action determined by the action determination unit 215 is added to the history information 241.

本変形例によれば、ユーザが通信端末１０上で行う操作の履歴と、リモートコントローラ５０を用いて行われる操作の履歴との両方に基づいて、ユーザの現在の行動及び機器４０の現在の環境に適した操作の内容を決定することができる。   According to this modification, based on both the history of operations performed on the communication terminal 10 by the user and the history of operations performed using the remote controller 50, the current behavior of the user and the current environment of the device 40. It is possible to determine the content of the operation suitable for.

（２）上述した実施形態では、センサ３６が温度や照度を検出する例について説明した。しかし、センサ３６が検出する機器４０の環境は、温度や照度に限定されない。 (2) In the above-described embodiment, the example in which the sensor 36 detects temperature and illuminance has been described. However, the environment of the device 40 detected by the sensor 36 is not limited to temperature and illuminance.

例えば、センサ３６は、湿度センサを備え、機器４０が設置された部屋の湿度を検出してもよい。この場合、決定部２１７は、例えば操作時の湿度が、センサ３６によって検出された湿度の許容範囲内であることを含む条件を設定し、設定した条件を満たす操作の内容を履歴情報２４１から抽出する。これは、例えば機器４０に加湿器が含まれるような場合に有効である。   For example, the sensor 36 may include a humidity sensor and detect the humidity of a room in which the device 40 is installed. In this case, for example, the determination unit 217 sets a condition including that the humidity during operation is within the allowable range of humidity detected by the sensor 36, and extracts the contents of the operation that satisfies the set condition from the history information 241. To do. This is effective when the device 40 includes a humidifier, for example.

また、センサ３６は、二酸化炭素濃度計などの空気を構成する気体の濃度を検出する濃度計を備え、気体の濃度を検出してもよい。この場合、決定部２１７は、例えば操作時の気体の濃度が、センサ３６によって検出された気体の濃度の許容範囲内であることを含む条件を設定し、設定した条件を満たす操作の内容を履歴情報２４１から抽出する。これは、例えば機器４０に換気扇が含まれるような場合に有効である。   The sensor 36 may include a concentration meter that detects the concentration of gas constituting the air, such as a carbon dioxide concentration meter, and may detect the concentration of the gas. In this case, the determination unit 217 sets a condition including, for example, that the gas concentration at the time of operation is within an allowable range of the gas concentration detected by the sensor 36, and records the contents of the operation that satisfies the set condition. Extracted from information 241. This is effective when, for example, the device 40 includes a ventilation fan.

さらに、センサ３６は、マイクロフォン又は人感センサを備え、機器４０が設置された部屋に人がいるか否かを検出してもよい。この場合、決定部２１７は、例えば操作時の人の有無が、センサ３６によって検出された人の有無と一致することを含む条件を設定し、設定した条件を満たす操作の内容を履歴情報２４１から抽出する。これは、例えば部屋に人がいるときといないときとで操作の内容が異なるような場合に有効である。   Further, the sensor 36 may include a microphone or a human sensor, and may detect whether or not there is a person in the room where the device 40 is installed. In this case, for example, the determination unit 217 sets a condition including that the presence / absence of a person at the time of operation matches the presence / absence of a person detected by the sensor 36, and the contents of the operation satisfying the set condition are determined from the history information 241. Extract. This is effective, for example, when the content of the operation differs depending on whether a person is in the room or not.

（３）上述した実施形態では、ユーザの現在の行動及び機器４０の現在の環境に対応する操作の内容を決定する例について説明した。しかし、ユーザによる機器４０の操作の内容は、平日か休日か、又は季節によって異なる場合がある。そこで、決定部２１７は、ユーザの現在の行動及び現在の機器４０の環境に加えて、操作が行われた日付、時刻又は曜日に対応する操作の内容を決定してもよい。 (3) In the above-described embodiment, the example of determining the content of the operation corresponding to the current action of the user and the current environment of the device 40 has been described. However, the content of the operation of the device 40 by the user may differ depending on whether it is a weekday, a holiday, or a season. Therefore, the determination unit 217 may determine the content of the operation corresponding to the date, time, or day of the week when the operation is performed, in addition to the user's current behavior and the current environment of the device 40.

この場合、決定部２１７は、ステップＳ２０２で判定された行動の内容と、ステップＳ２０３で取得された環境情報と、ステップＳ２０１で位置情報が取得された日付、時刻又は曜日とに応じて設定された条件を満たす操作の内容を抽出する。例えば、ステップＳ２０２で判定されたユーザの行動の内容が「帰宅」であり、ステップＳ２０３で取得された環境情報が「温度：１５度 照度：３００ルクス」であり、ステップＳ２０１において２０１３年４月８日（月）１７：００に位置情報が取得された場合には、操作時のユーザの行動の内容が「帰宅」であり、操作時の機器４０の環境が、１５度を含む許容範囲内であり、照度が３００ルクスを含む許容範囲内であり、且つ、操作が行われた日が平日であり、操作が行われた季節が春であるという条件が設定される。   In this case, the determination unit 217 is set according to the content of the action determined in step S202, the environment information acquired in step S203, and the date, time, or day of the week that the position information is acquired in step S201. Extract the contents of the operation that satisfies the conditions. For example, the content of the user's action determined in step S202 is “going home”, the environmental information acquired in step S203 is “temperature: 15 degrees illuminance: 300 lux”, and in step S201, April 8, 2013 When position information is acquired at 17:00 on the day (month), the content of the user's action at the time of operation is “home”, and the environment of the device 40 at the time of operation is within an allowable range including 15 degrees. Yes, a condition is set in which the illuminance is within an allowable range including 300 lux, the day when the operation is performed is a weekday, and the season when the operation is performed is spring.

本変形例によれば、日付、時刻又は季節によって操作の内容が異なる場合にも、現在の日付、時刻又は季節に適した操作を通信端末１０上で簡単に実施できるようにすることができる。   According to this modification, even when the content of the operation varies depending on the date, time, or season, it is possible to easily perform an operation suitable for the current date, time, or season on the communication terminal 10.

（４）上述した実施形態では、出現回数が最も多い操作の内容に基づくボタン１５２だけが表示されていた。しかし、このボタン１５２に加えて、出現回数が多い上位所定数の操作の内容に基づくボタンが表示されてもよい。 (4) In the above-described embodiment, only the button 152 based on the content of the operation with the highest number of appearances is displayed. However, in addition to the button 152, a button based on the contents of the upper predetermined number of operations having a large number of appearances may be displayed.

この場合、決定部２１７は、出現回数が閾値より多い所定数の操作の内容を決定する。例えば、図１３に示す例では、「照明を点灯」及び「エアコンの電源をオン 設定温度：２５度」という操作の内容の出現回数が最も多く、「照明を点灯」及び「テレビの電源をオン チャンネル：１ｃｈ」という操作の内容の出現回数が２番目に多く、「照明を点灯」という操作の内容の出現回数が３番目に多い。例えば、所定数が３である場合には、これらの操作の内容が決定される。   In this case, the determination unit 217 determines the content of a predetermined number of operations in which the number of appearances is greater than the threshold. For example, in the example shown in FIG. 13, the number of operations such as “turn on lighting” and “turn on air conditioner power set temperature: 25 degrees” appears most frequently, “turn on lighting” and “turn on TV”. The operation content “channel: 1ch” appears the second most frequently, and the operation content “lights on” appears the third most frequently. For example, when the predetermined number is 3, the contents of these operations are determined.

図１５は、本変形例に係る操作画面１５１の一例を示す図である。この操作画面１５１には、実施形態で説明したボタン１５２の他に、「照明を点灯」及び「テレビの電源をオン チャンネル：１ｃｈ」という操作の内容に基づいて作成されたボタン１５３と、「照明を点灯」という操作の内容に基づいて作成されたボタン１５４とが表示されている。このボタン１５３には、「照明を点灯」という操作と「テレビの電源をオン チャンネル：１ｃｈ」という操作とが割り当てられている。ボタン１５４には、「照明を点灯」という操作が割り当てられている。ボタン１５３及び１５４は、ボタン１５２より小さいサイズで表示されてもよい。   FIG. 15 is a diagram illustrating an example of the operation screen 151 according to the present modification. In addition to the button 152 described in the embodiment, the operation screen 151 includes a button 153 created based on the operations of “turn on illumination” and “turn on TV channel: 1ch”, and “lighting”. A button 154 created based on the content of the operation “lit” is displayed. The button 153 is assigned with an operation of “turn on lighting” and an operation of “turn on the TV power: 1 channel”. The button 154 is assigned with an operation “turn on illumination”. Buttons 153 and 154 may be displayed in a smaller size than button 152.

本変形例によれば、出現回数が最も多い操作の内容に基づく操作用の画像だけでなく、出現回数が多い上位所定数の操作の内容に基づく操作用の画像も通信端末１０上に表示される。したがって、このような操作についても通信端末１０上で簡単に実施することができる。   According to this modification, not only an operation image based on the content of the operation with the highest number of appearances but also an operation image based on the content of the upper predetermined number of operations with the highest number of appearances are displayed on the communication terminal 10. The Therefore, such an operation can be easily performed on the communication terminal 10.

（５）上述した実施形態において、操作画面１５１においてボタン１５２に割り当てられた操作の内容を変更できるようにしてもよい。図１４に示す例では、ボタン１５２には、「照明を点灯」という操作と、「エアコンの電源をオン 設定温度：２５度」という操作とが割り当てられている。ここで、エアコンの設定温度を２４度に変更した場合、ユーザは、入力部１４を介してエアコンの設定温度を２４度に変更する指示を入力する。この後、ユーザがこのボタン１５２を押すと、照明を点灯する操作を表す操作信号Ｓ１と、エアコンの電源をオンにして設定温度を２４度にする操作を表す操作信号とが、サーバ装置２０を中継して制御装置３０に送信される。 (5) In the above-described embodiment, the content of the operation assigned to the button 152 on the operation screen 151 may be changed. In the example illustrated in FIG. 14, the button 152 is assigned with an operation “turn on the illumination” and an operation “turn on the air conditioner power set temperature: 25 degrees”. Here, when the set temperature of the air conditioner is changed to 24 degrees, the user inputs an instruction to change the set temperature of the air conditioner to 24 degrees via the input unit 14. Thereafter, when the user presses the button 152, an operation signal S1 indicating an operation for turning on the illumination and an operation signal indicating an operation for turning on the power of the air conditioner and setting the set temperature to 24 degrees are displayed on the server device 20. The data is relayed and transmitted to the control device 30.

（６）上述した実施形態では、通信端末１０がＧＰＳを利用して現在位置を特定する例について説明した。しかし、通信端末１０の現在位置を特定する方法は、ＧＰＳを利用した方法に限定されない。例えば、通信端末１０は、通信部１３が接続した基地局の位置情報を取得し、取得した基地局の位置情報に基づいて現在位置を特定してもよい。 (6) In the above-described embodiment, the example in which the communication terminal 10 specifies the current position using the GPS has been described. However, the method for specifying the current position of the communication terminal 10 is not limited to a method using GPS. For example, the communication terminal 10 may acquire the position information of the base station to which the communication unit 13 is connected, and specify the current position based on the acquired position information of the base station.

（７）上述した実施形態では、通信端末１０が携帯電話やスマートフォン、タブレット端末である例について説明した。しかし、通信端末１０は、これらの端末に限定されず、例えばノート型パーソナルコンピュータであってもよい。 (7) In embodiment mentioned above, the communication terminal 10 demonstrated the example which is a mobile phone, a smart phone, and a tablet terminal. However, the communication terminal 10 is not limited to these terminals, and may be a notebook personal computer, for example.

（８）通信端末１０のプロセッサ１１、サーバ装置２０のプロセッサ２１及び制御装置３０のプロセッサ３１により実行されるプログラムは、インターネットなどの通信回線を介してダウンロードされてもよい。また、このプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどの、コンピュータが読取可能な記録媒体に記録した状態で提供されてもよい。 (8) The program executed by the processor 11 of the communication terminal 10, the processor 21 of the server device 20, and the processor 31 of the control device 30 may be downloaded via a communication line such as the Internet. The program is provided in a state of being recorded on a computer-readable recording medium such as a magnetic recording medium (magnetic tape, magnetic disk, etc.), an optical recording medium (optical disk, etc.), a magneto-optical recording medium, or a semiconductor memory. May be.

（９）上述した実施形態では、赤外線を利用して制御信号を送信する例について説明した。しかし、制御信号送信部３４は、赤外線以外の光を利用して機器４０に制御信号を送信してもよいし、電波を利用して機器４０に制御信号を送信してもよい。また、制御信号受信部３５は、リモートコントローラ５０から赤外線以外の光を利用して送信された制御信号を受信してもよいし、リモートコントローラ５０から電波を利用して送信された制御信号を受信してもよい。 (9) In the above-described embodiment, the example in which the control signal is transmitted using infrared rays has been described. However, the control signal transmission unit 34 may transmit a control signal to the device 40 using light other than infrared light, or may transmit a control signal to the device 40 using radio waves. The control signal receiver 35 may receive a control signal transmitted from the remote controller 50 using light other than infrared light, or may receive a control signal transmitted from the remote controller 50 using radio waves. May be.

（１０）上述した実施形態では、制御装置３０が、機器４０の操作を表す操作信号を受信し、受信した操作信号に対応する制御信号を制御信号ＤＢ３７１から読み出す処理を行っていた。しかし、制御装置３０に代えてサーバ装置２０がこの処理を行ってもよい。この場合、サーバ装置２０の記憶部２４には、制御信号ＤＢ３７１が記憶される。サーバ装置２０は、上述したステップＳ１０１で通信端末１０から操作信号を受信すると、上述したステップＳ１０３と同様に、受信した操作信号に対応する制御信号を制御信号ＤＢ３７１から読み出し、読み出した制御信号を制御装置３０に送信する。制御装置３０は、サーバ装置２０から制御信号を受信すると、赤外線や電波を利用して、受信した制御信号を機器４０に送信する。 (10) In the above-described embodiment, the control device 30 receives the operation signal indicating the operation of the device 40 and performs a process of reading the control signal corresponding to the received operation signal from the control signal DB 371. However, the server device 20 may perform this process instead of the control device 30. In this case, the control signal DB 371 is stored in the storage unit 24 of the server device 20. When receiving the operation signal from the communication terminal 10 in step S101 described above, the server device 20 reads the control signal corresponding to the received operation signal from the control signal DB 371 and controls the read control signal, as in step S103 described above. To device 30. When receiving the control signal from the server device 20, the control device 30 transmits the received control signal to the device 40 using infrared rays or radio waves.

（１１）上述した実施形態では、ユーザの現在の行動内容と機器４０の現在の環境とに対応する操作内容の出現回数を計算し、計算した出現回数を用いて、ユーザの現在の行動内容と機器４０の現在の環境とに適する操作の内容を決定する例について説明した。しかし、ユーザの現在の行動内容と機器４０の現在の環境とに適する操作の内容を決定する方法は、この方法に限定されない。 (11) In the above-described embodiment, the number of appearances of operation contents corresponding to the current action content of the user and the current environment of the device 40 is calculated, and the current action content of the user is calculated using the calculated appearance number. The example which determines the content of operation suitable for the present environment of the apparatus 40 was demonstrated. However, the method of determining the content of the operation suitable for the current action content of the user and the current environment of the device 40 is not limited to this method.

例えば、決定部２１７は、ステップＳ２０３で取得された環境情報、ステップＳ２０１で受信された位置情報、この位置情報が受信された日付、時間、曜日、及び直前に行われた操作の内容を説明変数として、履歴情報２４１に含まれる各操作情報が表す操作が実施される確率を目的変数とした重回帰分析を行うことにより、ユーザの現在の行動、機器４０の現在の環境及び現在の日時や曜日と相関が高い操作の内容、すなわちユーザにより実施される確率が高い操作の内容を決定してもよい。例えば、ユーザが夕方に自宅の近くに移動し、且つ、機器４０が設置された部屋が暗い状態の場合において、これらの状況と相関が高い操作の内容が「リビングの照明を点灯」、「子供部屋の照明を点灯」、「キッチンの照明を点灯」である場合には、これらの操作の内容が決定される。この場合、通信端末１０の表示部１５には、これらの操作内容に基づく操作画面１５５が表示される。   For example, the determination unit 217 describes the environment information acquired in step S203, the position information received in step S201, the date, time, day of the week when the position information was received, and the content of the operation performed immediately before, as explanatory variables. By performing a multiple regression analysis using the probability that an operation represented by each operation information included in the history information 241 is performed as an objective variable, the current action of the user, the current environment of the device 40, the current date and time, and the day of the week The content of the operation having a high correlation with the content, that is, the content of the operation having a high probability of being performed by the user may be determined. For example, when the user moves near home in the evening and the room in which the device 40 is installed is in a dark state, the contents of the operation highly correlated with these situations are “lighting the living room”, “children” In the case of “turn on room lighting” and “turn on kitchen lighting”, the contents of these operations are determined. In this case, an operation screen 155 based on these operation contents is displayed on the display unit 15 of the communication terminal 10.

図１６は、本変形例に係る操作画面１５５の一例を示す図である。図１６（ａ）に示す操作画面１５５には、「リビングの照明を点灯」、「子供部屋の照明を点灯」、「キッチンの照明を点灯」という操作の内容と、ボタン１５６とが表示されている。初期状態では、これらの操作は、全て実行対象として選択されている。ユーザは、これらの操作の中に必要のない操作が含まれている場合には、その操作を実行対象から除外する操作を行ってからボタン１５６を押す。例えば、通信端末１０がタッチパネルを備えている場合には、ユーザは、タッチパネル上で１又は複数の必要としない操作の内容をタップすることにより、その操作を実行対象から除外することができる。もし、ユーザがキッチンの照明を点灯しなくない場合には、図１６（ｂ）に示すように、キッチンの照明の「点灯」ボタンをタップして「消灯」状態（非選択状態）にする。この場合、ボタン１５６には、「キッチンの照明を点灯」という操作以外の操作が割り当てられる。なお、実行対象の操作を選択又は除外する操作は、タップ操作に限定されず、例えばタッチパネル上を指でなぞって対象の操作の内容を囲むような操作であってもよい。   FIG. 16 is a diagram illustrating an example of the operation screen 155 according to the present modification. The operation screen 155 shown in FIG. 16A displays the operation contents “light the living room light”, “light the child room light”, “light the kitchen light”, and a button 156. Yes. In the initial state, these operations are all selected as execution targets. When an unnecessary operation is included in these operations, the user presses the button 156 after performing an operation of excluding the operation from the execution target. For example, when the communication terminal 10 includes a touch panel, the user can exclude the operation from the execution target by tapping one or more unnecessary operation contents on the touch panel. If the user does not turn on the lighting of the kitchen, as shown in FIG. 16B, the “lighting” button of the kitchen lighting is tapped to be in the “off” state (non-selected state). In this case, the button 156 is assigned an operation other than the operation of “turn on the kitchen lighting”. Note that the operation of selecting or excluding the operation to be executed is not limited to the tap operation, and may be an operation that surrounds the content of the operation of interest by tracing the touch panel with a finger, for example.

このようにして、ユーザが、「リビングの照明を点灯」及び「キッチンの照明を点灯」という操作を除外する操作を行ってから、「子供部屋の照明を点灯」という操作が割り当てられたボタン１５６を押すと、子供部屋の照明が点灯する。この場合、決定部２１７は、この操作の内容を含む説明変数を用いて再び重回帰分析を行い、ユーザの現在の状況、機器４０の現在の環境及び現在の日時や曜日に加えて、この操作の内容と相関が高い操作の内容を決定する。例えば、「子供部屋の照明を点灯」という操作の内容を含む説明変数を用いて重回帰分析を行った場合において、この操作が行われたことを含む状況と相関が高い操作の内容が「子供部屋のエアコンの冷房をオン」、「子供部屋のテレビをオン」である場合には、これらの操作の内容が決定される。この場合、通信端末１０の表示部１５には、これらの操作内容に基づく操作画面１５７が表示される。   In this way, after the user performs an operation of excluding the operations of “lighting the living room light” and “lighting the kitchen light”, the button 156 to which the operation “lighting the child room light” is assigned. Press to turn on the children's room lights. In this case, the determination unit 217 performs a multiple regression analysis again using the explanatory variable including the contents of the operation, and in addition to the current situation of the user, the current environment of the device 40, the current date and time, and the day of the week, The content of the operation having a high correlation with the content of is determined. For example, in a case where a multiple regression analysis is performed using an explanatory variable including the content of the operation of “lighting the children's room”, the content of the operation having a high correlation with the situation including that this operation has been performed If “cooling the air conditioner in the room is on” and “turning on the television in the child room”, the contents of these operations are determined. In this case, an operation screen 157 based on these operation contents is displayed on the display unit 15 of the communication terminal 10.

図１７は、本変形例に係る操作画面１５７の一例を示す図である。この操作画面１５７には、「子供部屋のエアコンの冷房をオン」、「子供部屋のテレビをオン」という操作の内容と、ボタン１５８とが表示されている。また、操作画面１５７には、「子供部屋のエアコンの冷房をオン」という操作の内容の隣に、温度設定ダイヤル１５９が表示されている。ユーザは、例えば温度設定ダイヤル１５９を指でなぞって左右にスライドさせることにより、所望の設定温度を指定することができる。ユーザは、図１６に示す操作画面１５５と同様に、これらの操作の中に必要のない操作が含まれている場合には、その操作を実行対象から除外する操作を行ってからボタン１５８を押す。これにより、ボタン１５８には、除外された操作以外の操作が割り当てられる。   FIG. 17 is a diagram illustrating an example of the operation screen 157 according to the present modification. The operation screen 157 displays the contents of the operations “turn on the air conditioner cooling in the children's room” and “turn on the television in the children's room” and a button 158. In addition, a temperature setting dial 159 is displayed on the operation screen 157 next to the content of the operation “ON the air conditioner cooling in the child room”. The user can specify a desired set temperature by, for example, tracing the temperature setting dial 159 with a finger and sliding it to the left and right. Similarly to the operation screen 155 shown in FIG. 16, when an unnecessary operation is included in these operations, the user presses the button 158 after performing an operation for excluding the operation from the execution target. . Thereby, an operation other than the excluded operation is assigned to the button 158.

本変形例によれば、ユーザが行う可能性が高い操作の内容を精度よく予測し、その操作用の画像を通信端末１０上に表示することができる。   According to this modification, it is possible to accurately predict the content of an operation that is likely to be performed by the user, and display an image for the operation on the communication terminal 10.

（１２）上述した実施形態において、家に居る人の数やメンバーによって異なる機能を有するボタンが生成され、表示されてもよい。この場合、家に居る人の数やメンバーは、例えば家族のメンバーがそれぞれ自分の通信端末１０を所持している場合には、各通信端末１０がＧＰＳを利用して生成した位置情報を取得することにより、この位置情報に基づいて検出することができる。または、家に居る人の数やメンバーは、上述した変形例（２）で説明したように、センサ３６に設けられたマイクロフォンや人感センサによって検出されてもよい。 (12) In the above-described embodiment, buttons having different functions may be generated and displayed depending on the number of members in the house and members. In this case, the number of members and members at home acquire position information generated by each communication terminal 10 using GPS when, for example, each family member possesses his own communication terminal 10. Thus, it is possible to detect based on this position information. Alternatively, the number and members of people in the house may be detected by a microphone or a human sensor provided in the sensor 36 as described in the modification (2) described above.

本変形例に係る表示制御部１１３は、このようにして検出された家に居る人の数やメンバーによってボタンに異なる操作を割り当てる。例えば、家に居る人の数が０より多い場合には、サーバ装置２０から受信した操作情報が表す操作のうち、現在動作している機器の操作を除いた操作がボタンに割り当てられる。この現在動作している機器の操作は、例えば記憶部２４に記憶された履歴情報２４１に基づいて特定することができる。これにより、家に人がいる場合には、その人の操作によって動作された機器が、家の外にいる他のメンバーによって動作が停止されたり、設定が変更されたりするのを防止することができる。   The display control unit 113 according to the present modification assigns different operations to the buttons depending on the number of members and members in the house detected in this way. For example, when the number of people at home is greater than 0, among the operations represented by the operation information received from the server device 20, operations other than the operation of the currently operating device are assigned to the buttons. The operation of the currently operating device can be specified based on the history information 241 stored in the storage unit 24, for example. As a result, when there is a person in the house, it is possible to prevent a device operated by that person's operation from being stopped or changed by other members outside the house. it can.

また、例えば家に或るメンバーがいる場合には、サーバ装置２０から受信した操作情報が表す操作のうち、そのメンバーが操作権限を有する機器の操作を除いた操作がボタンに割り当てられてもよい。各メンバーが操作権限を有する機器は、予め設定される。例えば、子供が、子供部屋に設置された機器の操作権限を有する場合には、子供が操作権限を有する機器として、子供部屋に設置された機器が設定される。これにより、家に或るメンバーがいる場合には、そのメンバーが操作権限を有する機器が、家の外にいる他のメンバーによって操作されるのを防止することができる。   Further, for example, when there is a member at home, among the operations represented by the operation information received from the server device 20, an operation excluding the operation of a device for which the member has an operation authority may be assigned to the button. . A device to which each member has an operation authority is set in advance. For example, when the child has the authority to operate the device installed in the child room, the device installed in the child room is set as the device that the child has the operation authority. Thereby, when a certain member exists in a house, it can prevent that the apparatus which the member has the operation authority is operated by the other member outside a house.

１ 遠隔操作システム、１０ 通信端末、２０ サーバ装置、３０ 制御装置、４０ 機器、５０ リモートコントローラ、２１ プロセッサ、２２ メインメモリ、２３ 通信部、２４ 記憶部、１１１ 送信部、１１２ 受信部、１１３ 表示制御部、１１４ 位置情報送信部、２１２ 転送部、２１３ 履歴記録部、２１４ 位置情報取得部、２１５ 行動判定部、２１６ 環境情報取得部、２１７ 決定部、２１８ 出力部、３１１ 信号受信部、３１２ 信号送信部、３１３ 環境情報送信部。 1 remote operation system, 10 communication terminal, 20 server device, 30 control device, 40 device, 50 remote controller, 21 processor, 22 main memory, 23 communication unit, 24 storage unit, 111 transmission unit, 112 reception unit, 113 display control 114, location information transmission unit, 212 transfer unit, 213 history recording unit, 214 location information acquisition unit, 215 behavior determination unit, 216 environment information acquisition unit, 217 determination unit, 218 output unit, 311 signal reception unit, 312 signal transmission Department, 313 Environment information transmission part.

Claims (8)

ユーザによる機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部と、
前記ユーザによって所持される通信端末の位置を表す位置情報を取得する位置情報取得部と、
前記位置情報取得部により取得された前記位置情報に基づいてユーザの行動の内容を判定する行動判定部と、
前記機器の環境を表す環境情報を取得する環境情報取得部と、
前記記憶部に記憶された前記履歴情報に基づいて、前記行動判定部により判定された前記行動の内容と前記環境情報取得部により取得された前記環境情報が表す環境とに対応する操作の内容を決定する決定部と、
前記決定部により決定された前記操作の内容を表す操作情報を前記通信端末に出力する出力部と
を備える操作支援装置。 A history of device operation, including operation information representing the content of the device operation by the user, environment information representing the environment of the device at the time of the operation, and behavior information representing the content of the user's behavior at the time of the operation A storage unit for storing information;
A position information acquisition unit that acquires position information indicating a position of a communication terminal possessed by the user;
An action determination unit that determines the content of the user's action based on the position information acquired by the position information acquisition unit;
An environment information acquisition unit for acquiring environment information representing the environment of the device;
Based on the history information stored in the storage unit, the content of the operation corresponding to the content of the behavior determined by the behavior determination unit and the environment represented by the environmental information acquired by the environment information acquisition unit. A decision part to decide;
An operation support apparatus comprising: an output unit that outputs operation information representing the content of the operation determined by the determination unit to the communication terminal. 前記履歴情報は、前記操作が行われた時刻を含み、
前記決定部は、所定の時間内に行われた複数の操作の内容を決定する
請求項１に記載の操作支援装置。 The history information includes a time when the operation is performed,
The operation support apparatus according to claim 1, wherein the determination unit determines contents of a plurality of operations performed within a predetermined time. 前記履歴情報は、前記操作が行われた日付、時刻又は曜日を含み、
前記決定部は、前記位置情報取得部により前記位置情報が取得された日付、時刻又は曜日に対応する操作の内容を決定する
請求項１又は２に記載の操作支援装置。 The history information includes the date, time or day of the week on which the operation was performed,
The operation support apparatus according to claim 1, wherein the determination unit determines the content of an operation corresponding to a date, time, or day of the week when the position information is acquired by the position information acquisition unit. 前記環境情報は、温度、湿度、照度、空気を構成する気体の濃度、又は人の有無を表す情報を含む
請求項１から３のいずれか１項に記載の操作支援装置。 The operation support apparatus according to any one of claims 1 to 3, wherein the environmental information includes information indicating temperature, humidity, illuminance, a concentration of gas constituting air, or presence / absence of a person. サーバ装置と、通信端末とを備え、
前記サーバ装置は、
ユーザによる機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部と、
前記ユーザによって所持される前記通信端末の位置を表す位置情報を取得する位置情報取得部と、
前記位置情報取得部により取得された前記位置情報に基づいてユーザの行動の内容を判定する行動判定部と、
前記機器の環境を表す環境情報を取得する環境情報取得部と、
前記記憶部に記憶された前記履歴情報に基づいて、前記行動判定部により判定された前記行動の内容と前記環境情報取得部により取得された前記環境情報が表す環境とに対応する操作の内容を決定する決定部と、
前記決定部により決定された前記操作の内容を表す操作情報を前記通信端末に出力する出力部とを備え、
前記通信端末は、
前記出力部により出力された前記操作情報に基づいて操作用の画像を表示する表示部を備える
操作支援システム。 A server device and a communication terminal;
The server device
A history of device operation, including operation information representing the content of the device operation by the user, environment information representing the environment of the device at the time of the operation, and behavior information representing the content of the user's behavior at the time of the operation A storage unit for storing information;
A position information acquisition unit that acquires position information indicating the position of the communication terminal possessed by the user;
An action determination unit that determines the content of the user's action based on the position information acquired by the position information acquisition unit;
An environment information acquisition unit for acquiring environment information representing the environment of the device;
Based on the history information stored in the storage unit, the content of the operation corresponding to the content of the behavior determined by the behavior determination unit and the environment represented by the environmental information acquired by the environment information acquisition unit. A decision part to decide;
An output unit that outputs operation information representing the content of the operation determined by the determination unit to the communication terminal;
The communication terminal is
An operation support system comprising a display unit that displays an operation image based on the operation information output by the output unit. 制御装置と、サーバ装置と、通信端末とを備え、
前記制御装置は、
機器の環境を検出し、当該検出した環境を表す環境情報を生成する検出部を備え、
前記サーバ装置は、
ユーザによる前記機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部と、
前記ユーザによって所持される前記通信端末の位置を表す位置情報を取得する位置情報取得部と、
前記位置情報取得部により取得された前記位置情報に基づいてユーザの行動の内容を判定する行動判定部と、
前記検出部によって生成された前記環境情報を取得する環境情報取得部と、
前記記憶部に記憶された前記履歴情報に基づいて、前記行動判定部により判定された前記行動の内容と前記環境情報取得部により取得された前記環境情報が表す環境とに対応する操作の内容を決定する決定部と、
前記決定部により決定された前記操作の内容を表す操作情報を前記通信端末に出力する出力部とを備え、
前記通信端末は、
前記出力部により出力された前記操作情報に基づいて操作用の画像を表示する表示部を備える
操作支援システム。 A control device, a server device, and a communication terminal;
The controller is
A detection unit that detects the environment of the device and generates environment information representing the detected environment;
The server device
Operation information representing the content of the operation of the device by the user, environment information representing the environment of the device at the time of the operation, and behavior information representing the content of the user's behavior at the time of the operation A storage unit for storing history information;
A position information acquisition unit that acquires position information indicating the position of the communication terminal possessed by the user;
An action determination unit that determines the content of the user's action based on the position information acquired by the position information acquisition unit;
An environment information acquisition unit for acquiring the environment information generated by the detection unit;
Based on the history information stored in the storage unit, the content of the operation corresponding to the content of the behavior determined by the behavior determination unit and the environment represented by the environmental information acquired by the environment information acquisition unit. A decision part to decide;
An output unit that outputs operation information representing the content of the operation determined by the determination unit to the communication terminal;
The communication terminal is
An operation support system comprising a display unit that displays an operation image based on the operation information output by the output unit. 前記記憶部は、前記通信端末上で行われた前記機器の操作に関する履歴情報、又はリモートコントローラを用いて行われた前記機器の操作に関する履歴情報を記憶する
請求項６に記載の操作支援システム。 The operation support system according to claim 6, wherein the storage unit stores history information regarding operation of the device performed on the communication terminal or history information regarding operation of the device performed using a remote controller. ユーザによる機器の操作の内容を表す操作情報と、当該操作時の当該機器の環境を表す環境情報と、当該操作時の当該ユーザの行動の内容を表す行動情報とを含む、機器の操作に関する履歴情報を記憶する記憶部を備えるコンピュータに、
前記ユーザによって所持される通信端末の位置を表す位置情報を取得するステップと、
前記取得された位置情報に基づいてユーザの行動の内容を判定するステップと、
前記機器の環境を表す環境情報を取得するステップと、
前記記憶部に記憶された前記履歴情報に基づいて、前記判定された行動の内容と前記取得された環境情報が表す環境とに対応する操作の内容を決定するステップと、
前記決定された操作の内容を表す操作情報を前記通信端末に出力するステップと
を実行させるためのプログラム。 A history of device operation, including operation information representing the content of the device operation by the user, environment information representing the environment of the device at the time of the operation, and behavior information representing the content of the user's behavior at the time of the operation In a computer having a storage unit for storing information,
Obtaining position information representing a position of a communication terminal possessed by the user;
Determining the content of the user's action based on the acquired position information;
Obtaining environmental information representing the environment of the device;
Determining the content of the operation corresponding to the content of the determined action and the environment represented by the acquired environmental information based on the history information stored in the storage unit;
And a step of outputting operation information representing the content of the determined operation to the communication terminal.
JP2013115629A 2013-05-31 2013-05-31 Operation support device, operation support system, and program Active JP6045982B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013115629A JP6045982B2 (en) 2013-05-31 2013-05-31 Operation support device, operation support system, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013115629A JP6045982B2 (en) 2013-05-31 2013-05-31 Operation support device, operation support system, and program

Publications (2)

Publication Number Publication Date
JP2014236309A JP2014236309A (en) 2014-12-15
JP6045982B2 true JP6045982B2 (en) 2016-12-14

Family

ID=52138735

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013115629A Active JP6045982B2 (en) 2013-05-31 2013-05-31 Operation support device, operation support system, and program

Country Status (1)

Country Link
JP (1) JP6045982B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3014366B1 (en) * 2013-06-27 2017-05-17 iHaus Ag Device and method for controlling electronically controllable devices and systems in public and private buildings
JP6704166B2 (en) * 2015-01-06 2020-06-03 パナソニックＩｐマネジメント株式会社 Communication device
JP2016178569A (en) * 2015-03-20 2016-10-06 大木　光晴 Action attribute acquisition device, apparatus controller, and moving image recording device
JP6447920B2 (en) 2015-04-10 2019-01-09 パナソニックＩｐマネジメント株式会社 Lighting fixture, lighting system, and control method thereof
JP2017224899A (en) 2016-06-13 2017-12-21 パナソニックＩｐマネジメント株式会社 Control apparatus, control system and search method
JP6945159B2 (en) * 2017-08-09 2021-10-06 パナソニックＩｐマネジメント株式会社 Lighting system, wireless controller, control method and program
JP7210973B2 (en) * 2018-09-28 2023-01-24 東芝ライテック株式会社 Information processing system
JP2020195132A (en) * 2019-05-21 2020-12-03 株式会社別川製作所 Remote control system for device in facility

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001231083A (en) * 2000-02-17 2001-08-24 Mitsubishi Electric Corp Automatic equipment control system
JP2002027571A (en) * 2000-07-05 2002-01-25 Toshiba Corp Communication terminal and radio terminal which are used in electric apparatus control system
JP2002109203A (en) * 2000-09-28 2002-04-12 Matsushita Electric Works Ltd Remote control monitoring service system for housing life equipment unit for contract user by using portable terminal unit
JP2002142270A (en) * 2000-11-01 2002-05-17 Mitsubishi Heavy Ind Ltd Remote control system and remote control unit and remote control method and computer readable recording medium with remote control program recorded therein
JP4122779B2 (en) * 2002-01-23 2008-07-23 三菱電機株式会社 Home appliance control system, home appliance control device, and home appliance
JP2004038711A (en) * 2002-07-05 2004-02-05 Tokyo Electric Power Co Inc:The Remote control device and remote control system
JP4427717B2 (en) * 2003-10-22 2010-03-10 株式会社ノーリツ Remote operation system
JP2005175776A (en) * 2003-12-10 2005-06-30 Japan Telecom Co Ltd Device and method for controlling information equipment
JP2005184711A (en) * 2003-12-24 2005-07-07 Canon Software Inc Remote control management server, remote control management method, program and recording medium
JP2006324860A (en) * 2005-05-18 2006-11-30 Matsushita Electric Ind Co Ltd Device control system and method therefor

Also Published As

Publication number Publication date
JP2014236309A (en) 2014-12-15

Similar Documents

Publication Publication Date Title
JP6045982B2 (en) Operation support device, operation support system, and program
US11356512B2 (en) Method and device for controlling home device
US9949351B2 (en) Method for controlling mobile terminal and program for controlling mobile terminal
JP6130968B2 (en) Smart terminal control method, apparatus, program, and storage medium
US9940828B2 (en) Home appliance control method and device
KR101842379B1 (en) Working method and woking device of intelligent electric apparatus
RU2658194C2 (en) Apparatus control method and device
US20160316007A1 (en) Method and apparatus for grouping smart device in smart home system
EP3179329A1 (en) Method and device for controlling intelligent device
US20160350654A1 (en) Intelligent home system and method
CN104460329A (en) Intelligent device connection method and device
KR102480914B1 (en) Electornic apparatus and operating method thereof
KR20160030883A (en) Smart house system and operation method therefor
KR20210127893A (en) Configuration Method of Action for external device and electronic device supporting the same
WO2018193855A1 (en) Display method, program and display system
US10989426B2 (en) Information processing device, electronic apparatus, method, and program
JP6181486B2 (en) Communication system, server device, portable terminal device, and information processing method
JP2006074207A (en) Mobile type information apparatus, method of moving this, and information system, method of estimating position
US20180131533A1 (en) Automation rule selection method and wireless communication device
JP6897696B2 (en) Servers, methods, and programs
US20160062329A1 (en) Control method of presented information, control device of presented information, and speaker
JP6986923B2 (en) Electronic device control device
US11818820B2 (en) Adapting a lighting control interface based on an analysis of conversational input
JP6909961B2 (en) Display method, program, and display system
CN113031455A (en) Control method, device, equipment and computer storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161104

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161116

R150 Certificate of patent or registration of utility model

Ref document number: 6045982

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250