JP2010088032A - Remote control system - Google Patents

Remote control system Download PDF

Info

Publication number
JP2010088032A
JP2010088032A JP2008257404A JP2008257404A JP2010088032A JP 2010088032 A JP2010088032 A JP 2010088032A JP 2008257404 A JP2008257404 A JP 2008257404A JP 2008257404 A JP2008257404 A JP 2008257404A JP 2010088032 A JP2010088032 A JP 2010088032A
Authority
JP
Japan
Prior art keywords
information
remote control
control
image
control instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008257404A
Other languages
Japanese (ja)
Other versions
JP5574397B2 (en
Inventor
Jiro Ozawa
次郎 小澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2008257404A priority Critical patent/JP5574397B2/en
Publication of JP2010088032A publication Critical patent/JP2010088032A/en
Application granted granted Critical
Publication of JP5574397B2 publication Critical patent/JP5574397B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a remote control system in which a terminal device is allowed to acquire remote control information from a server device while saving labor and time of a user. <P>SOLUTION: The remote control system includes the terminal device 10 and a server device 20. The terminal device 10 transmits to the server device 20 image information representing an image of external equipment. The server device 20 acquires remote control information corresponding to the received image information from among remote control information stored and transmits the acquired remote control information. The terminal device 10 receives the remote control information from the server device 20. The remote control information includes: control instruction input information causing a user to input control instruction information instructing control of the external equipment; and control signal specification information specifying a control signal, that is a signal for controlling the external equipment, corresponding to the control instruction information. The terminal device 10 transmits the control signal on the basis of the received remote control information and the accepted control instruction information. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、サーバ装置から受信した遠隔制御情報に基づいて、外部機器を制御するための制御信号を発信する端末装置を含む遠隔制御システムに関する。   The present invention relates to a remote control system including a terminal device that transmits a control signal for controlling an external device based on remote control information received from a server device.

互いに通信可能に接続された端末装置及びサーバ装置を含む遠隔制御システムが知られている。この種の遠隔制御システムの一つとして特許文献1に記載のシステムは、サーバ装置が端末装置へ遠隔制御情報を送信する。そして、端末装置は、受信した遠隔制御情報に基づいてボタンを含む画像をタッチパネル式のディスプレイに表示させる。   A remote control system including a terminal device and a server device that are communicably connected to each other is known. As one example of this type of remote control system, in the system described in Patent Document 1, a server device transmits remote control information to a terminal device. Then, the terminal device displays an image including buttons on the touch panel display based on the received remote control information.

次いで、端末装置は、ユーザがボタンを押すことにより、外部機器を制御するための信号であってそのボタンに応じた制御信号を発信する。外部機器は、この制御信号を受信し、受信した制御信号に応じて作動する。   Next, when the user presses the button, the terminal device transmits a control signal corresponding to the button, which is a signal for controlling the external device. The external device receives this control signal and operates in accordance with the received control signal.

上記遠隔制御システムにおいては、サーバ装置は、端末装置のユーザにより入力された外部機器特定情報を受信し、受信した外部機器特定情報に対応する遠隔制御情報を端末装置へ送信する。ここで、外部機器特定情報は、外部機器を特定するための情報(外部機器の製造会社、外部機器の種類及び外部機器の型番)である。   In the remote control system, the server device receives the external device specifying information input by the user of the terminal device, and transmits the remote control information corresponding to the received external device specifying information to the terminal device. Here, the external device specifying information is information (external device manufacturer, type of external device, and external device model number) for specifying the external device.

この遠隔制御システムによれば、ユーザは、1つの端末装置を操作することにより、複数の外部機器を遠隔制御することができる。また、上記遠隔制御システムによれば、端末装置が予め多数の外部機器に対応する遠隔制御情報を記憶しておく必要がないので、端末装置が備える記憶装置の容量が無駄に大きくされることを回避することができる。   According to this remote control system, the user can remotely control a plurality of external devices by operating one terminal device. Further, according to the remote control system, since the terminal device does not need to store remote control information corresponding to a large number of external devices in advance, the capacity of the storage device included in the terminal device is increased unnecessarily. It can be avoided.

特開2003−18674号公報JP 2003-18674 A

しかしながら、この遠隔制御システムにおいては、端末装置のユーザが外部機器特定情報を入力しなければ、その外部機器特定情報により特定される外部機器に対応する遠隔制御情報を端末装置が取得することができない。即ち、上記遠隔制御システムにおいては、ユーザが外部機器特定情報を入力する手間が煩雑であるという問題があった。   However, in this remote control system, if the user of the terminal device does not input the external device specifying information, the terminal device cannot acquire the remote control information corresponding to the external device specified by the external device specifying information. . That is, in the remote control system, there is a problem that the user has trouble in inputting the external device specifying information.

このため、本発明の目的は、上述した課題である「端末装置にサーバ装置から遠隔制御情報を取得させるためのユーザの手間が煩雑であること」を解決することが可能な遠隔制御システムを提供することにある。   For this reason, an object of the present invention is to provide a remote control system that can solve the above-mentioned problem that “the user has troublesome work for the terminal device to acquire remote control information from the server device” There is to do.

かかる目的を達成するため本発明の一形態である遠隔制御システムは、互いに通信可能に接続された端末装置及びサーバ装置を含むシステムである。   In order to achieve such an object, a remote control system according to one embodiment of the present invention is a system including a terminal device and a server device that are communicably connected to each other.

更に、上記端末装置は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
上記撮影手段により出力された画像情報を上記サーバ装置へ送信する画像情報送信手段と、
上記サーバ装置により送信された情報であって、上記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付手段と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を備える。
Furthermore, the terminal device
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting the image information output by the photographing means to the server device;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information and transmitting the specified control signal;
Is provided.

加えて、上記サーバ装置は、
複数の外部機器のそれぞれに対応する上記遠隔制御情報を記憶する遠隔制御情報記憶手段と、
上記端末装置により送信された画像情報を受信する画像情報受信手段と、
上記記憶されている遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
上記取得された遠隔制御情報を上記端末装置へ送信する遠隔制御情報送信手段と、
を備える。
In addition, the server device
Remote control information storage means for storing the remote control information corresponding to each of a plurality of external devices;
Image information receiving means for receiving image information transmitted by the terminal device;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
Is provided.

また、本発明の他の形態であるサーバ装置は、
複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を記憶する遠隔制御情報記憶手段と、
通信可能に接続された端末装置により送信された画像情報を受信する画像情報受信手段と、
上記記憶されている遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
上記取得された遠隔制御情報を上記端末装置へ送信する遠隔制御情報送信手段と、
を備える。
Moreover, the server apparatus which is the other form of this invention is
Information corresponding to each of a plurality of external devices, including control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information storage means for storing remote control information that is information including control signal specifying information for specifying a control signal that is a signal for controlling the external device,
Image information receiving means for receiving image information transmitted by a terminal device that is communicably connected;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
Is provided.

また、本発明の他の形態である端末装置は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
上記撮影手段により出力された画像情報を、通信可能に接続されたサーバ装置へ送信する画像情報送信手段と、
上記サーバ装置により送信された情報であって、上記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付手段と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を備える。
In addition, a terminal device according to another embodiment of the present invention,
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting image information output by the photographing means to a server device connected to be communicable;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information and transmitting the specified control signal;
Is provided.

また、本発明の他の形態である遠隔制御方法は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影工程と、
上記撮影工程にて出力された画像情報を端末装置からサーバ装置へ送信する画像情報送信工程と、
上記送信された画像情報を受信する画像情報受信工程と、
記憶装置に記憶され且つ複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得工程と、
上記取得された遠隔制御情報を上記サーバ装置から上記端末装置へ送信する遠隔制御情報送信工程と、
上記送信された遠隔制御情報を受信する遠隔制御情報受信工程と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力工程と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付工程と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信工程と、
を含む。
In addition, a remote control method according to another aspect of the present invention includes:
A photographing step of outputting image information representing an image of the external device by photographing the external device;
An image information transmission step of transmitting the image information output in the photographing step from the terminal device to the server device;
An image information receiving step for receiving the transmitted image information;
Control instruction input information that is stored in the storage device and corresponds to each of a plurality of external devices and that allows the user to input control instruction information that instructs control of the external device, and the control instruction Corresponding to the received image information from the remote control information, which is information including information corresponding to the information and control signal specifying information for specifying the control signal for controlling the external device A remote control information acquisition step for acquiring remote control information;
A remote control information transmission step of transmitting the acquired remote control information from the server device to the terminal device;
A remote control information receiving step for receiving the transmitted remote control information;
A control instruction input information output step for outputting control instruction input information included in the received remote control information;
A control instruction information receiving step for receiving the control instruction information input by the user in accordance with the output control instruction input information;
A control signal transmission step of specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information, and transmitting the specified control signal;
including.

また、本発明の他の形態であるサーバ装置用プログラムは、
サーバ装置に、
複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を記憶装置に記憶させる遠隔制御情報記憶処理手段と、
通信可能に接続された端末装置により送信された画像情報を受信する画像情報受信手段と、
上記記憶されている遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
上記取得された遠隔制御情報を上記端末装置へ送信する遠隔制御情報送信手段と、
を実現させるためのプログラムである。
In addition, a server device program according to another embodiment of the present invention includes:
On the server device,
Information corresponding to each of a plurality of external devices, including control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information storage processing means for storing in the storage device remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device, and
Image information receiving means for receiving image information transmitted by a terminal device that is communicably connected;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
It is a program for realizing.

また、本発明の他の形態である端末装置用プログラムは、
端末装置に、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
上記撮影手段により出力された画像情報を、通信可能に接続されたサーバ装置へ送信する画像情報送信手段と、
上記サーバ装置により送信された情報であって、上記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付手段と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を実現させるためのプログラムである。
Moreover, the program for terminal devices which is the other form of this invention is the following.
On the terminal device,
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting image information output by the photographing means to a server device connected to be communicable;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information and transmitting the specified control signal;
It is a program for realizing.

本発明は、以上のように構成されることにより、ユーザの手間を軽減しながら端末装置がサーバ装置から遠隔制御情報を取得することができる。   According to the present invention configured as described above, the terminal device can acquire the remote control information from the server device while reducing the user's trouble.

本発明の一形態である遠隔制御システムは、互いに通信可能に接続された端末装置及びサーバ装置を含むシステムである。   A remote control system according to one embodiment of the present invention is a system including a terminal device and a server device that are communicably connected to each other.

更に、上記端末装置は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
上記撮影手段により出力された画像情報を上記サーバ装置へ送信する画像情報送信手段と、
上記サーバ装置により送信された情報であって、上記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付手段と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を備える。
Furthermore, the terminal device
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting the image information output by the photographing means to the server device;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information and transmitting the specified control signal;
Is provided.

加えて、上記サーバ装置は、
複数の外部機器のそれぞれに対応する上記遠隔制御情報を記憶する遠隔制御情報記憶手段と、
上記端末装置により送信された画像情報を受信する画像情報受信手段と、
上記記憶されている遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
上記取得された遠隔制御情報を上記端末装置へ送信する遠隔制御情報送信手段と、
を備える。
In addition, the server device
Remote control information storage means for storing the remote control information corresponding to each of a plurality of external devices;
Image information receiving means for receiving image information transmitted by the terminal device;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
Is provided.

これによれば、端末装置は、外部機器を撮影した画像を表す画像情報をサーバ装置へ送信する。そして、端末装置は、その画像情報に対応する遠隔制御情報をサーバ装置から受信する。これにより、端末装置のユーザが、外部機器特定情報を入力することなく、外部機器を撮影するための操作を行うだけで、端末装置は、その外部機器に対応する遠隔制御情報をサーバ装置から取得することができる。即ち、ユーザの手間を軽減しながら端末装置がサーバ装置から遠隔制御情報を取得することができる。   According to this, a terminal device transmits the image information showing the image which image | photographed the external apparatus to a server apparatus. Then, the terminal device receives remote control information corresponding to the image information from the server device. As a result, the terminal device can acquire remote control information corresponding to the external device from the server device simply by performing an operation for photographing the external device without inputting the external device identification information. can do. That is, the terminal device can acquire the remote control information from the server device while reducing the user's trouble.

更に、上記構成によれば、多数の外部機器に対応する遠隔制御情報を端末装置が予め記憶している場合と比較して、端末装置が備える記憶装置の容量を小さくすることができる。加えて、上記構成によれば、サーバ装置が画像情報に基づいて遠隔制御情報を特定する処理を行う。従って、端末装置が画像情報に基づいて遠隔制御情報を特定する処理を行う場合と比較して端末装置の処理負荷を軽減することができる。   Furthermore, according to the above configuration, the capacity of the storage device included in the terminal device can be reduced as compared with the case where the terminal device stores remote control information corresponding to a large number of external devices in advance. In addition, according to the above configuration, the server device performs processing for specifying the remote control information based on the image information. Therefore, it is possible to reduce the processing load on the terminal device as compared with the case where the terminal device performs processing for specifying remote control information based on image information.

この場合、
上記遠隔制御情報記憶手段は、上記遠隔制御情報と、上記外部機器を識別するための機器識別情報と、を対応付けて記憶するように構成され、
上記遠隔制御情報取得手段は、
機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて記憶する特徴量記憶手段と、
上記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出手段と、を含むとともに、
上記抽出された特徴量と対応付けて記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成されることが好適である。
in this case,
The remote control information storage means is configured to store the remote control information and device identification information for identifying the external device in association with each other,
The remote control information acquisition means includes
A feature amount storage means for storing the device identification information and the feature amount of the image obtained by photographing the external device identified by the device identification information in association with each other;
And a feature amount extraction means for extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in association with the extracted feature amount, and acquire remote control information stored in association with the acquired device identification information as remote control information corresponding to the image information It is suitable to be configured.

この場合、
上記サーバ装置は、
上記遠隔制御情報取得手段により、上記受信された画像情報に対応する遠隔制御情報が取得されなかった場合、当該画像情報に対応する遠隔制御情報が存在しない旨を表す遠隔制御不能通知を上記端末装置へ送信する遠隔制御不能通知送信手段を備え、
上記端末装置は、
上記サーバ装置により送信された遠隔制御不能通知を受信し、当該受信した遠隔制御不能通知を出力する遠隔制御不能通知出力手段を備えることが好適である。
in this case,
The server device is
If the remote control information corresponding to the received image information is not acquired by the remote control information acquisition means, a remote control disabled notification indicating that there is no remote control information corresponding to the image information is sent to the terminal device A remote control impossible notification transmission means for transmitting to
The terminal device is
It is preferable to include a remote control disabled notification output unit that receives the remote control disabled notification transmitted by the server device and outputs the received remote control disabled notification.

これによれば、画像情報に対応する遠隔制御情報が存在しない旨をユーザに認識させることができる。この結果、ユーザの利便性を向上させることができる。   According to this, it is possible to make the user recognize that there is no remote control information corresponding to the image information. As a result, user convenience can be improved.

この場合、
上記制御指示入力用情報は、上記制御指示情報と対応付けられたボタンを含む画像を表す情報であり、
上記制御指示入力用情報出力手段は、ディスプレイを有するとともに、上記制御指示入力用情報が表す画像を当該ディスプレイに表示させるように構成されることが好適である。
in this case,
The control instruction input information is information representing an image including a button associated with the control instruction information.
The control instruction input information output means preferably includes a display and is configured to display an image represented by the control instruction input information on the display.

この場合、
上記ディスプレイは、タッチパネル式のディスプレイであり、
上記制御指示情報受付手段は、上記ディスプレイに表示されたボタンがユーザによって押された場合に当該ボタンに対応付けられた上記制御指示情報を受け付けるように構成されることが好適である。
in this case,
The display is a touch panel display,
Preferably, the control instruction information receiving means is configured to receive the control instruction information associated with the button when the button displayed on the display is pressed by the user.

この場合、上記端末装置は、
上記サーバ装置から受信した遠隔制御情報を記憶する遠隔制御情報記憶手段と、
上記記憶されている遠隔制御情報のうちの1つを特定するための情報であって上記ユーザにより入力された情報である遠隔制御特定情報を受け付ける遠隔制御特定情報受付手段と、
を備え、
上記制御指示入力用情報出力手段は、上記受け付けられた遠隔制御特定情報により特定される遠隔制御情報に含まれる制御指示入力用情報を出力するように構成され、
上記制御信号発信手段は、上記受け付けられた制御指示情報に応じた制御信号を、上記受け付けられた遠隔制御特定情報により特定される遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信するように構成されることが好適である。
In this case, the terminal device
Remote control information storage means for storing remote control information received from the server device;
Remote control specifying information receiving means for receiving remote control specifying information which is information for specifying one of the stored remote control information and is input by the user;
With
The control instruction input information output means is configured to output control instruction input information included in the remote control information specified by the received remote control specification information,
The control signal transmitting means specifies a control signal according to the received control instruction information based on control signal specifying information included in remote control information specified by the received remote control specifying information, and It is preferable that the specified control signal is transmitted.

これによれば、端末装置がサーバ装置から一度取得した遠隔制御情報に対応する外部機器を撮影するための操作をユーザが行うことなく、遠隔制御特定情報を入力するだけで、端末装置は、遠隔制御特定情報により特定される遠隔制御情報に基づいて作動する。この結果、外部機器を遠隔制御する際のユーザの手間をより一層軽減することができる。更に、サーバ装置から端末装置へ遠隔制御情報が無駄に送信されることを防止することができる。   According to this, the terminal device can be remotely input only by inputting the remote control identification information without the user performing an operation for photographing the external device corresponding to the remote control information once acquired from the server device by the terminal device. It operates based on the remote control information specified by the control specifying information. As a result, it is possible to further reduce the user's trouble when remotely controlling the external device. Furthermore, it is possible to prevent the remote control information from being sent from the server device to the terminal device.

また、本発明の他の形態であるサーバ装置は、
複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を記憶する遠隔制御情報記憶手段と、
通信可能に接続された端末装置により送信された画像情報を受信する画像情報受信手段と、
上記記憶されている遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
上記取得された遠隔制御情報を上記端末装置へ送信する遠隔制御情報送信手段と、
を備える。
Moreover, the server apparatus which is the other form of this invention is
Information corresponding to each of a plurality of external devices, including control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information storage means for storing remote control information that is information including control signal specifying information for specifying a control signal that is a signal for controlling the external device,
Image information receiving means for receiving image information transmitted by a terminal device that is communicably connected;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
Is provided.

この場合、
上記遠隔制御情報記憶手段は、上記遠隔制御情報と、上記外部機器を識別するための機器識別情報と、を対応付けて記憶するように構成され、
上記遠隔制御情報取得手段は、
機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて記憶する特徴量記憶手段と、
上記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出手段と、を含むとともに、
上記抽出された特徴量と対応付けて記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成されることが好適である。
in this case,
The remote control information storage means is configured to store the remote control information and device identification information for identifying the external device in association with each other,
The remote control information acquisition means includes
A feature amount storage means for storing the device identification information and the feature amount of the image obtained by photographing the external device identified by the device identification information in association with each other;
And a feature amount extraction means for extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in association with the extracted feature amount, and acquire remote control information stored in association with the acquired device identification information as remote control information corresponding to the image information It is suitable to be configured.

また、本発明の他の形態である端末装置は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
上記撮影手段により出力された画像情報を、通信可能に接続されたサーバ装置へ送信する画像情報送信手段と、
上記サーバ装置により送信された情報であって、上記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付手段と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を備える。
In addition, a terminal device according to another embodiment of the present invention,
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting image information output by the photographing means to a server device connected to be communicable;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information and transmitting the specified control signal;
Is provided.

この場合、上記端末装置は、携帯電話装置であることが好適である。   In this case, the terminal device is preferably a mobile phone device.

また、本発明の他の形態である遠隔制御方法は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影工程と、
上記撮影工程にて出力された画像情報を端末装置からサーバ装置へ送信する画像情報送信工程と、
上記送信された画像情報を受信する画像情報受信工程と、
記憶装置に記憶され且つ複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得工程と、
上記取得された遠隔制御情報を上記サーバ装置から上記端末装置へ送信する遠隔制御情報送信工程と、
上記送信された遠隔制御情報を受信する遠隔制御情報受信工程と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力工程と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付工程と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信工程と、
を含む。
In addition, a remote control method according to another aspect of the present invention includes:
A photographing step of outputting image information representing an image of the external device by photographing the external device;
An image information transmission step of transmitting the image information output in the photographing step from the terminal device to the server device;
An image information receiving step for receiving the transmitted image information;
Control instruction input information that is stored in the storage device and corresponds to each of a plurality of external devices and that allows the user to input control instruction information that instructs control of the external device, and the control instruction Corresponding to the received image information from the remote control information, which is information including information corresponding to the information and control signal specifying information for specifying the control signal for controlling the external device A remote control information acquisition step for acquiring remote control information;
A remote control information transmission step of transmitting the acquired remote control information from the server device to the terminal device;
A remote control information receiving step for receiving the transmitted remote control information;
A control instruction input information output step for outputting control instruction input information included in the received remote control information;
A control instruction information receiving step for receiving the control instruction information input by the user in accordance with the output control instruction input information;
A control signal transmission step of specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information, and transmitting the specified control signal;
including.

この場合、
上記記憶装置は、上記遠隔制御情報と、上記外部機器を識別するための機器識別情報と、を対応付けて記憶するとともに、機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて記憶し、
上記遠隔制御情報取得工程は、
上記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出工程を含むとともに、
上記抽出された特徴量と対応付けて上記記憶装置に記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて当該記憶装置に記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成されることが好適である。
in this case,
The storage device stores the remote control information and device identification information for identifying the external device in association with each other, and images the device identification information and the external device identified by the device identification information. The image feature amount is stored in association with each other,
The remote control information acquisition step
Including a feature amount extraction step of extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in the storage device in association with the extracted feature amount, and remote control information stored in the storage device in association with the acquired device identification information in the image information It is preferable to be configured to obtain as remote control information corresponding to.

また、本発明の他の形態であるサーバ装置用プログラムは、
サーバ装置に、
複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を記憶装置に記憶させる遠隔制御情報記憶処理手段と、
通信可能に接続された端末装置により送信された画像情報を受信する画像情報受信手段と、
上記記憶されている遠隔制御情報の中から上記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
上記取得された遠隔制御情報を上記端末装置へ送信する遠隔制御情報送信手段と、
を実現させるためのプログラムである。
In addition, a server device program according to another embodiment of the present invention includes:
On the server device,
Information corresponding to each of a plurality of external devices, including control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information storage processing means for storing in the storage device remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device, and
Image information receiving means for receiving image information transmitted by a terminal device that is communicably connected;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
It is a program for realizing.

この場合、
上記遠隔制御情報記憶処理手段は、上記遠隔制御情報と、上記外部機器を識別するための機器識別情報と、を対応付けて上記記憶装置に記憶させるように構成され、
上記遠隔制御情報取得手段は、
機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて上記記憶装置に記憶させる特徴量記憶処理手段と、
上記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出手段と、を含むとともに、
上記抽出された特徴量と対応付けて記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成されることが好適である。
in this case,
The remote control information storage processing unit is configured to store the remote control information and the device identification information for identifying the external device in association with each other in the storage device,
The remote control information acquisition means includes
Feature amount storage processing means for associating the device identification information with the feature amount of the image obtained by photographing the external device identified by the device identification information, and storing it in the storage device;
And a feature amount extraction means for extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in association with the extracted feature amount, and acquire remote control information stored in association with the acquired device identification information as remote control information corresponding to the image information It is suitable to be configured.

また、本発明の他の形態である端末装置用プログラムは、
端末装置に、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
上記撮影手段により出力された画像情報を、通信可能に接続されたサーバ装置へ送信する画像情報送信手段と、
上記サーバ装置により送信された情報であって、上記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
上記出力された制御指示入力用情報に応じて上記ユーザにより入力された上記制御指示情報を受け付ける制御指示情報受付手段と、
上記受け付けられた制御指示情報に応じた制御信号を、上記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を実現させるためのプログラムである。
Moreover, the program for terminal devices which is the other form of this invention is the following.
On the terminal device,
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting image information output by the photographing means to a server device connected to be communicable;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on the control signal specifying information included in the received remote control information and transmitting the specified control signal;
It is a program for realizing.

上述した構成を有する、サーバ装置、端末装置、遠隔制御方法、サーバ装置用プログラム、又は、端末装置用プログラム、の発明であっても、上記遠隔制御システムと同様の作用を有するために、上述した本発明の目的を達成することができる。   The invention of the server device, the terminal device, the remote control method, the server device program, or the terminal device program having the above-described configuration is described above in order to have the same operation as the remote control system. The object of the present invention can be achieved.

以下、本発明に係る、遠隔制御システム、サーバ装置、端末装置、遠隔制御方法、サーバ装置用プログラム、及び、端末装置用プログラム、の各実施形態について図1〜図8を参照しながら説明する。   Hereinafter, embodiments of a remote control system, a server device, a terminal device, a remote control method, a server device program, and a terminal device program according to the present invention will be described with reference to FIGS.

<第1実施形態>
図1に示したように、第1実施形態に係る遠隔制御システム1は、端末装置10と、サーバ装置20と、を含む。端末装置10は、図示しない基地局を介して通信回線(本例では、インターネット)NWに接続されている。サーバ装置20も、通信回線NWに接続されている。これにより、端末装置10及びサーバ装置20は、互いに通信可能に接続されている。
<First Embodiment>
As shown in FIG. 1, the remote control system 1 according to the first embodiment includes a terminal device 10 and a server device 20. The terminal device 10 is connected to a communication line (in this example, the Internet) NW via a base station (not shown). The server device 20 is also connected to the communication line NW. Thereby, the terminal device 10 and the server device 20 are connected so as to communicate with each other.

端末装置10は、携帯電話装置である。端末装置10は、アンテナ部11と、表示部(制御指示入力用情報出力手段の一部、遠隔制御不能通知出力手段の一部、制御指示情報受付手段の一部)12と、スピーカ部13と、マイクロホン部14と、カメラ部(撮影手段の一部)15と、赤外線ポート部(制御信号発信手段の一部)16と、を備える。   The terminal device 10 is a mobile phone device. The terminal device 10 includes an antenna unit 11, a display unit (a part of control instruction input information output unit, a part of remote control impossibility notification output unit, a part of control instruction information reception unit) 12, a speaker unit 13, , A microphone unit 14, a camera unit (a part of the photographing unit) 15, and an infrared port unit (a part of the control signal transmission unit) 16.

更に、端末装置10は、図示しない中央処理装置(CPU;Central Processing Unit)及び記憶装置(本例では、メモリ)を含む制御部を備える。制御部は、メモリに記憶されている所定のプログラムをCPUが実行することにより、端末装置10を構成する各部を制御する。   Furthermore, the terminal device 10 includes a control unit including a central processing unit (CPU) (not shown) and a storage device (memory in this example). The control unit controls each unit constituting the terminal device 10 by the CPU executing a predetermined program stored in the memory.

アンテナ部11は、アンテナを有し、制御部からの情報をアンテナを介して図示しない基地局へ送信する。更に、アンテナ部11は、アンテナを介して基地局から情報を受信し、受信した情報を制御部へ出力する。   The antenna unit 11 has an antenna, and transmits information from the control unit to a base station (not shown) via the antenna. Furthermore, the antenna unit 11 receives information from the base station via the antenna and outputs the received information to the control unit.

表示部12は、端末装置10の前面に配置されたタッチパネル式のディスプレイを有する。表示部12は、制御部からの画像情報に基づいてそのディスプレイに文字及び図形等からなる画像を表示する。   The display unit 12 includes a touch panel display disposed on the front surface of the terminal device 10. The display unit 12 displays an image made up of characters, graphics, and the like on the display based on the image information from the control unit.

表示部12は、ディスプレイに表示された画像に含まれるボタンがユーザによって押された場合(即ち、ボタンが表示された位置にてディスプレイが押された場合)に、そのボタンに対応付けられた情報を受け付け、受け付けた情報を制御部へ出力する。   When the button included in the image displayed on the display is pressed by the user (that is, when the display is pressed at the position where the button is displayed), the display unit 12 is associated with the button. And outputs the received information to the control unit.

スピーカ部13は、端末装置10の前面に配置されたスピーカを有する。スピーカ部13は、制御部からの音声情報に基づいて(音声情報を変換することにより)、その音声情報が表す音声をスピーカから出力させる。   The speaker unit 13 includes a speaker arranged on the front surface of the terminal device 10. The speaker unit 13 outputs the sound represented by the sound information from the speaker based on the sound information from the control unit (by converting the sound information).

マイクロホン部14は、端末装置10の前面に配置されたマイクロホンを有する。マイクロホン部14は、マイクロホンによって集音された周囲(即ち、端末装置10の外部)の音声を表す音声情報を制御部へ出力する。   The microphone unit 14 has a microphone disposed on the front surface of the terminal device 10. The microphone unit 14 outputs sound information representing the surrounding sound collected by the microphone (that is, outside the terminal device 10) to the control unit.

カメラ部15は、端末装置10の背面に配置されたレンズと、固体撮像素子と、を含む。カメラ部15は、制御部からの撮影指示に応じて、レンズ及び固体撮像素子を用いて被写体を撮影することによりその被写体の画像を表す画像情報を制御部へ出力する。   The camera unit 15 includes a lens disposed on the back surface of the terminal device 10 and a solid-state image sensor. The camera unit 15 shoots a subject using a lens and a solid-state image sensor in response to a shooting instruction from the control unit, and outputs image information representing an image of the subject to the control unit.

赤外線ポート部16は、入力された電気信号を光(赤外線)信号に変換して送信する発光素子(例えば、発光ダイオード)と、受信した赤外線信号を電気信号に変換して出力する受光素子(例えば、フォトダイオード)と、を有する。   The infrared port unit 16 converts a received electrical signal into an optical (infrared) signal and transmits the light (e.g., a light emitting diode), and a light receiving element (e.g., converts the received infrared signal into an electrical signal and outputs the electrical signal). , Photodiode).

赤外線ポート部16は、制御部からの発信指示に応じて、発信指示に含まれる情報を、発光素子を介して赤外線信号として発信(送信)する。また、赤外線ポート部16は、受光素子を介して、赤外線信号が表す情報を受信し、受信した情報を制御部へ出力する。   The infrared port unit 16 transmits (transmits) information included in the transmission instruction as an infrared signal through the light emitting element in response to the transmission instruction from the control unit. The infrared port unit 16 receives information represented by the infrared signal via the light receiving element, and outputs the received information to the control unit.

サーバ装置20は、情報処理装置である。サーバ装置20は、図示しない中央処理装置(CPU)及び記憶装置(本例では、メモリ及びハードディスク駆動装置(HDD))を備える。サーバ装置20は、記憶装置に記憶されているプログラムをCPUが実行することにより、後述する機能を実現するように構成されている。   The server device 20 is an information processing device. The server device 20 includes a central processing unit (CPU) and a storage device (in this example, a memory and a hard disk drive (HDD)) not shown. The server device 20 is configured to realize functions to be described later when the CPU executes a program stored in the storage device.

図2は、上記のように構成された遠隔制御システム1の機能を表すブロック図である。この機能は、端末装置10のCPUが後述する図3及び図5に示したフローチャートにより表されるプログラム(端末装置用プログラム)等を実行するとともに、サーバ装置20のCPUが後述する図4に示したフローチャートにより表されるプログラム(サーバ装置用プログラム)等を実行することにより、実現される。   FIG. 2 is a block diagram showing functions of the remote control system 1 configured as described above. This function is executed by the CPU of the terminal device 10 executing a program (terminal device program) represented by the flowcharts shown in FIGS. 3 and 5 described later, and the CPU of the server device 20 shown in FIG. 4 described later. This is realized by executing a program (server device program) or the like represented by the flowchart.

この端末装置10の機能は、撮影部(撮影手段)31と、画像情報送信部(画像情報送信手段)32と、遠隔制御情報受信部(遠隔制御情報受信手段)33と、制御指示入力用情報出力部(制御指示入力用情報出力手段)34と、制御指示情報受付部(制御指示情報受付手段)35と、制御信号発信部(制御信号発信手段)36と、遠隔制御不能通知出力部(遠隔制御不能通知出力手段)37と、を含む。   The functions of the terminal device 10 are an imaging unit (imaging unit) 31, an image information transmission unit (image information transmission unit) 32, a remote control information reception unit (remote control information reception unit) 33, and control instruction input information. An output unit (information output means for control instruction input) 34, a control instruction information reception unit (control instruction information reception unit) 35, a control signal transmission unit (control signal transmission unit) 36, and a remote control impossibility notification output unit (remote) Uncontrollable notification output means) 37.

撮影部31は、端末装置10のユーザにより撮影指示が入力されると、カメラ部15を制御することにより、外部機器(例えば、空調機器(エアコン)、映像機器(テレビ)、又は、音響機器(オーディオ・コンポ)等)を撮影する。これにより、撮影部31は、その外部機器の画像を表す画像情報を出力する。   When a photographing instruction is input by the user of the terminal device 10, the photographing unit 31 controls the camera unit 15 to control an external device (for example, an air conditioner (air conditioner), a video device (television), or an audio device ( Audio component)). Thereby, the imaging unit 31 outputs image information representing the image of the external device.

画像情報送信部32は、撮影部31により出力された画像情報をサーバ装置20へ送信する。
遠隔制御情報受信部33は、サーバ装置20により送信された遠隔制御情報を受信する。遠隔制御情報は、制御指示入力用情報と、制御信号特定情報と、を含む情報である。
The image information transmission unit 32 transmits the image information output by the imaging unit 31 to the server device 20.
The remote control information receiving unit 33 receives the remote control information transmitted by the server device 20. The remote control information is information including control instruction input information and control signal specifying information.

制御指示入力用情報は、外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための情報である。本例では、制御指示入力用情報は、複数の制御指示情報(例えば、外部機器の電源を入れる旨を指示する情報、外部機器の電源を落とす旨を指示する情報、及び、外部機器の作動状態を所定の状態に変更する旨を指示する情報等)と1つずつ対応付けられた複数のボタンを含む画像を表す情報である。
制御信号特定情報は、制御指示情報に応じた信号であって外部機器を制御するための信号である制御信号を特定する情報である。
The control instruction input information is information for allowing the user to input control instruction information for instructing to control an external device. In this example, the control instruction input information includes a plurality of pieces of control instruction information (for example, information for instructing to turn on the external device, information for instructing to turn off the external device, and the operating state of the external device) For example, information for instructing to change to a predetermined state), and an image including a plurality of buttons associated one by one.
The control signal specifying information is information that specifies a control signal that is a signal corresponding to the control instruction information and is used to control the external device.

制御指示入力用情報出力部34は、遠隔制御情報受信部33により受信された遠隔制御情報に含まれる制御指示入力用情報が表す画像を表示部12のディスプレイに表示させる(即ち、制御指示入力用情報を出力する)。   The control instruction input information output unit 34 displays an image represented by the control instruction input information included in the remote control information received by the remote control information receiving unit 33 on the display of the display unit 12 (that is, for control instruction input). Output information).

制御指示情報受付部35は、表示部12のディスプレイに表示されたボタンが端末装置10のユーザによって押された場合に当該ボタンに対応付けられた制御指示情報を受け付ける。即ち、制御指示情報受付部35は、制御指示入力用情報出力部34により出力された制御指示入力用情報に応じて端末装置10のユーザにより入力された制御指示情報を受け付ける。   When the button displayed on the display of the display unit 12 is pressed by the user of the terminal device 10, the control instruction information receiving unit 35 receives control instruction information associated with the button. That is, the control instruction information receiving unit 35 receives control instruction information input by the user of the terminal device 10 according to the control instruction input information output by the control instruction input information output unit 34.

制御信号発信部36は、制御指示情報受付部35により受け付けられた制御指示情報に応じた制御信号(赤外線信号)を、遠隔制御情報受信部33により受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定する。制御信号発信部36は、特定した制御信号を赤外線ポート部16に発信させるための発信指示を赤外線ポート部16へ出力する。これにより赤外線ポート部16は、発光素子を介して、制御信号を発信する。   The control signal transmission unit 36 specifies a control signal (infrared signal) corresponding to the control instruction information received by the control instruction information receiving unit 35, and specifies the control signal included in the remote control information received by the remote control information receiving unit 33. Identify based on information. The control signal transmission unit 36 outputs a transmission instruction for transmitting the specified control signal to the infrared port unit 16 to the infrared port unit 16. Thereby, the infrared port part 16 transmits a control signal via a light emitting element.

遠隔制御不能通知出力部37は、サーバ装置20により送信された遠隔制御不能通知を受信し、受信した遠隔制御不能通知を表示部12のディスプレイに表示させる(即ち、遠隔制御不能通知を出力する)。遠隔制御不能通知は、画像情報に対応する遠隔制御情報が存在しない旨を表す情報である。本例では、遠隔制御不能通知は、「撮影した機器のリモコン情報は存在しません。」というメッセージを表す情報である。   The remote control disabled notification output unit 37 receives the remote control disabled notification transmitted by the server device 20 and displays the received remote control disabled notification on the display of the display unit 12 (that is, outputs the remote control disabled notification). . The remote control impossibility notification is information indicating that there is no remote control information corresponding to the image information. In this example, the remote control impossibility notification is information indicating a message “remote control information of the photographed device does not exist”.

また、サーバ装置20の機能は、画像情報受信部(画像情報受信手段)41と、遠隔制御情報記憶部(遠隔制御情報記憶手段、遠隔制御情報記憶処理手段)42と、遠隔制御情報取得部(遠隔制御情報取得手段)43と、遠隔制御情報送信部(遠隔制御情報送信手段)44と、遠隔制御不能通知送信部(遠隔制御不能通知送信手段)45と、を含む。   The function of the server device 20 includes an image information receiving unit (image information receiving unit) 41, a remote control information storage unit (remote control information storage unit, remote control information storage processing unit) 42, and a remote control information acquisition unit ( A remote control information acquisition unit) 43, a remote control information transmission unit (remote control information transmission unit) 44, and a remote control impossible notification transmission unit (remote control impossible notification transmission unit) 45.

画像情報受信部41は、端末装置10により送信された画像情報を受信する。
遠隔制御情報記憶部42は、外部機器を識別するための機器識別情報と、その機器識別情報により識別される外部機器に対応する遠隔制御情報と、を対応付けてサーバ装置20の記憶装置に予め記憶させている。
The image information receiving unit 41 receives the image information transmitted by the terminal device 10.
The remote control information storage unit 42 associates device identification information for identifying an external device with remote control information corresponding to the external device identified by the device identification information in advance in the storage device of the server device 20. I remember it.

遠隔制御情報取得部43は、遠隔制御情報記憶部42により記憶されている遠隔制御情報の中から画像情報受信部41により受信された画像情報に対応する遠隔制御情報を取得する。具体的には、遠隔制御情報取得部43は、特徴量記憶部(特徴量記憶手段、特徴量記憶処理手段)43aと、特徴量抽出部(特徴量抽出手段)43bと、を含む。   The remote control information acquisition unit 43 acquires remote control information corresponding to the image information received by the image information reception unit 41 from the remote control information stored in the remote control information storage unit 42. Specifically, the remote control information acquisition unit 43 includes a feature amount storage unit (feature amount storage unit, feature amount storage processing unit) 43a and a feature amount extraction unit (feature amount extraction unit) 43b.

特徴量記憶部43aは、機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けてサーバ装置20の記憶装置に予め記憶させている。特徴量は、その画像の特徴を表すように、所定のアルゴリズムに従って画像から抽出された情報である。
特徴量抽出部43bは、画像情報受信部41により受信された画像情報が表す画像から特徴量を抽出する。
The feature amount storage unit 43a associates the device identification information with the feature amount of the image obtained by photographing the external device identified by the device identification information, and stores them in advance in the storage device of the server device 20. The feature amount is information extracted from the image according to a predetermined algorithm so as to represent the feature of the image.
The feature amount extraction unit 43b extracts a feature amount from the image represented by the image information received by the image information reception unit 41.

そして、遠隔制御情報取得部43は、特徴量記憶部43aにより記憶させられている特徴量の中から、特徴量抽出部43bにより抽出された特徴量と、予め定められた基準に従って対応(本例では、一致)している特徴量を特定する。次いで、遠隔制御情報取得部43は、特定された特徴量と対応付けて特徴量記憶部43aにより記憶させられている機器識別情報を取得する。   Then, the remote control information acquisition unit 43 corresponds to the feature amount extracted by the feature amount extraction unit 43b from the feature amounts stored in the feature amount storage unit 43a according to a predetermined standard (this example) Then, the matching feature quantity is specified. Next, the remote control information acquisition unit 43 acquires the device identification information stored in the feature amount storage unit 43a in association with the specified feature amount.

更に、遠隔制御情報取得部43は、取得した機器識別情報と対応付けて遠隔制御情報記憶部42により記憶させられている遠隔制御情報を、画像情報受信部41により受信された画像情報に対応する遠隔制御情報として取得する。   Further, the remote control information acquisition unit 43 corresponds to the image information received by the image information reception unit 41 with the remote control information stored in the remote control information storage unit 42 in association with the acquired device identification information. Obtained as remote control information.

遠隔制御情報送信部44は、遠隔制御情報取得部43により取得された遠隔制御情報を、画像情報受信部41により受信された画像情報を送信してきた端末装置10へ送信する。   The remote control information transmission unit 44 transmits the remote control information acquired by the remote control information acquisition unit 43 to the terminal device 10 that has transmitted the image information received by the image information reception unit 41.

遠隔制御不能通知送信部45は、遠隔制御情報取得部43により、上記画像情報に対応する遠隔制御情報が取得されなかった場合、遠隔制御不能通知を端末装置10へ送信する。   When the remote control information acquisition unit 43 does not acquire the remote control information corresponding to the image information, the remote control disable notification transmission unit 45 transmits a remote control disable notification to the terminal device 10.

次に、上述した遠隔制御システム1の作動について具体的に述べる。
端末装置10のCPUは、図3にフローチャートにより示した遠隔制御プログラムを、ユーザにより入力された起動指示を受け付けることにより実行するようになっている。
Next, the operation of the remote control system 1 described above will be specifically described.
The CPU of the terminal device 10 executes the remote control program shown by the flowchart in FIG. 3 by accepting an activation instruction input by the user.

具体的に述べると、端末装置10のCPUは、遠隔制御プログラムの処理を開始すると、ステップ305にて、撮影指示を受け付けるまで待機する。そして、ユーザが撮影指示を入力すると、CPUは、その撮影指示を受け付ける。これにより、CPUは、「Yes」と判定してステップ310に進み、カメラ部15を制御することにより、外部機器を撮影する。これにより、カメラ部15は、その外部機器の画像を表す画像情報を出力する(撮影工程)。   Specifically, when the CPU of the terminal device 10 starts processing of the remote control program, in step 305, the CPU stands by until a photographing instruction is accepted. When the user inputs a shooting instruction, the CPU accepts the shooting instruction. Thus, the CPU determines “Yes”, proceeds to step 310, and controls the camera unit 15 to photograph the external device. As a result, the camera unit 15 outputs image information representing an image of the external device (imaging process).

次いで、CPUは、上記ステップ310にて出力された画像情報をサーバ装置20へ送信する(ステップ315、画像情報送信工程)。そして、CPUは、ステップ320にて、遠隔制御情報、又は、遠隔制御不能通知をサーバ装置20から受信するまで待機する。   Next, the CPU transmits the image information output in step 310 to the server device 20 (step 315, image information transmission step). In step 320, the CPU stands by until remote control information or a remote control impossibility notification is received from the server device 20.

一方、サーバ装置20のCPUは、図4にフローチャートにより示した遠隔制御情報送信プログラムを、サーバ装置20が起動される毎に1度だけ実行するようになっている。   On the other hand, the CPU of the server device 20 executes the remote control information transmission program shown by the flowchart in FIG. 4 only once each time the server device 20 is activated.

具体的に述べると、サーバ装置20のCPUは、遠隔制御情報送信プログラムの処理を開始すると、ステップ405にて、画像情報を端末装置10から受信するまで待機する。この状態においては、サーバ装置20は、端末装置10から画像情報を受信する(画像情報受信工程)。   Specifically, when the CPU of the server device 20 starts processing of the remote control information transmission program, the CPU waits at step 405 until image information is received from the terminal device 10. In this state, the server device 20 receives image information from the terminal device 10 (image information receiving step).

従って、CPUは、「Yes」と判定してステップ410に進み、受信した画像情報から特徴量を抽出する(特徴量抽出工程)。そして、CPUは、記憶装置に記憶させられている特徴量の中から、上記ステップ410にて抽出した特徴量と、予め定められた基準に従って対応している特徴量を特定する。次いで、CPUは、特定された特徴量と対応付けて記憶装置に記憶させられている機器識別情報を取得する。なお、記憶装置に記憶させられている特徴量の中に、上記ステップ410にて抽出した特徴量と、予め定められた基準に従って対応している特徴量が存在しない場合、CPUは、機器識別情報を取得できない。   Accordingly, the CPU determines “Yes”, proceeds to step 410, and extracts a feature amount from the received image information (a feature amount extraction step). Then, the CPU specifies the feature quantity corresponding to the feature quantity extracted in step 410 from the feature quantities stored in the storage device according to a predetermined criterion. Next, the CPU acquires device identification information stored in the storage device in association with the identified feature amount. If the feature quantity stored in the storage device does not have a feature quantity corresponding to the feature quantity extracted in step 410 according to a predetermined standard, the CPU identifies the device identification information. Can not get.

そして、CPUは、ステップ420に進み、上記ステップ415にて機器識別情報が取得されたか否かを判定する。   Then, the CPU proceeds to step 420 and determines whether or not device identification information has been acquired in step 415.

いま、上記ステップ415にて機器識別情報が取得された場合を想定して説明を続ける。
この場合、CPUは、「Yes」と判定してステップ425に進み、取得された機器識別情報と対応付けて記憶装置に記憶させられている遠隔制御情報を取得する(遠隔制御情報取得工程)。なお、遠隔制御情報と対応付けて記憶されている機器識別情報の中に、上記取得された機器識別情報と同一の情報が存在しない場合、CPUは、遠隔制御情報を取得できない。
Now, the description will be continued assuming that the device identification information is acquired in step 415.
In this case, the CPU determines “Yes”, proceeds to step 425, and acquires the remote control information stored in the storage device in association with the acquired device identification information (remote control information acquisition step). If the same information as the acquired device identification information does not exist in the device identification information stored in association with the remote control information, the CPU cannot acquire the remote control information.

そして、CPUは、ステップ430に進み、上記ステップ425にて遠隔制御情報が取得されたか否かを判定する。   Then, the CPU proceeds to step 430 and determines whether or not remote control information has been acquired in step 425.

いま、上記ステップ425にて遠隔制御情報が取得された場合を想定して説明を続ける。
この場合、CPUは、「Yes」と判定してステップ435に進み、上記ステップ425にて取得された遠隔制御情報を端末装置10へ送信する(遠隔制御情報送信工程)。次いで、CPUは、ステップ405へ戻り、ステップ405〜ステップ435の処理を繰り返し実行する。
Now, the description will be continued assuming that remote control information is acquired in step 425.
In this case, the CPU determines “Yes”, proceeds to step 435, and transmits the remote control information acquired in step 425 to the terminal device 10 (remote control information transmission step). Next, the CPU returns to step 405, and repeatedly executes the processing of step 405 to step 435.

これにより、端末装置10は、サーバ装置20から遠隔制御情報を受信する(遠隔制御情報受信工程)。従って、端末装置10のCPUは、ステップ320にて「Yes」と判定してステップ325へ進む。次いで、CPUは、上記ステップ320にて遠隔制御情報が受信されたか否かを判定する。   Thereby, the terminal device 10 receives remote control information from the server device 20 (remote control information receiving step). Accordingly, the CPU of the terminal device 10 determines “Yes” at step 320 and proceeds to step 325. Next, the CPU determines whether or not remote control information has been received in step 320.

この状態においては、端末装置10は遠隔制御情報を受信している。従って、CPUは、「Yes」と判定してステップ330に進み、遠隔制御処理を実行するために図5に示した遠隔制御処理プログラムの実行を開始する。   In this state, the terminal device 10 receives remote control information. Accordingly, the CPU determines “Yes” and proceeds to step 330 to start execution of the remote control processing program shown in FIG. 5 in order to execute the remote control processing.

次いで、CPUは、上記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する。具体的には、CPUは、制御指示入力用情報が表す画像を表示部12のディスプレイに表示させる(ステップ505、制御指示入力用情報出力工程)。この画像は、制御指示情報に対応付けられたボタンと、終了指示に対応付けられたボタンと、を含む。終了指示は、外部機器の遠隔制御を行うための処理を終了する旨を指示する情報である。   Next, the CPU outputs control instruction input information included in the received remote control information. Specifically, the CPU displays an image represented by the control instruction input information on the display of the display unit 12 (step 505, control instruction input information output step). This image includes a button associated with the control instruction information and a button associated with the end instruction. The end instruction is information for instructing to end the process for performing remote control of the external device.

そして、CPUは、ステップ510に進み、制御指示情報、又は、終了指示を受け付けるまで待機する。
いま、端末装置10のユーザが制御指示情報に対応付けられたボタンを押した場合を想定して説明を続ける。この場合、CPUは、制御指示情報を受け付ける(制御指示情報受付工程)。従って、CPUは、「Yes」と判定してステップ515に進み、制御指示情報を受け付けたか否かを判定する。
Then, the CPU proceeds to step 510 and waits until receiving control instruction information or an end instruction.
Now, the description will be continued assuming that the user of the terminal device 10 presses a button associated with the control instruction information. In this case, the CPU receives control instruction information (control instruction information receiving step). Therefore, the CPU determines “Yes” and proceeds to step 515 to determine whether or not control instruction information has been received.

上記仮定に従えば、CPUは、「Yes」と判定してステップ520に進み、上記ステップ510にて受け付けられた制御指示情報に応じた制御信号(赤外線信号)を、上記ステップ320にて受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定する。更に、CPUは、特定した制御信号を赤外線ポート部16に発信させるための発信指示を赤外線ポート部16へ出力する。   According to the above assumption, the CPU determines “Yes” and proceeds to step 520, and the control signal (infrared signal) corresponding to the control instruction information received in step 510 is received in step 320. The remote control information is specified based on the control signal specifying information included in the remote control information. Further, the CPU outputs to the infrared port unit 16 a transmission instruction for transmitting the specified control signal to the infrared port unit 16.

これにより赤外線ポート部16は、発光素子を介して、制御信号を発信する(制御信号発信工程)。そして、この制御信号を受信した外部機器は、その制御信号に従って作動する(即ち、制御信号により制御される)。   Thereby, the infrared port part 16 transmits a control signal via a light emitting element (control signal transmission process). Then, the external device that has received this control signal operates according to the control signal (that is, controlled by the control signal).

そして、CPUは、ステップ510へ戻り、ステップ510〜ステップ520の処理を繰り返し実行する。   Then, the CPU returns to step 510, and repeatedly executes the processing of step 510 to step 520.

その後、端末装置10のユーザが終了指示に対応付けられたボタンを押した場合を想定して説明を続ける。この場合、CPUは、終了指示を受け付ける。従って、CPUは、ステップ515に進んだとき、「No」と判定してこの遠隔制御処理プログラムの実行を終了し、次いで、図3の遠隔制御プログラムの実行も終了する。   Thereafter, the description will be continued assuming that the user of the terminal device 10 presses the button associated with the end instruction. In this case, the CPU accepts an end instruction. Therefore, when the CPU proceeds to step 515, the CPU determines “No” to end the execution of the remote control processing program, and then ends the execution of the remote control program of FIG.

次に、サーバ装置20の記憶装置に記憶させられている特徴量の中に、上記ステップ410にて抽出された特徴量と対応している特徴量が存在しない場合を想定して説明を続ける。   Next, the description will be continued assuming that there is no feature quantity corresponding to the feature quantity extracted in step 410 among the feature quantities stored in the storage device of the server device 20.

この場合、サーバ装置20のCPUは、ステップ420に進んだとき、「No」と判定してステップ440に進み、遠隔制御不能通知を端末装置10へ送信する。そして、CPUは、ステップ405へ戻り、ステップ405〜ステップ440の処理を繰り返し実行する。   In this case, when the CPU of the server device 20 proceeds to step 420, it determines “No”, proceeds to step 440, and transmits a remote control impossibility notification to the terminal device 10. Then, the CPU returns to step 405, and repeatedly executes the processing of step 405 to step 440.

これにより、端末装置10は、遠隔制御不能通知をサーバ装置20から受信する。従って、端末装置10のCPUは、ステップ325に進んだとき、「No」と判定してステップ335に進み、遠隔制御不能通知を出力する(表示部12のディスプレイに表示させる)。   Thereby, the terminal device 10 receives the remote control impossibility notification from the server device 20. Therefore, when the CPU of the terminal device 10 proceeds to step 325, it determines “No”, proceeds to step 335, and outputs a remote control impossibility notification (displayed on the display unit 12).

これによれば、画像情報に対応する遠隔制御情報が存在しない旨をユーザに認識させることができる。この結果、ユーザの利便性を向上させることができる。
そして、CPUは、この遠隔制御プログラムの実行を終了する。
According to this, it is possible to make the user recognize that there is no remote control information corresponding to the image information. As a result, user convenience can be improved.
Then, the CPU ends the execution of this remote control program.

次に、サーバ装置20の記憶装置に遠隔制御情報と対応付けて記憶されている機器識別情報の中に、上記ステップ415にて取得された機器識別情報と同一の情報が存在しない場合を想定して説明を続ける。   Next, it is assumed that the same information as the device identification information acquired in step 415 does not exist in the device identification information stored in the storage device of the server device 20 in association with the remote control information. Continue to explain.

この場合、サーバ装置20のCPUは、ステップ430に進んだとき、「No」と判定してステップ440に進み、遠隔制御不能通知を端末装置10へ送信する。そして、CPUは、ステップ405へ戻り、ステップ405〜ステップ440の処理を繰り返し実行する。   In this case, when the CPU of the server device 20 proceeds to step 430, it determines “No”, proceeds to step 440, and transmits a remote control impossibility notification to the terminal device 10. Then, the CPU returns to step 405, and repeatedly executes the processing of step 405 to step 440.

これにより、端末装置10は、遠隔制御不能通知をサーバ装置20から受信する。従って、端末装置10のCPUは、ステップ325に進んだとき、「No」と判定してステップ335に進み、遠隔制御不能通知を出力する(表示部12のディスプレイに表示させる)。   Thereby, the terminal device 10 receives the remote control impossibility notification from the server device 20. Therefore, when the CPU of the terminal device 10 proceeds to step 325, it determines “No”, proceeds to step 335, and outputs a remote control impossibility notification (displayed on the display unit 12).

これによれば、画像情報に対応する遠隔制御情報が存在しない旨をユーザに認識させることができる。この結果、ユーザの利便性を向上させることができる。
そして、CPUは、この遠隔制御プログラムの実行を終了する。
According to this, it is possible to make the user recognize that there is no remote control information corresponding to the image information. As a result, user convenience can be improved.
Then, the CPU ends the execution of this remote control program.

以上、説明したように、本発明による遠隔制御システムの第1実施形態によれば、端末装置10は、外部機器を撮影した画像を表す画像情報をサーバ装置20へ送信する。そして、端末装置10は、その画像情報に対応する遠隔制御情報をサーバ装置20から受信する。これにより、端末装置10のユーザが、外部機器特定情報を入力することなく、外部機器を撮影するための操作を行うだけで、端末装置10は、その外部機器に対応する遠隔制御情報をサーバ装置20から取得することができる。即ち、ユーザの手間を軽減しながら端末装置10がサーバ装置20から遠隔制御情報を取得することができる。   As described above, according to the first embodiment of the remote control system of the present invention, the terminal device 10 transmits image information representing an image obtained by photographing an external device to the server device 20. Then, the terminal device 10 receives remote control information corresponding to the image information from the server device 20. As a result, the user of the terminal device 10 simply performs an operation for photographing the external device without inputting the external device specifying information, and the terminal device 10 transmits the remote control information corresponding to the external device to the server device. 20 can be obtained. That is, the terminal device 10 can acquire the remote control information from the server device 20 while reducing the user's trouble.

更に、上記構成によれば、多数の外部機器に対応する遠隔制御情報を端末装置10が予め記憶している場合と比較して、端末装置10が備える記憶装置の容量を小さくすることができる。加えて、上記構成によれば、サーバ装置20が画像情報に基づいて遠隔制御情報を特定する処理を行う。従って、端末装置10が画像情報に基づいて遠隔制御情報を特定する処理を行う場合と比較して端末装置10の処理負荷を軽減することができる。   Furthermore, according to the above configuration, the capacity of the storage device included in the terminal device 10 can be reduced as compared with the case where the terminal device 10 stores in advance remote control information corresponding to a large number of external devices. In addition, according to the above configuration, the server device 20 performs processing for specifying the remote control information based on the image information. Therefore, the processing load on the terminal device 10 can be reduced as compared with the case where the terminal device 10 performs processing for specifying remote control information based on image information.

<第2実施形態>
次に、本発明の第2実施形態に係る遠隔制御システムについて説明する。第2実施形態に係る遠隔制御システムは、上記第1実施形態に係る遠隔制御システムに対して、端末装置がサーバ装置から受信した遠隔制御情報を記憶するとともに記憶している遠隔制御情報に基づいて制御信号を発信するように構成されている点において相違している。従って、以下、かかる相違点を中心として説明する。
<Second Embodiment>
Next, a remote control system according to the second embodiment of the present invention will be described. The remote control system according to the second embodiment stores the remote control information received from the server device by the terminal device with respect to the remote control system according to the first embodiment, based on the stored remote control information. The difference is that the control signal is transmitted. Accordingly, the following description will focus on such differences.

この第2実施形態に係る端末装置10の機能は、図6に示したように、撮影部31〜遠隔制御不能通知出力部37に加えて、遠隔制御情報記憶部(遠隔制御情報記憶手段)38と、遠隔制御特定情報受付部(遠隔制御特定情報受付手段)39と、を含む。   As shown in FIG. 6, the function of the terminal device 10 according to the second embodiment includes a remote control information storage unit (remote control information storage unit) 38 in addition to the photographing unit 31 to the remote control impossibility notification output unit 37. And a remote control specific information receiving unit (remote control specific information receiving means) 39.

遠隔制御情報記憶部38は、遠隔制御情報受信部33により受信された遠隔制御情報を記憶装置に記憶させる。   The remote control information storage unit 38 stores the remote control information received by the remote control information receiving unit 33 in the storage device.

遠隔制御特定情報受付部39は、遠隔制御情報記憶部38により記憶させられている遠隔制御情報の一覧を出力する(表示部12のディスプレイに表示させる)。更に、遠隔制御特定情報受付部39は、出力された遠隔制御情報の一覧のうちの1つを特定するための情報であって、ユーザにより入力された情報である遠隔制御特定情報を受け付ける。   The remote control specific information receiving unit 39 outputs a list of remote control information stored in the remote control information storage unit 38 (displayed on the display of the display unit 12). Further, the remote control specification information receiving unit 39 is information for specifying one of the output remote control information lists, and receives remote control specification information that is information input by the user.

制御指示入力用情報出力部34は、上記第1実施形態に係る制御指示入力用情報出力部34の機能に加えて、遠隔制御特定情報受付部39により遠隔制御特定情報が受け付けられた場合、その遠隔制御特定情報により特定される遠隔制御情報に含まれる制御指示入力用情報を出力する(表示部12のディスプレイに表示させる)。   When the remote control specific information is received by the remote control specific information receiving unit 39 in addition to the function of the control instruction input information output unit 34 according to the first embodiment, the control instruction input information output unit 34 The control instruction input information included in the remote control information specified by the remote control specifying information is output (displayed on the display unit 12).

制御信号発信部36は、上記第1実施形態に係る制御信号発信部36の機能に加えて、遠隔制御特定情報受付部39により遠隔制御特定情報が受け付けられた場合、制御指示情報受付部35により受け付けられた制御指示情報に応じた制御信号を、その遠隔制御特定情報により特定される遠隔制御情報に含まれる制御信号特定情報に基づいて特定する。   In addition to the function of the control signal transmission unit 36 according to the first embodiment, the control signal transmission unit 36 receives the remote control specific information from the remote control specific information reception unit 39. A control signal corresponding to the received control instruction information is specified based on the control signal specifying information included in the remote control information specified by the remote control specifying information.

また、端末装置10のCPUは、図3にフローチャートにより示した遠隔制御プログラムに代えて、図7にフローチャートにより示した遠隔制御プログラムを実行する。図7の遠隔制御プログラムは、図3の遠隔制御プログラムのステップ305をステップ715に置換し、更に、ステップ705、ステップ710、ステップ720及びステップ725の処理を追加したプログラムである。   Further, the CPU of the terminal device 10 executes the remote control program shown by the flowchart in FIG. 7 instead of the remote control program shown by the flowchart in FIG. The remote control program of FIG. 7 is a program in which step 305 of the remote control program of FIG. 3 is replaced with step 715 and the processing of step 705, step 710, step 720, and step 725 is further added.

具体的に述べると、端末装置10のCPUは、遠隔制御プログラムの処理を開始すると、ステップ705にて、端末装置10の記憶装置に記憶されている遠隔制御情報の一覧を出力する。そして、CPUは、撮影指示、又は、遠隔制御特定情報を受け付けるまで待機する。   More specifically, when the CPU of the terminal device 10 starts processing of the remote control program, in step 705, the CPU of the terminal device 10 outputs a list of remote control information stored in the storage device. Then, the CPU stands by until it receives a shooting instruction or remote control identification information.

いま、ユーザにより撮影指示が入力された場合を想定して説明を続ける。この場合、CPUは、「Yes」と判定してステップ715へ進み、撮影指示を受け付けたか否かを判定する。上記仮定に従えば、CPUは、「Yes」と判定してステップ310以降の処理を第1実施形態と同様に実行する。   Now, the description will be continued assuming that a shooting instruction is input by the user. In this case, the CPU determines “Yes” and proceeds to step 715 to determine whether or not a shooting instruction has been accepted. According to the above assumption, the CPU determines “Yes” and executes the processing from step 310 onward as in the first embodiment.

そして、CPUがステップ325にて「Yes」と判定した場合、CPUは、ステップ720へ進み、サーバ装置20から受信した遠隔制御情報を端末装置10の記憶装置に記憶させる。次いで、CPUは、上記第1実施形態と同様に、ステップ330を実行し、その後、この遠隔制御プログラムの実行を終了する。   If the CPU determines “Yes” in step 325, the CPU proceeds to step 720 and stores the remote control information received from the server device 20 in the storage device of the terminal device 10. Next, the CPU executes step 330 as in the first embodiment, and thereafter ends the execution of this remote control program.

次に、ユーザにより遠隔制御特定情報が入力された場合を想定して説明を続ける。この場合、CPUは、ステップ715に進んだとき、「No」と判定してステップ725へ進み、ステップ330と同様に、上記ステップ710にて受け付けた遠隔制御特定情報により特定される遠隔制御情報(記憶装置に記憶されている遠隔制御情報)に基づいて遠隔制御処理を実行する。その後、CPUは、この遠隔制御プログラムの実行を終了する。   Next, the description will be continued assuming that the remote control identification information is input by the user. In this case, when the CPU proceeds to step 715, it determines “No”, proceeds to step 725, and similarly to step 330, the remote control information specified by the remote control identification information received at step 710 ( The remote control processing is executed based on the remote control information stored in the storage device. Thereafter, the CPU ends the execution of this remote control program.

この第2実施形態に係る遠隔制御システム1によっても、上記第1実施形態に係る遠隔制御システム1と同様の作用及び効果を奏することができる。   The remote control system 1 according to the second embodiment can achieve the same operations and effects as the remote control system 1 according to the first embodiment.

更に、上記第2実施形態によれば、端末装置10がサーバ装置20から一度取得した遠隔制御情報に対応する外部機器を撮影するための操作をユーザが行うことなく、遠隔制御特定情報を入力するだけで、端末装置10は、遠隔制御特定情報により特定される遠隔制御情報に基づいて作動する。この結果、外部機器を遠隔制御する際のユーザの手間をより一層軽減することができる。更に、サーバ装置20から端末装置10へ遠隔制御情報が無駄に送信されることを防止することができる。   Further, according to the second embodiment, the remote control identification information is input without the user performing an operation for photographing the external device corresponding to the remote control information once acquired from the server device 20 by the terminal device 10. Only the terminal device 10 operates based on the remote control information specified by the remote control specification information. As a result, it is possible to further reduce the user's trouble when remotely controlling the external device. Furthermore, it is possible to prevent remote control information from being sent from the server device 20 to the terminal device 10 in vain.

なお、本発明は上記各実施形態に限定されることはなく、本発明の範囲内において種々の変形例を採用することができる。例えば、上記各実施形態の他の変形例において、制御指示入力用情報が表す画像は、更に、複数の画像制御指示情報と1つずつ対応付けられた複数のボタンを含むことが好適である。ここで、画像制御指示情報は、表示部12のディスプレイに表示される画像を制御する旨を指示する情報(例えば、サブメニューを表示する旨を指示する情報、及び、表示されているサブメニューの表示を終了する旨を指示する情報等)である。   In addition, this invention is not limited to said each embodiment, A various modification can be employ | adopted within the scope of the present invention. For example, in another modification of each of the above embodiments, it is preferable that the image represented by the control instruction input information further includes a plurality of buttons associated with the plurality of image control instruction information one by one. Here, the image control instruction information is information for instructing to control an image displayed on the display of the display unit 12 (for example, information for instructing to display a submenu, and information on a submenu being displayed). Information for instructing to end the display).

また、上記各実施形態の変形例において、図8に示したように、端末装置10の機能が、撮影部31と、画像情報送信部32と、遠隔制御情報受信部33と、制御指示入力用情報出力部34と、制御指示情報受付部35と、制御信号発信部36と、を含み、且つ、サーバ装置20の機能が、画像情報受信部41と、遠隔制御情報記憶部42と、遠隔制御情報取得部43と、遠隔制御情報送信部44と、を含んでいてもよい。   Moreover, in the modification of each said embodiment, as shown in FIG. 8, the function of the terminal device 10 is the imaging | photography part 31, the image information transmission part 32, the remote control information reception part 33, and control instruction input use. The information output part 34, the control instruction information reception part 35, and the control signal transmission part 36 are included, and the functions of the server device 20 are the image information reception part 41, the remote control information storage part 42, and the remote control. An information acquisition unit 43 and a remote control information transmission unit 44 may be included.

撮影部31は、外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する。
画像情報送信部32は、撮影部31により出力された画像情報をサーバ装置20へ送信する。
The imaging unit 31 outputs image information representing an image of the external device by imaging the external device.
The image information transmission unit 32 transmits the image information output by the imaging unit 31 to the server device 20.

遠隔制御情報受信部33は、サーバ装置により送信された遠隔制御情報を受信する。遠隔制御情報は、外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である。   The remote control information receiving unit 33 receives remote control information transmitted by the server device. The remote control information is control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information for controlling the external device. Control signal specifying information for specifying a control signal that is a signal.

制御指示入力用情報出力部34は、遠隔制御情報受信部33により受信された遠隔制御情報に含まれる制御指示入力用情報を出力する。
制御指示情報受付部35は、制御指示入力用情報出力部34により出力された制御指示入力用情報に応じてユーザにより入力された制御指示情報を受け付ける。
The control instruction input information output unit 34 outputs control instruction input information included in the remote control information received by the remote control information receiver 33.
The control instruction information receiving unit 35 receives control instruction information input by the user in accordance with the control instruction input information output by the control instruction input information output unit 34.

制御信号発信部36は、制御指示情報受付部35により受け付けられた制御指示情報に応じた制御信号を、遠隔制御情報受信部33により受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する。   The control signal transmission unit 36 transmits a control signal corresponding to the control instruction information received by the control instruction information receiving unit 35 based on the control signal specifying information included in the remote control information received by the remote control information receiving unit 33. The specified control signal is transmitted.

画像情報受信部41は、端末装置10により送信された画像情報を受信する。
遠隔制御情報記憶部42は、複数の外部機器のそれぞれに対応する遠隔制御情報を記憶する。
The image information receiving unit 41 receives the image information transmitted by the terminal device 10.
The remote control information storage unit 42 stores remote control information corresponding to each of a plurality of external devices.

遠隔制御情報取得部43は、遠隔制御情報記憶部42により記憶されている遠隔制御情報の中から、画像情報受信部41により受信された画像情報に対応する遠隔制御情報を取得する。
遠隔制御情報送信部44は、取得された遠隔制御情報を端末装置10へ送信する。
The remote control information acquisition unit 43 acquires remote control information corresponding to the image information received by the image information reception unit 41 from the remote control information stored in the remote control information storage unit 42.
The remote control information transmission unit 44 transmits the acquired remote control information to the terminal device 10.

この変形例によっても、上記第1実施形態と同様の作用及び効果を奏することができる。
また、上記実施形態の他の変形例として、上述した実施形態及び変形例の任意の組み合わせが採用されてもよい。
Also according to this modification, the same operation and effect as the first embodiment can be obtained.
In addition, as another modified example of the above-described embodiment, any combination of the above-described embodiments and modified examples may be employed.

本発明は、外部機器を制御するための制御信号を発信する端末装置を含む遠隔制御システム等に適用可能である。   The present invention is applicable to a remote control system including a terminal device that transmits a control signal for controlling an external device.

本発明の第1実施形態に係る遠隔制御システムの概略構成を表す図である。It is a figure showing schematic structure of the remote control system which concerns on 1st Embodiment of this invention. 図1に示した遠隔制御システムの機能の概略を表すブロック図である。It is a block diagram showing the outline of the function of the remote control system shown in FIG. 図1に示した端末装置のCPUが実行する遠隔制御プログラムを示したフローチャートである。It is the flowchart which showed the remote control program which CPU of the terminal device shown in FIG. 1 performs. 図1に示したサーバ装置のCPUが実行する遠隔制御情報送信プログラムを示したフローチャートである。It is the flowchart which showed the remote control information transmission program which CPU of the server apparatus shown in FIG. 1 performs. 図1に示した端末装置のCPUが実行する遠隔制御処理プログラムを示したフローチャートである。It is the flowchart which showed the remote control processing program which CPU of the terminal device shown in FIG. 1 performs. 本発明の第2実施形態に係る遠隔制御システムの機能の概略を表すブロック図である。It is a block diagram showing the outline of the function of the remote control system which concerns on 2nd Embodiment of this invention. 本発明の第2実施形態に係る端末装置のCPUが実行する遠隔制御プログラムを示したフローチャートである。It is the flowchart which showed the remote control program which CPU of the terminal device which concerns on 2nd Embodiment of this invention performs. 本発明の実施形態の変形例に係る遠隔制御システムの機能の概略を表すブロック図である。It is a block diagram showing the outline of the function of the remote control system which concerns on the modification of embodiment of this invention.

符号の説明Explanation of symbols

1 遠隔制御システム
10 端末装置
11 アンテナ部
12 表示部
13 スピーカ部
14 マイクロホン部
15 カメラ部
16 赤外線ポート部
20 サーバ装置
31 撮影部
32 画像情報送信部
33 遠隔制御情報受信部
34 制御指示入力用情報出力部
35 制御指示情報受付部
36 制御信号発信部
37 遠隔制御不能通知出力部
38 遠隔制御情報記憶部
39 遠隔制御特定情報受付部
41 画像情報受信部
42 遠隔制御情報記憶部
43 遠隔制御情報取得部
43a 特徴量記憶部
43b 特徴量抽出部
44 遠隔制御情報送信部
45 遠隔制御不能通知送信部
NW 通信回線
DESCRIPTION OF SYMBOLS 1 Remote control system 10 Terminal apparatus 11 Antenna part 12 Display part 13 Speaker part 14 Microphone part 15 Camera part 16 Infrared port part 20 Server apparatus 31 Image | photographing part 32 Image information transmission part 33 Remote control information reception part 34 Information output for control instruction input Unit 35 control instruction information receiving unit 36 control signal transmitting unit 37 remote control impossible notification output unit 38 remote control information storing unit 39 remote control specifying information receiving unit 41 image information receiving unit 42 remote control information storing unit 43 remote control information acquiring unit 43a Feature amount storage unit 43b Feature amount extraction unit 44 Remote control information transmission unit 45 Remote control impossible notification transmission unit NW Communication line

Claims (15)

互いに通信可能に接続された端末装置及びサーバ装置を含む遠隔制御システムであって、
前記端末装置は、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
前記撮影手段により出力された画像情報を前記サーバ装置へ送信する画像情報送信手段と、
前記サーバ装置により送信された情報であって、前記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
前記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
前記出力された制御指示入力用情報に応じて前記ユーザにより入力された前記制御指示情報を受け付ける制御指示情報受付手段と、
前記受け付けられた制御指示情報に応じた制御信号を、前記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を備え、
前記サーバ装置は、
複数の外部機器のそれぞれに対応する前記遠隔制御情報を記憶する遠隔制御情報記憶手段と、
前記端末装置により送信された画像情報を受信する画像情報受信手段と、
前記記憶されている遠隔制御情報の中から前記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
前記取得された遠隔制御情報を前記端末装置へ送信する遠隔制御情報送信手段と、
を備える遠隔制御システム。
A remote control system including a terminal device and a server device that are communicably connected to each other,
The terminal device
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting image information output by the photographing means to the server device;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on control signal specifying information included in the received remote control information, and transmitting the specified control signal;
With
The server device
Remote control information storage means for storing the remote control information corresponding to each of a plurality of external devices;
Image information receiving means for receiving image information transmitted by the terminal device;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
Remote control system comprising.
請求項1に記載の遠隔制御システムであって、
前記遠隔制御情報記憶手段は、前記遠隔制御情報と、前記外部機器を識別するための機器識別情報と、を対応付けて記憶するように構成され、
前記遠隔制御情報取得手段は、
機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて記憶する特徴量記憶手段と、
前記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出手段と、を含むとともに、
前記抽出された特徴量と対応付けて記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成された遠隔制御システム。
The remote control system according to claim 1,
The remote control information storage means is configured to store the remote control information and device identification information for identifying the external device in association with each other,
The remote control information acquisition means includes
A feature amount storage means for storing the device identification information and the feature amount of the image obtained by photographing the external device identified by the device identification information in association with each other;
And a feature amount extraction means for extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in association with the extracted feature amount, and acquire remote control information stored in association with the acquired device identification information as remote control information corresponding to the image information Remote control system configured to do.
請求項1又は請求項2に記載の遠隔制御システムであって、
前記サーバ装置は、
前記遠隔制御情報取得手段により、前記受信された画像情報に対応する遠隔制御情報が取得されなかった場合、当該画像情報に対応する遠隔制御情報が存在しない旨を表す遠隔制御不能通知を前記端末装置へ送信する遠隔制御不能通知送信手段を備え、
前記端末装置は、
前記サーバ装置により送信された遠隔制御不能通知を受信し、当該受信した遠隔制御不能通知を出力する遠隔制御不能通知出力手段を備える遠隔制御システム。
The remote control system according to claim 1 or 2,
The server device
If the remote control information corresponding to the received image information is not acquired by the remote control information acquisition means, a remote control disabled notification indicating that there is no remote control information corresponding to the image information is sent to the terminal device A remote control impossible notification transmission means for transmitting to
The terminal device
A remote control system comprising a remote control impossible notification output means for receiving a remote control impossible notification transmitted by the server device and outputting the received remote control impossible notification.
請求項1乃至請求項3のいずれか一項に記載の遠隔制御システムであって、
前記制御指示入力用情報は、前記制御指示情報と対応付けられたボタンを含む画像を表す情報であり、
前記制御指示入力用情報出力手段は、ディスプレイを有するとともに、前記制御指示入力用情報が表す画像を当該ディスプレイに表示させるように構成された遠隔制御システム。
The remote control system according to any one of claims 1 to 3,
The control instruction input information is information representing an image including a button associated with the control instruction information,
The control instruction input information output means includes a display and is configured to display an image represented by the control instruction input information on the display.
請求項4に記載の遠隔制御システムであって、
前記ディスプレイは、タッチパネル式のディスプレイであり、
前記制御指示情報受付手段は、前記ディスプレイに表示されたボタンがユーザによって押された場合に当該ボタンに対応付けられた前記制御指示情報を受け付けるように構成された遠隔制御システム。
The remote control system according to claim 4,
The display is a touch panel display,
The control instruction information receiving means is a remote control system configured to receive the control instruction information associated with the button when the button displayed on the display is pressed by a user.
請求項1乃至請求項5のいずれか一項に記載の遠隔制御システムであって、
前記端末装置は、
前記サーバ装置から受信した遠隔制御情報を記憶する遠隔制御情報記憶手段と、
前記記憶されている遠隔制御情報のうちの1つを特定するための情報であって前記ユーザにより入力された情報である遠隔制御特定情報を受け付ける遠隔制御特定情報受付手段と、
を備え、
前記制御指示入力用情報出力手段は、前記受け付けられた遠隔制御特定情報により特定される遠隔制御情報に含まれる制御指示入力用情報を出力するように構成され、
前記制御信号発信手段は、前記受け付けられた制御指示情報に応じた制御信号を、前記受け付けられた遠隔制御特定情報により特定される遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信するように構成された遠隔制御システム。
A remote control system according to any one of claims 1 to 5,
The terminal device
Remote control information storage means for storing remote control information received from the server device;
Remote control specifying information receiving means for receiving remote control specifying information that is information for specifying one of the stored remote control information and is input by the user;
With
The control instruction input information output means is configured to output control instruction input information included in the remote control information specified by the received remote control specification information,
The control signal transmission means specifies a control signal according to the received control instruction information based on control signal specifying information included in remote control information specified by the received remote control specifying information, and A remote control system configured to transmit a specified control signal.
複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を記憶する遠隔制御情報記憶手段と、
通信可能に接続された端末装置により送信された画像情報を受信する画像情報受信手段と、
前記記憶されている遠隔制御情報の中から前記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
前記取得された遠隔制御情報を前記端末装置へ送信する遠隔制御情報送信手段と、
を備えるサーバ装置。
Information corresponding to each of a plurality of external devices, including control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information storage means for storing remote control information that is information including control signal specifying information for specifying a control signal that is a signal for controlling the external device,
Image information receiving means for receiving image information transmitted by a terminal device that is communicably connected;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
A server device comprising:
請求項7に記載のサーバ装置であって、
前記遠隔制御情報記憶手段は、前記遠隔制御情報と、前記外部機器を識別するための機器識別情報と、を対応付けて記憶するように構成され、
前記遠隔制御情報取得手段は、
機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて記憶する特徴量記憶手段と、
前記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出手段と、を含むとともに、
前記抽出された特徴量と対応付けて記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成されたサーバ装置。
The server device according to claim 7,
The remote control information storage means is configured to store the remote control information and device identification information for identifying the external device in association with each other,
The remote control information acquisition means includes
A feature amount storage means for storing the device identification information and the feature amount of the image obtained by photographing the external device identified by the device identification information in association with each other;
And a feature amount extraction means for extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in association with the extracted feature amount, and acquire remote control information stored in association with the acquired device identification information as remote control information corresponding to the image information A server device configured to do.
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
前記撮影手段により出力された画像情報を、通信可能に接続されたサーバ装置へ送信する画像情報送信手段と、
前記サーバ装置により送信された情報であって、前記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
前記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
前記出力された制御指示入力用情報に応じて前記ユーザにより入力された前記制御指示情報を受け付ける制御指示情報受付手段と、
前記受け付けられた制御指示情報に応じた制御信号を、前記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を備えた端末装置。
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting the image information output by the photographing means to a server device connected to be communicable;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on control signal specifying information included in the received remote control information, and transmitting the specified control signal;
A terminal device comprising:
請求項9に記載の端末装置であって、
前記端末装置は、携帯電話装置である端末装置。
The terminal device according to claim 9,
The terminal device is a mobile phone device.
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影工程と、
前記撮影工程にて出力された画像情報を端末装置からサーバ装置へ送信する画像情報送信工程と、
前記送信された画像情報を受信する画像情報受信工程と、
記憶装置に記憶され且つ複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報の中から前記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得工程と、
前記取得された遠隔制御情報を前記サーバ装置から前記端末装置へ送信する遠隔制御情報送信工程と、
前記送信された遠隔制御情報を受信する遠隔制御情報受信工程と、
前記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力工程と、
前記出力された制御指示入力用情報に応じて前記ユーザにより入力された前記制御指示情報を受け付ける制御指示情報受付工程と、
前記受け付けられた制御指示情報に応じた制御信号を、前記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信工程と、
を含む遠隔制御方法。
A photographing step of outputting image information representing an image of the external device by photographing the external device;
An image information transmission step of transmitting the image information output in the photographing step from the terminal device to the server device;
An image information receiving step for receiving the transmitted image information;
Control instruction input information that is stored in the storage device and corresponds to each of a plurality of external devices and that allows the user to input control instruction information that instructs control of the external device, and the control instruction Corresponding to the received image information from among the remote control information that is information including control signal specifying information that specifies a control signal that is a signal according to the information and is a signal for controlling the external device A remote control information acquisition step for acquiring remote control information;
A remote control information transmission step of transmitting the acquired remote control information from the server device to the terminal device;
A remote control information receiving step for receiving the transmitted remote control information;
A control instruction input information output step for outputting control instruction input information included in the received remote control information;
A control instruction information receiving step for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmission step of specifying a control signal according to the received control instruction information based on control signal specifying information included in the received remote control information, and transmitting the specified control signal;
Including remote control method.
請求項11に記載の遠隔制御方法であって、
前記記憶装置は、前記遠隔制御情報と、前記外部機器を識別するための機器識別情報と、を対応付けて記憶するとともに、機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて記憶し、
前記遠隔制御情報取得工程は、
前記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出工程を含むとともに、
前記抽出された特徴量と対応付けて前記記憶装置に記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて当該記憶装置に記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成された遠隔制御方法。
The remote control method according to claim 11, comprising:
The storage device stores the remote control information and device identification information for identifying the external device in association with each other, and photographed the device identification information and the external device identified by the device identification information. The image feature amount is stored in association with each other,
The remote control information acquisition step includes
Including a feature amount extraction step of extracting a feature amount from an image represented by the received image information;
Acquire device identification information stored in the storage device in association with the extracted feature amount, and remote control information stored in the storage device in association with the acquired device identification information in the image information The remote control method comprised so that it might acquire as remote control information corresponding to.
サーバ装置に、
複数の外部機器のそれぞれに対応する情報であって、当該外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を記憶装置に記憶させる遠隔制御情報記憶処理手段と、
通信可能に接続された端末装置により送信された画像情報を受信する画像情報受信手段と、
前記記憶されている遠隔制御情報の中から前記受信された画像情報に対応する遠隔制御情報を取得する遠隔制御情報取得手段と、
前記取得された遠隔制御情報を前記端末装置へ送信する遠隔制御情報送信手段と、
を実現させるためのサーバ装置用プログラム。
On the server device,
Information corresponding to each of a plurality of external devices, including control instruction input information for allowing the user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information storage processing means for storing in the storage device remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device, and
Image information receiving means for receiving image information transmitted by a terminal device that is communicably connected;
Remote control information acquisition means for acquiring remote control information corresponding to the received image information from the stored remote control information;
Remote control information transmitting means for transmitting the acquired remote control information to the terminal device;
Server device program for realizing the above.
請求項13に記載のサーバ装置用プログラムであって、
前記遠隔制御情報記憶処理手段は、前記遠隔制御情報と、前記外部機器を識別するための機器識別情報と、を対応付けて前記記憶装置に記憶させるように構成され、
前記遠隔制御情報取得手段は、
機器識別情報と、その機器識別情報により識別される外部機器を撮影した画像の特徴量と、を対応付けて前記記憶装置に記憶させる特徴量記憶処理手段と、
前記受信された画像情報が表す画像から特徴量を抽出する特徴量抽出手段と、を含むとともに、
前記抽出された特徴量と対応付けて記憶されている機器識別情報を取得し、当該取得した機器識別情報と対応付けて記憶されている遠隔制御情報を当該画像情報に対応する遠隔制御情報として取得するように構成されたサーバ装置用プログラム。
A server device program according to claim 13,
The remote control information storage processing means is configured to store the remote control information and device identification information for identifying the external device in the storage device in association with each other,
The remote control information acquisition means includes
Feature amount storage processing means for associating device identification information with a feature amount of an image obtained by photographing an external device identified by the device identification information, and storing it in the storage device;
And a feature amount extraction means for extracting a feature amount from the image represented by the received image information,
Acquire device identification information stored in association with the extracted feature amount, and acquire remote control information stored in association with the acquired device identification information as remote control information corresponding to the image information A program for a server device configured to do.
端末装置に、
外部機器を撮影することによりその外部機器の画像を表す画像情報を出力する撮影手段と、
前記撮影手段により出力された画像情報を、通信可能に接続されたサーバ装置へ送信する画像情報送信手段と、
前記サーバ装置により送信された情報であって、前記外部機器を制御する旨を指示する制御指示情報をユーザに入力させるための制御指示入力用情報と、当該制御指示情報に応じた信号であって当該外部機器を制御するための信号である制御信号を特定する制御信号特定情報と、を含む情報である遠隔制御情報を受信する遠隔制御情報受信手段と、
前記受信された遠隔制御情報に含まれる制御指示入力用情報を出力する制御指示入力用情報出力手段と、
前記出力された制御指示入力用情報に応じて前記ユーザにより入力された前記制御指示情報を受け付ける制御指示情報受付手段と、
前記受け付けられた制御指示情報に応じた制御信号を、前記受信された遠隔制御情報に含まれる制御信号特定情報に基づいて特定し、当該特定した制御信号を発信する制御信号発信手段と、
を実現させるための端末装置用プログラム。
On the terminal device,
Photographing means for outputting image information representing an image of the external device by photographing the external device;
Image information transmitting means for transmitting the image information output by the photographing means to a server device connected to be communicable;
Information transmitted from the server device, control instruction input information for allowing a user to input control instruction information for instructing control of the external device, and a signal corresponding to the control instruction information Remote control information receiving means for receiving remote control information that is information including control signal specifying information that specifies a control signal that is a signal for controlling the external device;
Control instruction input information output means for outputting control instruction input information included in the received remote control information;
Control instruction information receiving means for receiving the control instruction information input by the user according to the output control instruction input information;
A control signal transmitting means for specifying a control signal according to the received control instruction information based on control signal specifying information included in the received remote control information, and transmitting the specified control signal;
A program for a terminal device for realizing the above.
JP2008257404A 2008-10-02 2008-10-02 Remote control system Expired - Fee Related JP5574397B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008257404A JP5574397B2 (en) 2008-10-02 2008-10-02 Remote control system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008257404A JP5574397B2 (en) 2008-10-02 2008-10-02 Remote control system

Publications (2)

Publication Number Publication Date
JP2010088032A true JP2010088032A (en) 2010-04-15
JP5574397B2 JP5574397B2 (en) 2014-08-20

Family

ID=42251492

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008257404A Expired - Fee Related JP5574397B2 (en) 2008-10-02 2008-10-02 Remote control system

Country Status (1)

Country Link
JP (1) JP5574397B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012105235A (en) * 2010-11-15 2012-05-31 Konica Minolta Business Technologies Inc Image processing system, control method for image processing device, portable terminal, and control program
CN110830365A (en) * 2019-11-12 2020-02-21 芜湖盟博科技有限公司 Method for developing cloud platform by using WeChat hardware
US11678002B1 (en) * 2021-12-31 2023-06-13 Universal Electronics Inc. Systems and methods for configuration of a controlling device to enable selection of one or more media streams

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000076197A (en) 1998-09-01 2000-03-14 Casio Comput Co Ltd Portable information terminal device and storage medium
JP2003061166A (en) * 2001-08-13 2003-02-28 Fuji Photo Film Co Ltd Remote controller, remote control system and remote control method for device
JP2005065118A (en) * 2003-08-19 2005-03-10 Hitachi Ltd Mobile terminal with remote control function and remote control server
JP2007174166A (en) * 2005-12-21 2007-07-05 Victor Co Of Japan Ltd Mobile terminal used also as remote controller, and remote control method for av apparatus
JP2008172614A (en) * 2007-01-12 2008-07-24 Sharp Corp Remote control system, and server device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000076197A (en) 1998-09-01 2000-03-14 Casio Comput Co Ltd Portable information terminal device and storage medium
JP2003061166A (en) * 2001-08-13 2003-02-28 Fuji Photo Film Co Ltd Remote controller, remote control system and remote control method for device
JP2005065118A (en) * 2003-08-19 2005-03-10 Hitachi Ltd Mobile terminal with remote control function and remote control server
JP2007174166A (en) * 2005-12-21 2007-07-05 Victor Co Of Japan Ltd Mobile terminal used also as remote controller, and remote control method for av apparatus
JP2008172614A (en) * 2007-01-12 2008-07-24 Sharp Corp Remote control system, and server device

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012105235A (en) * 2010-11-15 2012-05-31 Konica Minolta Business Technologies Inc Image processing system, control method for image processing device, portable terminal, and control program
US8471914B2 (en) 2010-11-15 2013-06-25 Konica Minolta Business Technologies, Inc. Image processing system with ease of operation
CN110830365A (en) * 2019-11-12 2020-02-21 芜湖盟博科技有限公司 Method for developing cloud platform by using WeChat hardware
US11678002B1 (en) * 2021-12-31 2023-06-13 Universal Electronics Inc. Systems and methods for configuration of a controlling device to enable selection of one or more media streams
US20230217058A1 (en) * 2021-12-31 2023-07-06 Universal Electronics Inc. Systems and methods for configuration of a controlling device to enable selection of one or more media streams
WO2023129668A1 (en) * 2021-12-31 2023-07-06 Universal Electronics Inc. Systems and methods for configuration of a controlling device to enable selection of one or more media streams

Also Published As

Publication number Publication date
JP5574397B2 (en) 2014-08-20

Similar Documents

Publication Publication Date Title
JP4742394B2 (en) Remote control device, method, program and system
JP5554218B2 (en) Electronic equipment, communication system
JP2016123137A (en) Image communication apparatus and imaging apparatus
US7986299B2 (en) Remote control apparatus, remote control system and device-specific information display method
JP7025198B2 (en) Communication systems, communication devices and their control methods, programs
JP2007243726A (en) Remote control apparatus, method and system
US10225455B2 (en) Communication apparatus, information processing apparatus, methods and computer-readable storage medium
US11082600B2 (en) Electronic apparatus that performs wireless communication with an image capturing device at two different communication speeds, and method for controlling same
US9706101B2 (en) Image processing terminal, imaging machine, information processing method, program, and remote imaging system to remotely operate the imaging machine
JP2017501598A (en) Method and apparatus for broadcasting stream media data
US20140064736A1 (en) Information processing apparatus, information processing system, information processing method, and program therefor
JP6257336B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
JP5574397B2 (en) Remote control system
US10158801B2 (en) Image capturing apparatus communicating with an external apparatus and method for controlling the same and storage medium
JP6882055B2 (en) Communication devices and their control methods, programs and communication systems
JP6426969B2 (en) Imaging device, control method therefor, system, and program
JP2017199972A (en) Terminal device, information acquisition system, information acquisition method, and program
JP4851395B2 (en) Imaging apparatus and image communication system
JP6062029B2 (en) Imaging apparatus, imaging system, imaging method, and imaging program
JP5467092B2 (en) Imaging apparatus and image designation method
US11140279B2 (en) Communication system, communication apparatus, control method, non-transitory computer-readable storage medium, and server apparatus
JP2014022921A (en) Electronic apparatus and program
JP2018182563A (en) Display controller, control method thereof, program, and storage medium
JP6246296B2 (en) COMMUNICATION DEVICE, COMMUNICATION METHOD, AND PROGRAM
JP5781207B2 (en) Transmission terminal, reception terminal, radio communication system, and radio communication method

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20100702

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110901

RD07 Notification of extinguishment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7427

Effective date: 20120712

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120918

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130108

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130304

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130507

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130725

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130802

A912 Removal of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20130913

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140402

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140626

R150 Certificate of patent or registration of utility model

Ref document number: 5574397

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees