JP2007243726A - 遠隔制御装置、方法およびシステム - Google Patents

Abstract

【課題】所望の操作対象機器の遠隔制御の反応の具合や所望の操作対象機器の状態を分かりやすく確認できるようにする。
【解決手段】ＣＰＵ１０は、予めＲＯＭ１２に記憶されている輝度閾値のうち選択した機器に対応する輝度閾値と、輝度値の差分とを比較することで、選択した機器の電源が実際にオンされたか否かを判断する。実際に機器の電源がオンになったと判断した場合、ＣＰＵ１０は制御プログラムの指令に従い、選択した機器の各種操作（例えば音声ボリュームの上げ下げ、チャンネルの変更）に対応するＧＵＩをＲＯＭ１２からＲＡＭ１１に読み出した上、表示制御部２６に指令してＧＵＩを表示部１３に表示させる。
【選択図】 図２

Description

本発明は撮像素子により機器固有の情報を取得し、取得した機器固有の情報に基づいて所望の機器を遠隔制御する技術に関する。

従来、複数の機器から所望の機器を単一のコントローラで簡単に制御するための技術が様々開発されている。例えば特許文献１によると、複数の機器の物理的な配置を記述した物理的トポロジマップを予めリモコン内のメモリに蓄積し、ユーザがリモコンの方向ボタンを見た目の配置どおりに操作する。リモコンがその方向ボタンの入力どおりに物理的トポロジマップを参照して辿ることで所望の機器を選択する。これによりユーザがすばやく直感的に所望の機器を選択することができる。リモコンは物理的トポロジマップを作成するために必要な機器の物理的な配置情報を無線やネットワークの特性を利用して自動的に収集するマップ作成部を有している。

また特許文献２によると、リモコン操作対象機器のそれぞれに対応したリモコン操作情報を記憶するサーバ装置を具備し、携帯リモコン端末はサーバ装置に対して無線通信手段もしくは公衆通信回線を介して予め選択したリモコン操作対象機器に対応するリモコン操作情報を要求するリモコン操作情報要求データを送信する送信部を持ち、サーバ装置はリモコン操作情報要求データに基づいて選択したリモコン操作対象機器に対応するリモコン操作情報を携帯リモコン端末に送信するように構成する。

また非特許文献１によると、携帯電話に搭載されたカスタムイメージセンサを用い、通常画像をリアルタイムに撮像しながら、情報家電からＩＤを受信する。受信したＩＤは撮像した背景画像上に重ねてディスプレイ上に表示される。ユーザはディスプレイ上で対象機器を視認しながら操作することができる。
特開２００３−２８４１６８号公報 特開２００２−２９１０７２号公報 「部分領域高速読出し機能をもつ低消費電力ＩＤ受信ＣＭＯＳイメージセンサを用いた情報家電マルチリモコン「オプトナビ」システムの提案」、映像情報メディア学会誌Ｖｏｌ．５９、Ｎｏ１２、ｐｐ．１８３０〜１８４０（２００５）

特許文献１、特許文献２では、装置の位置関係をリモコンで確認可能であるが、装置の状況や、遠隔制御に対する反応を確認する具体的内容は記載されていない。非特許文献１でも、遠隔制御に対する反応を確認する具体的内容は記載されていない。

本発明はこのような問題点に鑑みてなされたもので、所望の操作対象機器の遠隔制御の反応の具合や所望の操作対象機器の状態を分かりやすく確認できるようにすることを目的とする。

本発明に係る遠隔制御装置は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、機器に遠隔制御信号を送信する制御信号送信部と、指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、指示受付部から選択された機器に送信するよう制御信号送信部を制御する遠隔制御部と、取得部が継続的に取得した画像の輝度の変化に応じ、遠隔制御信号に応じた機器の動作の有無を判断する動作状況判断部と、を備え、表示部は動作状況判断部の判断に応じた内容の情報を表示する。

この発明によると、遠隔制御信号の送信に応じた動作状況を画像の輝度の変化によって判断し、判断の結果に応じた内容の情報を表示する。こうすれば、遠隔制御信号に対する制御対象の機器の反応を調べ、ユーザに視覚的に示すことができる。

本発明に係る遠隔制御装置は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得する取得部と、機器の発した固有の音声を認識する音声認識部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、機器に遠隔制御信号を送信する制御信号送信部と、指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、指示受付部から選択された機器に送信するよう制御信号送信部を制御する遠隔制御部と、音声認識部が固有の音声を認識したか否かに応じ、遠隔制御信号に応じて機器が動作したか否かを判断する動作状況判断部と、を備え、表示部は動作状況判断部の判断に応じた内容の情報を表示する。

この発明によると、遠隔制御信号の送信に応じた動作状況を、機器の発する固有の音声によって判断し、判断の結果に応じた内容の情報を表示する。こうすれば、遠隔制御信号に対する制御対象の機器の反応を調べ、ユーザに視覚的に示すことができる。

遠隔制御部は、動作状況判断部が遠隔制御信号に応じて機器が動作していないと判断したことに応じ、遠隔制御信号を再び送信してもよい。

遠隔制御部は、動作状況判断部が遠隔制御信号に応じて機器が動作していないと判断したことに応じ、遠隔制御信号を所定の回数に限り送信してもよい。

表示部は、遠隔制御信号を所定の回数送信した後に、動作状況判断部が遠隔制御信号に応じて機器が動作していないと判断したことに応じ、所定の情報を表示してもよい。

動作状況判断部は機器の電源オンの制御内容に対応する遠隔制御信号に応じて機器の電源がオンになったか否かを判断し、表示部は動作状況判断部が機器の電源がオンになったと判断したことに応じて機器の電源オン後に制御可能な内容に関する情報を表示してもよい。

本発明に係る遠隔制御装置は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、機器に遠隔制御信号を送信する制御信号送信部と、指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、指示受付部から選択された機器に送信するよう制御信号送信部を制御する遠隔制御部と、遠隔制御信号の送信後に取得部の取得した画像から機器の表示したエラー情報を認識するエラー情報認識部と、を備え、表示部はエラー情報認識部が認識したエラー情報に関する情報を表示する。

この発明によると、機器の表示したエラー情報を認識し、認識したエラー情報に関する情報（例えばエラーの対応策）を表示する。ユーザは、遠隔制御がうまくいかない場合でも、エラー情報に関する情報を見て、適切な対応をとることができる。

本発明に係る遠隔制御装置は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報または機器の状態情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、機器に遠隔制御信号を送信する制御信号送信部と、指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、指示受付部から選択された機器に送信するよう制御信号送信部を制御する遠隔制御部と、を備え、表示部は遠隔制御信号の送信後取得部が取得した機器の状態情報を表示する。

この発明によると、遠隔制御信号の送信後、機器が光学的に発信してきた機器の状態情報を表示する。こうすれば、遠隔制御信号に対する制御対象の機器の反応を、ユーザに視覚的に示すことができる。

本発明に係る遠隔制御装置は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報および機器の状態情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、を備え、表示部は指示受付部から選択された機器の状態情報を表示する。

この発明によると、制御対象として選択された機器が光学的に発信してきた機器の状態情報を表示する。こうすれば、制御対象の機器の現在の状態を、ユーザに視覚的に示すことができる。

なお一例として、機器の状態情報は機器の充電進行状況に関する情報を含む。

本発明に係る遠隔制御方法は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得するステップと、継続的に取得した画像と機器に固有の情報とを重畳して表示するステップと、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、継続的に取得した画像の輝度の変化に応じ、遠隔制御信号に応じた機器の動作の有無を判断するステップと、機器の動作の有無の判断に応じた内容の情報を表示するステップと、を含む。

本発明に係る遠隔制御方法は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得するステップと、機器の発した固有の音声を認識するステップと、継続的に取得した画像と機器に固有の情報とを重畳して表示するステップと、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、固有の音声を認識したか否かに応じ、遠隔制御信号に応じて機器が動作したか否かを判断するステップと、機器の動作の有無の判断に応じた内容の情報を表示するステップと、を含む。

本発明に係る遠隔制御方法は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得するステップと、継続的に取得した画像と機器に固有の情報とを重畳して表示するステップと、固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、遠隔制御信号の送信後に取得した画像から機器の表示したエラー情報を認識するステップと、認識したエラー情報に対応する情報を表示するステップと、を含む。

本発明に係る遠隔制御方法は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報または機器の状態情報とを撮像素子により継続的に取得するステップと、継続的に取得した画像と機器に固有の情報とを重畳して表示するステップと、固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、遠隔制御信号の送信後に取得した機器の状態情報を表示するステップと、を含む。

本発明に係る遠隔制御方法は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報および機器の状態情報とを撮像素子により継続的に取得するステップと、継続的に取得した画像と機器に固有の情報とを重畳して表示するステップと、固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、選択された機器の状態情報を表示するステップと、を含む。

本発明に係る遠隔制御システムは、固有の情報または状態情報を光学的に発信する機器と、機器を被写体とする画像と機器から光学的に発信される機器に固有の情報または機器の状態情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、機器に遠隔制御信号を送信する制御信号送信部と、指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、指示受付部から選択された機器に送信するよう制御信号送信部を制御する遠隔制御部と、を備え、機器は遠隔制御信号を受信したことに応じ、選択された制御内容に応じた動作を行うとともに機器の状態情報を発信し、表示部は遠隔制御信号の送信後取得部が取得した機器の状態情報を表示する。

本発明に係る遠隔制御システムは、固有の情報および状態情報を光学的に発信する機器と、機器を被写体とする画像と機器から光学的に発信される機器に固有の情報および機器の状態情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、を備え、表示部は指示受付部から選択された機器の状態情報を表示する。

本発明によると、遠隔制御信号の送信に応じた動作状況を、画像の輝度の変化や、機器の発した音声もしくは状態情報に応じて表示する。こうすれば、遠隔制御信号に対する制御対象の機器の状態を、ユーザに視覚的に分かりやすく示すことができる。

＜第１実施形態＞
図１は本発明の好ましい第１の実施形態に係る遠隔制御システムの概略構成図である。このシステムは、遠隔制御装置１と、遠隔制御装置１によって制御されるテレビ、ビデオ、ステレオなどのＡＶ機器、パソコン、調理機器その他の機器２とを含む。遠隔制御装置１は、移動体通信網やインターネットなどの外部ネットワークや、ローカルエリアネットワーク（ＬＡＮ）を介して各機器２と接続する。

機器２は自己に固有の情報（機器２の識別番号、ＩＤ、シリアル番号、メーカ番号、型式番号、機種、外部ネットワーク上のアドレスなど機器２に固有の情報であれば何でも可）である機器固有情報を赤外線信号などの光学的信号に重畳して発信する。また、遠隔制御装置１からの遠隔制御信号（赤外線信号その他の光学的信号あるいはBluetooth、無線ＬＡＮその他の電気的信号で発信）を受信する。

機器２は電源のオンオフにかかわらず常に機器固有情報を発信している。機器２は電源がオンされて動作を開始すると、機器２に対応する所定の輝度閾値以上の光を発光する発光手段（例えばテレビ画面）を備えるものとする。

図２は、本発明の好ましい実施形態に係る遠隔制御装置１の機能ブロック図である。遠隔制御装置１は、撮像レンズ、ＣＭＯＳやＣＣＤなどの固体撮像素子、ドライバが固体撮像素子から読み取ったアナログ画像をデジタル信号に処理するためのアナログフロントエンドＩＣ、アナログフロントエンドＩＣからのデジタル画像信号を処理するＤＳＰ（Digital Signal Processor）等の信号処理ＩＣなどを含んだカメラ部２０、ワンチップマイコンなどで構成されカメラ部２０の撮像動作を制御するカメラ制御部２１を含む。

また、遠隔制御装置１は、テンキーや十字キーなどで構成された操作部１４への入力操作、リモコン信号送受信部２２が外部から受信した各種の操作信号、カメラ部２０の取得した画像や機器固有情報などに従って表示部１３の表示制御を行う表示制御部２６を備えている。

また、遠隔制御装置１は、各部の動作制御を統括するＣＰＵ１０、各種データやプログラムを記憶するＲＯＭ１２、ＣＰＵ１０の処理に必要な各種データを記憶するＲＡＭ１１を備えている。

特にＲＯＭ１２には、ＣＰＵ１０が操作部１４への操作に応じた機器２の制御コードを重畳した遠隔制御信号を発信するようリモコン信号制御部２３または無線制御部１６を制御するための制御プログラムおよび操作部１４の各部の操作とその操作によって重畳される制御コードとの関係を視覚的に表示するリモコンＧＵＩを、複数存在する機器２ごとに格納している。

撮像レンズには、例えば光学２倍ズームレンズが用いられ、操作部１４から入力される倍率変更操作に応じてモータドライバが撮像レンズを望遠（テレ）側又は広角（ワイド）側に進退駆動することで光学ズーム倍率が変更される。撮像レンズの倍率は上記に限定されない。撮像レンズには絞りが設けられており、モータドライバを介して絞りを制御して適正な露光量を得る。

操作部１４によって撮影モードが設定されると、ＣＰＵ１０は、動画（スルー画）を表示部１３に表示させ、撮影画角を確認可能にする。即ち、固体撮像素子は、撮像レンズの受光面に結像された被写体光をその光量に応じた量の信号電荷に変換する。このようにして蓄積された各画素の信号電荷は、ＣＰＵ１０の指令に従いタイミングジェネレータから与えられる駆動パルスに基づき、信号電荷に応じた電圧信号（画像信号）としてドライバによって順次個別に読み出され、アナログフロントエンド回路でデジタル信号に変換されてそれぞれ信号処理回路に加えられる。

信号処理回路は、ゲイン調整回路及びＡ／Ｄ変換器を含み、輝度・色差信号生成回路、ガンマ補正回路、シャープネス補正回路、コントラスト補正回路、ホワイトバランス補正回路、撮影画像に対する輪郭補正を含む画像処理を行う輪郭処理部、画像のノイズ低減処理を行うノイズ低減処理部等を含む画像処理手段であり、ＣＰＵ１０からのコマンドに従って画像信号を処理する。

信号処理回路に入力された画像データは、輝度信号（Ｙ信号）及び色差信号（Ｃｒ、Ｃｌ信号）に変換されるとともに、ガンマ補正等の所定の処理が施された後、ＶＲＡＭに格納される。

撮影画像を表示部１３にモニタ出力する場合、ＶＲＡＭからＹＣ信号が読み出され、表示制御部２６に送られる。表示制御部２６は、入力されたＹＣ信号を表示用の所定方式の信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換して表示部１３に出力する。

所定のフレームレートで処理された各フレームのＹＣ信号は、ＶＲＡＭのＡ領域とＢ領域とに交互に書き込まれ、ＶＲＡＭのＡ領域及びＢ領域のうち、ＹＣ信号が書き込まれている方の領域以外の領域から、書き込まれているＹＣ信号が読み出される。このようにしてＶＲＡＭ内のＹＣ信号が定期的に書き換えられ、そのＹＣ信号から生成される映像信号が表示部１３に供給されることにより、撮像中の映像がリアルタイムに表示部１３に表示される。ユーザは、表示部１３に表示される映像（スルー）によって撮影画角を確認できる。

ここで、操作部１４に設けられた撮影キーが押下されると、記憶用の撮影動作がスタートする。撮影キーの押下に応動して取得された画像データは信号処理回路において輝度／色差信号（Ｙ／Ｃ信号）に変換され、ガンマ補正等の所定の処理が施された後、ＲＡＭ１１に格納される。

ＲＡＭ１１に格納されたＹ／Ｃ信号は、圧縮伸長処理回路によって所定のフォーマットに従って圧縮された後、メモリカード２７にExifファイルなどの所定フォーマットの画像ファイルとして記憶される。画像ファイルはフラッシュメモリ２８に記憶することもできる。

操作部１４によって再生モードが設定されると、メモリカード２７に記憶されている最終の画像ファイル（最後に記憶されたファイル）の圧縮データが読み出される。最後の記憶に係るファイルが静止画ファイルの場合、この読み出された画像圧縮データは、圧縮伸長処理回路を介して非圧縮のＹＣ信号に伸長され、ＶＲＡＭに保存される。ＶＲＡＭに保存されたＹＣ信号は、表示制御部２６に加えられる。表示制御部２６は、入力するＹＣ信号からＮＴＳＣ方式のＲＧＢカラー複合映像信号を作成し、これを表示部１３に出力する。これにより、表示部１３にはメモリカード２７に記憶されている最終コマのコマ画像が表示される。

その後、操作部１４に設けられた十字キーの右キーが押されると、順方向にコマ送りされ、十字キーの左キーが押されると、逆方向にコマ送りされる。そして、コマ送りされたコマ位置の画像ファイルがメモリカード２７から読み出され、上記と同様にしてコマ画像が表示部１３に再生される。尚、最終コマのコマ画像が表示されている状態で順方向にコマ送りされると、メモリカード２７に記憶されている１コマ目の画像ファイルが読み出され、１コマ目のコマ画像が表示部１３に再生される。

記憶させる画像ファイルの画素数は、例えば、2832×2128（６Ｍ）、2048×1536（３Ｍ）、1280×960（１Ｍ）、640×480（ＶＧＡ）の何れかであり、記憶画質と記憶画素数との組合せによって撮影画像のデータ量（ファイルサイズ）が変化する。

遠隔制御装置１は、例えば非特許文献１に示すようにカメラ付き携帯電話やデジタルカメラで構成することができる。ただし、本実施形態において、画像の記録保存に関するブロック（メモリカード２７やフラッシュメモリ２８）は必須でない。

リモコン信号送受信部２２は、受光素子を備える。図２ではカメラ部２０とリモコン信号送受信部２２とは別体で示されているが、実際には、受光素子は、カメラ部２０の固体撮像素子と共通する。このため、カメラ部２０が機器２を被写体として撮像すると、画像と合わせて、各機器２が光学的に発信した機器固有情報を取得できる。

リモコン信号制御部２３は、外部の機器２からリモコン信号送受信部２２に入射した光学信号に重畳されている機器固有情報をデジタルデータに変換してＣＰＵ１０に出力する。

ＣＰＵ１０は、リモコン信号制御部２３から入力した機器固有情報に応じ、機器固有情報で特定される機器２に固有の制御コードを規定したテーブルをＲＯＭ１２からＲＡＭ１１に読み出す。そして、操作部１４の操作に応じた特定の機器２の制御コードをＲＡＭ１１から読み出して、リモコン信号制御部２３に送る。

リモコン信号送受信部２２は発光ダイオードや赤外線ＬＥＤなどで構成された光学的信号発信手段を備える。リモコン信号制御部２３は、ＣＰＵ１０から指示された制御コードその他のデータを重畳した光学的信号を機器２に発信する。このように、遠隔制御装置１から機器２に光学的な制御信号を送ることで操作部１４による特定の機器２の遠隔操作が可能である。

また、遠隔制御装置１は、移動体通信電波、IrDA、Bluetooth、無線ＬＡＮ、Wireless USBなどの無線信号を機器２との間で送受信する無線送受信部１７と、受信した無線信号をデータに変換してＣＰＵ１０に送信したり、あるいはＣＰＵ１０から指示された遠隔制御信号を無線信号に重畳する無線制御部１６、ＵＳＢその他の規格に従ってパソコンやプリンタなどの各種家電機器２と通信する外部インターフェース部１５を備える。

ＣＰＵ１０は、操作部１４の操作に応じた特定の機器２の制御コードをＲＡＭ１１から読み出して、無線制御部１６に送ることもできる。無線制御部１６は、ＣＰＵ１０から入力された制御コードその他のデータを重畳した無線信号を機器２に発信する。この無線信号はＬＡＮまたは外部ネットワーク経由で機器２に到達する。機器２は、制御コードを受信すると、制御コードに応じた動作を行う。このように、遠隔制御装置１から機器２に無線信号を送ることで操作部１４による特定の機器２の遠隔操作も可能である。

遠隔制御装置１は、音声を発するスピーカなどの拡声手段および音声を受けて電気信号に変換するマイクなどの受話手段を含む送受話部１９、拡声手段の発話内容を制御する音声制御部１８を備える。音声制御部１８は、送受話部１９から入力された音声信号から、ＣＰＵ１０の指定した特定の音声パターンを認識する機能を有する。

ＣＰＵ１０は、送受話部１９の受けた音声に応じた特定の機器２の制御コードをＲＡＭ１１から読み出して、リモコン信号制御部２３あるいは無線制御部１６に送ることもできる。すなわち、特定の機器２に光学的信号あるいは無線信号で発信する制御コードの指定は、操作部１４への入力操作に限られず、音声入力でも行える。

また、ＣＰＵ１０は、操作部１４への入力操作や送受話部１９への音声に応じ、制御コードをリモコン信号送受信部２２かまたは無線送受信部１７のいずれから発信するかを選択する。遠隔制御装置１が制御対象となる機器２の面前であればリモコン信号送受信部２２から制御コードを発信すればよいが、そうでない場合は、ユーザが無線送受信部１７から制御コードを発信する旨を操作部１４への入力操作や送受話部１９への音声によってＣＰＵ１０に指示する。ＣＰＵ１０はこの指示に応じ、無線送受信部１７から制御コードを発信するよう制御を行う。

図３は第１実施形態に係る遠隔操作処理の流れを示すフローチャートである。

まず、Ｓ１では、ＣＰＵ１０は、操作部１４に入力された撮像指示あるいは送受話部１９へ入力された撮像指示に応じ、カメラ制御部２１に静止画取得動作の開始を指令する。カメラ制御部２１は、カメラ部２０を制御し、静止画ｎ０および機器固有情報を取得する。静止画はいったんＲＡＭ１１に記憶される。図４は静止画ｎ０の一例を示す。

ＣＰＵ１０は、カメラ部２０の取得した画像および画像中に被写体として配置された各々の機器２を機器固有情報に基づいて識別する。ＣＰＵ１０は、表示制御部２６に指令して、静止画および識別された機器２の機器固有情報を重畳して表示部１３に表示させる。

Ｓ２では、ＣＰＵ１０は、操作部１４への手動入力あるいは送受話部１９への音声入力によって、識別された機器２のうち電源のオンを希望する機器２を選択するよう表示部１３への表示あるいは送受話部１９の音声案内などで促す。ＣＰＵ１０は、操作部１４への手動入力あるいは送受話部１９への音声入力に応じ、機器２を選択する。

ＣＰＵ１０は選択した機器２−１に対応する制御プログラムをＲＯＭ１２からＲＡＭ１１に読み出して実行する。

Ｓ３では、ＣＰＵ１０はリモコン信号制御部２３に指令して、操作部１４への手動入力あるいは送受話部１９への音声入力に応じ、リモコン信号送受信部２２、無線送受信部１７、あるいは外部インターフェース部１５から、選択した機器２−１に対し、電源をオンする制御内容を規定する制御コードを送信する。

Ｓ４では、カメラ部２０の固体撮像素子は所定周期で露光を繰り返し行い、その都度、画像の撮影を行う。ｎ回目の露光によって得られた画像であるｎ番目の画像は、デジタルデータに変換されてＣＰＵ１０に送られる。

ＣＰＵ１０は、各露光によって得られた画像内において、選択した機器２−１の機器固有情報が取得された領域を検出エリアに設定する。ＣＰＵ１０は、静止画ｎ０および各露光によって得られたｎ番目の画像の検出エリアの輝度値を積算し、静止画ｎ０とｎ番目の画像との輝度値の差分Δｎを求め、ＲＡＭ１１に一時的に記憶する。

Ｓ５では、ＣＰＵ１０は、予めＲＯＭ１２に記憶されている輝度閾値のうちＳ２で選択した機器２−１に対応する輝度閾値Ｔと、輝度値の差分Δｎとを比較することで、選択した機器２−１の電源が実際にオンされたか否かを判断する。すなわちＣＰＵ１０は、差分Δｎが閾値Ｔ以上であるか否かを判断する。Δｎ≧Ｔの場合は実際に機器２−１の電源がオンになったと判断してＳ６へ進み、Δｎ＜Ｔの場合は実際に機器２−１の電源がオンになっていないと判断してＳ１へ戻る。図５は電源が実際にオンになったときのｎ番目の画像の一例を示す。

なお、輝度閾値Ｔは、機器２から機器固有情報として発信してもよい。あるいは機器２からネットワーク経由で受信してもよい。

Ｓ６では、ＣＰＵ１０は制御プログラムの指令に従い、選択した機器２−１の各種操作（例えば音声ボリュームの上げ下げ、チャンネルの変更）に対応するＧＵＩをＲＯＭ１２からＲＡＭ１１に読み出した上、表示制御部２６に指令してＧＵＩを表示部１３に表示させる。図６に示すように、ＧＵＩはｎ番目の画像と重ねて表示するとよい。

このように、遠隔制御装置１は、所望の機器２に対して電源オンの遠隔制御信号を送った場合、実際に機器２の電源がオンになったか否かを、輝度の差分値と輝度閾値とを比較することにより判断する。電源がオンになったと判断すれば、機器２の電源オン以降の操作用のＧＵＩを表示する。こうすれば、選択した機器２の電源オンの制御信号に対する反応に応じて、次に行う遠隔制御の補助を行える。

＜第２実施形態＞
第１実施形態では輝度差分値に基づいて機器２の電源が実際にオンされたか否かを判断していたが、機器２から発せられる音声が所定の音声であるか否かにより機器２の電源が実際にオンされたか否かを判断してもよい。

図６は第２実施形態に係る遠隔操作処理の流れを示すフローチャートである。

まず、Ｓ１１では、ＣＰＵ１０は、操作部１４に入力された撮像指示あるいは送受話部１９へ入力された撮像指示に応じ、カメラ制御部２１に静止画取得動作の開始を指令する。カメラ制御部２１は、カメラ部２０を制御し、静止画ｎ０および機器固有情報を取得する。静止画はいったんＲＡＭ１１に記憶される。

ＣＰＵ１０は、カメラ部２０の取得した画像および画像中に被写体として配置された各々の機器２を機器固有情報に基づいて識別する。ＣＰＵ１０は、表示制御部２６に指令して、静止画および識別された機器２の機器固有情報を重畳して表示部１３に表示させる。

Ｓ１２では、ＣＰＵ１０は、操作部１４への手動入力あるいは送受話部１９への音声入力によって、識別された機器２のうち電源のオンを希望する機器２を選択するよう表示部１３への表示あるいは送受話部１９の音声案内などで促す。ＣＰＵ１０は、操作部１４への手動入力あるいは送受話部１９への音声入力に応じ、機器２を選択する。

ＣＰＵ１０は選択した機器２−１に対応する制御プログラムをＲＯＭ１２からＲＡＭ１１に読み出して実行する。

Ｓ１３では、ＣＰＵ１０はリモコン信号制御部２３に指令して、操作部１４への手動入力あるいは送受話部１９への音声入力に応じ、リモコン信号送受信部２２、無線送受信部１７、あるいは外部インターフェース部１５から、選択した機器２−１に対し、電源をオンする制御内容を規定する制御コードを送信する。

Ｓ１４では、カメラ部２０の固体撮像素子は所定周期で露光を繰り返し行い、その都度、画像の撮影を行う。ｎ回目の露光によって得られた画像であるｎ番目の画像は、デジタルデータに変換されてＣＰＵ１０に送られる。

ＣＰＵ１０は、各露光によって得られた画像内において、選択した機器２−１の機器固有情報が取得された領域を検出エリアに設定する。ＣＰＵ１０は、静止画ｎ０および各露光によって得られたｎ番目の画像の検出エリアの輝度値を積算し、静止画ｎ０とｎ番目の画像との輝度値の差分Δｎを求め、ＲＡＭ１１に一時的に記憶する。

Ｓ１５では、ＣＰＵ１０は、送受話部１９へ入力された音声の周波数パターンを採取しＲＡＭ１１に記憶する。

Ｓ１６では、ＣＰＵ１０は、予めＲＯＭ１２に記憶されている輝度閾値のうちＳ１２で選択した機器２に対応する輝度閾値Ｔと、輝度値の差分Δｎとを比較することで、選択した機器２−１の電源が実際にオンされたか否かを判断する。すなわちＣＰＵ１０は、差分Δｎが閾値Ｔ以上であるか否かを判断する。Δｎ≧Ｔの場合は実際に機器２−１の電源がオンになったと判断してＳ１８へ進み、Δｎ＜Ｔの場合は実際に機器２−１の電源がオンになっていないと判断してＳ１１へ戻る。

Ｓ１７では、ＣＰＵ１０は、音声制御部１８により、予めＲＯＭ１２に記憶されている音声の周波数パターンのうち選択した機器２−１に対応する音声の周波数パターン（例えば機器２−１が起動する際に発するチャイム音の周波数パターン）と、Ｓ１５で採取した音声の周波数パターンとを比較する。そして、両者が適合する場合は機器２の電源がオンになっていると判断してＳ１８に移行し、両者が適合しない場合は機器２の電源がオンになっていないと判断してＳ１１に戻る。なお、音声の周波数パターンは、機器２から機器固有情報として発信してもよい。あるいは機器２からネットワーク経由で受信してもよい。

Ｓ１７では、ＣＰＵ１０は制御プログラムの指令に従い、選択した機器２−１の各種操作に対応するＧＵＩをＲＯＭ１２からＲＡＭ１１に読み出した上、表示制御部２６に指令してＧＵＩを表示部１３に表示させる。

なお、Ｓ１７の判断はＳ１６の判断と基本的に無関係であり、必ずしも組み合わせなくてよい。ただし、Ｓ１６の判断が外光などの影響で不正確となる場合もある。Ｓ１７のような音声による判断をＳ１６の判断に補助的に加えることで、機器２の電源オンの判断がより正確になる。

このように、遠隔制御装置１は、所望の機器２に対して電源オンの遠隔制御信号を送った場合、実際に機器２の電源がオンになったか否かを、音声パターンにより判断することができる。特に、機器２の電源がオンになったことに伴う輝度変化が小さかったり、全くなく、輝度閾値との比較により電源オンの判断が困難な場合でも、音声によって補助的に機器２の電源オンの判断ができる。

＜第３実施形態＞
無線送受信部１７から機器２に対する光学的信号の入射角が大きすぎるなど何らかの原因で、遠隔制御信号を送っても機器２の電源がオンにならないこともある。この場合、所定の回数に限って遠隔制御信号を再送するようにしてもよい。さらに、所定回数遠隔制御信号を再送しても、機器２の電源がオンにならない場合は、エラーメッセージを画面表示や音声で通知してもよい。

図８は第３実施形態に係る遠隔操作処理の流れを示すフローチャートである。

Ｓ２１〜Ｓ２７はそれぞれ第２実施形態のＳ１１〜Ｓ１７と同様である。ただしＳ２６において電源がオンと判断されればＳ３１、オンと判断されなければＳ２７に移行する。またＳ２７において電源がオンと判断されればＳ３１、オンと判断されなければＳ２８に移行する。

Ｓ２８では、ＣＰＵ１０は、遠隔制御信号の送信回数ｍ（初期値は０）を１だけインクリメントしてＲＡＭ１１に記憶する。

Ｓ２９では、ＣＰＵ１０は、送信回数ｍが、遠隔信号の再送を打ち切るべき所定の回数Ｎ（例えば１０）に達したか否かを判断する。ｍ≧ＮであればＳ３０に移行し、ｍ＜ＮであればＳ２３に戻る。

Ｓ３０では、ＣＰＵ１０は、機器２の電源がオンにならかった旨を示すエラーメッセージを表示部１３や送受話部１９によって通知する。図９は表示部１３で静止画と重畳してエラーメッセージを通知した状態を示す。

Ｓ３１は第２実施形態のＳ１８と同様である。

＜第４実施形態＞
第１〜３実施形態において、機器２が表示装置を有しており、その表示装置にエラーコードを表示する場合、遠隔制御装置１は、機器２の表示装置のエラーコードを画像認識し、エラーコードに関係する情報を通知してもよい。

例えば図１０に示すように、操作対象として選択された機器２であるテレビの画面にエラーコード「ＥＲＲＯＲ００１」が表示されたとする。遠隔制御装置１のＣＰＵ１０は、カメラ部２０から継続的に得られる静止画（好ましくは機器２の固有情報検出エリア近傍）から、そのエラーコードを予めＲＯＭ１２に記憶されたエラーコードの画像パターンと照合することで認識する。

なお遠隔制御装置１は、機器固有情報を取得した後、機器固有情報に含まれる機器２のアドレスにアクセスして機器２に固有のエラーコードの画像パターンを送るよう要求し、この要求に応じて機器２からエラーコードの画像パターンを受信してＲＯＭ１２に記憶しておく。

遠隔制御装置１は、エラーコードを認識すると、エラーの内容あるいはエラーへの対応方法などエラーに関する情報をＲＯＭ１２から読み出して表示部１３の画面表示や送受話部１９からの音声で通知する。図１１はなどエラーに関する情報が表示部１３に表示された様子を示す。

なお遠隔制御装置１は、ある機器２のエラーコードを認識した場合、その機器２のアドレスにアクセスし、認識したエラーコードの内容や対応方法などエラーに関する情報を記述するデータを送るよう要求し、この要求に応じて機器２からエラーに関する情報を受信してＲＯＭ１２に記憶しておくようにしてもよい。

＜第５実施形態＞
機器２は電源がオンになった以後、機器固有情報の代わりに、あるいは機器固有情報として、機器の状態に関する情報を発信してもよい。機器の状態に関する情報は、例えば、電池残量、メモリ残量、撮影残枚数、ＨＤＤ残量、ポット湯沸かし時間などである。

図１２に示すように、遠隔制御装置１は、機器に関する情報を受信すると、静止画に重畳して表示部１３に表示する。あるいは機器に関する情報を送受話部１９で通知してもよい。

こうすると、機器２が電源オンされて遠隔制御が可能になった以後、機器２の状態が容易に分かり、それに応じて適切な遠隔制御ができる。

＜第６実施形態＞
機器２は電源がオンになったか否かとは無関係に、充電中、機器固有情報として、機器の充電状態に関する情報を発信してもよい。

図１３に示すように、遠隔制御装置１は、操作部１４への手動入力あるいは送受話部１９への音声入力によって選択された機器２から充電状態に関する情報を受信すると、この情報を静止画に重畳して表示部１３に表示する。充電状態に関する情報は送受話部１９から音声で通知してもよい。

こうすると、所望の機器２の充電の進行状況が機器の面前まで確認しに行かなくても容易に分かり、充電の完了後は、速やかに遠隔制御を開始できる。

遠隔制御システムの構成図 遠隔制御装置の構成図 第１実施形態に係る遠隔操作処理の流れを示すフローチャート 静止画の一例を示す図 電源が実際にオンになったときのｎ番目の画像の一例を示す図 画像と重ねて表示されたＧＵＩの一例を示す図 第２実施形態に係る遠隔操作処理の流れを示すフローチャート 第３実施形態に係る遠隔操作処理の流れを示すフローチャート 静止画と重畳してエラーメッセージを通知した状態を例示する図 テレビ機器の画面にエラーコードが表示された状態を例示する図 エラーに関する情報が表示された様子を例示する図 機器に関する情報を静止画に重畳して表示した様子を例示する図 充電状態に関する情報を静止画に重畳して表示した様子を例示する図

符号の説明

１：遠隔制御装置、２：機器、１０：ＣＰＵ、１１：ＲＡＭ、１２：ＲＯＭ、１３：表示部、１４：操作部、１６：無線制御部、１７：無線送受信部、１８：音声制御部、１９：送受話部、２０：カメラ部、２１：カメラ制御部、２２：リモコン信号送受信部、２３：リモコン信号制御部

Claims (17)

1. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得する取得部と、
   前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
   前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
   前記機器に遠隔制御信号を送信する制御信号送信部と、
   前記指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、前記指示受付部から選択された機器に送信するよう前記制御信号送信部を制御する遠隔制御部と、
   前記取得部が継続的に取得した画像の輝度の変化に応じ、前記遠隔制御信号に応じた前記機器の動作の有無を判断する動作状況判断部と、
   を備え、
   前記表示部は前記動作状況判断部の判断に応じた内容の情報を表示する遠隔制御装置。
2. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得する取得部と、
   前記機器の発した固有の音声を認識する音声認識部と、
   前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
   前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
   前記機器に遠隔制御信号を送信する制御信号送信部と、
   前記指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、前記指示受付部から選択された機器に送信するよう前記制御信号送信部を制御する遠隔制御部と、
   前記音声認識部が前記固有の音声を認識したか否かに応じ、前記遠隔制御信号に応じて前記機器が動作したか否かを判断する動作状況判断部と、
   を備え、
   前記表示部は前記動作状況判断部の判断に応じた内容の情報を表示する遠隔制御装置。
3. 前記遠隔制御部は、前記動作状況判断部が前記遠隔制御信号に応じて前記機器が動作していないと判断したことに応じ、前記遠隔制御信号を再び送信する請求項１または２に記載の遠隔制御装置。
4. 前記遠隔制御部は、前記動作状況判断部が前記遠隔制御信号に応じて前記機器が動作していないと判断したことに応じ、前記遠隔制御信号を所定の回数に限り送信する請求項３に記載の遠隔制御装置。
5. 前記表示部は、前記遠隔制御信号を所定の回数送信した後に、前記動作状況判断部が前記遠隔制御信号に応じて前記機器が動作していないと判断したことに応じ、所定の情報を表示する請求項４に記載の遠隔制御装置。
6. 前記動作状況判断部は前記機器の電源オンの制御内容に対応する遠隔制御信号に応じて前記機器の電源がオンになったか否かを判断し、
   前記表示部は前記動作状況判断部が前記機器の電源がオンになったと判断したことに応じて前記機器の電源オン後に制御可能な内容に関する情報を表示する請求項１〜５のいずれかに記載の遠隔制御装置。
7. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得する取得部と、
   前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
   前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
   前記機器に遠隔制御信号を送信する制御信号送信部と、
   前記指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、前記指示受付部から選択された機器に送信するよう前記制御信号送信部を制御する遠隔制御部と、
   前記遠隔制御信号の送信後に前記取得部の取得した画像から前記機器の表示したエラー情報を認識するエラー情報認識部と、
   を備え、
   前記表示部は前記エラー情報認識部が認識したエラー情報に関する情報を表示する遠隔制御装置。
8. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報または前記機器の状態情報とを撮像素子により継続的に取得する取得部と、
   前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
   前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
   前記機器に遠隔制御信号を送信する制御信号送信部と、
   前記指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、前記指示受付部から選択された機器に送信するよう前記制御信号送信部を制御する遠隔制御部と、
   を備え、
   前記表示部は前記遠隔制御信号の送信後前記取得部が取得した機器の状態情報を表示する遠隔制御装置。
9. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報および機器の状態情報とを撮像素子により継続的に取得する取得部と、
   前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
   前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
   を備え、
   前記表示部は前記指示受付部から選択された機器の状態情報を表示する遠隔制御装置。
10. 前記機器の状態情報は前記機器の充電進行状況に関する情報を含む請求項９に記載の遠隔制御装置。
11. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得するステップと、
    継続的に取得した画像と前記機器に固有の情報とを重畳して表示するステップと、
    前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、
    選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、
    継続的に取得した画像の輝度の変化に応じ、前記遠隔制御信号に応じた前記機器の動作の有無を判断するステップと、
    前記機器の動作の有無の判断に応じた内容の情報を表示するステップと、
    を含む遠隔制御方法。
12. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得するステップと、
    前記機器の発した固有の音声を認識するステップと、
    継続的に取得した画像と前記機器に固有の情報とを重畳して表示するステップと、
    前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、
    選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、
    前記固有の音声を認識したか否かに応じ、前記遠隔制御信号に応じて前記機器が動作したか否かを判断するステップと、
    前記機器の動作の有無の判断に応じた内容の情報を表示するステップと、
    を含む遠隔制御方法。
13. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報とを撮像素子により継続的に取得するステップと、
    継続的に取得した画像と前記機器に固有の情報とを重畳して表示するステップと、
    前記固有の情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、
    選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、
    前記遠隔制御信号の送信後に取得した画像から前記機器の表示したエラー情報を認識するステップと、
    認識したエラー情報に対応する情報を表示するステップと、
    を含む遠隔制御方法。
14. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報または前記機器の状態情報とを撮像素子により継続的に取得するステップと、
    継続的に取得した画像と前記機器に固有の情報とを重畳して表示するステップと、
    前記固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、
    選択された機器の制御内容に対応する遠隔制御信号を、選択された機器に送信するステップと、
    前記遠隔制御信号の送信後に取得した機器の状態情報を表示するステップと、
    を含む遠隔制御方法。
15. 遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報および機器の状態情報とを撮像素子により継続的に取得するステップと、
    継続的に取得した画像と前記機器に固有の情報とを重畳して表示するステップと、
    前記固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、
    選択された機器の状態情報を表示するステップと、
    を含む遠隔制御方法。
16. 固有の情報または状態情報を光学的に発信する機器と、
    前記機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報または前記機器の状態情報とを撮像素子により継続的に取得する取得部と、
    前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
    前記固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
    前記機器に遠隔制御信号を送信する制御信号送信部と、
    前記指示受付部から選択された機器の制御内容に対応する遠隔制御信号を、前記指示受付部から選択された機器に送信するよう前記制御信号送信部を制御する遠隔制御部と、
    を備え、
    前記機器は前記遠隔制御信号を受信したことに応じ、選択された制御内容に応じた動作を行うとともに前記機器の状態情報を発信し、
    前記表示部は前記遠隔制御信号の送信後前記取得部が取得した機器の状態情報を表示する遠隔制御システム。
17. 固有の情報および状態情報を光学的に発信する機器と、
    前記機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報および機器の状態情報とを撮像素子により継続的に取得する取得部と、
    前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
    前記固有の状態情報が取得された機器の内遠隔制御する所望の機器の選択および選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
    を備え、
    前記表示部は前記指示受付部から選択された機器の状態情報を表示する遠隔制御システム。

Images