JP2007013306A - 遠隔制御方法及びその遠隔制御装置 - Google Patents

Abstract

【課題】リモコン端末を使用することなく、手の合図等により被制御機器を遠隔制御する。
【解決手段】使用者をリモコン装置１のＣＣＤカメラ６１で撮影し、使用者の開始指示動作や選択指示動作を画像処理回路６２で判定し、メニュー画面を、プロジェクタ５１により、使用者の近傍の壁等へ投影する。このメニュー画面に対して、使用者が被制御機器（例えば、テレビ）を選択指示すると、この指示をＣＣＤカメラ６１で撮影し、指示内容を画像処理回路６２で判定し、テレビ制御用リモコン端末の操作面を、プロジェクタ５１により、壁等へ投影する。この投影された操作面上の操作ボタンを使用者が選択指示すると、この指示をＣＣＤカメラ６１で撮影し、指示内容を画像処理回路６２で判定する。この判定結果に基づき、赤外発光素子７からテレビ制御用赤外光が発信され、これがテレビの赤外受光部により受光され、テレビが動作する。
【選択図】図１

Description

本発明は、遠隔制御端末（リモートコントロール端末、以下「リモコン端末」という。）を持つことなく、被制御機器（例えば、テレビジョン受像機、ビデオ録音装置、ＤＶＤ（Digital Versatile Disc；ＣＤ（Compact Disc）、ＨＤ（Hard Disc））録画装置、空調機、照明装置、セキュリティ装置等）を任意の場所から遠隔制御できる遠隔制御方法、及びその遠隔制御装置（リモートコントロール装置、以下「リモコン装置」という。）に関するものである。

従来、被制御機器の遠隔制御においては、各被制御機器に対応したリモコン端末を用いて、被制御機器毎にスイッチのオン／オフ並びに機能制御を行っている。例えば、テレビジョン（以下「テレビ」という。）番組を録画する際には、テレビ受像機用のリモコン端末を用いて、テレビ受像機をオン状態にしてチャンネル選択を行った後に、ビデオ録画装置用のリモコン端末に持ち替えて、ビデオ録画装置をオン状態にして録画機能の選択を行う。この際、リモコン端末を持ち替えずに制御できるように、テレビ用とビデオ用のリモコン端末を一体化したものも現存する。

又、一般に、ディジタル情報家電（マルチメディア系の家庭内情報機器をディジタル技術を用いて従来の家電製品なみに手軽に扱えるようにしたもの）等で採用されているように、複数の被制御機器を有線、或いは無線によりネットワーク（通信回路網）化して、例えば、セットトップボックス（set−top box、マルチメディア通信サービスにおいていわゆるインタラクティブ・テレビを利用する際に必要になるもの）と称する処理制御部を１個設けることにより、ネットワーク上の被制御機器を一括管理する手法も存在する。

更に、セットトップボックスを用いたネットワークシステムにおいては、セットトップボックスをインターネット等に接続し、それぞれの被制御機器に適した情報を、その被制御機器に装備された表示部に表示する機能が備わっている場合がある。その他、２足歩行ロボットに代表される自走式ロボットによる被制御機器制御も提案されている。

この種のリモコン装置に関連する文献としては、例えば、次のようなものがある。

特開２００４−３６３９３０（図１、図２）

この特許文献１の図１及び図２には、テレビ受像機と、このテレビ受像機を遠隔制御するリモコン端末とからなるテレビ放送受信システムの技術が記載されている。この技術では、電子番組表情報に基づいて生成した番組情報一覧画面を、リモコン端末から壁等の投影面に投影表示すると共に、その番組情報一覧画面上でカーソルによって選択された番組情報についての詳細情報を、リモコン端末に設けられた詳細情報表示画面に表示している。これにより、テレビ受像機によるテレビ映像の表示を妨げることなく、テレビ映像、番組情報一覧画面及び詳細情報を同時に表示し、電子番組表画面の使い勝手を向上させている。

しかしながら、従来の遠隔制御方法やリモコン装置では、例えば、次の（ａ）〜（ｆ）のような課題があった。

（ａ） 例えば、テレビ受像機とビデオ録画装置の２つを制御する際には、テレビ受像機用とビデオ録画装置用の２個のリモコン端末を、常に側に置いて置き、それぞれを制御するために、リモコン端末を持ち替える必要が生じる。テレビ用とビデオ用のリモコン端末を一体化したものは、その負担を軽減するためのものであるが、この場合には、一体化していないリモコン端末に比べて、大型化し、重くなる。又、一体化したリモコン端末では、テレビとビデオの複数機能を識別するためにプッシュボタンが多くなり、使用する際に煩雑になる。更に、一体化したリモコン端末でも、端末の数は少なくなるが、常に側に置いておかなければならないという問題は、解消できない。

（ｂ） 前記（ａ）の例は、テレビ受像機とビデオ録画装置の組み合わせについてのみであるが、他の被制御機器や情報家電装置も併せて制御する場合には、問題は更に深刻化する。

（ｃ） 例えば、セットトップボックスと称する処理制御部を１個設けることにより、ネットワーク上の被制御機器を一括管理する手法においては、ネットワーク上の各被制御機器は、セットトップボックスに対応した規格で統一されていることが必要になる。従って、この規格が統一されて普及するまでは、製造メーカの異なる被制御機器間を同一ネットワークに設置することができない場合が生じ、使用者にとって、被制御機器購入の選択肢が著しく狭められる。更に、従来型の被制御機器ではネットワーク対応仕様になっていないものが多く、このような従来型被制御機器を有している場合には、製造メーカが同一であったとしても、新たに設けられたネットワークに接続することが困難になる。

（ｄ） セットトップボックスを用いたネットワークシステムにおいても、利用者は、セットトップボックスを制御するための端末を、常に側に置いておかなければならないという既述の問題を有している。

（ｅ） セットトップボックスをインターネット等に接続し、それぞれの被制御機器に適した情報を、その被制御機器に装備された表示部に表示する機能においては、セットトップボックスで一旦情報を格納した後に、改めてセットトップボックスから各被制御機器に送信し、その後に各被制御機器の表示部に表示されるという手順が取られている。このように通信が２段階になっており、セットトップボックスに情報の受信と送信機能が必要であるばかりでなく、各被制御機器にも情報の受信機能が必要になり、機構が複雑になる。一方、被制御機器間の通信で必要となるアドレスの数についても、セットトップボックスだけでなく、セットトップボックスからの発信を受信する各被制御機器にもアドレスを振り当てる必要が生じ、アドレスの数が増大するという問題が生じる。このことは、セットトップボックスを介さずに、各被制御機器を直接インターネットに接続する手法をとる場合には、より深刻である。

（ｆ） 各被制御機器に装備された表示部は、一般に小さく、インターネット等からの多くの情報や静止画像、動画像をこの表示部に一度に表示することは困難であり、表示できたとしても、小さな画面では使用者にとって見づらく、その情報を見ながら作業をする上で大きな支障を来す。これを解決するために、特許文献１の技術を利用して、リモコン端末に表示部を設けてこれに情報や静止画像、動画像を表示させたり、或いは、リモコン端末にプロジェクタを設けてその情報等を壁等の投影面に拡大表示することも考えられる。しかし、リモコン端末を常に側においておかなければならないので、不便であり、その上、リモコン端末にプロジェクタを設けるとなると、リモコン端末が大型化して重くなり、使い勝手が悪い。

このように、従来の技術では、未だ技術的に十分満足のゆく遠隔制御方法やリモコン装置を提供することが困難であった。

前記課題を解決するために、本発明の遠隔制御方法では、第１の撮影処理、第１の判定処理、第１の投影処理、第２の撮影処理、第２の判定処理、第２の投影処理、第３の撮影処理、第３の判定処理、及び、発信処理を行う。

前記第１の撮影処理では、使用者の動きを追尾する追尾手段の追尾結果に応答して、撮影方向を前記使用者に向けた撮影手段により、前記使用者の開始指示動作を撮影して第１の受像画像を出力する。前記第１の判定処理では、前記第１の受像画像に基づき、判定手段により、前記開始指示動作の内容を判定して第１の判定結果を出力する。前記第１の投影処理では、前記追尾結果に応答して投影方向を前記使用者の方向に向けた投影手段により、前記第１の判定結果に基づき、操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像を、前記使用者の近傍の投影面に投影する。前記第２の撮影処理では、前記撮影手段により、前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力する。前記第２の判定処理では、前記第２の受像画像に基づき、前記判定手段により、前記メニュー画像内での前記使用者の選択指示箇所を判定して第２の判定結果を出力する。

前記第２の投影処理では、前記第２の判定結果に基づき、前記投影手段により、前記メニュー画像内の前記選択指示箇所に対応する前記被制御機器の機能を選択するための機能選択画像を前記投影面に投影する。前記第３の撮影処理では、前記撮影手段により、前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する。前記第３の判定処理では、前記第３の受像画像に基づき、前記判定手段により、前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する。更に、前記発信処理では、前記第３の判定結果に基づき、発信手段から、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信して所定の動作を行わせる。

本発明の他の遠隔制御方法では、記憶処理、第１の撮影処理、第１の判定処理、第１の投影処理、第２の撮影処理、第２の判定処理、第２の投影処理、第３の撮影処理、第３の判定処理、及び、発信処理を行う。

前記記憶処理では、操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像のデータ、及び前記被制御機器の機能を選択するための機能選択画像のデータを、制御手段により予め記憶手段に記憶しておく。前記第１の撮影処理では、使用者の動きを追尾する追尾手段の追尾結果に応答して、撮影方向を前記使用者に向けた撮影手段により、前記使用者の開始指示動作を撮影して第１の受像画像を出力する。前記第１の判定処理では、前記第１の受像画像に基づき、判定手段により、前記開始指示動作の内容を判定して第１の判定結果を出力する。前記第１の投影処理では、前記記憶されたメニュー画面のデータを前記制御手段により読み出し、前記追尾結果に応答して投影方向を前記使用者の方向に向けた投影手段により、前記第１の判定結果に基づき、前記読み出されたメニュー画像を前記使用者の近傍の投影面に投影する。前記第２の撮影処理では、前記撮影手段により、前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力する。

前記第２の判定処理では、前記第２の受像画像に基づき、前記判定手段により、前記メニュー画像内での前記使用者の選択指示箇所を判定して第２の判定結果を出力する。前記第２の投影処理では、前記記憶された機能選択画面のデータを前記制御手段により読み出し、前記第２の判定結果に基づき、前記投影手段により、前記メニュー画像内の前記選択指示箇所に対応する前記読み出された機能選択画像を前記投影面に投影する。前記第３の撮影処理では、前記撮影手段により、前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する。前記第３の判定処理では、前記第３の受像画像に基づき、前記判定手段により、前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する。更に、前記発信処理では、前記第３の判定結果に基づき、発信手段から、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信して所定の動作を行わせる。

本発明のリモコン装置では、使用者の動きを追尾して追尾結果を出力する追尾手段と、撮影手段と、判定手段と、投影手段と、発信手段とを備えている。

前記撮影手段は、前記追尾結果に応答して撮影方向を前記使用者に向け、前記使用者の開始指示動作を撮影して第１の受像画像を出力し、操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力し、前記メニュー画像内での前記使用者の選択指示箇所に対応する前記被制御機器の機能を選択するための機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力するものである。前記判定手段は、前記第１の受像画像に基づいて前記開始指示動作の内容を判定して第１の判定結果を出力し、前記第２の受像画像に基づいて前記メニュー画像内での前記選択指示箇所を判定して第２の判定結果を出力し、前記第３の受像画像に基づいて前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力するものである。

前記投影手段は、前記追尾結果に応答して投影方向を前記使用者の方向に向け、前記第１の判定結果に基づいて前記メニュー画像を前記使用者の近傍の投影面に投影し、前記第２の判定結果に基づいて前記機能選択画像を前記投影面に投影するものである。更に、前記発信手段は、前記第３の判定結果に基づいて、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信するものである。

本発明の他のリモコン装置では、操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像のデータ、及び前記被制御機器の機能を選択するための機能選択画像のデータを記憶する記憶手段と、使用者の動きを追尾して追尾結果を出力する追尾手段と、撮影手段と、判定手段と、投影手段と、発信手段とを備えている。

前記撮影手段は、前記追尾結果に応答して撮影方向を前記使用者に向け、前記使用者の開始指示動作を撮影して第１の受像画像を出力し、前記記憶手段から読み出された前記メニュー画面のデータにおける前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力し、前記記憶手段から読み出された前記機能選択画像のデータにおいて前記メニュー画像内での前記使用者の選択指示箇所に対応する前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力するものである。前記判定手段は、前記第１の受像画像に基づいて前記開始指示動作の内容を判定して第１の判定結果を出力し、前記第２の受像画像に基づいて前記メニュー画像内での前記選択指示箇所を判定して第２の判定結果を出力し、前記第３の受像画像に基づいて前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力するものである。

前記投影手段は、前記追尾結果に応答して投影方向を前記使用者の方向に向け、前記第１の判定結果に基づいて前記メニュー画像を前記使用者の近傍の投影面に投影し、前記第２の判定結果に基づいて前記機能選択画像を前記投影面に投影するものである。更に、前記発信手段は、前記第３の判定結果に基づいて、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信するものである。

本発明によれば、各被制御機器に対応したリモコン端末を側に置いておく必要がなくなり、複数のリモコン端末を持ち替える必要がないという効果が生じ、又、複雑なプッシュボタンを押す必要がないという効果が生じる。更に、これらの効果は、制御対象となる被制御機器の数がどれだけ増えても、同様に発現させることができる。

又、本発明によれば、規格が統一されていない異なる製造メーカによる被制御機器であっても、或いは、ネットワーク対応仕様でない従来型の被制御機器であっても、すべて１個の被制御機器リモコン装置に、利用者が簡単に登録することができる。

更に、本発明によれば、被制御機器リモコン装置をインターネット等に接続することにより、各被制御機器に適した情報を、各被制御機器の側の任意の場所に直接投影表示することができる。即ち、被制御機器リモコン装置には、情報の受信機能のみの付加で済み、従来のセットトップボックスを用いたネットワークシステムで問題となる、セットトップボックスへの情報の受信と送信機能の付加並びに各被制御機器への情報の受信機能の付加という問題が解消できる。従って、機構が簡単になり、有線配線等の敷設が不要であり、操作信号として例えば赤外線を使用すれば、人体への悪影響を完全に否定できていないマイクロ波が飛び交うこともない。又、情報の投影の大きさは、拡大縮小が可能であり、使用者にとって最も見易い大きさが選択できる。

本発明の最良の形態の遠隔制御方法では、第１の撮影処理、第１の判定処理、第１の投影処理、第２の撮影処理、第２の判定処理、第２の投影処理、第３の撮影処理、第３の判定処理、及び、発信処理を行う。

先ず、前記第１の撮影処理において、使用者の動きを追尾する追尾手段の追尾結果に応答して、撮影方向を前記使用者に向けた撮影手段（例えば、ビデオカメラ等）により、前記使用者の開始指示動作を撮影して第１の受像画像を出力する。前記第１の判定処理において、前記第１の受像画像に基づき、判定手段により、前記開始指示動作の内容を判定して第１の判定結果を出力する。前記第１の投影処理において、前記追尾結果に応答して投影方向を前記使用者の方向に向けた投影手段（例えば、画像プロジェクタ等）により、前記第１の判定結果に基づき、操作信号（例えば、電波、超音波、赤外線等）の受信により所定の動作を行う被制御機器を選択するためのメニュー画像を、前記使用者の近傍の投影面に投影する。

前記第２の撮影処理において、前記撮影手段により、前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力する。前記第２の判定処理において、前記第２の受像画像に基づき、前記判定手段により、前記メニュー画像内での前記使用者の選択指示箇所を判定して第２の判定結果を出力する。前記第２の投影処理において、前記第２の判定結果に基づき、前記投影手段により、前記メニュー画像内の前記選択指示箇所に対応する前記被制御機器の機能を選択するための機能選択画像を前記投影面に投影する。

前記第３の撮影処理において、前記撮影手段により、前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する。前記第３の判定処理において、前記第３の受像画像に基づき、前記判定手段により、前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する。その後、前記発信処理において、前記第３の判定結果に基づき、発信手段から、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信して所定の動作を行わせる。

（実施例１の外観）
図２は、本発明の実施例１を示すリモコン装置の概略の外観図である。

このリモコン装置１は、例えば部屋の天井等に取り付けられる台座２を有している。台座２には、サーボモータ３により回転する回転軸４が取り付けられ、この回転軸４に電子部品収納用の第１回転体５が装着され、更にこの下に電子部品収納用の第２回転体６が装着されている。第１回転体５及び第２回転体６は、室内を見渡せる位置に配置され、回転軸４により、例えば、左右に±１８０°の角度でそれぞれ独立に往復回転する構造になっている。第１回転体５の側面には、発信手段（例えば、赤外発光ダイオード、赤外レーザダイオード等の赤外発光素子）７が取り付けられている。第２回転体６の側面には、投影手段（例えば、画像プロジェクタ）のズームレンズ８と、撮影手段（例えば、ビデオカメラの１つである電荷結合素子（以下「ＣＣＤ」という。）カメラ）のズームレンズ９と、受信手段（例えば、赤外フォトダイオード等の赤外受光素子）１０とが取り付けられている。これらの第１回転体５及び第２回転体６は、電気配線１１を介して、装置制御パネル１２に接続されている。装置制御パネル１２は、電子部品回路等を収納するものであり、室内又は室外に設置されている。

図３は、図２のリモコン装置１の設置例を示す概略の斜視図である。
図２のリモコン装置１の台座２は、例えば、部屋２０の天井２０ａに取り付けられる。部屋２０の床２０ｃ上には被制御機器（例えば、テレビ受像機２１）が設置され、更に、部屋２０の壁２０ｂに他の被制御機器（例えば、空調機２２）が取り付けられている。テレビ受像機２１には受信手段（例えば、赤外受光部）２１ａが設けられ、テレビ用リモコン端末から送信された操作信号（例えば、テレビ制御用赤外線）をその赤外受光部２１ａにより受光して電源のオン／オフ、チャンネル切り替え等が遠隔制御されるようになっている。同様に、空調機２２にも受信手段（例えば、赤外受光部）２２ａが設けられ、空調機用リモコン端末から発信された操作信号（例えば、空調機制御用赤外線）をその赤外受光部２２ａにより受光して電源のオン／オフ、運転モード切り替え等が遠隔制御されるようになっている。

本実施例１の特徴は、各リモコン端末により遠隔制御されるテレビ受像機２１及び空調機２２を、リモコン端末を使用しないで、共通のリモコン装置１により遠隔制御することである。そのため、予め記憶処理により、各リモコン端末の操作面とこの操作面上における各操作ボタン機能とをリモコン装置１に記憶すると共に、被制御対象となるテレビ受像機２１及び空調機２２の位置をリモコン装置１に登録しておく。

そして使用時において、使用者２３をリモコン装置１のズームレンズ９を通してＣＣＤカメラで撮影し、その使用者２３の開始指示動作や選択指示動作を自動的に判定し、メニュー画面を、画像プロジェクタのズームレンズ８を通して使用者２３の近傍の投影面（例えば、壁）２０ｂへ投影する。このメニュー画面からなる投影画像２４に対して、使用者２３が所望の被制御機器（例えば、テレビ受像機２１）を選択指示すると、この指示をズームレンズ９を通してＣＣＤカメラで撮影し、指示内容を自動的に判定し、テレビ制御用リモコン端末の操作面を、プロジェクタのズームレンズ８を通して壁２０ｂへ投影する。この操作面からなる投影画像２４上の操作ボタン（例えば、動作開始ボタン）を使用者２３が選択指示すると、この指示をズームレンズ９を通してＣＣＤカメラで撮影し、指示内容を自動的に判定する。この判定結果に基づき、赤外発光素子７から動作開始の操作信号（例えば、テレビ制御用赤外光）ｃ１が発信され、これがテレビ受像機２１の赤外受光部２１ａにより受光され、テレビ受像機２１が動作を開始する。

又、投影画像２４上に空調機制御用リモコン端末の操作面が映し出されている場合、使用者２３が操作ボタン（例えば、動作開始ボタン）を選択指示すると、この指示に基づき、赤外発光素子７から動作開始の操作信号（例えば、空調機制御用赤外光）ｃ２が発信され、これが空調機２２の赤外受光部２２ａにより受光され、空調機２２が動作を開始するようになっている。

（実施例１の回路構成）
図１は、本発明の実施例１を示す図２のリモコン装置１の概略の回路構成図である。

このリモコン装置１は、装置全体を制御する制御部３０と、この制御部３０によりアクセス（リード／ライト）されるメモリ３６と、赤外光発光部４０と、画像投影部５０と、画像受像・処理部６０と、赤外光受光部７０とにより構成され、これらの制御部３０、赤外光発光部４０、画像投影部５０、画像受像・処理部６０、及び赤外光受光部７０が、マルチバスライン３７により相互に接続されている。

制御部３０は、装置制御パネル１２内に収容され、記憶手段（例えば、高速記憶装置）３１、制御手段（例えば、中央処理装置（以下「ＣＰＵ」という。））３２、回転駆動制御回路３３、及び通信手段（例えば、通信制御回路）３４により構成され、これらがマルチバスライン３７に接続されている。ＣＰＵ３２には、装置制御パネル１２内に収容されたメモリ３６が接続され、更に、通信制御回路３４に、インターネット等の通信回線３５が接続されている。

高速記憶装置３１は、例えば、メニュー画像と、画像受像・処理部６０中の画像受像部から取り込んだ各被制御機器の機能選択画像である例えばリモコン端末表面画像と、この機能選択画像内の各選択ボタン画像に対応した赤外光照射パルス信号の情報と、部屋２０内の被制御機器の位置等とを、データベースとして記憶する不揮発性記憶装置により構成されている。ＣＰＵ３２は、高速記憶装置３１をアクセスして装置全体の処理順序をマルチバスライン３７を通してプログラム制御するものである。このＣＰＵ３２に接続されたメモリ３６は、ＣＰＵ３２で各種の制御を行う際に、処理待ちの信号を一時待機させるためのものであり、マルチバスライン３７を通して、高速記憶装置３１を使用するよりも高速のリード／ライトが要求され、又、一時待機の場合のように、敢えて高速記憶装置３１に記憶させる必要がない場合に用いられる。

回転駆動制御回路３３は、ＣＰＵ３２の制御により、サーボモータ３により回転駆動される回転軸４を介して第１回転体５及び第２回転体６の回転角度を制御する回路である。この回転駆動制御回路３３により、例えば、使用者２３を追尾する際には、画像受像・処理部６０から得られる使用者２３の移動に関する信号に基づいて、ＣＰＵ３２が回転角度を算出し、この回転角度だけ第２回転体６を回転するようにサーボモータ３を制御する。又、赤外光発光部４０からの赤外光によるパルス信号を、被制御機器に向けて照射する際には、予め高速記憶装置３１にデータベースとして記憶させてある被制御機器の位置に対応した角度と現在角度との差が、ＣＰＵ３２から指示され、その角度差だけ第１回転体５が回転するようにサーボモータ３を制御する。

通信制御回路３４は、インターネットや屋内ローカル・エリア・ネットワーク（以下「ＬＡＮ」という。）等の通信回線３５に対する通信を制御する回路であり、例えば、遠隔地や他の部屋等で、定期的にｌｏｇファイルを閲覧することにより、本実施例１のリモコン装置１が行った被制御機器に対する制御を知ることができる。これにより、例えば、被制御機器のスイッチの切り忘れが判明した場合に、遠隔地や他の部屋等から、ＣＰＵ３２を作動させて、その被制御機器に対して赤外光発光部４０からスイッチオフのための赤外光パルス信号を発信することにより、その被制御機器のスイッチを切ることができる。

赤外光発光部４０は、第１回転体５の側面に取り付けられた赤外発光素子７と、装置制御パネル１２内に収容され、その赤外発光素子７に与えるパルスを発生するパルス発生回路４１とにより構成され、このパルス発生回路４１がマルチバスライン３７に接続されている。この赤外光受光部４０では、画像投影部５０から投影された機能選択画像に対して、使用者２３が指示した機能に対応したパルス信号に関する情報を、ＣＰＵ３２の指示に従ってパルス発生回路４１に送り、赤外発光素子７から赤外光パルス信号を、対応する被制御機器に向けて発信する。

画像投影部５０は、第２回転体６の側面に取り付けられたズームレンズ８と、第２回転体６内に収容され、そのズームレンズ８へ投影像を入射するプロジェクタ５１と、装置制御パネル１２内に収容され、そのプロジェクタ５１をマルチバスライン３７に接続するためのプロジェクタインタフェース５２とにより構成されている。この画像投影部５０では、プロジェクタインタフェース５２を介して受け取ったＣＰＵ３２の指示に従い、高速記憶装置３１にデータベースとして記憶させてあるメニュー画像又は機能選択画像をプロジェクタ５１からズームレンズ８を通して投影する。プロジェクタ５１は、第２回転体６内に収容されており、この第２回転体６内に設けられたＣＣＤカメラ６１、及び第２回転体６の側面に取り付けられた赤外受光素子１０と一体を成して回転する。

画像受像・処理部６０は、第２回転体６の側面に取り付けられたズームレンズ９と、第２回転体６内に収容され、そのズームレンズ９を通して使用者２３を撮影するＣＣＤカメラ６１と、装置制御パネル１２内に収容され、そのＣＣＤカメラ６１で撮影した画像の処理を行う画像処理回路６２とにより構成され、この画像処理回路６２がマルチバスライン３７に接続されている。

赤外光受光部７０は、第２回転体６の側面に取り付けられた赤外受光素子１０と、第２回転体６内に収容され、その赤外受光素子１０の出力パルスを増幅する増幅器（以下「アンプ」という。）７１と、装置制御パネル１２内に収容され、そのアンプ７１で増幅されたパルスを解析するパルス解析回路７２とにより構成され、このパルス解析回路７２がマルチバスライン３７に接続されている。各被制御機器に対応してそれぞれ独立したリモコン端末があり、更に、各リモコン端末には、多くの機能に対応した選択ボタンがある。この選択ボタン毎に、送信される赤外光パルス信号が異なる。赤外光受光部７０において、赤外受光素子１０により、各リモコン端末の各選択ボタンからの赤外光パルス信号を受光し、この赤外受光素子１０から出力される光電流をアンプ７１で増幅した後、これをパルス解析回路７２によりパルス解析を行い、ＣＰＵ３２の指示に従って、そのパルス信号に関する情報を高速記憶装置３１に記憶させるようになっている。

特に、本実施例１の画像受像・処理部６０では、以下のような追尾手段及び判定手段としての機能を有している。

画像受像・処理部６０は、使用者２３の動きを追尾し（追尾手段としての機能）、或いは、画像投影部５０から投影された画像に対して使用者２３が何を指示しているかを判定する（判定手段としての機能）。

使用者２３の動きを追尾する際には、例えば、時間的に隣接する画像における画素間の差を取ることにより、変化する画素部分の水平方向の中間点が、常に画像の中央に来るように、ＣＣＤカメラ６１を回転する。変化する画素がなくなれば（静止状態）、ＣＣＤカメラ６１の回転を止め、この位置で待機させる。

本実施例１のリモコン装置１では、ＣＣＤカメラ６１が使用者２３の動きを常に追尾している。使用者２３の動きを追尾する方法には、例えば、次のような２通りの方法（ｉ）、（ｉｉ）がある。

（ｉ） 追尾方法１
図４（ａ）〜（ｃ）は、図１のリモコン装置１の追尾方法１を詳細に示す受像画像図である。

ＣＣＤカメラ６１が、ある一定の時間間隔で、使用者２３の画像を取り込む。そして、画像処理回路６２及びＣＰＵ３２の処理により、画素毎に、変化している部分を任意に２画素抽出し、この２つの画素間の中間にＣＣＤカメラ６１が向くように角度を調整する。例えば、或る時刻Ｔに使用者２３の画像２３ａ−１が取り込まれ（図４（ａ））、それから一定の時刻ｔ後の時刻（Ｔ＋ｔ）に（（図４（ｂ））、使用者２３の画像２３ａ−２が取り込まれた場合について説明する。

画素毎に変化している部分を抽出すると（図４（ｃ））、Ａ，Ｂ，Ｃ，Ｄ，Ｅで囲まれた領域２３ａ−３の画素が、時刻Ｔと時刻（Ｔ＋ｔ）の間で変化している。従って、画素間の差を、受像画像２３ａ−１，２３ａ−２の上側の行から順に抽出していくと、変化した画素として、先ずＡが抽出でき、続いてＢが抽出でき、その行の最後にＣが抽出できる。この場合に、ＣＣＤカメラ６１が向く角度は、画素ＡとＢの中間でも、或いは画素ＡとＣの中間でもよい。又は、画素間の差を、受像画像２３ａ−１，２３ａ−２の下側の行から順に抽出していき、例えば、画素ＤとＥの中間でもよい。一旦、変化している部分を任意に２画素抽出できたら、その後の抽出はすべて中止し、ＣＣＤカメラ６１を２画素の中点まで回転させ、この位置で、次の画像を受像する。これにより、画素間の比較をして、変化している画素の抽出をする時間が大幅に短縮できる。以上を繰り返し行う。変化している画素を任意の位置で最初に抽出できた２画素を基準にして、即座にＣＣＤカメラ６１をその２画素の中点まで回転させることを繰り返すことにより、極めて迅速な追尾ができる。そして、最終的に、追尾している使用者２３がドアから部屋２０を出ていけば、変化する画素がなくなるため、ＣＣＤカメラ６１は、そのドアを向いたままで待機することになり、以後、そのドアから使用者２３が入ってくれば、再び画素が変化し始め、追尾を再開する。

（ｉｉ） 追尾方法２
使用者２３が、赤外光を照射する携帯型端末を用いて、必要なときにリモコン装置１に向けて照射する。すると、リモコン装置１のＣＣＤカメラ６１が、赤外光が照射された方角に回転する。この場合、赤外光を照射する携帯型端末は、赤外光を照射するボタン１個のみでよく、通常の被制御機器付属の専用端末のようにチャンネルや音量等のボタンが必要ではなく、著しく小型化できる。例えば、ペン型やペンダント型にすることもできる。

次に、本実施例１の画像受像・処理部６０において、画像投影部５０から投影されたメニュー画像や機能選択画像に対して、使用者２３がどのメニュー又はどの機能を選択指示しているかについての判定方法を説明する。

使用者２３がどのメニュー又はどの機能を選択指示しているかについて判定する際には、例えば、画像の比較照合を行う。即ち、高速記憶装置３１にデータベースとして記憶させてある、使用者２３が選択指示する前のメニュー画像又は機能選択画像と、ＣＣＤカメラ６１により受像された、使用者２３が選択指示しているメニュー画像又は機能選択画像とを、それぞれ比較照合することにより、画素間の差を取り、使用者２３の指がメニュー画像又は機能選択画像内で選択指示している箇所を特定し、この特定箇所が意味するメニューや機能の情報をＣＰＵ３２に送る。

ＣＣＤカメラ６１のズームレンズ９は、画像投影部５０におけるプロジェクタ５１のズームレンズ８と連動することができ、又、プロジェクタ５１がメニュー画像又は機能選択画像を投影している際には、ＣＣＤカメラ６１は、常にプロジェクタ５１と一体又は決められた相対位置に持ってくることができるので、プロジェクタ５１の投影画像２４の大きさに関する情報を織り込んだ形で受像することができる。これにより、画像処理において、画像切り出し処理の段階を省略でき、画像処理を高速化できる。

図５は、図１中のＣＣＤカメラ６１及び画像処理回路６２を示す概略の回路構成図である。

画像処理回路６２は、例えば、ＣＣＤカメラ６１に接続されたカメラインタフェース６２ａと、マルチバスライン３７に接続された処理回路本体６２ｂと、マルチバスライン３７に接続された画像メモリ６２ｃとにより構成され、これらのカメラインタフェース６２ａ、処理回路本体６２ｂ、及び画像メモリ６２ｃが、高速画像バスライン６２ｄにより相互に接続されている。処理回路本体６２ｂは、例えば、２値化処理回路６２ｂ−１、及び比較照合処理回路６２ｂ−２により構成されている。

この画像処理回路６２では、以下の（ａ）〜（ｊ）のような画像処理を行う機能を有している。

（ａ） 使用者２３の最初の開始指示動作（手を挙げる等）がＣＣＤカメラ６１で受像される。

（ｂ） 受像した画像信号がカメラインタフェース６２ａに入力され、更に、処理回路本体６２ｂにおいて、使用者２３の最初の開始指示動作が確認されれば、ＣＰＵ３２からの指示で、既にデータベースとして持っているメニュー画像データ並びにこの２値化処理後の画像データが、高速記憶装置３１から画像メモリ６２ｃへ転送される。同時に、プロジェクタインタフェース５２を介して、プロジェクタ５１からメニュー画像を投影する。

（ｃ） 使用者２３が、メニュー画像内で、目的の被制御機器を選択指示する（指で指し示す）。

（ｄ） ＣＣＤカメラ６１から受像した画像信号に対して、２値化処理回路６２ｂ−１による２値化処理の前処理が行われる。

（ｅ） 得られた前処理画像は、比較照合処理回路６２ｂ−２により、既に画像メモリ６２ｃに転送されている元のメニュー画像の２値化処理後の画像データと比較照合される。この処理は、高速画像バスライン６２ｄを通して行われる。

（ｆ） 比較照合処理回路６２ｂ−２での比較照合により、画素間の差を取ることにより、使用者２３の指の先端が画像内のどの部分を指示しているかを判定する。

（ｇ） 使用者２３の指の先端が指示している部分がどの被制御機器に対応しているかを、既に画像メモリ６２ｃへ転送されているデータベースから判定する。

（ｈ） 赤外光発光部４０がその被制御機器の設置方向（これは高速記憶装置３１にデータベースとして記憶されている）に回転し、その被制御機器に対応した赤外光パルス信号が、赤外発光素子７から発信される。

（ｉ） 次に、機能選択画像が投影される。
（ｊ） 以下、（ｃ）〜（ｈ）と同様である。但し、赤外発光素子７は既に対応する被制御機器の方向を向いているので、回転はもはや不要である。

（本実施例１の遠隔制御方法）
本実施例１では、以下のような、（１）リモコン端末の登録処理（記憶処理）、（２）被制御機器の記憶処理（登録処理）、及び、（３）リモコン装置１の遠隔制御処理、が行われる。

（１） リモコン端末の登録処理（記憶処理）
図６は、リモコン端末の登録処理手順を示すフローチャートである。

使用者２３がリモコン端末を登録するための最初の指示動作を行うと（ステップＳ１）、これがリモコン装置１のズームレンズ９を通してＣＣＤカメラ６１で撮影（画像受像）される（ステップＳ２）。画像処理回路６２では、撮影された画像を処理し、使用者２３からの「メニュー表示の要求の有無」を判定し（ステップＳ３）、この判定結果が「要求無し」の時には、登録処理を終了する（ステップＳ１２）。判定結果が「要求有り」の時には、プロジェクタ５１からズームレンズ８を通して、メニュー画像２４−１からなる投影画像２４が、使用者２３の近傍の例えば壁２０ｂに投影される（ステップＳ４）。

使用者２３がメニュー画像２４−１内で「被制御機器の登録」を指示すると、これがズームレンズ９を通してＣＣＤカメラ６１で撮影（画像受像）される（ステップＳ５）。使用者２３が「被制御機器の登録」画面内で機器名を選択指示すると、これがズームレンズ９を通してＣＣＤカメラ６１で撮影（画像受像）され、プロジェクタ５１からズームレンズ８を通して被制御機器名の一覧画像が投影される。使用者２３が一覧画像内で、目的とする被制御機器名を選択指示すると、これがＣＣＤカメラ６１で受像され、プロジェクタ５１からズームレンズ８を通して、リモコン端末操作「面」の受像に関する画像が投影される。同時に、リモコン端末をＣＣＤカメラ６１に向けて示すべき小領域も、例えば、長方形模様で投影される。

使用者２３が投影画像２４内で、長方形模様の箇所に実際のリモコン端末操作「面」を保持しながら、「登録」を選択指示する。その結果、リモコン端末操作「面」がＣＣＤカメラ６１で受像され（ステップＳ６）、これが画像処理回路６２により画像処理された後、高速記憶装置に記憶される（ステップＳ７）。記憶されたリモコン端末操作「画像」（即ち、機能選択画像２４−２）は、プロジェクタ５１からズームレンズ８を通して投影される（ステップＳ８）。

投影された機能選択画像２４−２上において、使用者２３が、必要な機能を１つずつ指で指示し、その都度、実際のリモコン端末からその機能ボタンを押すことにより、その機能に対応した赤外光パルス信号が、リモコン装置１の赤外受光素子１０に向けて発信される。赤外受光素子１０により受光された赤外光パルス信号（ステップＳ９）は、アンプ７１で増幅された後、このパルス信号がパルス解析回路７２で解析され、データベースとして高速記憶装置３１に記憶される。プロジェクタ５１からズームレンズ８を通して投影された機能選択画像２４−２上のどのボタンが指で指示されたかは、ＣＣＤカメラ６１により受像され（ステップＳ９）、画像処理回路６２により画像処理された後、高速記憶装置３１に記憶される。

その結果、ステップＳ７において高速記憶装置３１に記憶されたリモコン端末操作「面」の画像と合わせて、機能選択画像２４−２上のボタンと赤外光パルス信号との対応関係が、データベースとして高速記憶装置３１に記憶される（ステップＳ１０）。投影された「被制御機器の登録」画像内で使用者２３が終了を指示すると、これがＣＣＤカメラ６１で受像され（ステップＳ１１）、登録処理が終了する（ステップＳ１２）。

図７〜図９は、図６の画像処理（メニュー画像２４−１内の一部）を示す図であり、その内、図７（ａ）、（ｂ）、図８（ａ）、（ｂ）は投影画像２４を示す図、及び図９（ａ）、（ｂ）は受像画像６１ａを示す図である。

これらの図７〜図９を参照しつつ、図６のステップＳ６における処理『プロジェクタ５１からズームレンズ８を通して、リモコン端末操作「面」の受像に関する画像が投影される。同時に、リモコン端末をＣＣＤカメラ６１に向けて示すべき小領域も、例えば、長方形模様で投影される。』について、詳細に説明する。

例えば、メニュー画像２４−１の投影画像２４が図７（ａ）、（ｂ）のような表示になっている場合について説明する。プロジェクタ５１の画素数は決まっているので、投影画像２４の大きさが図７（ａ）のように拡大、又は図７（ｂ）のように縮小（変化）すると、個々の画素の大きさが変化する。

従って、投影画像２４の大きさに関わらず、同じメニューボタン画像内に含まれる画素は、全く同じになる。例えば、図８（ａ）、（ｂ）において、テレビ受像機のボタン画像２４ａに含まれる画素は、投影画像２４の大きさに関わらず、上から５行目又は６行目の、左から２〜９列目の画素で構成されている。

従って、使用者２３がテレビ受像機のボタン画像２４ａを指で指し示したときは、投影画像２４の大きさに関係なく、同じ範囲内の画素を指し示していることになる。

同様のことが、ＣＣＤカメラ６１についても言える。ＣＣＤカメラ６１の画素数も、受像画像６１ａの大きさに関わらず変化せず、個々の画素の大きさのみが変化する。ＣＣＤカメラ６１は、プロジェクタ５１と一体を成して回転するか、或いは分離していても、画像受像・処理の際には、その相対位置関係が一定であることから、常にプロジェクタ５１の投影画像２４の大きさに関する情報を織り込んだ形で受像することができる。即ち、ＣＣＤカメラ６１の受像画像６１ａの大きさを、常に、プロジェクタ５１の投影画像２４の大きさと同じにすることができる。その結果、ＣＣＤカメラ６１による受像画像６１ａについても、図９（ａ）、（ｂ）に示すように、指で指し示された部分の画素は、受像画像６１ａの大きさに関係なく、同じ範囲内の画素を指し示していることになる。厳密に言えば、投影画像２４の大きさに関わらず、ＣＣＤカメラ６１内に取り込まれた受像画像６１ａの大きさというものはもはや意味がなく、画素数のみがその後の処理に関係してくる。

以上のことから、画像の大きさに関係なく、各画素の位置と機能との対応関係をデータベースとして持っていれば、指で指し示している画素の位置が分かれば、その位置の画素に対応した機能制御をすればよい。例えば、図９（ａ）、（ｂ）のテレビ受像機のボタン画像２４ａ−１の範囲内の画素を指示していれば、次に、テレビ受像機の操作画面（機能選択画像）をプロジェクタ５１から投影させることになる。

（２） 被制御機器の登録処理（記憶処理）
図１０は、被制御機器の登録処理手順を示すフローチャートである。図１１は、図１の赤外発光素子７における回転の機能選択画像２４−３を示す図である。

被制御機器の設置位置をリモコン装置１に登録する場合、使用者２３が登録のための最初の開始指示動作を行うと（ステップＳ２０）、この画像がズームレンズ９を通してＣＣＤカメラ６１で受像される（ステップＳ２１）。ＣＣＤカメラ６１で受像された画像から、画像処理回路６２によって「メニュー表示の要求有り」か否かが判定され（ステップＳ２２）、要求無しの時には、登録処理を終了し（ステップＳ２９）、要求有りの時には、プロジェクタ５１からズームレンズ８を通して、使用者２３の近傍の例えば壁２０ｂにメニュー画像２４−１からなる投影画像２４が投影される（ステップＳ２３）。

メニュー画像２４−１内において、使用者２３が指で目的の被制御機器を指示すると、この画像がＣＣＤカメラ６１で受像され（ステップＳ２４）、プロジェクタ５１から、指示された被制御機器に関する機能選択画像２４−２からなる投影画像２４が投影される。機能選択画像２４−２内において、使用者２３が指で「赤外発光素子の回転」を指示すると、この画像がＣＣＤカメラ６１で受像され（ステップＳ２５）、プロジェクタ５１から、図１１に示すような赤外発光素子７の回転に関する機能選択画像２４−３が投影される。

機能選択画像２４−３内において、使用者２３が回転操作の指示（例えば、「右回り」又は「左回り」）を行うと、この画像がＣＣＤカメラ６１で受像され、画像処理回路６２の判定処理に基づく回転駆動制御回路３３の制御により、サーボモータ３及び回転軸４が動作して第１回転体５のみが回転する。使用者２３は目視で、赤外発光素子７が目的の被制御機器に向くまで指示し続けると、赤外発光素子７の向きがその被制御機器に適合する（ステップＳ２６）。

機能選択画像２４−３内において、使用者２３が「登録」を選択指示すると、この画像がＣＣＤカメラ６１で受像され、画像処理回路６２の判定処理とＣＰＵ３２の制御により、赤外発光素子７が目的の被制御機器に向いている回転角度が、高速記憶装置３１に記憶される（ステップＳ２７）。その後、機能選択画像２４−３内において、使用者２３が「終了」を選択指示すると、この画像がＣＣＤカメラ６１で受像され（ステップＳ２８）、登録処理が終了する（ステップＳ２９）。

（３） リモコン装置１の遠隔制御処理
図１２は、図１のリモコン装置１の遠隔制御処理手順を示すフローチャートである。図１３〜図１５は、図１２の処理を示す図である。

使用者２３がリモコン装置１を使用するために手を挙げる等の最初の開始指示動作を行うと（ステップＳ３０）、この画像がズームレンズ９を通してＣＣＤカメラ６１で受像される（第１の撮影処理であるステップＳ３１）。ＣＣＤカメラ６１で受像された画像から、画像処理回路６２によって「メニュー表示の要求有り」か否かが判定され（第１の判定処理であるステップＳ３２）、要求無しの時には、処理を終了し（ステップＳ４１）、要求有りの時には、プロジェクタ５１からズームレンズ８を通して、使用者２３の近傍の例えば壁２０ｂにメニュー画像２４−１からなる投影画像２４が投影される（第１の投影処理であるステップＳ３３、図１２）。

メニュー画像２４−１内において、使用者２３が指で目的の被制御機器（例えば、テレビ受像機２４ａ−１）を指示すると、この画像がＣＣＤカメラ６１で受像され（第２の撮影処理であるステップＳ３４）、画像処理回路６２により、「被制御機器の選択有り」か否かが判定される（第２の判定処理であるステップＳ３５）。選択無しの時には、処理を終了し（ステップＳ４１）、選択有りの時には、プロジェクタ５１から、選択指示されたテレビ受像機２１に関する機能選択画像２４−２からなる投影画像２４が投影される（第２の投影処理であるステップＳ３６、図１４）。機能選択画像２４−２内において、使用者２３が例えば「チャンネル２」を選択指示すると、この画像がＣＣＤカメラ６１で受像されて（第３の撮影処理であるステップＳ３７）、画像処理回路６２で判定され（第３の判定処理）、パルス発生回路４１により、チャンネル２に対応したパルスが生成される。このパルスにより、チャンネル２を選択するためのテレビ制御用赤外線ｃ１が赤外発光素子７から発信され（発信処理）、これがテレビ受像機２１の赤外受光部２１ａで受信されて２チャンネルテレビ映像が映し出される（ステップＳ３８）。

機能選択画像２４−２内において、使用者２３が例えば「終了」又は「継続」を指示すると（図１５）、この画像がＣＣＤカメラ６１で受像され（ステップＳ３９）、画像処理回路６２により「終了の指示有り」か否かが判定される（ステップＳ４０）。終了の指示無しの時には、ステップＳ３３へ戻り、終了の指示有りの時には、遠隔制御処理を終了する（ステップＳ４１）。

（本実施例１の効果）
本実施例１では、次の（ａ）〜（ｃ）のような効果がある。

（ａ） 各被制御機器に対応したリモコン端末を側に置いておく必要がなくなり、複数のリモコン端末を持ち替える必要がないという効果が生じ、又、複雑なプッシュボタンを押す必要がないという効果が生じる。更に、これらの効果は、被制御機器の数がどれだけ増えても、同様に発現させることができる。

（ｂ） 規格が統一されていない異なる製造メーカによる被制御機器であっても、或いは、ネットワーク対応仕様でない従来型の被制御機器であっても、すべて１台のリモコン装置１に、使用者２３が簡単に登録することができる。

（ｃ） 通信制御回路３４にインターネット等の通信回線３５を接続することにより、各被制御機器に適した情報を、各被制御機器の側の任意の場所に直接投影表示することができる。即ち、リモコン装置１には、情報の受信機能のみの付加で済み、従来のセットトップボックスを用いたネットワークシステムで問題となる、セットトップボックスへの情報の受信と送信機能の付加並びに各被制御機器への情報の受信機能の付加という問題が解消できる。従って、機構が簡単になり、有線配線等の敷設が不要であり、操作信号として赤外線を用いているので、人体への悪影響を完全に否定できていないマイクロ波が飛び交うこともない。又、情報の投影の大きさは、拡大縮小が可能であり、使用者２３にとって最も見易い大きさが選択できる。

（実施例２の外観）
図１６は、本発明の実施例２を示すリモコン装置１Ａの概略の外観図であり、実施例１を示す図２中の要素と共通の要素には共通の符号が付されている。

本実施例２のリモコン装置１Ａでは、実施例１のリモコン装置１にテレビ放送受信機能が付加されている。回転軸４には、第３回転体１３が追加され、この第３回転体１３が第１回転体５及び第２回転体６とは独立して回転する構造になっている。実施例１では、ズームレンズ８及びプロジェクタ５１が第２回転体６に設けられているが、本実施例２では、それを第３回転体１３側へ移し、ズームレンズ８を第３回転体１３の側面に設けると共に、プロジェクタ５１を第３回転体１３内に収容している。

（実施例２の回路構成）
図１７は、図１６のリモコン装置１Ａを示す回路構成図であり、実施例１を示す図１中の要素と共通の要素には共通の符号が付されている。

本実施例２のリモコン装置１Ａでは、実施例１のリモコン装置１にテレビ放送受信回路８０及びテレビアンテナ８１が追加され、そのテレビ放送受信回路８０がマルチバスライン３７に接続され、ＣＰＵ３２により制御されるようになっている。テレビ放送受信回路８０は、図１６の装置制御パネル１２内に収容され、画像投影部５０と共に映像受信手段を構成している。このテレビ放送受信回路８０には、図示しないが、音声信号を受信して音声を出力する音声出力手段（例えば、スピーカ）が接続されている。

画像投影部５０は、ズームレンズ８、プロジェクタ５１、及びプロジェクタインタフェース５２により構成され、ＣＰＵ３２の指示に従い、高速記憶装置３１にデータベースとして記憶させてあるメニュー画像又は機能選択画像を投影する機能を有している。プロジェクタ８は、実施例１では、単なるメニュー画像や機能選択画像を表示するために使用しているが、本実施例２では、プロジェクタテレビとして使用するため、ＣＣＤカメラ６１及び赤外受光素子１０とは独立に回転するよう、回転駆動制御回路３３により制御される。

（実施例２の作用・効果）
本実施例２のリモコン装置１Ａでは、実施例１のリモコン装置１とほぼ同様の作用を行うが、テレビ放送受信回路８０が設けられているので、プロジェクタ５１からズームレンズ８を通して任意の位置にテレビ映像を投影できる。

なお、本発明は、上記実施例１、２に限定されず、種々の変形が可能である。この変形例としては、例えば、次の（ｉ）〜（iii）のようなものがある。

（ｉ） 遠隔制御用の操作信号として赤外線を用いているが、電波、超音波等の他の信号を用いてもよい。
（ii） テレビ放送受信回路８０は、例えば、テレビ受像機により構成してもよい。
（iii） リモコン装置１，１Ａの外観構造、回路構成、遠隔制御処理等は、図示のものに限定されず、他の要素の付加、或いは他の要素への変更等が可能である。

本発明の実施例１を示す図２のリモコン装置の概略の回路構成図である。 本発明の実施例１を示すリモコン装置の概略の外観図である。 図２のリモコン装置の設置例を示す概略の斜視図である。 図１のリモコン装置の追尾方法１を詳細に示す受像画像図である。 図１中のＣＣＤカメラ及び画像処理回路を示す概略の回路構成図である。 リモコン端末の登録処理手順を示すフローチャートである。 図６の画像処理を示す図である。 図６の画像処理を示す図である。 図６の画像処理を示す図である。 被制御機器の登録処理手順を示すフローチャートである。 図１中の赤外発光素子における回転の機能選択画像を示す図である。 図１のリモコン装置の遠隔制御処理手順を示すフローチャートである。 図１２の処理を示す図である。 図１２の処理を示す図である。 図１２の処理を示す図である。 発明の実施例２を示すリモコン装置の概略の外観図である。 本発明の実施例２を示す図１６のリモコン装置の概略の回路構成図である。

符号の説明

１，１Ａ リモコン装置
７ 赤外発光素子
８，９ ズームレンズ
１０ 赤外受光素子
３０ 制御部
３１ 高速記憶装置
３２ ＣＰＵ
３３ 回転駆動制御回路
３４ 通信制御回路
３６ メモリ
４０ 赤外発光部
５０ 画像投影部
５１ プロジェクタ
６０ 画像受像・処理部
６１ ＣＣＤカメラ
７０ 赤外光受光部

Claims (9)

1. 使用者の動きを追尾する追尾手段の追尾結果に応答して、撮影方向を前記使用者に向けた撮影手段により、前記使用者の開始指示動作を撮影して第１の受像画像を出力する第１の撮影処理と、
   前記第１の受像画像に基づき、判定手段により、前記開始指示動作の内容を判定して第１の判定結果を出力する第１の判定処理と、
   前記追尾結果に応答して投影方向を前記使用者の方向に向けた投影手段により、前記第１の判定結果に基づき、操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像を、前記使用者の近傍の投影面に投影する第１の投影処理と、
   前記撮影手段により、前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力する第２の撮影処理と、
   前記第２の受像画像に基づき、前記判定手段により、前記メニュー画像内での前記使用者の選択指示箇所を判定して第２の判定結果を出力する第２の判定処理と、
   前記第２の判定結果に基づき、前記投影手段により、前記メニュー画像内の前記選択指示箇所に対応する前記被制御機器の機能を選択するための機能選択画像を前記投影面に投影する第２の投影処理と、
   前記撮影手段により、前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する第３の撮影処理と、
   前記第３の受像画像に基づき、前記判定手段により、前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する第３の判定処理と、
   前記第３の判定結果に基づき、発信手段から、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信して所定の動作を行わせる発信処理と、
   を有することを特徴とする遠隔制御方法。
2. 操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像のデータ、及び前記被制御機器の機能を選択するための機能選択画像のデータを、制御手段により予め記憶手段に記憶しておく記憶処理と、
   使用者の動きを追尾する追尾手段の追尾結果に応答して、撮影方向を前記使用者に向けた撮影手段により、前記使用者の開始指示動作を撮影して第１の受像画像を出力する第１の撮影処理と、
   前記第１の受像画像に基づき、判定手段により、前記開始指示動作の内容を判定して第１の判定結果を出力する第１の判定処理と、
   前記記憶されたメニュー画面のデータを前記制御手段により読み出し、前記追尾結果に応答して投影方向を前記使用者の方向に向けた投影手段により、前記第１の判定結果に基づき、前記読み出されたメニュー画像を前記使用者の近傍の投影面に投影する第１の投影処理と、
   前記撮影手段により、前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力する第２の撮影処理と、
   前記第２の受像画像に基づき、前記判定手段により、前記メニュー画像内での前記使用者の選択指示箇所を判定して第２の判定結果を出力する第２の判定処理と、
   前記記憶された機能選択画面のデータを前記制御手段により読み出し、前記第２の判定結果に基づき、前記投影手段により、前記メニュー画像内の前記選択指示箇所に対応する前記読み出された機能選択画像を前記投影面に投影する第２の投影処理と、
   前記撮影手段により、前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する第３の撮影処理と、
   前記第３の受像画像に基づき、前記判定手段により、前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する第３の判定処理と、
   前記第３の判定結果に基づき、発信手段から、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信して所定の動作を行わせる発信処理と、
   を有することを特徴とする遠隔制御方法。
3. 使用者の動きを追尾して追尾結果を出力する追尾手段と、
   前記追尾結果に応答して撮影方向を前記使用者に向け、前記使用者の開始指示動作を撮影して第１の受像画像を出力し、操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力し、前記メニュー画像内での前記使用者の選択指示箇所に対応する前記被制御機器の機能を選択するための機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する撮影手段と、
   前記第１の受像画像に基づいて前記開始指示動作の内容を判定して第１の判定結果を出力し、前記第２の受像画像に基づいて前記メニュー画像内での前記選択指示箇所を判定して第２の判定結果を出力し、前記第３の受像画像に基づいて前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する判定手段と、
   前記追尾結果に応答して投影方向を前記使用者の方向に向け、前記第１の判定結果に基づいて前記メニュー画像を前記使用者の近傍の投影面に投影し、前記第２の判定結果に基づいて前記機能選択画像を前記投影面に投影する投影手段と、
   前記第３の判定結果に基づいて、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信する発信手段と、
   を備えたことを特徴とする遠隔制御装置。
4. 操作信号の受信により所定の動作を行う被制御機器を選択するためのメニュー画像のデータ、及び前記被制御機器の機能を選択するための機能選択画像のデータを記憶する記憶手段と、
   使用者の動きを追尾して追尾結果を出力する追尾手段と、
   前記追尾結果に応答して撮影方向を前記使用者に向け、前記使用者の開始指示動作を撮影して第１の受像画像を出力し、前記記憶手段から読み出された前記メニュー画面のデータにおける前記メニュー画像内での前記使用者の選択指示動作を撮影して第２の受像画像を出力し、前記記憶手段から読み出された前記機能選択画像のデータにおいて前記メニュー画像内での前記使用者の選択指示箇所に対応する前記機能選択画像内での前記使用者の選択指示動作を撮影して第３の受像画像を出力する撮影手段と、
   前記第１の受像画像に基づいて前記開始指示動作の内容を判定して第１の判定結果を出力し、前記第２の受像画像に基づいて前記メニュー画像内での前記選択指示箇所を判定して第２の判定結果を出力し、前記第３の受像画像に基づいて前記機能選択画面内での前記使用者の選択指示箇所を判定して第３の判定結果を出力する判定手段と、
   前記追尾結果に応答して投影方向を前記使用者の方向に向け、前記第１の判定結果に基づいて前記メニュー画像を前記使用者の近傍の投影面に投影し、前記第２の判定結果に基づいて前記機能選択画像を前記投影面に投影する投影手段と、
   前記第３の判定結果に基づいて、前記機能選択画面内の前記選択指示箇所に対応する前記操作信号を前記選択された被制御機器へ発信する発信手段と、
   を備えたことを特徴とする遠隔制御装置。
5. 映像信号を受信して前記投影手段により任意の位置へ映像を投影して表示させる映像受信手段と、
   音声信号を受信して音声を出力する音声出力手段と、
   を設けたことを特徴とする請求項３又は４記載の遠隔制御装置。
6. 前記発信手段から発信する前記操作信号は、電波、超音波、又は赤外線であることを特徴とする請求項３〜５のいずれか１項に記載の遠隔制御装置。
7. 前記撮影手段は、ビデオカメラであることを特徴とする請求項３〜６のいずれか１項に記載の遠隔制御装置。
8. 前記投影手段は、画像プロジェクタであることを特徴とする請求項３〜７のいずれか１項に記載の遠隔制御装置。
9. 前記映像受信手段は、テレビジョン受像機であることを特徴とする請求項５〜８のいずれか１項に記載の遠隔制御装置。

Images