JPWO2007013652A1 - 画像表示制御装置、画像表示装置、遠隔操作器、画像表示システム - Google Patents

Abstract

【課題】表示画面から目を離すことなく所望の操作指定部位を容易に選択指定可能とし、遠隔操作時における操作者の利便性を向上する。【解決手段】画像表示制御装置１００は、画像表示装置１の液晶表示部３上に、操作メニューＭＥを表示させるためのメニュー作成部１５４と、遠隔操作器２００から到来する赤外線信号を認識可能な赤外線フィルタ付きカメラ１１０と、この認識結果に基づき、遠隔操作器２００が撮像中において占める位置を特定するリモコン位置特定部１５５と、この特定した遠隔操作器２００の位置を液晶表示部３上に表示させるリモコン位置信号作成部１５６と、液晶表示部３上に表示された操作メニューＭＥのうち操作指定部位を決定するユーザー操作判定部１５２とを有する。

Description

本発明は、表示画面における表示制御を行う画像表示制御装置に係わり、特に、遠隔操作によって表示制御を行う画像表示制御装置、画像表示装置、及び画像表示システム、並びにそれらに用いる遠隔操作器に関する。

元来、離れた場所から例えばテレビ等の画像表示装置の動作を操作するために、携帯型の遠隔操作器（いわゆるリモコン）がよく知られている。遠隔操作時には、例えば画像表示装置の表示画面に、複数の操作指定部位（操作領域）を一覧配置した操作対象図象（操作メニュー）を表示させ、遠隔操作器の操作ボタンを操作することで上記操作対象図象中の複数の操作指定部位のうちひとつを選択指定することで、これに対応した動作（チャンネル切替、音声切替等）を当該画像表示装置にて実行することができる。

また、上記の画像表示装置自体に限られず、テレビ等に接続されて当該テレビ等への映像出力やさらに音楽等コンテンツの再生出力を行う、ビデオデッキ、ＤＶＤプレイヤー／レコーダー、ＣＤプレイヤー／レコーダー、ＭＤプレイヤー／レコーダー等の映像出力装置、コンテンツ再生装置、その他画像表示装置へ映像出力機能を備えた製品（以下適宜、映像出力装置等という）に関しても、上記同様、遠隔操作を行うことができる。すなわち、それら映像出力装置等に対し遠隔操作を行うことで、これに接続された画像表示装置の表示画面に、当該映像出力装置等に関わる複数の操作指定部位（操作領域）を備えた操作対象図象（操作メニュー）を一覧表示させる。そしてそれら複数の操作指定部位のうちひとつを選択指定することで、その選択指定した映像出力装置等の動作（映像再生、予約録画等）を実行することができる。

ところが、上記のように操作指定部位を選択指定する際には、操作者は、まず表示画面を見て現在の選択指定位置（カーソル位置等）から自己の所望する操作指定部位（操作領域）がどちら側の方向に位置するかを確認した後、手元の遠隔操作器に目を移して上記選択指定位置を移動させるべき方向への操作ボタンを押し、さらに表示画面に目を戻して上記遠隔操作器の操作によって選択指定位置が確かに上記所望の操作指定部位へ移動し当該操作指定部位が確かに選択指定されたかどうかを確認し、移動不十分の場合は再び手元の遠隔操作器に目を移して同様の手順を繰り返さなければならない。このように、視線を何度も移しながらの非常に煩雑で面倒な操作が必要となる結果、操作者にとって利便性の低い不便なものとなっていた。

そこで、このような点に対応し、近年、操作者による遠隔操作性の向上を図るために、例えば特許文献１や特許文献２に記載の技術が既に提唱されている。

特許文献１記載の従来技術では、撮影手段としてのカメラと、このカメラで撮影された画像の動きを検出する動き検出器と、この動き検出器で検出した画像の動き及び／又は形状を認識する画像認識器とを有する制御装置が開示されている。操作者が所定のパターンにしたがって指を動かす（＝ジェスチャー）と、カメラで撮影されたその指の動きが動き検出器によって検出され、さらに画像認識器で当該動きや形状の変化が認識されて、被操作機器に対しそのパターンに対応した制御が行われる。これにより、操作者は遠隔操作器を用いることなく、被操作機器に対し所望の操作を行えるようになっている。

特許文献２記載の従来技術では、赤外線リモコンと、イメージセンサと、ジェスチャー同定手段とを有する遠隔制御システムが開示されている。操作者が所定のパターンにしたがって赤外線リモコンを振り回す（＝ジェスチャー）ことにより、イメージセンサを介して取得されたリモコンの動いた方向と加速度とに基づき、ジェスチャー同定手段でそのジェスチャーが同定され、ネットワークを介して被操作機器に対しそのパターンに対応した制御が行われる。これにより、操作者は被操作機器に対し所望の操作を行えるようになっている。

特開２００１−５９７５号公報（段落番号００１３〜００２７、図１〜図９） 特開２００４−１７８４６９号公報（段落番号００１３〜００６３、図１〜図１５）

特許文献１及び特許文献２に記載の従来技術では、例えば、被操作機器を遠隔操作する際、操作者が実行したい操作とこれに対応するジェスチャーとの関連付け（＝どのように指やリモコンを動かしたときにどのような操作が実行されるか）を予め覚えておく必要がある。また覚えていない操作については上記関連付けを別途参照しなければならない。このため、結局、操作者の負担が大きくならざるを得ず、操作者にとって利便性の低い不便なものとなっていた。

なお、上記した赤外線通信や無線通信を介した操作器以外に、被操作器側と有線（ケーブル）等によって接続されて離れたところから操作する操作器（いわゆるペンダント方式）においても、前述したのと同様、例えば視線を何度も移しながらの非常に煩雑で面倒な操作が必要で利便性が低く不便であるという問題があった。

本発明の目的は、操作者は、表示画面から目を離すことなく所望の操作指定部位を容易に選択指定可能とすることで、操作時における操作者の利便性を向上できる画像表示制御装置、画像表示装置、及び画像表示システム、並びにそれらに用いる遠隔操作器を提供することにある。

上記目的を達成するために、請求項１記載の発明は、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

上記目的を達成するために、請求項２１記載の発明は、表示画面と、この表示画面上に、操作対象図象を表示させる図象表示制御手段と、携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

上記目的を達成するために、請求項２２記載の発明は、画像表示操作を行うための携帯型の遠隔操作器であって、通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段と、この光信号生成手段で生成した前記光信号を、当該光信号を前記通常の可視光線と区別して認識可能な第２光線撮像手段；表示画面上に操作対象図象を表示させるための信号を生成する第１手段；前記第２光線撮像手段における前記光信号の認識結果に基づき、前記遠隔操作器の背景の映像中において前記遠隔操作器が前記第２光線撮像手段による撮像中において占める位置を特定し前記表示画面上に表示させるための信号を生成する第２手段；前記特定された前記遠隔操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第３手段；を備えた画像表示制御装置へ送信する光信号送信手段とを有することを特徴とする。

上記目的を達成するために、請求項２３記載の発明は、携帯型の操作器と、この操作器の操作に基づき画像表示を行うための信号を生成する画像表示制御装置とを有する画像表示システムであって、前記画像表示制御装置は、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

上記目的を達成するために、請求項２４記載の発明の画像表示システムは、携帯型の操作器と、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

本発明の一実施形態による画像表示システムのシステム構成図である。 図１に示された遠隔操作器の機能的構成を表す機能ブロック図である。 図１に示された画像表示制御装置の機能的構成を表す機能ブロック図である。 液晶表示部の表示の一例を表す図である。 液晶表示部の表示の一例を表す図である。 液晶表示部の表示の一例を表す図である。 液晶表示部の表示の一例を表す図である。 液晶表示部の表示の一例を表す図である。 操作領域決定をジェスチャーで指示する変形例の画像表示システムにおいて、液晶表示部の表示の一例を表す図である。 図９に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。 赤外線フィルタ付カメラがリモコン指示操作を受け取る変形例の機能的構成を表す機能ブロック図である。 コールドミラーを用いる変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。 位置補正を行う変形例における画像表示制御装置の機能的構成の一例を表す機能ブロック図である。 位置補正の様子を表す説明図である。 位置補正を行う他の変形例における画像表示制御装置の機能的構成の一例を表す機能ブロック図である。 赤外線高感度カメラを用いる変形例における当該赤外線高感度カメラのもつ感度特性の一例を表す特性図である。 図１６に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。 距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。 距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。 距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。 距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。 距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。 画像表示制御装置の機能的構成を表す機能ブロック図である。 切り出し処理部の詳細構成を表す機能ブロック図である。 切り出し処理部全体で実行する制御手順を表すフローチャートである。 ステップＳ５０の詳細手順を表すフローチャートである。 操作者が操作範囲を自ら設定する変形例における切り出し処理部の機能的構成を表す機能ブロック図である。 入力画像における図形の大きさから距離を計算する手法を説明するための説明図である。 障害物回避のために切り出し領域を変更する変形例の概略を説明するための説明図である。 障害物となりうる物をデータベース化して登録しておく手法を説明するための説明図である。 障害物回避のためにメニュー表示領域をずらす変形例の概略を説明するための説明図である。 画像表示制御装置の機能的構成を表す機能ブロック図である。 切り出し処理部及び２次映像合成部の詳細構成を、障害物判定部とともに表す機能ブロック図である。 切り出し処理部、２次映像合成部、及び障害物判定部の全体で実行する制御手順を表すフローチャートである。 障害物越しの操作感を得られるように延長補完する変形例の概略を説明するための説明図である。 画像表示制御装置の機能的構成を表す機能ブロック図である。 補完信号生成部が実行する制御手順を表すフローチャートである。 延長線の引き方を概念的に説明するための説明図である。 障害物越しの操作感を得られるように中間部補完を行う変形例の概略を説明するための説明図である。 蓄積コンテンツの再生位置指定に応用した変形例において、画像表示装置の液晶表示部の表示の一例を表す図である。 図４０に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。 液晶表示部の表示の他の例を表す図である。 ＥＰＧに適用した変形例において、画像表示装置の液晶表示部の表示の一例を表す図である。 図４３に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。 実写画像を省略する変形例において、画像表示装置の液晶表示部の表示の一例を表す図である。 図４５に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。 有線接続の操作器を用いた変形例における画像表示制御装置の機能的構成の一例を表す機能ブロック図である。 操作メニュー等から選択指定できる範囲を制限する変形例の液晶表示部の表示例を表す図である。 すべての操作領域を遠隔操作器の狭い移動範囲で選択可能とした変形例の液晶表示部の表示例を表す図である。

符号の説明

１ 画像表示装置
３ 液晶表示部（表示画面）
１００ 画像表示制御装置
１１０ 赤外線フィルタ付きカメラ（第２光線撮像手段）
１１０Ａ 赤外線高感度カメラ（第２光線撮像手段）
１１０Ａａ 撮像部（第１光線撮像手段）
１１０Ａｂ 映像信号生成部（映像表示信号生成手段）
１１５ 距離検出部（距離検出手段）
１２０ カメラ
１２０ａ 撮像部（第１光線撮像手段）
１２０ｂ 映像信号生成部（映像表示信号生成手段）
１５１ ユーザー指示入力部（指示信号入力手段）
１５２ ユーザー操作判定部(操作部位決定手段)
１５４ メニュー作成部（図象表示信号生成手段)
１５４Ｂ コンテンツ表示作成部（図象表示信号生成手段)
１５５ リモコン位置特定部（位置特定手段）
１５６ リモコン位置信号作成部（位置表示信号生成手段）
１６５ 補完信号生成部（予想位置設定手段）
１８０ 切り出し処理部（抽出処理手段）
１８０Ａ 切り出し処理部（抽出処理手段）
１８０Ｂ 切り出し処理部（抽出処理手段）
１８３ 補完拡大切り出し部（予想位置設定手段）
１９５Ａ ２次映像合成部（図象位置設定手段）
２００ 遠隔操作器
２００Ａ 操作器
２０２ 赤外線駆動部（光信号送信手段）
２０３ 発信器（光信号生成手段）
２０４ パルス変調器（光信号生成手段）
２０６ ＦＭ変調器（光信号生成手段）
ＢＧ 背景
ＣＴ コンテンツ表示（操作対象図象）
ＭＡ 位置表示
ＭＥ 操作メニュー（操作対象図象）

以下、本発明の一実施の形態を図面を参照しつつ説明する。

図１は、本実施形態による画像表示システムのシステム構成図である。図１において、この画像表示システムは、画像表示装置１と、この画像表示装置１において画像表示を行うための信号を生成する画像表示制御装置１００と、この画像表示制御装置１００を遠隔操作するための携帯型の遠隔操作器（リモートコントロール端末）２００とを有している。

画像表示装置１は、例えば液晶テレビジョンであり、テレビジョン本体２の前面に液晶表示部３（表示画面）が設けられている。なお、公知の構成で足りるため詳細な図示及び説明は省略するが、テレビジョン本体２内には、例えば液晶表示部３で映し出すための映像電波を受信する公知のチャンネルチューナや、受信した電波から映像信号や音声信号を復調する復調手段等が設けられている。

遠隔操作器２００は、各種操作キーを備えた操作部２０１と、発光素子として例えば赤外線発光ダイオードを設けた赤外線駆動部（赤外線発光部）２０２とを有している。

図２は、上記遠隔操作器２００の機能的構成を表す機能ブロック図である。この図２及び前述の図１において、遠隔操作器２００は、識別コード（詳細は後述）の搬送波周波数を発振する発振器２０３と、パルス変調器２０４と、遠隔操作器２００全体の動作を制御するＣＰＵ２０５と、上記操作部２０１と、ＦＭ変調器２０６と、送信手段である上記赤外線駆動部２０２と、ＣＰＵ２０５の動作プログラム等が記憶されたＲＯＭ２０７と、ＲＡＭ２０８とを備えている。

上記構成において、ＣＰＵ２０５からの制御信号に基づき、発振器２０３から所定（例えば３８ｋＨｚ）の搬送波周波数が発振され、パルス変調器２０４に出力される。一方ＣＰＵ２０５が、操作部２０１の操作に対応するコマンド（識別コード）をＲＡＭ２０７から読み出し、パルス変調器２０４に供給する。パルス変調器２０４は、上記ＣＰＵ２０５から供給された識別コードで上記発信器２０３からの搬送波周波数をパルス変調し、パルス変調信号をＦＭ変調器２０６に供給する。ＦＭ変調器２０６は、信号をＦＭ変調した後、そのＦＭ変調信号を赤外線駆動部２０２に供給する。赤外線駆動部２０２は、ＦＭ変調器２０６から供給されるＦＭ信号で前述の赤外線発光素子を駆動（点灯制御）し、これによって画像表示制御装置１００へ赤外線指示信号の送信が行われる。

画像表示制御装置１００は、この例ではＤＶＤプレイヤー／レコーダーであり、筐体１０１と、この筐体１０１の前方側に前面パネル１０５を介して設けた操作ユニット１０７とを備えている。操作ユニット１０７の前面には、操作手段としての各種操作ボタン１０８、ダイヤル１０９と、受光口１０６とが設けられている。なお、公知の構成で足りるため詳細な図示及び説明を省略するが、筐体１０１内には、公知のＤＶＤの録画・再生機構１４０（後述の図３参照）やそれらＤＶＤの収納部等が設けられている。

図３は、上記画像表示制御装置１００の機能的構成を表す機能ブロック図である。図３において、画像表示制御装置１００は、受信手段である赤外線受光部１０１と、ＦＭ復調器１０２と、所定（例えば３８ｋＨｚ）の搬送波周波数を抽出するＢＰＦ（帯域通過フィルタ）１０３と、パルス復調器１０４と、コントローラ１５０とを有している。コントローラ１５０は、図示しないＣＰＵ、ＲＯＭ、及びＲＡＭ等から構成されており、機能的には、図示のように、ユーザー指示入力部１５１、ユーザー操作判定部１５２、操作信号生成部１５３等を備えている。

上記構成において、前述の遠隔操作器２００の赤外線駆動部２０２から発射された赤外線指示信号が前述の受光口１０６を介し赤外線受光部１０１で受光され、この赤外線受光部１０１で光−電気変換されてＦＭ復調器１０２に供給される。ＦＭ復調器１０２は、赤外線受光部１０１から入力されたＦＭ信号を復調し、ＢＰＦ１０３に供給する。ＢＰＦ１０３は、供給された信号の中から、前述の識別コードによりパルス変調されたパルス変調信号を抽出し、パルス復調器１０４に供給する。パルス復調器１０４は、パルス変調信号を復調して得られた上記識別コードをコントローラ１５０のユーザー指示入力部１５１に供給する。ユーザー操作判定部１５２は、パルス復調器１０４で復調された識別コードを上記ユーザー指示入力部１５１を介し入力して識別（解読）し、対応する操作指示信号を操作信号生成部１５３へ出力する。操作信号生成部１５３はその操作指示信号に応じて、対応する操作信号を生成し、前述したＤＶＤ録画・再生機構１４０に出力し、対応する動作（録画、再生、編集、予約、ダビング、消去、時計表示、番組表表示等）を行わせる。

以上のような基本構成及び動作の画像表示システムにおいて、本実施形態の最も大きな特徴は、画像表示装置１にＤＶＤ録画・再生機構１４０の操作に関わるメニュー画面を表示させた状態で、遠隔操作器２００の赤外線像を用いてこれをメニュー選択のポインタとして用いることにある。以下、その詳細を順を追って説明する。

図３に示す画像表示制御装置１００において、上記の本実施形態の特徴に関わる構成として、遠隔操作器２００が発光した赤外線信号（赤外線像、光信号、第２光線）を可視光線とは区別して認識する赤外線フィルタ付きカメラ１１０（第２光線撮像手段）と、（可視光線にて撮影を行う）通常のカメラ１２０と、映像合成部１３０とが設けられている。

カメラ１２０は、遠隔操作器２００の背景ＢＧから到来する（なお遠隔操作器２００自体からも到来する）可視光線（第１光線）を撮影する撮像部１２０ａ（第１光線撮像手段）と、その撮影した遠隔操作器２００の背景ＢＧを画像表示装置１の液晶表示部３に表示させるための映像表示信号を生成する映像信号生成部１２０ｂ（映像表示信号生成手段）とを備えている。

また、コントローラ１５０には、前述の構成のほかに、メニュー作成部１５４（図象表示信号生成手段）と、リモコン位置特定部１５５（位置特定手段）と、リモコン位置記号作成部１５６（位置表示信号生成手段）とが備えられている。

操作者Ｓが画像表示制御装置１００に対し所定の操作を行うことを意図し、遠隔操作器２００を手に持って画像表示制御装置１００の前に立つと、その操作者Ｓのいる実世界の実写映像（＝遠隔操作器２００及び背景ＢＧの映像）がカメラ１２０の撮像部１２０ａで撮影され、その映像信号が映像信号生成部１２０ｂから映像合成部１３０を介し、画像表示装置１へ入力される。これにより、画像表示装置１の液晶表示部３に、操作者Ｓがいる実世界が表示される。

図４はこのときの液晶表示部３の表示の一例を表す図である。図４の例では、画面中に遠隔操作器２００を持った操作者Ｓと、操作者Ｓのいる部屋の風景（この例では、ドア、床、床上の敷物、さらにテーブル、椅子等の家具など）が背景ＢＧとして表示されている。

この状態で、操作者Ｓが、画像表示制御装置１００の操作メニューを表示させるために、遠隔操作器２００を手に持って操作部２０１を適宜に操作すると、これに対応する特定の赤外線指示信号が赤外線駆動部２０２から出射され、画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読される。ユーザー指示入力部１５１ではこれに対応してメニュー作成部１５４に作成指示信号を入力し、メニュー作成部１５４は、画像表示装置１の上記液晶表示部３に複数の操作領域（後述）からなる操作メニュー（操作対象図象）を表示させるためのメニュー表示信号（図象表示信号）を生成する。このメニュー表示信号は映像合成部１３０によって上記カメラ１２０の映像信号生成部１２０ｂからの映像表示信号と合成され、その合成信号が画像表示装置１へ出力されることで、カメラ１２０による上記実写映像と上記メニュー作成部１５４からのメニュー表示との合成映像が液晶表示部３に表示される（メニュー選択モード、言い換えれば画面位置選択モードへの移行）。なお、このメニュー選択モードへ移行している間（メニュー選択モードが終了するまで）、遠隔操作器２００からは上記した特定の赤外線指示信号（低消費電力であることが好ましい）を発信し続け、これによってメニュー選択モード（画面位置選択モード）であることを画像表示制御装置１００側へ伝達するようになっている。

図５はこのときの液晶表示部３の表示の一例を表す図である。図５の例では、映像信号生成部１２０ｂからの映像表示信号に基づく実写映像として、上記図４と同様、画面中に遠隔操作器２００を持った操作者Ｓと、操作者Ｓのいる部屋の背景（この例では、ドア、床、床上の敷物、さらにテーブル、椅子等の家具など）ＢＧが表示されている。そしてこれに加え、メニュー作成部１５４からのメニュー表示信号に基づき、「時計（時刻セット）」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各操作をそれぞれ表す複数の領域からなる操作メニューＭＥが表示されている。

一方このとき、操作者Ｓの持った遠隔操作器２００から発せられる上記特定の赤外線指示信号が赤外線像として赤外線フィルタ付きカメラ１１０で撮像されて認識され、その撮像信号がリモコン位置特定部１５５に入力される。リモコン位置特定部１５５は、上記赤外線フィルタ付きカメラ１１０における遠隔操作器２００の赤外線像の認識結果に基づき、遠隔操作器２００が赤外線フィルタ付きカメラ１１０による撮像中において占める位置を特定する。

上記リモコン位置特定部１５５で特定した遠隔操作器２００の位置情報はリモコン位置記号作成部１５６へ入力され、遠隔操作器２００の位置を上記液晶表示部３に表示させるための位置表示信号が生成される。この生成された位置表示信号は上記映像合成部１３０へと入力され、これによって液晶表示部３に実写されている遠隔操作器２００の位置（あるいは近傍）に、所定の位置表示ＭＡ（この例では矢印型のマーク、後述の図６参照）が重ねて表示される。これにより、操作者Ｓが遠隔操作器２００を持ってその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部３に操作メニューＭＥと重なるようにして表示されている遠隔操作器２００の位置表示ＭＡを液晶表示部３上で動かすことができる。

一方、上記リモコン位置特定部１５５で特定した遠隔操作器２００の位置情報は上記ユーザー操作判定部１５２へも入力される。このとき、ユーザー操作判定部１５２には、上記メニュー作成部１５４で作成したメニュー表示信号のメニュー表示に関する情報（どのような内容、配列、態様のメニュー表示を行っているか）も入力されている。

上記のように操作者Ｓが手に持った遠隔操作器２００を移動させて位置表示ＭＡを液晶表示部３上で動かし、操作メニューＭＥのうち実行したい操作領域に上記位置表示ＭＡが到達したときにその操作領域の操作を決定すべく操作部２０１を適宜に操作する（例えば「決定」ボタンを押す）ことで、これに対応する赤外線指示信号が赤外線駆動部２０２から出射され、画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読される（指示信号入力手段）。ユーザー指示入力部１５１ではこれに対応して上記ユーザー操作判定部１５２に決定指示信号を入力する。

上記決定指示信号が入力されたユーザー操作判定部１５２は、前述したリモコン位置特定部１５５から取得した遠隔操作器２００の位置情報と、メニュー作成部１５４から取得したメニュー表示情報とに基づき、上記液晶表示部３に表示された操作メニューＭＥのうち選択指定される操作領域（操作指定部位）を決定し（操作部位決定手段）、これに対応する信号をメニュー作成部１５４へと入力する。メニュー作成部１５４はその入力された信号に基づき、上記選択指定された操作領域を、それ以外の部位と異なる態様で表示するようなメニュー表示信号を生成して映像合成部１３０に出力する。

図６は、このときの液晶表示部３の表示の一例を表す図である。図６の例では、操作者ＳがＤＶＤの編集を意図して、手に持った遠隔操作器２００の液晶表示部３における位置を「時計」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各領域からなる操作メニューＭＥの「編集」領域に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押した状態を表している。この例では、メニュー作成部１５４からのメニュー表示信号により、当該選択指定された「編集」領域は他の領域と色が異なって表示されている。そして、この場合には、ユーザー操作判定部１５２から上記「編集」領域の選択指定に対応した操作指示信号が操作信号生成部１５３へ出力され、操作信号生成部１５３がこれに応じて対応する操作信号を上記ＤＶＤ録画・再生機構１４０に出力し、対応する編集動作を行うことができる。

同様に、図７は操作者ＳがＤＶＤの予約録画を意図して遠隔操作器２００の液晶表示部３における位置を「予約」領域に位置させ「決定」ボタンを押した状態を表し、図８は操作者ＳがＤＶＤの再生を意図して遠隔操作器２００の液晶表示部３における位置を「再生」領域に位置させ「決定」ボタンを押した状態を表している。それぞれの場合、上記同様、ユーザー操作判定部１５２から上記「予約」又は「再生」領域の選択指定に対応した操作指示信号が操作信号生成部１５３へ出力され、操作信号生成部１５３からの対応する操作信号が上記ＤＶＤ録画・再生機構１４０に出力され、対応する予約録画又は再生動作を行うことができる。他の「時計」「録画」「番組表」「ダビング」「消去」「その他」領域についても同様である。

なお、上記において、遠隔操作器２００に備えられた発信器２０３、パルス変調器２０４、及びＦＭ変調器２０６等が、各請求項記載の、通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段を構成する。また赤外線駆動部２０２が、この光信号生成手段で生成した光信号を、当該光信号を通常の可視光線と区別して認識可能な第２光線撮像手段；表示画面上に操作対象図象を表示させるための信号を生成する第１手段；第２光線撮像手段における光信号の認識結果に基づき、遠隔操作器の背景の映像中において遠隔操作器が第２光線撮像手段による撮像中において占める位置を特定し表示画面上に表示させるための信号を生成する第２手段；特定された遠隔操作器の位置に基づき、表示画面上に表示された操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第３手段；を備えた画像表示制御装置へ送信する光信号送信手段を構成する。

以上説明したように、本実施形態においては、画像表示装置１に備えられた液晶表示部３上に、操作メニューＭＥを表示させるためのメニュー表示信号を生成するメニュー作成部１５４と、遠隔操作器２００の背景から到来する可視光線とは異なる態様又は属性を備え、遠隔操作器２００から到来する赤外線信号を、上記可視光線と区別して認識可能な赤外線フィルタ付きカメラ１１０と、この赤外線フィルタ付きカメラ１１０における上記赤外線信号の認識結果に基づき、遠隔操作器２００が赤外線フィルタ付きカメラ１１０による撮像中において占める位置を特定するリモコン位置特定部１５５と、このリモコン位置特定部１５５で特定した遠隔操作器２００の位置を液晶表示部３上に表示させるための位置表示信号を生成するリモコン位置信号作成部１５６と、リモコン位置特定部１５５で特定した遠隔操作器２００の位置に基づき、液晶表示部３上に表示された操作メニューＭＥのうち操作領域を決定するユーザー操作判定部１５２とを有し、これによって、液晶表示部３における遠隔操作器２００の位置表示ＭＡを操作メニューＭＥから操作領域を選択指定するためのポインタ（操作位置指定手段）として利用することができる。この結果、操作者Ｓは、液晶表示部３から目を離すことなく、遠隔操作器２００自体の位置移動という体感的・直感的に非常に分かりやすい動作で、操作メニューＭＥのうち所望の操作領域を容易に選択指定し、対応する操作を行うことができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者Ｓの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。

また、本実施形態では特に、遠隔操作器２００の背景ＢＧから到来する可視光線を撮影するカメラ１２０の撮像部１２０ａと、この撮像部１２０ａで撮影した背景ＢＧを液晶表示部３上に表示させるための映像表示信号を生成する映像信号生成部１２０ｂとを有する。これにより、操作者Ｓが遠隔操作器２００の位置表示ＭＡを操作メニューＭＥのポインタとして利用するために遠隔操作器２００を持ってその位置を移動させるとき、液晶表示部３上にカメラ１２０で撮影した遠隔操作器２００の背景ＢＧの実映像が映るので、自分の動作態様や動作距離等を表示画面で確認しながら上記遠隔操作器２００の移動を行うことができ、さらに分かりやすい直感的な操作が可能となる。また、液晶表示部３に映った映像に基づき赤外線フィルタ付きカメラ１１０による受光可能範囲を操作者Ｓが認識することも可能となるので、操作者Ｓが遠隔操作器２００を受光可能範囲外に移動させてしまうのを防止でき、操作の確実性を向上することができる。

さらに、本実施形態では特に、メニュー作成部１５４、リモコン位置信号作成部１５６、映像信号生成部１２０ｂは、前記操作メニューＭＥ、遠隔操作器２００の位置、遠隔操作器２００の背景ＢＧを、液晶表示部３上にすべて重ね合わせるように表示するような、メニュー表示信号、位置表示信号、映像表示信号を生成する。これにより、映像合成部１３０を介し、操作メニューＭＥ及び遠隔操作器２００の位置表示ＭＡが、カメラ２１０で撮像した遠隔操作器２００の背景ＢＧの実写映像上にすべて重ね合わせるようにして液晶表示部３に表示されるので、操作者Ｓは自身が液晶表示部３のどの位置を指定しているかを直感的に理解でき、さらに確実に分かりやすい直感的な操作を行うことができる。

さらに、本実施形態では特に、メニュー作成部１５４は、操作メニューＭＥのうちユーザー操作判定部１５２で決定した操作領域を、それ以外の部位と異なる態様で液晶表示部３に表示するようなメニュー表示信号を生成する。これにより、操作者Ｓが操作対象として指定した操作メニューＭＥ中の操作領域の色をそれ以外の操作領域と変え、指定位置を視覚的に一目瞭然とすることができるので、自身がどの操作領域を指定したかを確実に認識することができるとともに、確実に操作領域の指定が完了したという安心感を操作者Ｓに与えることもできる。

また本実施形態では特に、遠隔操作器２００からの「決定」操作に対応した指示信号をユーザー指示入力部１５０を有し、ユーザー操作判定部１５２は、リモコン位置特定部１５５で特定した遠隔操作器２００の位置と、ユーザ指示入力部１５１で入力した上記決定指示信号とに応じて、操作メニューＭＥのうちの操作指定部位を決定する。すなわち、操作者Ｓが遠隔操作器２０で適宜の操作を行い（「決定」ボタンを押し）ユーザー指示入力部１５１から決定指示信号がユーザー判定操作部１５２に入力されることで、操作メニューＭＥのうち操作対象の操作領域が最終的に決定されるようにしている。これにより、操作者Ｓの確実な操作フィーリングを確保できるとともに、不用意な操作領域の誤指定を防止でき、操作者Ｓの安心感を得ることができる。なお、この決定指示信号を与えるために操作器２００にて「決定」ボタンを押すことで発せられる指示信号は、赤外線指示信号に限られず、可視光線を含む電磁波等他の無線信号でもよい。

また、本実施形態では、遠隔操作器２００からの赤外線指示信号を赤外線受光部１０１で受光し、ＦＭ復調器１０２→ＢＰＦ１０３→パルス復調器１０４→ユーザー指示入力部１５１→ユーザー操作判定部１５２を介し、操作信号生成部１５３から操作信号をＤＶＤ録画・再生機構１４０へ入力することで、遠隔操作器２００の操作部２０１のみによる従来通りの操作を行うことも可能である。

なお、本発明は上記実施形態に限られるものではなく、その趣旨や技術的思想を逸脱しない範囲内で種々の変形が可能である。以下、そのような変形例を順次説明する。

（１）操作領域決定をジェスチャーで指示する場合
図９は、本変形例の画像表示システムにおいて、画像表示装置１の液晶表示部３の表示の一例を表す図であり、上記図６に対応する図である。図６と同等の部分には同一の符号を付している。上記実施形態では、例えば操作者ＳがＤＶＤの編集を意図した場合には、図６に示したように、手に持った遠隔操作器２００の液晶表示部３における位置を操作メニューＭＥの「編集」領域に位置させた後、例えば「決定」ボタンを押すことで当該操作領域の選択指定を確定した。本変形例ではこの「決定」ボタンを押す代わりに、図９に示すように、遠隔操作器２００を所定の形状に（この例では一周させるように）動かし（＝ジェスチャー）、これによって操作領域の選択指定を確定するようにしたものである。図９に示す例では、操作者ＳがＤＶＤの予約録画を意図した例であり、手に持った遠隔操作器２００の液晶表示部３における位置を操作メニューＭＥの「予約」領域に位置させた後、当該領域内又はその近傍にて略円形状又は略楕円形状を描くように遠隔操作器２００を振りまわし、これによって当該「予約」操作領域の選択指定を確定している。

図１０は、本変形例における画像表示制御装置１００の機能的構成を表す機能ブロック図であり、上記実施形態の図３に相当する図である。図３と同等の部分には同一の符号を付し、適宜説明を省略する。図１０において、図３と異なるのは、コントローラ１５０に新たに遠隔操作器２００の赤外線像の動きを判定する動き判定部１５７が設けられていることである。

すなわち、上記実施形態と同様、操作者Ｓが手に持った遠隔操作器２００を移動させて位置表示ＭＡを液晶表示部３上で動かし、操作メニューＭＥのうち実行したい操作領域に上記位置表示ＭＡが到達したとき、その操作領域の操作を決定すべく当該領域内又はその近傍にて略円形状又は略楕円形状を描くように遠隔操作器２００を振りまわす。このとき、遠隔操作器２００の赤外線像が前述したように赤外線フィルタ付きカメラ１１０で撮像認識されその撮像信号がリモコン位置特定部１５５に入力され、このリモコン位置特定部１５５から上記動き判定部１５７へと入力されている。上記のように遠隔操作器２００を振り回すことで、動き判定部１５７ではこの振り回し運動を認識するとともに、当該領域を操作者Ｓが操作対象として選択指定していると判定し、上記ユーザー操作判定部１５２に前述の決定指示信号を入力する。以降の動作は上記実施形態と同様なので、説明を省略する。

本変形例によっても、上記実施形態と同様の効果を得る。また、操作領域の最終的な選択指定の確定の際にも遠隔操作器２００の操作部２０１の操作が不要となるので、さらに確実に液晶表示部３から目を離さずに操作が可能となる。

（２）赤外線フィルタ付カメラがリモコン指示操作を受け取る場合
図１１は、本変形例における画像表示制御装置１００の機能的構成を表す機能ブロック図であり、上記実施形態の図３に相当する図である。図３と同等の部分には同一の符号を付し、適宜説明を省略する。図１１において、図３と異なるのは、赤外線受光部１０１が省略され、遠隔操作器２００からの赤外線指示信号が赤外線フィルタ付きカメラ１１０で受光され、この赤外線フィルタ付きカメラ１１０内に備えられた変換手段（図示せず、あるいはカメラ１１０とは別体に設けられていてもよい）で光−電気変換された後にＦＭ復調器１０２に供給されることである。その後の動作は上記実施形態と同様であるため、説明を省略する。

本変形例によっても、上記実施形態と同様の効果を得る。

（３）コールドミラーを用いる場合
例えば上記実施形態の図３に示したように、赤外線フィルタ付きカメラ１１０と通常のカメラ１２０とを別々に設けた場合、それら２つのカメラ１１０，１２０のレンズ位置のずれによりそれぞれの撮像は厳密には一致しないが、操作者Ｓがカメラから十分離れている場合は、２つのカメラ１１０，１２０の差異は小さく、実用上問題ない。しかしながら、操作者Ｓがそれらカメラ１１０，１２０の近くにいる場合にはその差異が無視できないほど大きくなり、例えば赤外線フィルタ付きカメラ１１０の撮像信号に基づきリモコン位置特定部１５５で特定し液晶表示部３に表示させた遠隔操作器２００の位置と、カメラ１２０からの映像表示信号をもとに液晶表示部３に表示させた遠隔操作器２００の実映像とのずれが大きくなる可能性がある。本変形例はそのような場合に対応するためのものである。

図１２は、本変形例における画像表示制御装置１００の機能的構成を表す機能ブロック図であり、上記図３や図１１に相当する図である。図３と同等の部分には同一の符号を付し、適宜説明を省略する。図１２において、本変形例では、赤外線フィルタ付きカメラ１１０の入射側に赤外線を透過させるとともに可視光線を反射する機能（＝分光機能）を備えた公知のコールドミラーＣＭを設け、遠隔操作器２００からの赤外線と遠隔操作器２００の背景ＢＧからの可視光線とを（前述の受光口１０６を介して）赤外線フィルタ付きカメラ１１０へと同一の光軸で導入する。そして、その光軸上に設けた上記コールドミラーＣＭによって上記遠隔操作器２００からの赤外線と遠隔操作器２００の背景ＢＧからの可視光線とを分光し、赤外線はそのまま透過させて赤外線フィルタ付きカメラ１１０へ入射させるとともに、可視光線は反射させて方向転換させカメラ１２０へと入射させる。以降の動作は上記実施形態と同様であるので説明を省略する。

上記構成の本変形例においては、２つのカメラ１１０，１２０に入力される映像は同一のものであるため、操作者Ｓがカメラ１１０，１２０に十分近い位置にいても、２つのカメラ１１０，１２０の間に撮像の差異が発生せず、前述したような遠隔操作器２００の位置ずれの弊害を確実に防止できるという効果を得る。

（４）位置補正を行なう場合
上記したように、赤外線フィルタ付きカメラ１１０と通常のカメラ１２０との２つを設けた場合、それら２つのカメラ１１０，１２０のレンズ位置のずれによりそれぞれの撮像は厳密には一致しない（位置ずれが発生する）。この差異が無視できないほど大きくなった場合に、上記（３）のようにコールドミラーＣＭを用いることで撮像自体の差異をなくす手法のほか、差異をなくすように一方の信号に対し位置補正（キャリブレーション）をしてもよい。この変形例を図１３〜図１５を用いて説明する。

図１３は、この変形例における画像表示制御装置１００の機能的構成の一例を表す機能ブロック図であり、上記図３や図１１に相当する図である。図３と同等の部分には同一の符号を付し、適宜説明を省略する。図１３において、本変形例では、上記信号補正を行うためのリモコン位置補正部１６０（補正手段）を新たに設けている。このリモコン位置補正部１６０は、ユーザ指示入力部１５１からの指示信号（詳細は後述）に応じて、リモコン位置特定部１５５で特定されリモコン位置記号作成部１５６で生成されて映像合成部１３０へ入力された位置表示信号に対して所定の補正を行う（詳細は後述）。この補正後の位置表示信号は、映像合成部１３０に入力されて映像信号生成部１２０ｂからの映像表示信号と合成される。

図１４（ａ）〜（ｃ）は、上記位置補正の様子を表す説明図である。この変形例では、例えば以下のようにして位置補正を行う。

上記実施形態において図４を用いて説明したように、操作者Ｓが遠隔操作器２００を手に持って画像表示制御装置１００の前に立つと、カメラ１２０からの映像表示信号をもとにその操作者Ｓのいる実世界の実写映像が画像表示装置１の液晶表示部３に表示される。このとき、液晶表示部３の表示位置の中で位置補正用の所定位置（この例では画面中央位置、白十字マーク参照）が予め固定的に定められており、位置補正を行うことを意図する場合には、操作者Ｓは、立つ位置や手に持った遠隔操作器２００の高さ等を調整して、当該所定位置（画面中央位置）に遠隔操作器２００の実映像が表示されるようにする。図１４（ａ）の上段の図は、このときの状態を表している。

一方、図１４（ｂ）の下段の図は、この状態で、上記の位置ずれの発生により、赤外線フィルタ付きカメラ１１０の撮像信号に基づきリモコン位置特定部１５５で特定し液晶表示部３に表示させた遠隔操作器２００の位置（＝赤外線検出位置、図中では特に×印マークで表す）が、画面中央位置から（この例では図示右側に）ずれている状態を概念的に表した図である。なお、遠隔操作器２００における操作者Ｓの適宜の操作によって実際にこの×印マークをリモコン位置記号作成部１５６で生成し液晶表示部３に表示させてもよい。

図１４（ｂ）は、このような状態のまま（すなわち補正を行わず）、カメラ１２０からの映像表示信号に基づく遠隔操作器２００の実映像（図１４（ａ）上段参照）と、リモコン位置特定部１５５で特定しリモコン位置記号作成部１５６で生成した遠隔操作器２００の位置表示ＭＡ（この例では上記同様×印で表す。図１４（ａ）下段参照）とが重ね合わされて液晶表示部３に表示された状態を表す図である。

この状態で、操作者Ｓが遠隔操作器２００で適宜の補正指示操作を行うことにより、前述したように、これに対応する特定の赤外線指示信号が前述の赤外線受光部１０１、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てユーザー指示入力部１５１に入力される。そして、ユーザー指示入力部１５１ではこれに対応してリモコン位置補正部１６０に制御信号を出力し、リモコン位置補正部１６０はこれに応じて映像合成部１３０にアクセスする（例えば問い合わせ信号を出力する）。映像合成部１３０ではこれに応じて所定の演算処理を行い、この時点で入力されているリモコン位置記号作成部１５６からの位置表示信号（位置表示ＭＡ）が上記液晶表示部３の中央位置（遠隔操作器２００の実映像位置に相当）からどれだけずれているかを算出する（ずれ量）。

この算出したずれ量と、上記リモコン位置記号作成部１５６からの位置表示信号とは、上記リモコン位置補正部１６０に入力される。リモコン位置補正部１６０では上記ずれ量に基づき、このずれを補正するための補正定数を決定する。例えば液晶表示部３の画面上の位置を、ｘ軸、ｙ軸を備えた２次元平面上にて表したとき、上記ずれの量を（ｄｘ，ｄｙ）とすれば、上記補正定数は（−ｄｘ，−ｄｙ）とすればよい。そして、リモコン位置補正部１６０はこの補正定数を用いて上記映像合成部１３０から入力した位置表示信号を補正した後、この補正後の位置表示信号を映像合成部１３０へと出力する。なお、リモコン位置補正部１６０は補正定数を用いてリモコン位置記号作成部１５６から直接入力した位置表示信号を補正するようにしてもよい（二点鎖線参照）し、あるいはリモコン位置特定部１５５で特定した遠隔操作器２００の位置情報を補正するようにしてもよい。

映像合成部１３０に入力された補正後の位置表示信号は、前述したように映像信号生成部１２０ｂからの映像表示信号と合成され、これによって補正後の遠隔操作器２００の位置表示ＭＡは上記液晶表示部３の画面中央位置（白矢印マーク）と合致することとなる。図１４（ｃ）はこのときの状態を表している。これ以降の動作は上記実施形態と同様なので、説明を省略する。

なお、上記は操作者Ｓが予め遠隔操作器２００を液晶表示部３の中央位置に合わせるように調整することを前提としていたが、これに限られず、液晶表示部３の他の所定位置（例えば画面隅部やその近傍、あるいは背景ＢＧに対応した特定の位置等）に合わせるように調整させ、これに対して位置表示信号等を補正するようにしてもよい。また操作者Ｓが遠隔操作器２００をどこかの所定位置に合わせるようにする手法にも限られず、遠隔操作器２００の位置に関係なく（任意の位置で）映像合成部１３０で所定の公知の画像認識処理や解析処理等を行ってその時点での実映像における遠隔操作器２００の位置を特定し、この特定した遠隔操作器２００の位置に対する赤外線検出に基づく遠隔操作器２００の位置のずれ量を算出して補正するようにしてもよい。

さらに、上記のように赤外線検出に基づく遠隔操作器２００の位置を映像信号側に合致させるように補正するのではなく、その逆に、映像信号を、赤外線検出に基づく遠隔操作器２００の位置に合致させるように補正してもよい。図１５は、この場合における画像表示制御装置１００の機能的構成の一例を表す機能ブロック図であり、上記図１３に相当する図である。図１３と同等の部分には同一の符号を付し、適宜説明を省略する。

図１５において、この例では、上記信号補正を行うための映像信号補正部１７０（補正手段）を新たに設けている。この映像信号補正部１７０は、ユーザ指示入力部１５１からの指示信号に応じて、映像信号生成部１２０ｂで生成されて映像合成部１３０へ入力されずれ量が算出された映像表示信号に対し、上記リモコン位置補正部１６０と同様にしてずれ量に応じた所定の補正を行う。そして、この補正後の映像表示信号が、映像合成部１３０に入力されてリモコン位置記号作成部１５６からの位置表示信号と合成される。なお、映像信号補正部１７０は補正定数を用いて映像信号生成部１２０ｂから直接入力した映像表示信号を補正するようにしてもよい（二点鎖線参照）。

これら２つの変形例においては、カメラ１２０による撮影結果と、赤外線フィルタ付きカメラ１１０による撮影結果とに応じて、リモコン位置特定部１５５の特定に基づく遠隔操作器２００の位置、若しくは、映像信号生成部１２０ｂで生成した映像表示信号を補正する補正手段（リモコン位置補正部１６０又は映像信号補正部１７０）を有する。これにより、２つのカメラ１１０，１２０の間に撮像の差異が発生したとしてもこれを補正することで、位置ずれによる誤差の発生等を確実に防止することができる。

（５）赤外線高感度カメラを用いる場合
本変形例は、上記実施形態において第１光線撮像手段としてのカメラ１２０と第２光線撮像手段としての赤外線フィルタ付きカメラ１１０とを用いていたのに代え、１つの赤外線高感度カメラ１１０Ａ（後述の図１７参照）を用いることで両者を兼用する場合である。この場合、赤外線高感度カメラ１１０Ａは、第１光線としての可視光線に対する感度よりも第２光線としての赤外線に対する感度が高くなっている。

図１６は、この赤外線高感度カメラ１１０Ａのもつ感度特性の一例を表す特性図である。横軸には波長（ｎｍ）をとり、縦軸にカメラ感度（相対値）をとって表している。図１６において、この例では、カメラ１１０Ａの感度は、波長９４０ｎｍ〜９５０ｎｍをピーク領域とし、それより短波長でも長波長でも急激に感度が小さくなる特性となっている。このようなカメラ１１０Ａの感度特性において、例えば遠隔操作器２００からの赤外線を上記波長９４０ｎｍ〜９５０ｎｍの範囲のものを用いることで、遠隔操作器２００の背景ＢＧからの可視光線（波長範囲７６０ｎｍ以下）を受光したときの感度と、遠隔操作器２００からの赤外線を受光したときの感度との間に、大きな差をつけることができる。この特性を利用して、上記２つの高低感度値の間になるような図１６に示す感度しきい値Ｘを設定すれば、上記遠隔操作器２００の背景ＢＧからの可視光線と、遠隔操作器２００からの赤外線とを１つのカメラ１１０Ａで受光しても、しきい値Ｘより高い感度で得られる撮像は赤外線像（赤外線指示信号）、しきい値Ｘより低い感度で得られる撮像は可視光線像というように分けて処理することができる。

図１７は、本変形例における画像表示制御装置１００の機能的構成を表す機能ブロック図であり、上記図１１に相当する図である。図１１と同等の部分には同一の符号を付し、適宜説明を省略する。図１７において、本変形例では、上記赤外線フィルタ付きカメラ１１０及び通常のカメラ１２０に代えて、前述した感度特性を備えた赤外線高感度カメラ１１０Ａを設けている。上記遠隔操作器２００の背景ＢＧからの可視光線実像と、遠隔操作器２００からの赤外線像とはいずれも赤外線高感度カメラ１１０Ａの撮像部１１０Ａａに入力される。撮像部１１０Ａａでは、上記した原理に基づき、高感度側の赤外線像（赤外線指示信号）と低感度側の可視光線像に分けて撮像し、赤外線像及び赤外線指示信号については図１１と同様にリモコン位置特定部１５５及びＦＭ復調部１０２にそれぞれ出力し、可視光線像については映像信号生成部１１０Ａｂに供給する。映像信号生成部１１０Ａｂでは対応する映像表示信号を生成して映像合成部１３０へ出力する。これ以降の動作は上記図１１に示した（２）の変形例と同様であるので説明を省略する。

本変形例によれば、第２光線撮像手段として、可視光線に対する感度よりも赤外線に対する感度が高く設定され、第１光線撮像手段を兼ねた赤外線高感度カメラ１１０Ａを用いる。これにより、赤外線フィルタを用いることなく、かつ、カメラ１台で上記実施形態と同様の効果を得ることができる。

なお、前述の図３のように、赤外線指示信号については赤外線受光部１０１で受光するようにし、赤外線像のみを赤外線高感度カメラ１１０Ａで撮像するようにしてもよい。

（６）操作者までの距離に応じて拡大表示する場合
上記実施形態及び（１）〜（５）の変形例は、カメラ１２０等による映像表示信号に基づき画像表示装置１の液晶表示部３に表示する背景ＢＧの表示倍率は固定的に設定されていたが、これに限られず、操作者Ｓまでの距離に応じて当該表示倍率を変化させるようにしてもよい。

図１８〜図２２は、この距離に応じた表示倍率の変化の手法の概略を説明するための説明図である。

図１８は、まず操作者Ｓが（言い換えれば操作器２００が、以下同様）カメラ１２０から比較的近い距離に位置する場合の例を表している。この場合、カメラ１２０が撮影した領域のうち、操作者Ｓの近傍の所定の範囲を切り出した後、その切り出した部分を同一の倍率で液晶表示部３に表示する。

図１９は、操作者Ｓのカメラ１２０からの距離が中程度の場合の例を表しており、上記図１８と同様、この場合も、カメラ１２０が撮影した領域のうち、所定の範囲を切り出して同一倍率でそのまま液晶表示部３に表示する。このとき上記したように、操作者Ｓは、遠隔操作器２００を移動操作することで、その液晶表示部３における位置表示ＭＡを操作メニューＭＥから操作領域を選択指定するためのポインタとして利用することができる。図２０はその移動操作における操作の最小単位を表す図であり、上記のように拡大することなく同一倍率で切り出していることから、この場合の操作最小単位は十分に小さい。この結果、操作者Ｓによる手や腕の動作によって遠隔操作器２００を移動させ液晶表示部３上で位置表示ＭＡを感度良くなめらかに動かし、円滑に操作領域を選択指定することができる。

図２１は、操作者Ｓがカメラ１２０から比較的遠く離れている場合の例を表している。この場合、カメラ１２０が撮影した領域のうち操作者Ｓの近傍の所定の範囲をそのまま同一倍率で表示したのでは非常に小さく液晶表示部３で表示されてしまい、液晶表示部３に位置表示ＭＡや操作メニューＭＥを表示するのが困難となる。そこでこれを回避するために、切り出した範囲を拡大して液晶表示部３において大きく表示する。

しかしながらこのように切り出し後の拡大表示を行う関係上、移動操作における操作の最小単位を図２２に示すように、この場合の操作最小単位が大きくなって比較的粗くなってしまう。この結果、操作者Ｓによる手や腕の動作によって遠隔操作器２００を動かしたとき、液晶表示部３上で位置表示ＭＡを感度良くなめらかに動かすことが困難（しばらく一点で止まった後に突然離れたところに飛ぶ等、動きがぎくしゃくする）又は不可能となる。そこで、この場合には、隣接する上記操作最小単位の２点の間に別途新たに仮想的な移動位置を想定し、この予想移動位置を用いて位置表示ＭＡを補完した形で表示する（実際の操作器２００がある位置から次の位置へ移動したとき、位置表示ＭＡは、その実際の操作器２００の移動よりも遅れて、当該「ある位置」→「それら２つの位置間に予想した移動位置」→当該「次の位置」のように、２つの位置の中間部に予想位置を介在させつつ遅れて追従表示する。なおこの中間部は必ずしも中点である必要はない）ことで、上記操作性の低下を防止するようにしている。

図２３は、上記の手法を実現するための本変形例の画像表示制御装置１００の機能的構成を表す機能ブロック図であり、上記実施形態の図３等に相当する図である。図２３において、この変形例の画像表示制御装置１００は、図３に示した構成における映像合成部１３０に代えて１次映像合成部１３５を設けるとともに、新たに距離検出部１１５、切り出し処理部１８０、２次映像合成部１９５を設けている。

距離検出部１１５は、公知の手法により遠隔操作器２００との距離を測定するものであり、例えば超音波距離計等が用いられる。検出した距離は距離検出信号として切り出し処理部１８０へ入力される。

１次映像合成部１３５は、図３の映像合成部１３０と同様、カメラ１２０の撮像部１２０ａでの撮影に基づく映像信号生成部１２０ｂからの映像信号が入力されるとともに、リモコン位置特定部１５５での特定に基づくリモコン位置記号作成部１５６からの位置表示信号が入力される。これによって、液晶表示部３に実写されている遠隔操作器２００の位置（あるいは近傍）に所定の位置表示ＭＡが重ねられた状態の映像信号が実現される。

切り出し処理部１８０は、上記１次映像合成部１３５からの位置表示ＭＡつき実写映像信号と、上記距離検出部１１５からの距離検出信号と、上記リモコン位置特定部１５５からの位置特定信号とを入力する。そして、上記位置表示ＭＡ付き実写映像のうち、上記位置特定信号により特定される操作器２００位置近傍の所定範囲切り出しを行い、さらに上記距離検出信号の距離の遠近に応じて、当該切り出した映像を液晶表示部３に表示するときの拡大倍率を設定し、その倍率に拡大した位置表示ＭＡ付き実写映像信号を２次映像合成部１９５へ出力する（詳細は後述の図２４参照）。

２次映像合成部１９５は、上記切り出し処理部１８０からの（適宜拡大された）位置表示ＭＡつき実写映像信号と、メニュー作成部１５４からのメニュー表示信号とを合成する。そして、この合成信号が画像表示装置１へ出力されることで、カメラ１２０の撮影に基づく上記位置表示ＭＡ付き実写映像と上記メニュー作成部１５４からのメニュー表示との合成映像が液晶表示部３に表示される。

図２４は、上記切り出し処理部１８０の詳細構成を表す機能ブロック図である。

図２４において、切り出し処理部１８０は、拡大を伴わない単純な切り出しを行うための単純切り出し部１８１と、拡大を伴う切り出しを行うための拡大切り出し部１８２と、拡大切り出しにさらに上記の予想移動位置の補完を行うための補完拡大切り出し部１８３と、距離検出部１１５からの距離検出信号とリモコン位置特定部１５５からの信号に基づく遠隔操作器２００の移動の態様（操作解像度、移動解像度、速度等。詳細は後述）とに応じて上記補完を行うかどうかを判定する補完判定部１８４と、この補完判定部１８４からの切替制御信号によって切り替えられ、上記切り換えスイッチ１８７（後述）からの入力を拡大切り出し部１８２又は補完拡大切り出し部１８３のいずれか一方に選択的に出力する切り換えスイッチ１８５と、距離検出部１１５からの距離検出信号に応じて拡大表示を行うかどうかの判定を行う拡大判定部１８６と、この拡大判定部１８６からの切替制御信号によって切り替えられ、上記１次映像合成部１３５からの出力を単純切り出し部１８１又は切り換えスイッチ１８５のいずれか一方に選択的に出力する切り換えスイッチ１８７とを備えている。

単純切り出し部１８１、拡大切り出し部１８２、及び補完拡大切り出し部１８３には、それぞれリモコン位置特定部１５５からの位置特定信号が入力され、それぞれの切り出し部１８１〜１８３はその特定された操作器２００の位置に基づき、操作器２００位置の近傍の所定範囲（例えば予め固定的に設定されている）の切り出しを行う。

図２５は、切り出し処理部１８０全体で実行する制御手順を表すフローチャートである。

図２５において、まずステップＳ１０において、拡大判定部１８６で、距離検出部１１５で検出した操作者Ｓ（操作器２００）とカメラ１２０との距離を取得する。

その後、ステップＳ２０において、拡大判定部１８６で、上記ステップＳ１０で取得した距離が比較的近いかどうか（例えば予め定められた所定のしきい値よりも小さいかどうか）を判定する。距離が小さい場合にはステップＳ２０の判定が満たされてステップＳ３０に移り、拡大判定部１８６で切り替えスイッチ１８７に切替制御信号を出力して単純切り出し部１８２側へ切り替え、これによって１次映像合成部１３５からの位置表示ＭＡつき映像信号を単純切り出し部１８１へ供給して拡大のない通常の切り出しを行い、このフローを終了する。

距離が大きい場合には、ステップＳ２０の判定が満たされずステップＳ３５に移り、拡大判定部１８６で切り替えスイッチ１８７に切替制御信号を出力して切り替えスイッチ１８５側へ切り替え、これによって１次映像合成部１３５からの位置表示ＭＡつき映像信号を拡大切り出し部１８２又は補完拡大切り出し部１８３へ供給し拡大を伴う切り出し処理を行う。その後ステップＳ５０に移り、補完処理を行ってこのフローを終了する。

図２６は、上記ステップＳ５０の詳細手順を表すフローチャートである。

まずステップＳ５２において、補完判定部１８４で、距離検出部１１５からの距離検出信号に応じて（その距離により拡大切り出し部１８２又は補完拡大切り出し部１８３で実行される拡大倍率を想定した場合に）距離が長くなるほど低下する傾向となる操作解像度が所定のしきい値より悪いかどうかを判定する。操作解像度が当該しきい値より悪い場合は判定が満たされ、そのままでは操作がぎくしゃくし操作性が悪くなる（補完の必要がある）とみなされて後述のステップＳ６０に移る。操作解像度が当該しきい値以上である場合には判定が満たされず、ステップＳ５４に移る。

ステップＳ５４では、補完判定部１８４で、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、何らかの理由により位置特定信号として読みとれる読み取り解像度（移動解像度）が所定のしきい値より悪くなっていないかどうかを判定する。移動解像度が当該しきい値より悪い場合は判定が満たされ、例えば障害物（後述）の存在等の理由によりそのままでは読み取りが断片的となり円滑な操作が困難（補完の必要がある）とみなされて後述のステップＳ６０に移る。移動解像度が当該しきい値以上である場合には判定が満たされず、ステップＳ５６に移る。

ステップＳ５６では、補完判定部１８４で、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、実際の操作器２００の移動速度が所定のしきい値より小さい（遅い）かどうかを判定する。移動速度が当該しきい値未満である場合は判定が満たされ、例えば操作者Ｓがゆっくりと精度の高い操作をしたがっている等とみなされて後述のステップＳ６０に移る。移動速度が当該しきい値以上である場合には判定が満たされず、ステップＳ５８に移る。

ステップＳ５８では、補完判定部１８４で、操作者Ｓからの補完指示信号が入力されたかどうかを判定する。すなわち、本変形例では上記ステップＳ５２、ステップＳ５４、ステップＳ５６等の判定条件を満たす満たさないに関係なく、操作者Ｓが意図的に（強制的に）補完拡大切り出し部１８３による補完実行を指示できる操作手段が備えられており、その操作手段による補完指示信号は補完判定部１８４に入力される。このステップＳ５８は、この補完指示信号の入力があったかどうかを判定するものである。操作者Ｓによる補完実行指示があった場合には判定が満たされて後述のステップＳ６０に移る。補完実行指示がない場合には判定が満たされず、このフローを終了する。

ステップＳ５２、ステップＳ５４、ステップＳ５６、ステップＳ５８のいずれかの判定が満たされて移行するステップＳ６０では、補完判定部１８４で、補完を「おいかけモード」で実行する設定になっているかどうかを判定する。

すなわち、本変形例で実行する補完処理には、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、操作器２００の現在位置よりも少し前に位置していたと思われる位置から現在位置までを追跡するように補完する追いかけモード（＝現実の操作器２００の動きから少し遅れて位置表示ＭＡが滑らかに追いかけてくるように表示される）と、操作器２００の現在位置から、少し前に位置していたと思われる位置までを逆に遡るように補完する逆戻りモード（＝現実の操作器２００の動きとは逆方向に位置表示ＭＡが滑らかに少し戻るように表示される）とが備えられている。そして、操作者Ｓが補完処理時に上記２つのモードのうちいずれを用いるかを指示できる選択手段が備えられており、その選択手段によるモード選択信号は補完判定部１８４に入力される。このステップＳ６０は、このモード選択信号で上記追いかけモードが選択されているかどうかを判定するものである。

操作者Ｓにより追いかけモードが選択されていた場合にはステップＳ６０の判定が満たされてステップＳ６２に移る。ステップＳ６２では、補完拡大切り出し部１８３で、前述したように実際の操作器２００の移動よりも遅れて追従表示するときの追従動作開始点Ｐｓを、操作器２００の移動軌跡上における補完を開始（発動）した点（例えば操作器２００の現在位置とそれより少し前の位置との中間部位置。なお必ずしも中点である必要はない）とし、追従表示するときの追従終了点Ｐｅを、現在位置とする。

一方操作者Ｓにより逆戻りモードが選択されていた場合にはステップＳ６０の判定が満たされず、ステップＳ６４に移る。ステップＳ６４では、補完拡大切り出し部１８３で、上記追従動作開始点Ｐｓを操作器２００の現在位置とし、追従表示するときの追従終了点Ｐｅを、上記補完開始（発動）点とする。

上記ステップＳ６２又はステップＳ６４が終了すると、ステップＳ６６に移る。

ステップＳ６６では、補完判定部１８４で、補完しつつ実際の操作器２００に遅れて追従してくるときの位置表示ＭＡの追従（移動）速度を一定値とする設定になっているかどうかを判定する。

すなわち、本変形例で実行する補完処理時の位置表示ＭＡの追従速度として、（操作器２００の実際の移動速度に関係なく）予め定められた一定速度で追従する定速モードと、操作器２００の実際の移動速度に応じて追従速度が変化する可変速モードとが備えられている。そして、操作者Ｓが補完処理時に上記２つのモードのうちいずれを用いるかを指示できる選択手段が備えられており、その選択手段によるモード選択信号は補完判定部１８４に入力される。このステップＳ６６は、このモード選択信号で上記定速モードが選択されているかどうかを判定するものである。

操作者Ｓにより定速モードが選択されていた場合にはステップＳ６６の判定が満たされてステップＳ６８に移る。ステップＳ６８では、補完拡大切り出し部１８３で、前述したように実際の操作器２００の移動よりも遅れて追従表示するときの位置表示ＭＡ（ポインタ）の追従速度ｆｐｖを、所定の一定値Ｓｓとする。

一方操作者Ｓにより可変速モードが選択されていた場合にはステップＳ６６の判定が満たされず、ステップＳ７０に移る。ステップＳ７０では、補完判定部１８４で、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、実際の操作器２００の移動速度が所定のしきい値α（予め設定される）以下となっているかどうかを判定する。操作器２００の移動速度がそれほど遅くなっていない場合にはステップＳ７０の判定が満たされず、上記ステップＳ６８へ移行する。操作器２００の移動速度が十分に遅くなっている場合にはステップＳ７０の判定が満たされ、ステップＳ７２に移る。

ステップＳ７２では、補完拡大切り出し部１８３で、前述したように実際の操作器２００の移動よりも遅れて追従表示するときの位置表示ＭＡ（ポインタ）の追従速度ｆｐｖを、
ｆｐｖ＝β／（１＋α−ｒｐｖ） … （式１）
により算出する。ここで、ｒｐｖは実際の操作器２００（実際の位置表示ＭＡ）の移動速度（実ポインタ速度）であり、βは予め固定的に上限として設定されている追従ポインタ最高速度である。またαはステップＳ７０で前述した移動速度のしきい値である。

上記式１には、以下のような意義がある。すなわち、ステップＳ７０での判定が満たされていることからステップＳ７２の時点で実際の操作器２００の移動速度ｒｐｖ≦αとなっているため、上記式１のうちα−ｒｐｖは０以上の値となり、実際の操作器２００の移動速度が遅い（操作がゆっくりである）ほど大きな値となる。この結果、これに１を加えた１＋α−ｒｐｖは１以上の値であって操作がゆっくりであるほど１よりも大きくなる性質を備え、このような値を用いて追従ポインタ最高速度βを除することにより、上限値を超えることなくかつ操作がゆっくりであるほど遅くなるポインタ追従速度ｆｐｖを実現することができる。

上記ステップＳ６８又はステップＳ７２が終了すると、ステップＳ７４に移る。ステップＳ７４では、補完拡大切り出し部１８３で、上記リモコン位置記号作成部１５６で作成され１次映像合成部１３５を介して入力された位置表示（ポインタ）ＭＡに所定の遅延処理を施すとともに上記の補完処理を施し、上記ステップＳ６２又はステップＳ６４で決定した追従動作開始点Ｐｓから追従終了点Ｐｅまで、上記ステップＳ６８又はステップＳ７２で決定した追従ポインタ速度ｆｐｖにより（実際の操作器２００の移動よりも遅れて）位置表示ＭＡが表示されるように信号を再合成し、上記２次映像合成部１９５へ出力する。なお、後述する（８）の変形例の補完信号生成部１６５のように、リモコン位置特定部１５５からの位置特定信号に基づきリモコン位置記号作成部１５６に信号を出力してリモコン位置記号作成部１５６で作成する位置表示信号自体を修正（補正）し、同様の表示を行わせるようにしても同じ効果が得られる。ステップＳ７４が終了すると、このルーチンを終了する。

本変形例の画像表示装置１においては、映像表示信号生成手段１２０ｂで生成した映像表示信号における操作器２００の背景の一部分を抽出し、表示画面上に拡大表示可能とするための抽出処理手段（この例では切り出し処理部１８０，１８０Ａ）を有している。

これにより、操作者Ｓが比較的遠く離れていて第１光線撮像手段１２０ａで撮影した操作器２００の背景全体の画像に占める操作者Ｓの映像の割合が小さい場合等、背景ＢＧ全体の画像に占める操作器２００を移動操作可能な領域（操作領域）の割合が小さい場合において、操作者Ｓ付近の映像を抽出して拡大することにより、表示画面３上における操作領域の大きさを増大させることが可能となる。この結果、操作困難性を低減し、操作性を向上することができる。

また本変形例の画像表示制御装置１においては、操作器２００との距離を検出する距離検出手段（この例では距離検出部１１５）を有し、抽出処理手段１８０は、距離検出手段１１５の検出結果に応じて、抽出及び拡大の態様（拡大有無を含む）を決定する。

これにより、距離検出手段１１５で検出した操作器２００までの距離が比較的遠く離れている場合には、抽出処理手段１８０で操作者Ｓ付近の映像を抽出して拡大することで、表示画面３上における操作領域の大きさを増大させることが可能となる。この結果、必要以上に大きな範囲で操作する必要がなくなり、また操作位置を限定されることもなくなる。

また、本変形例の画像表示制御装置１においては、予想位置設定手段（この例では補完拡大切り出し部１８３）は、操作器２００の移動時に位置特定手段１５５により順次特定される隣接する２点の中間部となるように、予想移動位置を設定する。

これにより、表示画面３における操作器２０の移動軌跡が粗くぎくしゃくした場合に、隣接２点間に予想移動位置を設定して仮想的に表示画面３上における移動軌跡を補い、粗い移動軌跡を細かく表現することで、操作円滑性を向上することができる。

なお、上記（６）の変形例においては、切り出し処理部１８０で切り出し処理を行う際、単純切り出し部１８１、拡大切り出し部１８２、及び補完拡大切り出し部１８３は、リモコン位置特定部１５５からの位置特定信号で特定された操作器２００の位置に基づき、固定的に決められたその近傍の所定範囲を（操作者Ｓの操作可能範囲とみなして）切り出しを行ったが、これに限られず、操作者Ｓが当該操作範囲（操作可能範囲）を自ら設定して装置側に認識させるようにしてもよい。

図２７はそのような変形例における切り出し処理部１８０Ａの機能的構成を表す機能ブロック図であり、前述の図２４に相当する図である。図２７に示されるように、この変形例による切り出し処理部１８０Ａでは、操作領域決定部１８８が新たに備えられている。この操作領域決定部１８８は、リモコン位置特定部１５５からの位置特定信号に基づき、所定時間範囲内における操作器２００の移動領域に対応して操作者Ｓの操作領域を設定するものである。

すなわち操作領域決定部１８８は、カメラ１２０の映像信号生成部１２０ｂからの映像信号（又はリモコン位置特定部１５５からの位置特定信号でもよい）に対し例えば公知の動体認識技術を適用し、上記所定時間範囲内（例えば基準時の直後又は直前）における動体領域（動画像内で動きの激しかった領域）を検出する。そして、その検出した動体領域は操作者Ｓの腕近辺の領域であると仮定すれば、これによって操作者Ｓによる操作可能領域を推定することができる。そしてこれを操作領域として単純切り出し部１８１、拡大切り出し部１８２、補完拡大切り出し部１８３に出力することで、それら切り出し部１８１〜１８３は当該領域の切り出し処理を実行することができる。

この変形例における画像表示装置１においては、抽出処理手段１８０Ａは、映像表示信号生成手段１２０ｂで生成した映像表示信号、若しくは、位置特定手段１５５による位置特定結果に基づき認識される操作器２００の移動（範囲）情報に応じて、抽出及び拡大の態様（拡大有無を含む）を決定する。

これにより、操作器２００の移動範囲が小さく背景ＢＧ全体の画像に占める操作領域の割合が小さい場合には、抽出処理手段１８０Ａで操作者Ｓ付近の映像を抽出して拡大することで、表示画面３上における操作領域の大きさを増大させることが可能となる。この結果、必要以上に大きな範囲で操作する必要がなくなり、また操作位置を限定されることもなくなる。

なお、上記距離検出部１１５による距離検出には、上記超音波検出計を用いる以外にも種々の方法が考えられる。

すなわち例えば、公知の顔認識技術を活用すれば、カメラ１２０の撮像部１２０ａで撮影し映像信号生成部１２０ｂで生成した映像信号より操作者Ｓの顔を識別し、その顔の大きさと、人間の一般的な顔の大きさの平均値とを比較することで、操作者Ｓまでの距離を求めることが可能である。なおこの場合、この顔認識領域の周囲一定範囲の領域を操作領域と決定して切り出し部１８１〜１８３に切り出しを行わせるようにしてもよい。あるいは顔認識領域と、前述のリモコン位置特定部１５５で特定される操作器２００を含む所定の範囲を操作領域と決定して切り出し部１８１〜１８３に切り出しを行わせるようにしてもよい。また顔でない部分に対し公知の画像認識を用いて距離計測を行うことも可能である。

また、上記（３）の変形例において説明したように、例えば図３に示した構成において、赤外線フィルタ付きカメラ１１０と通常のカメラ１２０とを別々に設けた場合にはそれら２つのカメラ１１０，１２０のレンズ位置のずれによりそれぞれの撮像は厳密には一致せず、視差が生じる。このようなカメラの視差を利用して、例えば距離検出用の左側カメラと右側カメラとをそれぞれ設け（少なくとも一方をカメラ１１０，１２０と兼用も可能）、それらの視差を利用して距離を計測するようにしてもよい。

また、入力画像における図形の大きさから計算する手法もある図２８は、この手法を説明するための説明図である。図２８において、例えば操作器２００の先端部に図示のように略「ロ」の字状にＩＲ−ＬＥＤが設置されていたとすると、カメラ１２０で撮影された映像信号における上記ＩＲ−ＬＥＤの「ロ」の字の大きさは、操作器２００までの距離が大きくなるほど小さくなる。この相関関係を利用して、映像信号中の「ロ」の字の大きさを取得することで、操作器２００までの距離を逆算して求めることができる。

（７）障害物回避の対策を講じる場合
すなわち、操作者Ｓとカメラ１２０との間に操作器２００による操作範囲の妨げとなるような障害物がある場合、この障害物の存在する弊害を回避するような手法を実行しても良い。

図２９（ａ）、図２９（ｂ）、図２９（ｃ）は、この障害物回避手法の１つとして切り出し領域を変更する変形例の概略を説明するための説明図である。

図２９（ａ）は、前述の図１８等に相当する図であり、カメラ１２０が撮影した領域と、切り出される領域との位置関係を表している。操作者Ｓが比較的近い距離（カメラ１２０から見て障害物よりも手前側に出ている状態）に位置する場合は、図２９（ｂ）に示すように、カメラ１２０が撮影した領域のうち操作者Ｓの近傍の所定の範囲を切り出した後、その切り出した部分を同一の倍率で液晶表示部３に表示する。この状態では操作メニューＭＥが図示のように障害物（この例では本棚）上にかぶって表示されることとなるが、操作者Ｓが障害物よりも手前側に位置するので、操作者Ｓが操作器２００をもって腕を振ることで当該本棚にかぶった状態の操作メニューＭＥ上に位置表示ＭＡを位置させることができ、通常通りの操作を行うことができる。

一方、操作者Ｓが後ろに下がった位置に立ち、カメラ１２０から見て障害物のほうが操作者Ｓよりも手前側に出ている状態になると、前述のようにそのまま操作メニューＭＥを障害物（本棚）上にかぶって表示しても、操作者Ｓがカメラ１２０から見て障害物よりも奥側に位置するので操作者Ｓが腕を振っても操作メニューＭＥ上に位置表示ＭＡを位置させることができず操作を行うことができない。

そこで本変形例においては、このような状態となったら、図２９（ｃ）及び図２９（ａ）に示すように、切り出し位置を、障害物を回避する（なるべく含まない）ような位置にずらす。これにより、図２９（ｃ）に示すように、障害物の影響のほとんどない状態で操作メニューＭＥを表示でき、通常通り、操作者Ｓが操作器２００をもって腕を振ることで操作メニューＭＥ上に位置表示ＭＡを位置させることができる。

なお、図２９（ｂ）に示す状態（カメラ１２０から見て操作者Ｓが障害物よりも手前側に出ている、障害物の非活性化状態）と、図２９（ｃ）に示す状態（カメラ１２０から見て障害物が操作者Ｓよりも手前側になる、障害物の活性化状態）との区別は、種々の手法が考えられる。一例としては、図３０に示すように、予めカメラ１２０からの距離に対応させる形で、障害物となりうる物をデータベース化して登録しておく手法がある（後述の図３３のデータベース１４５参照）。図３０において、右側の欄が各物体のカメラ１２０からの距離（活性化距離）であり、距離検出部１１５から操作者Ｓまでの距離がこの活性化距離よりも大きくなった場合に、当該物体が障害物となるとみなすことができる。またこのときに、公知の物体認識技術（例えば、ディジタル画像処理（CG-ARTS協会）p.192-p.200参照）を併せて用いるようにしてもよい。

また、操作器２００をある方向に連続的に動かして移動操作していたとき、あるときからリモコン位置特定部１５５の位置特定信号に基づく移動軌跡が検出できなくなった場合、これをもって活性化状態にある障害物を検出したとしてもよい（後述の（８）の変形例も参照）。少し逆方向に元に戻したときに操作器２００の移動軌跡が検出できるようになった（＝非活性状態への復帰）ことを確認できればなお確実である。

図３１（ａ）、図３１（ｂ）、図３１（ｃ）は、障害物回避手法の他の例としてメニュー表示領域をずらす変形例の概略を説明するための説明図である。

図３１（ａ）は、前述の図２９（ａ）や図１８等に相当する図であり、カメラ１２０が撮影した領域と、切り出される領域との位置関係を表している。操作者Ｓがカメラ１２０から見て障害物よりも手前側に出ている状態では、図３１（ｂ）に示すように、通常通り、例えば操作メニューＭＥを障害物（本棚）上にかぶって表示させる。この状態では、操作者Ｓが障害物よりも手前側に位置するので、操作者Ｓが操作器２００をもって腕を振ることで当該本棚にかぶった状態の操作メニューＭＥ上に位置表示ＭＡを位置させることができ、通常通りの操作を行うことができる。

一方、操作者Ｓが後ろに下がった位置に立ち、カメラ１２０から見て障害物のほうが操作者Ｓよりも手前側に出ている状態になると、前述と同様、操作者Ｓがカメラ１２０から見て障害物よりも奥側に位置するので操作者Ｓが腕を振っても操作メニューＭＥ上に位置表示ＭＡを位置させることができない。

そこで本変形例においては、このような状態となったら、図３１（ｃ）に示すように、（この例のように切り出しを行う場合には必ずしも切り出し位置を変えず）、障害物を回避する（なるべく含まない）ような位置に操作メニューの表示位置を（図示の例では左側に）ずらす。これにより、図３１（ｃ）に示すように、カメラ１２０から見て障害物とかぶらず（障害物の影響のほとんどない状態で）操作メニューＭＥを表示でき、通常通り、操作者Ｓが操作器２００をもって腕を振ることで操作メニューＭＥ上に位置表示ＭＡを位置させることができる。

なお、障害物の非活性化状態と活性化状態との区別は、前述と同様の手法で行えば足りる。

図３２は、上記の手法を実現するための本変形例の画像表示制御装置１００の機能的構成を表す機能ブロック図であり、前述の図２３や図３等に相当する図である。図３２において、この変形例の画像表示制御装置１００は、先に（６）の変形例において図２３に示した構成における切り出し処理部１８０及び２次映像合成部１９５にそれぞれ対応する機能を備えた切り出し処理部１８０Ｂ及び２次映像合成部１９５Ａを設けるとともに、新たに障害物判定部１２５を設けている。

障害物判定部１２５は、上記距離検出部１１５からの距離検出信号と、リモコン位置特定部１５５からの位置特定信号とが入力され、前述したように障害物が非活性化状態か活性化状態かを判定する。

切り出し処理部１８０Ｂは、この例では前述の切り出し処理部１８０，１８０Ａのような拡大機能は備えておらず、上記障害物判定部１２５における上記判定結果信号と、リモコン位置特定部１５５からの位置特定信号とに基づき、上記障害物判定結果に応じた態様（通常の切り出しか位置をずらした切り出しか）で、１次映像合成部１３５からの位置表示ＭＡ付き映像信号を切り出す（詳細は後述の図３３参照）。

２次映像合成部１９５Ａは、上記障害物判定部１２５における上記判定結果に応じた態様（通常メニュー表示位置かずらしたメニュー表示位置か）で、切り出し処理部１８０Ｂで切り出された映像に対し、メニュー作成部１５４から入力した操作メニューＭＥを合成する。

図３３は、上記切り出し処理部１８０Ｂ及び２次映像合成部１９５Ａの詳細構成を、障害物判定部１２５とともに表す機能ブロック図である。

図３３において、切り出し処理部１８０Ｂは、障害物回避のためのずらしを行わず通常の切り出しを行うための通常切り出し部１８９と、障害物回避のためのずらしを伴う切り出しを行うためのずらし切り出し部１９０と、上記障害物判定部１２５からの切替制御信号によって切り替えられ、上記１次映像合成部１３５からの入力を通常切り出し部１８９又はずらし切り出し部１９０のいずれか一方に選択的に出力する切り換えスイッチ１９１とを備えている。

通常切り出し部１８９には、リモコン位置特定部１５５からの位置特定信号が入力され、その特定された操作器２００の位置に基づき、操作器２００位置の近傍の所定範囲（例えば予め固定的に設定されている）の切り出しを行う。ずらし切り出し部１９０には、上記同様のリモコン位置特定部１５５からの位置特定信号と障害物判定部１２５からの障害物判定結果（障害物位置情報を含む）とが入力され、操作器２００の位置と障害物の位置とに基づき、上記操作器２００位置の近傍の所定範囲の切り出しを、前述のように障害物位置をなるべく回避するように位置をずらしながら行う。

一方、２次映像合成部１９５Ａは、障害物回避のためのずらしを行わず通常のメニュー表示のための映像合成を行うための通常合成部１９６と、障害物を回避するずらしたメニュー表示のための映像合成を行うずらし合成部１９７と、上記障害物判定部１２５からの切替制御信号によって切り替えられ、上記切り出し処理部１８０Ｂからの入力を通常合成部１９６又はずらし合成部１９７のいずれか一方に選択的に出力する切り換えスイッチ１９８とを備えている。

通常合成部１９６には、メニュー作成部１５４からのメニュー表示信号が入力され、その入力された操作メニューＭＥを、切り出し処理部１８０Ｂから入力した画像の所定位置（例えば予め固定的に設定されている）となるように合成する。ずらし合成部１９７には、上記同様のメニュー作成部１５４からのメニュー表示信号と、障害物判定部１２５からの障害物判定結果（障害物位置情報を含む）とが入力され、障害物の位置情報に基づき、上記入力された操作メニューＭＥを、前述のように障害物位置をなるべく回避できるように位置をずらして合成する。

なおこの例では、前述の図２９に示したずらし切り出し機能を実行可能な上記切り出し処理部１８０Ｂと、前述の図３１に示したずらしメニュー表示機能を実行可能な上記２次映像合成部１９５Ａとを両方併せて備える場合を例にとって示している。しかしながら、いずれか一方のみの機能を実行すれば良い場合は、反対側は一般的な機能を備えていれば足りる。例えば上記切り出し処理部１８０Ｂでのずらし切り出し機能のみで障害物対策を行う場合には、２次映像合成部１９５Ａにおけるずらし合成部１９７は（切り換えスイッチ１９８とともに）省略して良い。同様に上記２次映像合成部１９５Ａでのずらしメニュー表示機能のみで障害物対策を行う場合には、切り出し処理部１８０Ｂにおけるずらし切り出し部１９０は（切り換えスイッチ１９１とともに）省略して良い。

図３４は、切り出し処理部１８０Ｂ、２次映像合成部１９５Ａ、及び障害物判定部１２５の全体で実行する制御手順を表すフローチャートである。先の図２５と同等の手順には同一の符号を付し、適宜説明を簡略化する。

図３４において、まずステップＳ１０において、障害物判定部１２５で、距離検出部１１５で検出した操作者Ｓ（操作器２００）とカメラ１２０との距離を取得する。

その後、ステップＳ１５において、障害物判定部１２５で、前述のデータベース化された障害物情報を備えたデータベース１４５より、今回問題となる障害物に関する情報（少なくとも活性化距離を含み、その他障害物の大きさ等を含んでいても良い）を取得する。

そして、ステップＳ４０に移り、障害物判定部１２５で、上記ステップＳ１０で取得した距離と、上記ステップＳ１５で取得した障害物情報とに基づき、障害物が活性化した状態（カメラ１２０から見て障害物が操作者Ｓよりも手前側）であるかどうかを判定する。活性化状態になければ判定が満たされず、このフローを終了する。

障害物が活性化状態にあればステップＳ４０の判定が満たされ、ステップＳ４３に移る。ステップＳ４３では、障害物判定部１２５で、上記障害物情報に基づき、（障害物を回避するずらし切り出しを行わなくても）障害物以外の領域で十分な操作メニューＭＥの表示スペースを確保できるかどうかを判定する。

例えば障害物自体が比較的カメラ１２０より遠い距離にある場合や障害物の大きさ自体がそれほど大きくない場合等で上記表示スペースを確保できる場合にはステップＳ４３の判定が満たされ、ステップＳ４６に移る。ステップＳ４６では、障害物判定部１２５で切り替えスイッチ１９１に切替制御信号を出力して通常切り出し部１８９側へ切り替えるとともに、切り替えスイッチ１９８に切替制御信号を出力してずらし合成部１９７側へ切り替える。これにより、１次映像合成部１３５からの位置表示ＭＡつき映像信号を通常切り出し部１８９へ供給してずらしのない通常の切り出しを行うとともに、その通常切り出し部１８９からの切り出し映像信号をずらし合成部１９７に供給して、前述のように障害物を回避するずらしたメニュー表示のための映像合成を行い、このフローを終了する。

一方、上記ステップＳ４３において、例えば障害物自体が比較的カメラ１２０に近い距離にある場合や障害物の大きさ自体が大きい場合等で、障害物以外の領域で十分な操作メニューＭＥの表示スペースを確保できない場合にはステップＳ４３の判定が満たされず、ステップＳ４９に移る。

ステップＳ４９では、障害物判定部１２５で切り替えスイッチ１９１に切替制御信号を出力してずらし切り出し部１９０側へ切り替えるとともに、切り替えスイッチ１９８に切替制御信号を出力して通常合成部１９６側へ切り替える。これにより、１次映像合成部１３５からの位置表示ＭＡつき映像信号をずらし切り出し部１９０へ供給して前述のように障害物を回避するずらした切り出しを行うとともに、そのずらし切り出し部１９０からの切り出し映像信号を通常合成部１９６に供給して、ずらしのない通常のメニュー表示のための映像合成を行い、このフローを終了する。

本変形例の画像表示制御装置１においては、抽出処理手段（この例では切り出し処理部１８０Ｂ）は、映像表示信号生成手段１２０ｂで生成した映像表示信号において操作器２００との間に介在する障害物の映像を回避するように、抽出及び拡大の態様（拡大有無を含む）を決定する。

これにより、操作器２００と装置１との間に障害物が存在するような場合に、その障害物の映像を回避するように抽出及び拡大を行うことで、表示画面３上において障害物の映像に阻害されることなく操作器２００の操作領域を確保することができ、操作性の低下を防止することができる。また操作位置を限定されることもなくなる。

また、本変形例の画像表示制御装置１においては、図象表示信号生成手段１５４で生成した操作対象図象ＭＥの表示画面３上における表示位置を、映像表示信号生成手段１２０ｂで生成した映像表示信号において操作器２００との間に介在する障害物の映像を回避するように設定するための図象位置設定手段（この例では２次映像合成部１９５Ａ）を有する。

これにより、操作器２００と装置１との間に障害物が存在し、そのままでは背景全体の画像に占める操作器２００を移動操作可能な領域（操作領域）の割合が小さくなる場合において、障害物の映像を回避するように操作対象図象ＭＥの表示を行うことで、表示画面３上において操作器２００の操作領域を確保することができ、操作性の低下を防止することができる。

（８）障害物越しの操作感を得られるようにする場合
すなわち、操作者Ｓとカメラ１２０との間に操作器２００による操作範囲の妨げとなるような障害物があった場合にも、その障害物の存在していないかのような、あたかも障害物越しに操作できているような操作感を操作者Ｓに与えるような手法を実行しても良い。

図３５（ａ）、図３５（ｂ）、図３５（ｃ）、図３５（ｄ）は、このような操作感を得る変形例の概略を説明するための説明図である。

図３５（ａ）は、前述の図１８等に対応する図であり、カメラ１２０が撮影した領域を表しており、この例では、カメラ１２０が撮影した領域をそのまま同一の倍率で液晶表示部３に表示する。ここで、図示のように、操作者Ｓよりも障害物が手前側に位置し、操作メニューＭＥが図示のように障害物（この例では観葉植物）上にかぶって表示されたような場合を想定する。この場合、そのままでは、操作者Ｓが操作器２００をもって操作メニューＭＥ側に腕を振ったとしても、図３５（ｂ）に示すように、操作器２００が当該観葉植物にかぶった状態になるとリモコン位置特定部１５５による操作器２００の位置特定が困難又は不可能となるため、操作メニューＭＥ上に位置表示ＭＡを位置させることができなくなる。

そこで本変形例においては、このような状態となったら、図３５（ｃ）及び図３５（ｄ）に示すように、それまでに（操作器２００が当該観葉植物にかぶる状態となる前に）リモコン位置特定部１５５により特定できた操作器２００の特定位置（「×」印で示す）の移動軌跡を用いて、これを延長するように別途新たに仮想的な移動位置を想定し、この予想移動位置を用いて位置表示ＭＡを補完した形で表示する（「●」印で示す）。これによって、操作者Ｓにとってあたかも障害物がないかのような（障害物越しに操作できているかのような）操作感を与え、操作性の低下を防止するようにしている。

図３６は、上記の手法を実現するための本変形例の画像表示制御装置１００の機能的構成を表す機能ブロック図であり、上記実施形態の図３等に相当する図である。図３６において、この変形例の画像表示制御装置１００は、図３に示した構成に、新たに補完信号生成部１６５を設けている。

補完信号生成部１６５は、リモコン位置特定部１５５からの位置特定信号を入力し、これに基づく前述した操作器２００の特定位置の移動軌跡を延長するように別途新たに仮想的な操作器２００の移動位置を想定し、この予想移動位置を用いて位置表示ＭＡを補完して表示するための補完信号を生成し、リモコン位置記号作成部１５６へと出力する。

これにより、リモコン位置記号作成部１５６は、通常通りリモコン位置特定部１５５からの位置特定信号によって特定される位置に、遠隔操作器２００の位置を上記液晶表示部３に表示させるための位置表示ＭＡを生成するのに加え、前述のように障害物にかぶってリモコン位置特定部１５５からの位置特定信号が入力されなくなっても、これに代わるように補完信号生成部１６５から入力される補完信号によって位置表示ＭＡを生成し、映像合成部１３０へと出力する。これにより、液晶表示部３に実写されている障害物の映像上に対し、遠隔操作器２００の上記想定移動位置に対応した位置表示ＭＡが重ねられて表示される。

図３７は、補完信号生成部１６５が実行する制御手順を表すフローチャートであり、前述の図２５や図２６に対応する図である。

図３７において、まずステップＳ１０２において、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、実際の操作器２００の移動速度が所定のしきい値より小さい（遅い）かどうかを判定する。移動速度が当該しきい値未満である場合は判定が満たされ、例えば操作者Ｓが障害物の存在を意識して障害物越しの操作をしたがっている等とみなされて後述のステップＳ１０８に移る。移動速度が当該しきい値以上である場合には判定が満たされず、ステップＳ１０４に移る。

ステップＳ１０４では、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、実際の操作器２００の移動速度が所定のしきい値より（上記ステップＳ１０２のしきい値よりも大きい値）大きい（速い）かどうかを判定する。移動速度が当該しきい値より大きい場合は判定が満たされ、例えば操作者Ｓが障害物の存在を意識して障害物越しの操作をしたがっている等とみなされて後述のステップＳ１０８に移る。移動速度が当該しきい値未満である場合には判定が満たされず、ステップＳ１０６に移る。

ステップＳ１０６では、操作者Ｓからの補完指示信号が入力されたかどうかを判定する。すなわち、本変形例では上記ステップＳ１０２、ステップＳ１０４等の判定条件を満たす満たさないに関係なく、操作者Ｓが意図的に（強制的に）補完信号生成部１６５による補完実行を指示できる操作手段が備えられており、その操作手段による補完指示信号は補完信号生成部１６５に入力される（図３６のユーザ指示入力部１５１から入力する矢印参照）。このステップＳ１０６は、この補完指示信号の入力があったかどうかを判定するものである。操作者Ｓによる補完実行指示があった場合には判定が満たされて後述のステップＳ１０８に移る。補完実行指示がない場合には判定が満たされず、このフローを終了する。

ステップＳ１０２、ステップＳ１０４、ステップＳ１０６のいずれかの判定が満たされて移行するステップＳ１０８では、前述したように実際の操作器２００の移動軌跡が途絶えその延長表示を開始するときの延長動作開始点Ｐｓを、操作器２００の現在位置とする。また、延長動作終了点Ｐｅを以下のようにして決定する。

すなわち、図３８に概念的に示すように、操作器２００の現在位置と、それより少し前の位置との間に線分を引き、この少し前の位置から上記現在位置に向かって当該線分を延長した直線を引き、その延長線と表示画面の画面端との交点を、延長終了点Ｐｅとする。このようにして延長開始点Ｐｓ及び延長終了点Ｐｅを決定したら、ステップＳ１１０へ移る。

ステップＳ１１０では、上記ステップＳ１０８で延長終了点Ｐｅとして決定した地点（上記延長線と表示画面の画面端との交点）が、実際に延長動作の終了点として指定可能であるかどうかを判定する。例えば通常の操作者Ｓの身長等から見て上記終了点が明らかに操作可能な範囲から逸脱している等、指定できない場合には判定が満たされず、ステップＳ１１２へ移る。指定可能であった場合にはステップＳ１１０の判定が満たされ、後述のステップＳ１１４へ移る。

ステップＳ１１２では、上記ステップＳ１０８で決定した延長終了点Ｐｅとは異なる、別の指定可能要素（例えばメニュー作成部１５４からのメニュー表示信号により表示される操作メニューＭＥ上。前述の図３８参照）の所定箇所（この例では重心位置）を上記延長線が通過するように、延長終了点Ｐｅの位置を変更する。その後、ステップＳ１１４へ移る。

ステップＳ１１４では、延長線上を伸びていくように延長補完（追従）するときの位置表示ＭＡの延長補完（追従）速度を一定値とする設定になっているかどうかを判定する。

すなわち、本変形例でも、先に（６）の変形例で述べたのと同様、実行する延長補完処理時の位置表示ＭＡの追従速度として、（操作器２００の実際の移動速度に関係なく）予め定められた一定速度で追従する定速モードと、操作器２００の実際の移動速度に応じて追従速度が変化する可変速モードとが備えられている。そして、操作者Ｓが上記延長補完処理時に上記２つのモードのうちいずれを用いるかを指示できる選択手段が備えられており、その選択手段によるモード選択信号は補完信号生成部１６５に入力される。このステップＳ１１４は、このモード選択信号で上記定速モードが選択されているかどうかを判定するものである。

操作者Ｓにより定速モードが選択されていた場合にはステップＳ１１４の判定が満たされてステップＳ１１６に移る。ステップＳ１１６では、前述したように実際の操作器２００の移動軌跡を延長するように追従表示するときの位置表示ＭＡ（ポインタ）の追従速度ｆｐｖを、所定の一定値Ｓｓとする。

一方操作者Ｓにより可変速モードが選択されていた場合にはステップＳ１１４の判定が満たされず、ステップＳ１１８に移る。ステップＳ１１８では、リモコン位置特定部１５５からの位置特定信号（及び所定時間範囲内におけるその挙動）に基づき、実際の操作器２００の移動速度が所定のしきい値α（予め設定される）以下となっているかどうかを判定する。操作器２００の移動速度がそれほど遅くなっていない場合にはステップＳ１１８の判定が満たされず、上記ステップＳ１１６へ移行する。操作器２００の移動速度が十分に遅くなっている場合にはステップＳ１１８の判定が満たされ、ステップＳ１２０に移る。

ステップＳ１２０では、前述したように実際の操作器２００の移動軌跡を延長するように追従表示するときの位置表示ＭＡ（ポインタ）の追従速度ｆｐｖを、前述の式１と同様の、
ｆｐｖ＝β／（１＋α−ｒｐｖ） … （式２）
により算出する。前述と同様、ｒｐｖは実際の操作器２００（実際の位置表示ＭＡ）の移動速度（実ポインタ速度）であり、βは予め固定的に上限として設定されている追従ポインタ最高速度である。またαはステップＳ１１８で前述した移動速度のしきい値である。

上記式２においても、前述した式１と同様の意義がある。すなわち、ステップＳ１１８での判定が満たされていることからステップＳ１２０の時点で実際の操作器２００の移動速度ｒｐｖ≦αとなっているため、上記式２のうちα−ｒｐｖは０以上の値となり、実際の操作器２００の移動速度が遅い（操作がゆっくりである）ほど大きな値となる。この結果、これに１を加えた１＋α−ｒｐｖは１以上の値であって操作がゆっくりであるほど１よりも大きくなる性質を備え、このような値を用いて追従ポインタ最高速度βを除することにより、上限値を超えることなくかつ操作がゆっくりであるほど遅くなるポインタ追従速度ｆｐｖを実現することができる。

上記ステップＳ１１６又はステップＳ１２０が終了すると、ステップＳ１２２に移る。ステップＳ１２２では、上記リモコン位置記号作成部１５６で作成され入力された位置表示（ポインタ）ＭＡに上記の延長補完処理を施し、上記ステップＳ１０８（又はステップＳ１１２）で決定した延長開始点Ｐｓから延長終了点Ｐｅまで、上記ステップＳ１１６又はステップＳ１２０で決定した追従ポインタ速度ｆｐｖにより位置表示ＭＡが表示されるようにリモコン位置記号作成部１５６へ補完信号を出力する。ステップＳ１２２が終了すると、このルーチンを終了する。

なお、上記実施形態等においては、操作者Ｓが手に持った遠隔操作器２００を移動させて位置表示ＭＡを液晶表示部３上で動かし、操作メニューＭＥのうち実行したい操作領域に上記位置表示ＭＡが到達したときにその操作領域の操作を決定すべく操作部２０１を適宜に操作する（例えば「決定」ボタンを押す）。そしてこれによって、対応する赤外線指示信号が赤外線駆動部２０２から出射され、画像表示制御装置１００側でこれに基づく処理を行って対応した操作信号が上記ＤＶＤ録画・再生機構１４０に出力され、対応する動作を行わせることができた。

本変形例においては、上記のようにして障害物に遮られたままその延長線上に位置表示ＭＡを到達させた状態では、対応する赤外線指示信号を画像表示制御装置１００側で受け取ることが不可能又は困難であり、そのままでは、操作メニューＭＥのうち実行したい操作領域に上記位置表示ＭＡが到達したときにその操作領域の操作を決定することができない。この操作領域の決定に関しては、例えば、上記延長補完動作を開始してから所定時間の経過後に位置表示ＭＡが到達した位置を自動的に操作者Ｓが決定した操作領域とみなすようにしたり、別途の（操作領域決定のための）指示手段を設けて決定指示を行うようにすればよい。

本変形例の画像表示制御装置１においては、位置特定手段１５５による位置特定結果に基づき認識される操作器２００の移動情報に基づき、特定された位置とは異なる操作器２００の予想移動位置を設定する予想位置設定手段（この例では補完信号生成部１６５）を有する。

これにより、例えば障害物の存在により操作器２００の移動軌跡を途中で検出できなくなった場合等において、操作器２００の位置特定結果以外にも移動位置を予想して設定することで、仮想的に表示画面３上における移動軌跡を補って連続的に表現し、操作性を向上することができる。

また本変形例の画像表示制御装置１においては、予想位置設定手段１６５は、操作器２００の移動時に位置特定手段１５５により順次特定される移動方向延長線上となるように、予想移動位置を設定する。

これにより、障害物の存在等により移動軌跡を途中で検出できなくなった場合に、操作器２００の移動方向延長線上に移動位置を予想して仮想的に表示画面３上における移動軌跡を補い、途切れた移動軌跡を再現することで、操作性を向上することができる。

なお、上記は操作器２００を障害物方向に移動させているときに障害物によって操作器２００が完全に遮られて移動軌跡が途中で検出できなくなり、これに対応して移動方向延長線上に移動位置を予想する場合を例にとって説明したが、これに限られない。すなわち例えば、図３９（ａ）のように、操作者Ｓより手前側に位置する障害物（この例では観葉植物）があり、操作メニューＭＥが図示のように障害物を挟んで操作者Ｓと反対側に表示された（操作メニューＭＥ自体は障害物とかぶっていない）ような場合を考える。この場合、操作者Ｓが操作器２００をもって腕を振ることで、（操作メニューＭＥは障害物とかぶっていないため）最終的に操作メニューＭＥ上に側に位置表示ＭＡを位置させ、通常の操作を行うことはできる。しかしながら、上記のように操作メニューＭＥ上に側に位置表示ＭＡを位置させるまでの途中の段階で、図３９（ｂ）に示すように、操作器２００が当該観葉植物にかぶった状態になるとリモコン位置特定部１５５による操作器２００の位置特定が困難又は不可能となり、この状態の間、位置表示ＭＡが（例えば観葉植物の枝葉に遮られて）断片的・離散的にしか表示されなくなる（あるいは移動解像度が低くなる）可能性がある。

このような場合、上記（８）の変形例における延長補完の手法を、前述と同様にして、この移動軌跡中間部における補完についても適用することができる。すなわち、図３９（ｃ）及び図３９（ｄ）に示すように、操作器２００が当該観葉植物にかぶる状態となる前や、枝葉の間から操作器２００が断片的に覗く状態においてリモコン位置特定部１５５により特定できた操作器２００の特定位置（「×」印で示す）の移動軌跡を用いて、これを結ぶように（操作器２００の特定位置の隣接する２点を結ぶように）別途新たに仮想的な移動位置を想定し、この予想移動位置を用いて位置表示ＭＡを補完した形で表示する（「●」印で示す）。これによって、操作者Ｓにとってあたかも障害物による障害がないような連続的な操作感を与えるようにしている。

この画像表示制御装置１においては、予想位置設定手段１６５は、操作器２００の移動時に位置特定手段１５５により順次特定される隣接する２点の中間部となるように、予想移動位置を設定する。

これにより、表示画面３における操作器２００の移動軌跡が障害物の存在により断片的・離散的にしか検出できなかった場合に、隣接２点間に予想移動位置を設定して仮想的に表示画面３上における移動軌跡を補い連続的に表現することで、操作円滑性を向上することができる。

（９）蓄積コンテンツの再生位置指定に応用する場合
以上は、画像表示装置１にＤＶＤ録画・再生機構１４０の操作に関わるメニュー画面を表示させ、遠隔操作器２００の赤外線像をメニュー選択のポインタとして用いた場合を例にとって説明した。しかしながら、このポインタとしての活用はこれに限られるものではなく、それ以外にも適用可能である。本変形例は、上記ポインタの機能を蓄積コンテンツの再生位置の自在な指定に応用した場合の例である。

図４０は、本変形例の画像表示システムにおいて、画像表示装置１の液晶表示部３の表示の一例を表す図であり、前述の図６に対応する図である。図６と同等の部分には同一の符号を付している。図４０において、この例では、画像表示制御装置１００の図示しない上記収納部に収納されたＤＶＤに予め録画された長さ１時間のコンテンツ（番組等）表示ＣＴを実行させた状態で、操作者Ｓがそのコンテンツを所望の時間位置（図示の例では再生開始位置から４２分経過した位置）から再生させることを意図し、手に持った遠隔操作器２００の液晶表示部３における位置をコンテンツ表示ＣＴの当該４２分経過点に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押してその選択指定を確定させた状態を表している。なお、この例では液晶表示部３の右上部に当該４２分経過点（再生開始位置）における当該コンテンツの画像ＣＣ（静止画でも動画でもよい）が割り込み表示されている。あるいはこのコンテンツ再生開始位置指定操作とは関係なく、所定のチャンネルにおける現在の放映画像をこの位置に表示するようにしてもよい。

図４１は、上記画像表示制御装置１００の機能的構成を表す機能ブロック図である。図４１において、画像表示制御装置１００は、図３等に示されたメニュー表示作成部１５４に代えて、上記コンテンツを上記液晶表示部３に表示させるための信号を生成するコンテンツ表示作成部１５４Ａが設けられている。

本変形例では、前述したように、カメラ１２０からの映像表示信号をもとに画像表示装置１の液晶表示部３に操作者Ｓがいる実世界が表示された状態において、操作者Ｓが遠隔操作器２００を手に持って操作部２０１を適宜に操作すると、これに対応する特定の赤外線指示信号（コンテンツ再生位置指定モードに対応）が赤外線駆動部２０２から出射され、前述と同様、画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読される。ユーザー指示入力部１５１ではこれに対応してコンテンツ表示作成部１５４Ａに作成指示信号を入力し、コンテンツ表示作成部１５４Ａは、これに対応して、ＤＶＤ録画・再生機構１４０に対応する再生コンテンツについての問い合わせを行ってその情報（コンテンツの有無、全録画時間等）を取得した後、画像表示装置１の上記液晶表示部３に図４０に示したような帯状の表示からなるコンテンツ時間枠（操作対象図象）を表示させるためのコンテンツ表示信号（図象表示信号）を生成する。

このコンテンツ表示信号は、前述と同様、映像合成部１３０によって上記カメラ１２０の映像信号生成部１２０ｂからの映像表示信号と合成され、その合成信号が画像表示装置１へ出力されることで、カメラ１２０による上記実写映像と上記コンテンツ表示作成部１５４Ａからのコンテンツ表示ＣＴとの合成映像が液晶表示部３に表示される（コンテンツ再生位置指定モード、言い換えれば画面位置選択モードへの移行）。なお、本変形例でも、前述と同様、このコンテンツ再生位置指定モードへ移行している間（このモードが終了するまで）、遠隔操作器２００からは上記した特定の赤外線指示信号（低消費電力）を発信し続けるようになっている。

一方このとき、前述と同様、操作者Ｓの持った遠隔操作器２００から発せられる上記特定の赤外線指示信号が赤外線フィルタ付きカメラ１１０で撮像されて、リモコン位置特定部１５５において遠隔操作器２００が赤外線フィルタ付きカメラ１１０による撮像中において占める位置が特定され、その位置情報をもとにリモコン位置記号作成部１５６で位置表示信号が生成されて映像合成部１３０へと入力され、これによって液晶表示部３に実写されている遠隔操作器２００の位置（あるいは近傍）に位置表示ＭＡ（矢印型のマーク、上記図４０参照）が重ねて表示される。これにより、操作者Ｓが遠隔操作器２００を持ってその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部３にコンテンツ表示ＣＴと重なるようにして表示されている遠隔操作器２００の位置表示ＭＡを液晶表示部３上で動かすことができる。

一方、前述と同様、上記リモコン位置特定部１５５で特定した遠隔操作器２００の位置情報は上記ユーザー操作判定部１５２へも入力され、このときユーザー操作判定部１５２には、上記コンテンツ表示作成部１５４Ａで作成したコンテンツ表示信号のコンテンツ表示に関する情報（どのような内容、時間長さのコンテンツ表示を行っているか）も入力されている。

上記のように操作者Ｓが遠隔操作器２００を移動させて位置表示ＭＡを液晶表示部３上で動かし、コンテンツ表示ＣＴのうち再生開始したい位置に上記位置表示ＭＡが到達したときにその選択指定を決定すべく操作部２０１を適宜に操作する（例えば「決定」ボタンを押す）ことで、上記同様、これに対応する赤外線指示信号が赤外線駆動部２０２から出射され、画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読され（指示信号入力手段）、対応して上記ユーザー操作判定部１５２に決定指示信号が入力される。

上記決定指示信号が入力されたユーザー操作判定部１５２は、前述したのと同様、リモコン位置特定部１５５から取得した遠隔操作器２００の位置情報と、コンテンツ表示作成部１５４Ａから取得したコンテンツ表示情報とに基づき、上記液晶表示部３に表示されたコンテンツ表示ＣＴのうち選択指定された再生開始位置（操作指定部位）を決定し（操作部位決定手段）、これに対応する信号をコンテンツ表示作成部１５４Ａへと入力する。コンテンツ表示作成部１５４Ａはその入力された信号に基づき、上記選択指定された再生開始位置及びその近傍領域を、それ以外の部位と異なる態様で表示するようなコンテンツ表示信号を生成して映像合成部１３０に出力する。

上記の結果、図４０に示したように、この例では当該選択指定された再生開始位置から４２分経過位置及びその近傍領域は他の領域と色が異なって表示されている。そして、ユーザー操作判定部１５２から上記再生開始位置の選択指定に対応した操作指示信号が操作信号生成部１５３へ出力され、操作信号生成部１５３がこれに応じて対応する操作信号を上記ＤＶＤ録画・再生機構１４０に出力し、対応する位置からの再生動作を行うことができる。

以上説明した本変形例においても、上記実施形態と同様の効果を得ることができる。すなわち、液晶表示部３における遠隔操作器２００の位置表示ＭＡをコンテンツ表示ＣＴから再生開始位置を選択指定するためのポインタとして利用することができ、操作者Ｓは、液晶表示部３から目を離すことなく、遠隔操作器２００自体の位置移動という体感的・直感的に非常に分かりやすい動作で、コンテンツ表示ＣＴのうち所望の再生開始位置を容易に選択指定することができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者Ｓの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。またそれ以外の効果についても、詳細は省略するが上記実施形態とほぼ同様の効果を得ることができる。

なお、上記においては、図４０に示したように、液晶表示部３のほぼ全体に実世界映像及びコンテンツ表示ＣＴを大きく表示するとともに、右上部に当該再生開始位置におけるコンテンツ画像ＣＣ（あるいは所定チャンネルにおける現在の放映画像）を割り込み表示させたが、これに限られない。すなわち、上記の逆に、図４２に示すように、液晶表示部３のほぼ全体に再生開始位置におけるコンテンツ画像ＣＣ（あるいは所定チャンネルにおける現在の放映画像）を大きく表示するとともに、右上部に実世界映像及びコンテンツ表示ＣＴを割り込み表示させるようにしてもよい。

さらに、上記のように遠隔操作器２００の位置によって再生開始位置を指定するのにも限られず、例えば再生映像や再生音楽の音量、表示画面の明るさ等を指定できるようにしても良い。また再生に限られず、録画開始位置等を指定できるようにしてもよい。

（１０）ＥＰＧに適用した場合
さらに、上記ポインタの機能は、近年急速に普及しつつある電子番組ガイド（ＥＰＧ）に適用することもできる。本変形例はそのような場合の例である。

図４３は、本変形例の画像表示システムにおいて、画像表示装置１の液晶表示部３の表示の一例を表す図であり、前述の図６や図４０に対応する図である。図６と同等の部分には同一の符号を付している。図４３において、この例では、画像表示制御装置１００又は画像表示装置１側の公知の機能を用いて液晶表示部３に電子番組ガイドＥを表示させた状態で、操作者Ｓがその電子番組ガイドＥに表示された所定の番組を視聴することを意図し、手に持った遠隔操作器２００の液晶表示部３における位置を電子番組ガイドＥの当該番組の領域（枠）に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押してその選択指定を確定させた状態を表している。

図４４は、上記画像表示制御装置１００の機能的構成を表す機能ブロック図である。図４４において、画像表示制御装置１００は、前述の（９）の変形例の図４１に示されたコンテンツ表示作成部１５４Ａに代えて、前述した視聴したい所望の番組を含む電子番組ガイドＥを上記液晶表示部３に表示させるための信号を生成する番組表表示作成部１５４Ｂが設けられている。

本変形例でも、前述した（９）の変形例と同様、カメラ１２０からの映像表示信号をもとに画像表示装置１の液晶表示部３に操作者Ｓがいる実世界が表示された状態において、操作者Ｓが遠隔操作器２００を手に持って操作部２０１を適宜に操作すると、これに対応する特定の赤外線指示信号（電子番組ガイド表示モードに対応）が赤外線駆動部２０２から出射され画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読される。ユーザー指示入力部１５１ではこれに対応して番組表表示作成部１５４Ｂに作成指示信号を入力し、番組表表示作成部１５４Ｂは、これに対応して、ＤＶＤ録画・再生機構１４０に対し（あるいはさらにこれを介して画像表示装置１に対し）取得可能な電子番組ガイドについての問い合わせを行ってその情報（電子番組ガイドに表示する番組内容、時間等）を取得した後、画像表示装置１の上記液晶表示部３に図４３に一例を示したような所定の態様の電子番組ガイドＥ（操作対象図象）を表示させるための番組表表示信号（図象表示信号）を生成する。

この番組表表示信号は、前述と同様、映像合成部１３０によって上記カメラ１２０の映像信号生成部１２０ｂからの映像表示信号と合成され、その合成信号が画像表示装置１へ出力されることで、カメラ１２０による上記実写映像と上記番組表表示作成部１５４Ｂからの電子番組ガイドＥとの合成映像が液晶表示部３に表示される（電子番組ガイド表示モード、言い換えれば画面位置選択モードへの移行）。なお、本変形例でも、この電子番組ガイド表示モードへ移行している間（このモードが終了するまで）、遠隔操作器２００からは上記した特定の赤外線指示信号（低消費電力）を発信し続けるようになっている。

一方、前述した（９）の変形例と同様、操作者Ｓの持った遠隔操作器２００から発せられる上記特定の赤外線指示信号が赤外線フィルタ付きカメラ１１０で撮像されて、リモコン位置特定部１５５において遠隔操作器２００が赤外線フィルタ付きカメラ１１０による撮像中において占める位置が特定され、その位置情報をもとにリモコン位置記号作成部１５６で位置表示信号が生成されて映像合成部１３０へと入力され、これによって液晶表示部３に実写されている遠隔操作器２００の位置（あるいは近傍）に位置表示ＭＡ（矢印型のマーク、上記図４３参照）が重ねて表示される。これにより、操作者Ｓが遠隔操作器２００を持ってその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部３に電子番組ガイドＥと重なるようにして表示されている遠隔操作器２００の位置表示ＭＡを液晶表示部３上で動かすことができる。

一方、前述した（９）の変形例と同様、上記リモコン位置特定部１５５で特定した遠隔操作器２００の位置情報は上記ユーザー操作判定部１５２へも入力され、このときユーザー操作判定部１５２には、上記番組表表示作成部１５４Ｂで作成した番組表表示信号の電子番組ガイド表示に関する情報（どのような長さでどのような内容の番組を何時の時間帯にいくつ表示を行っているか等）も入力されている。

上記のように操作者Ｓが遠隔操作器２００を移動させて位置表示ＭＡを液晶表示部３上で動かし、電子番組ガイドＥのうち視聴したい番組の表示領域に上記位置表示ＭＡが到達したときにその選択指定を決定すべく操作部２０１を適宜に操作する（例えば「決定」ボタンを押す）ことで、前述した（９）の変形例と同様、これに対応する赤外線指示信号が赤外線駆動部２０２から出射され、画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読され（指示信号入力手段）、対応して上記ユーザー操作判定部１５２に決定指示信号が入力される。

上記決定指示信号が入力されたユーザー操作判定部１５２は、前述した（９）の変形例と同様、リモコン位置特定部１５５から取得した遠隔操作器２００の位置情報と、番組表表示作成部１５４Ｂから取得した電子番組ガイド表示情報とに基づき、上記液晶表示部３に表示された電子番組ガイドＥのうち選択指定された視聴希望番組の領域（操作指定部位）を決定し（操作部位決定手段）、これに対応する信号を番組表表示作成部１５４Ｂへと入力する。番組表表示作成部１５４Ｂはその入力された信号に基づき、上記選択指定された番組領域（番組枠）を、それ以外の部位と異なる態様で表示するような番組表表示信号を生成して映像合成部１３０に出力する。

上記の結果、図２に示したように、この例では当該選択指定された番組領域は他の領域と色が異なって表示されている。そして、ユーザー操作判定部１５２から上記番組領域の選択指定に対応した操作指示信号が操作信号生成部１５３へ出力され、操作信号生成部１５３がこれに応じて対応する操作信号を上記ＤＶＤ録画・再生機構１４０を介し画像表示装置１に出力し、対応する番組を画像表示装置１の液晶表示部３に表示させ視聴することができる。

以上説明した本変形例においても、上記実施形態と同様の効果を得ることができる。すなわち、液晶表示部３における遠隔操作器２００の位置表示ＭＡを電子番組ガイドＥから視聴したい番組を選択指定するためのポインタとして利用することができ、操作者Ｓは、液晶表示部３から目を離すことなく、遠隔操作器２００自体の位置移動という体感的・直感的に非常に分かりやすい動作で、電子番組ガイドＥのうち所望の番組の領域を容易に選択指定することができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者Ｓの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。またそれ以外の効果についても、詳細は省略するが上記実施形態とほぼ同様の効果を得ることができる。

（１１）実写画像を省略する場合
以上は、画像表示装置１の液晶表示部３に、赤外線撮像に基づく遠隔操作器２００の位置と、カメラによる実世界映像とを重ねて表示し、その状態で上記遠隔操作器２００の赤外線像をポインタとして利用したが、前述した、体感的・直感的に非常に分かりやすい動作で操作メニューＭＥの所望の操作領域を容易に選択指定できるという効果を得る限りにおいては、上記実写映像は必ずしも必要なく、省略してもよい。本変形例はそのような場合の例である。

図４５は、本変形例の画像表示システムにおいて、画像表示装置１の液晶表示部３の表示の一例を表す図であり、前述の図６、図４０、図４３等に対応する図である。図６と同等の部分には同一の符号を付している。なお、説明の便宜と理解の容易のために図６等と同様に操作者Ｓや遠隔操作器２００の実映像を図示しているが、実際はこれは表示されず（二点鎖線参照）、前述の遠隔操作器２００の位置表示ＭＡ（白矢印）のみが液晶表示部３に表示される。

図４５において、この例では、液晶表示部３に前述の操作メニューＭＥを表示させた状態で、操作者Ｓがその操作メニューＭＥに含まれる所定の操作を行うことを意図し、手に持った遠隔操作器２００の液晶表示部３における位置を操作メニューＭＥの対応する操作領域に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押してその選択指定を確定させた状態を表している。

図４６は、上記画像表示制御装置１００の機能的構成を表す機能ブロック図である。図４６において、画像表示制御装置１００は、上記実施形態の図３に示された構成よりカメラ１２０を削除するとともに、映像合成部１３０に代えて信号合成部１３０Ａが設けられている。信号合成部１３０Ａには、前述したリモコン位置記号作成部１５６からの位置表示信号と、メニュー作成部１５４からのメニュー表示信号との２つのみが入力され、これらが合成されて画像表示装置１に出力され、これに応じて画像表示装置１の液晶表示部３には図４５を用いて説明したような表示が実行される。

すなわち、操作者Ｓの持った遠隔操作器２００から発せられる特定の赤外線指示信号が赤外線像として赤外線フィルタ付きカメラ１１０で撮像されて認識され、その撮像信号がリモコン位置特定部１５５に入力され、リモコン位置特定部１５５が上記認識結果に基づき、遠隔操作器２００が赤外線フィルタ付きカメラ１１０による撮像中において占める位置を特定する。

上記リモコン位置特定部１５５で特定した遠隔操作器２００の位置情報はリモコン位置記号作成部１５６へ入力され、遠隔操作器２００の位置を上記液晶表示部３に表示させるための位置表示信号が生成され、この生成された位置表示信号は上記信号合成部１３０Ａへと入力される。これによって、液晶表示部３において前述した手法でメニュー作成部１５４からのメニュー表示信号に基づき既に表示されている操作メニューＭＥに対し、遠隔操作器２００の位置に対応した所定の位置表示ＭＡ（矢印型のマーク、図４５参照）が重ねて表示される。これにより、操作者Ｓが遠隔操作器２００を持ってその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部３に操作メニューＭＥと重なるようにして表示されている遠隔操作器２００の位置表示ＭＡを液晶表示部３上で動かすことができる。

上記のように操作者Ｓが手に持った遠隔操作器２００を移動させて位置表示ＭＡを液晶表示部３上で動かし、操作メニューＭＥのうち実行したい操作領域に上記位置表示ＭＡが到達したときにその操作領域の操作を決定すべく操作部２０１を適宜に操作する（例えば「決定」ボタンを押す）ことで、これに対応する赤外線指示信号が赤外線駆動部２０２から出射され、画像表示制御装置１００の赤外線受光部１０１で受光された後、上記ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４を経てコントローラ１５０のユーザー指示入力部１５１に対応する識別コードが入力されて解読される（指示信号入力手段）。ユーザー指示入力部１５１ではこれに対応して上記ユーザー操作判定部１５２に決定指示信号を入力する。

上記決定指示信号が入力されたユーザー操作判定部１５２は、前述したリモコン位置特定部１５５から取得した遠隔操作器２００の位置情報と、メニュー作成部１５４から取得したメニュー表示情報とに基づき、上記液晶表示部３に表示された操作メニューＭＥのうち選択指定される操作領域（操作指定部位）を決定し（操作部位決定手段）、これに対応する信号をメニュー作成部１５４へと入力する。メニュー作成部１５４はその入力された信号に基づき、上記選択指定された操作領域を、それ以外の部位と異なる態様で表示するようなメニュー表示信号を生成して信号合成部１３０Ａに出力する。

その他の動作は、上記実施形態とほぼ同様であるので、説明を省略する。

以上説明した本変形例においても、上記実施形態と同様、画像表示装置１に備えられた液晶表示部３上に、操作メニューＭＥを表示させるためのメニュー表示信号を生成するメニュー作成部１５４と、遠隔操作器２００の背景から到来する可視光線とは異なる態様又は属性を備え、遠隔操作器２００から到来する赤外線信号を、上記可視光線と区別して認識可能な赤外線フィルタ付きカメラ１１０と、この赤外線フィルタ付きカメラ１１０における上記赤外線信号の認識結果に基づき、遠隔操作器２００が赤外線フィルタ付きカメラ１１０による撮像中において占める位置を特定するリモコン位置特定部１５５と、このリモコン位置特定部１５５で特定した遠隔操作器２００の位置を液晶表示部３上に表示させるための位置表示信号を生成するリモコン位置信号作成部１５６と、リモコン位置特定部１５５で特定した遠隔操作器２００の位置に基づき、液晶表示部３上に表示された操作メニューＭＥのうち操作領域を決定するユーザー操作判定部１５２とを有し、これによって、液晶表示部３における遠隔操作器２００の位置表示ＭＡを操作メニューＭＥから操作領域を選択指定するためのポインタとして利用することができる。この結果、操作者Ｓは、液晶表示部３から目を離すことなく、遠隔操作器２００自体の位置移動という体感的・直感的に非常に分かりやすい動作で、操作メニューＭＥのうち所望の操作領域を容易に選択指定し、対応する操作を行うことができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者Ｓの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。

（１２）有線接続の操作器を用いた場合
以上は、操作者側の携帯型の操作器として、無線遠隔操作を行う（＝いわゆるリモコン）の遠隔操作器２００を用いた場合を例にとって説明したが、これに限られない。すなわち、画像表示制御装置１００と所定のケーブル等により有線接続された携帯型の操作器を用いてもよい。

図４７は、この変形例における画像表示制御装置１００の機能的構成の一例を表す機能ブロック図であり、上記図３等に相当する図である。図３と同等の部分には同一の符号を付し、適宜説明を省略する。図４７において、本変形例では、図３の遠隔操作器２００に代えて、同等の機能を果たす有線接続（いわゆるペンダントタイプ）の携帯型の操作器２００Ａが設けられ、この操作器２００Ａと上記ユーザー指示入力部１５１とが適宜の電線やケーブル等によって有線接続されている。これに対応して、図３における赤外線受光部１０１、ＦＭ復調器１０２、ＢＰＦ１０３、パルス復調器１０４は省略されている。

図４７において、本変形例では、操作者Ｓによる所定の操作指示に対応して操作器２００Ａから出力された信号は上記ケーブル等を介しユーザー指示入力部１５１に入力される。そして、ユーザー操作判定部１５２は、上記ユーザー指示入力部１５１で入力された信号に対応する操作指示信号を操作信号生成部１５３へ出力し、操作信号生成部１５３はその操作指示信号に応じて、対応する操作信号を生成し、前述したＤＶＤ録画・再生機構１４０に出力する。その他の動作は上記実施形態と同様であるので説明を省略する。

以上説明した本変形例においても、上記実施形態と同様、画像表示装置１に備えられた液晶表示部３上に、操作メニューＭＥを表示させるためのメニュー表示信号を生成するメニュー作成部１５４と、操作器２００Ａの背景から到来する可視光線とは異なる態様又は属性を備え、操作器２００Ａから到来する赤外線信号を、上記可視光線と区別して認識可能な赤外線フィルタ付きカメラ１１０と、この赤外線フィルタ付きカメラ１１０における上記赤外線信号の認識結果に基づき、操作器２００Ａが赤外線フィルタ付きカメラ１１０による撮像中において占める位置を特定するリモコン位置特定部１５５と、このリモコン位置特定部１５５で特定した操作器２００Ａの位置を液晶表示部３上に表示させるための位置表示信号を生成するリモコン位置信号作成部１５６と、リモコン位置特定部１５５で特定した操作器２００Ａの位置に基づき、液晶表示部３上に表示された操作メニューＭＥのうち操作領域を決定するユーザー操作判定部１５２とを有し、これによって、液晶表示部３における操作器２００Ａの位置表示ＭＡを操作メニューＭＥから操作領域を選択指定するためのポインタとして利用することができる。この結果、操作者Ｓは、液晶表示部３から目を離すことなく、操作器２００Ａ自体の位置移動という体感的・直感的に非常に分かりやすい動作で、操作メニューＭＥのうち所望の操作領域を容易に選択指定し、対応する操作を行うことができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者Ｓの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。

（１３）その他
(1)操作メニュー等から選択指定できる範囲を制限する場合
例えば図６等において液晶表示部３に表示された操作メニューＭＥに含まれる複数の操作領域のうち、いくつかの操作領域を選択指定できないように制限してもよい。図４８は、そのような場合の液晶表示部３の表示例を表しており、この場合操作メニューＭＥに含まれる「時計（時刻セット）」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各領域のうち、「ダビング」「消去」「その他」については文字表示が他のものと異なる態様（この例では白抜き表記）となっているとともに、各領域には前述のカメラ１２０による実写映像を表示していない（言い換えればそのような表示となるようなメニュー表示信号をメニュー作成部１５４が生成している）。すなわち、選択可能範囲のみに限定して実世界を投影するようになっている。これにより、選択指定可能な領域と、そうでない領域とが操作者Ｓにとって一目瞭然になる。

(2)すべての操作領域を遠隔操作器の狭い移動範囲で選択可能とした例
例えば図６等において、液晶表示部３のほぼ全面にわたって表示される操作メニューＭＥの「時計（時刻セット）」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各領域をすべて選択指定可能とするには、図６に示されるように、操作者Ｓは同一箇所で左右に手をいっぱいに伸ばして遠隔操作器２００を左右に移動させるか、場合によってはそれでも足りずに操作者Ｓ自らが部屋の中で歩いて移動しなければならない。

本変形例はこれに対応し、なるべく少ない遠隔操作器２００の移動量ですべての操作領域の選択指定を可能とするものである。この例では、公知の顔画像認識技術を用い、前述のメニュー選択モードに入った時にまず遠隔操作器２００の近くにある顔を検出して認識した後、その位置からある程度下の部分のみが操作範囲となるように、前述したカメラ１２０の映像信号生成部１２０ｂが映像信号を加工して映像合成部１３０へ出力する。この結果、画像表示装置１の液晶表示部３には、図４９に示すように、通常の形状の操作メニューＭＥと、操作者Ｓの上記首から下の比較的小さい範囲が液晶表示部３のほぼ全面にわたるように加工された（この例では上下方向に大きく拡大、さらに左右方向にも若干拡大するように歪められた）背景（部屋）ＢＧの上記加工後の実写映像とが表示されている。このようにすることで、操作者Ｓはより小さな遠隔操作器２００移動挙動（この例では首下の比較的小さい範囲での移動）で希望の操作領域を選択指定できる。さらに、操作範囲を操作者Ｓの位置に応じて特定することで、操作に必要な遠隔操作器２００の移動量を減らすことも可能である。

(3)各映像の重ね合わせ方のバリエーション
上記においては、例えば上記図６等に示すように、操作メニューＭＥと、遠隔操作器２００の位置表示ＭＡと、カメラ２１０で撮像した遠隔操作器２００の背景ＢＧの実写映像とを、すべて重ね合わせるようにして液晶表示部３にて表示したが、これに限られない。すなわち、位置表示ＭＡを操作メニューＭＥのポインタとして利用し、操作者Ｓが液晶表示部３から目を離さず、遠隔操作器２００自体の位置移動という体感的・直感的に非常に分かりやすい動作で操作領域を容易に選択指定できるという効果を得る限りにおいては、上記は必ずしも必要ではない。すなわち例えば、それら遠隔操作器２００の位置表示ＭＡ、操作メニューＭＥ、背景ＢＧの実写映像のうち２つは液晶表示部３上で同一領域に重ねて表示するが残りの１つはそれらの横に（又は割り込むようにして）別画面又は別ウィンドウにて表示してもよい。あるいは上記３つをすべてバラバラに横並び（又は割り込むようにして）別画面又は別ウィンドウにて表示するようにしてもよい。この場合でも、同一の液晶表示部３において、ほぼ同時に操作者Ｓが閲覧できるように一覧表示するようにすれば、上記効果を得ることができる。

(4)録画による実写映像を用いる場合
例えば上記実施形態等においては、遠隔操作器２００の背景ＢＧの実写映像を通常のカメラ１２０で（リアルタイムで）撮影してその映像表示信号を映像合成部１３０へ出力し、赤外線フィルタ付きカメラ１１０での撮像に基づくリモコン位置記号作成部１５６からの遠隔操作器２００の位置情報信号や、メニュー作成部１５４からのメニュー表示信号と合成して、液晶表示部３における表示を行ったが、これに限られない。

すなわち、背景ＢＧに時間的に大きな変動がない、あるいは、それほど厳密な背景ＢＧの映像を必要としない等の場合には、１台のカメラのみを用意しておき、まずあらかじめ背景ＢＧのみの画像を撮影し（＝上記カメラ１２０と同等の機能として使用）これを適宜の録画手段に録画しておく。その後、そのカメラに赤外線フィルタをつけて遠隔操作器２００の赤外線像を撮像し（＝上記カメラ１１０と同等の機能として使用）、前述した録画手段に録画した画像を再生してその映像表示信号を映像合成部１３０へ出力しつつ、これに対して、上記赤外線フィルタを取り付けたカメラでの撮像に基づくリモコン位置記号作成部１５６からの遠隔操作器２００の位置情報信号と、メニュー作成部１５４からのメニュー表示信号とを上記映像合成部１３０で合成し、液晶表示部３における表示を行うようにしてもよい。

この場合、実写映像については遠隔操作器２００や操作者Ｓの存在しない背景ＢＧのみの画像となり、これに対して操作メニューＭＥ及び遠隔操作器位置表示ＭＡが重ねて表示されることとなるが、上記実施形態と同様、位置表示ＭＡを操作メニューＭＥのポインタとして利用し、操作者Ｓが液晶表示部３から目を離さず、遠隔操作器２００自体の位置移動という体感的・直感的に非常に分かりやすい動作で操作領域を容易に選択指定できるという効果を得ることができる。またカメラが１台で足りることからより安価にシステムを構築できるという効果もある。

(5)反射光を利用する場合
以上においては、遠隔操作器２００自らが第２光線としての赤外線を発光したが、これに限られず、例えば赤外線を画像表示制御装置１００側（あるいはさらに別の装置）から投影し、遠隔操作器２００はこの赤外線を反射することで画像表示制御装置１００側に赤外線像や赤外線指示信号（あるいはそれらのうち一方）を伝達するようにしても良い。この場合も上記実施形態と同様の効果を得られるとともに、遠隔操作器２００側に赤外線発光機能がいらなくなることから、電源を不要にできるという効果も得られる。

(6)赤外線以外の光線を使用する場合
上記においては、遠隔操作器２００の背景ＢＧからカメラ１２０等に入射する第１光線を通常の可視光線、遠隔操作器２００からカメラ１１０等に入射する第２光線を赤外線としたが、これに限られない。例えば第２光線は、可視光線と波長の異なる光（＝可視光線の波長範囲外となる波長を備えた光）、たとえば紫外線等の他の光線としてもよい。また必ずしも波長などの属性が異なる必要もなく、例えば第１光線は連続性の通常の可視光線、第２光線は断続的に発光される断続性の可視光線とする等、互いに態様のみが異なる同じ属性の光としてもよい。さらには例えば背景が真っ白である等、背景から到来する第１光線がある決まった属性をとる場合に、これと異なる属性（例えば真っ赤な色等）をとる可視光線を第２光線に用いてもよい。要は第２光線は第１光線と区別して認識可能な属性又は態様を備えていれば足り、これによって上記同様、体感的・直感的に非常に分かりやすい動作で操作領域を容易に選択指定できるという効果を得ることができる。

(7)他のＡＶ機器等への適用
以上は、画像表示制御装置１００がＤＶＤプレイヤー／レコーダーである例を説明したが、これには限られない。すなわち、画像表示制御装置１００は、ビデオデッキ、ＣＤプレイヤー／レコーダー、ＭＤプレイヤー／レコーダー等の映像出力装置、コンテンツ再生装置、その他画像表示装置１へ映像出力機能を備えた制御装置であればよく、例えばビデオデッキ、ＣＤプレイヤー／レコーダー、ＭＤプレイヤー／レコーダー等の場合は、公知のビデオテープ、ＣＤ、ＭＤの録画・再生機構やそれらビデオテープ、ＣＤ、ＭＤの収納部等が筐体１０１内に設けられている。

さらに、一般家庭で用いられるものにも限られず、事業所、研究所等で用いられるものに適用してもよいし、さらに固定的に配置されるものにも限られず、車両搭載用のオーディオ機器等の各種機器に適用しても良い。

(8)表示制御装置と表示装置の一体化
以上は、画像表示制御装置１００と画像表示装置１とが別体であり、それぞれに機能分化してシステムが構成されている場合を例にとって説明したが、これに限られない。すなわち、画像表示制御装置１００の機能を画像表示装置１に組み込んだ１つの画像表示装置として構成してもよい。

この場合、上記図象表示信号生成手段としてのメニュー作成部１５４の機能や、位置表示信号生成手段としてのリモコン位置記号作成部１５６の機能等がすべて当該画像表示装置の中に組み込まれることから、本発明の技術思想は、表示画面と、この表示画面上に、操作対象図象を表示させる図象表示制御手段と、携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする画像表示装置として具現化してとらえることができる。

その他、一々例示はしないが、本発明は、その趣旨を逸脱しない範囲内において、種々の変更が加えられて実施されるものである。

上記目的を達成するために、請求項１記載の発明は、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と、前記操作器の背景から到来する前記第１光線を撮影する第１光線撮像手段とを有することを特徴とする。

上記目的を達成するために、請求項２０記載の発明は、表示画面と、この表示画面上に、操作対象図象を表示させる図象表示制御手段と、携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と、前記操作器の背景から到来する前記第１光線を撮影する第１光線撮像手段とを有することを特徴とする。

上記目的を達成するために、請求項２１記載の発明は、画像表示操作を行うための携帯型の遠隔操作器であって、通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段と、この光信号生成手段で生成した前記光信号を、当該光信号を前記通常の可視光線と区別して認識可能な第２光線撮像手段；表示画面上に操作対象図象を表示させるための信号を生成する第１手段；前記第２光線撮像手段における前記光信号の認識結果に基づき、前記遠隔操作器の背景の映像中において前記遠隔操作器が前記第２光線撮像手段による撮像中において占める位置を特定し前記表示画面上に表示させるための信号を生成する第２手段；前記特定された前記遠隔操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第３手段；前記遠隔操作器の背景から到来する前記通常の可視光線を撮影する第１光線撮像手段；を備えた画像表示制御装置へ送信する光信号送信手段とを有することを特徴とする。

上記目的を達成するために、請求項２２記載の発明は、携帯型の操作器と、この操作器の操作に基づき画像表示を行うための信号を生成する画像表示制御装置とを有する画像表示システムであって、前記画像表示制御装置は、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と、前記操作器の背景から到来する前記第１光線を撮影する第１光線撮像手段とを有することを特徴とする。

上記目的を達成するために、請求項２３記載の発明の画像表示システムは、携帯型の操作器と、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と、前記操作器の背景から到来する前記第１光線を撮影する第１光線撮像手段とを有することを特徴とする。

Claims (24)

1. 画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、
   携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、
   この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、
   この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、
   前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と
   を有することを特徴とする画像表示制御装置。
2. 請求項１記載の画像表示制御装置において、
   前記第２光線撮像手段は、無線通信により信号送受を行う遠隔式の前記操作器から到来する前記第２光線を、前記第１光線と区別して認識可能であることを特徴とする画像表示制御装置。
3. 請求項１又は２記載の画像表示制御装置において、
   前記図象表示信号生成手段は、前記操作対象図象のうち前記操作部位決定手段で決定した前記操作指定部位を、それ以外の部位と異なる態様で前記表示画面に表示するような前記図象表示信号を生成することを特徴とする画像表示制御装置。
4. 請求項１乃至３のいずれか１項記載の画像表示制御装置において、
   前記操作器の背景から到来する前記第１光線を撮影する第１光線撮像手段を有することを特徴とする画像表示制御装置。
5. 請求項４記載の画像表示制御装置において、
   前記第１光線撮像手段で撮影した前記操作器の背景を前記表示画面上に表示させるための映像表示信号を生成する映像表示信号生成手段を有することを特徴とする画像表示制御装置。
6. 請求項５記載の画像表示制御装置において、
   前記図象表示信号生成手段、前記位置表示信号生成手段、前記映像表示信号生成手段は、前記操作対象図象、前記操作器の位置、前記操作器の背景を、前記表示画面上にすべて重ね合わせるように表示するような、前記図象表示信号、前記位置表示信号、前記映像表示信号を生成することを特徴とする画像表示制御装置。
7. 請求項６記載の画像表示制御装置において、
   前記映像表示信号生成手段で生成した前記映像表示信号における前記操作器の背景の一部分を抽出し、前記表示画面上に拡大表示可能とするための抽出処理手段を有する
   ことを特徴とする画像表示制御装置。
8. 請求項７記載の画像表示制御装置において、
   前記操作器との距離を検出する距離検出手段を有し、
   前記抽出処理手段は、
   前記距離検出手段の検出結果に応じて、前記抽出及び拡大の態様を決定することを特徴とする画像表示制御装置。
9. 請求項７記載の画像表示制御装置において、
   前記抽出処理手段は、
   前記映像表示信号生成手段で生成した前記映像表示信号、若しくは、前記位置特定手段による位置特定結果に基づき認識される前記操作器の移動情報に応じて、前記抽出及び拡大の態様を決定することを特徴とする画像表示制御装置。
10. 請求項７記載の画像表示制御装置において、
    前記抽出処理手段は、
    前記映像表示信号生成手段で生成した前記映像表示信号において前記操作器との間に介在する障害物の映像を回避するように、前記抽出及び拡大の態様を決定することを特徴とする画像表示制御装置。
11. 請求項６記載の画像表示制御装置において、
    前記図象表示信号生成手段で生成した前記操作対象図象の前記表示画面上における表示位置を、前記映像表示信号生成手段で生成した前記映像表示信号において前記操作器との間に介在する障害物の映像を回避するように設定するための図象位置設定手段を有する
    ことを特徴とする画像表示制御装置。
12. 請求項６乃至１１のいずれか１項記載の画像表示制御装置において、
    前記位置特定手段による位置特定結果に基づき認識される前記操作器の移動情報に基づき、特定された位置とは異なる前記操作器の予想移動位置を設定する予想位置設定手段を有する
    ことを特徴とする画像表示制御装置。
13. 請求項１２記載の画像表示制御装置において、
    前記予想位置設定手段は、
    前記操作器の移動時に前記位置特定手段により順次特定される隣接する２点の中間部となるように、前記予想移動位置を設定する
    ことを特徴とする画像表示制御装置。
14. 請求項１２記載の画像表示制御装置において、
    前記予想位置設定手段は、
    前記操作器の移動時に前記位置特定手段により順次特定される移動方向延長線上となるように、前記予想移動位置を設定する
    ことを特徴とする画像表示制御装置。
15. 請求項５乃至１４のいずれか１項記載の画像表示制御装置において、
    前記第２光線撮像手段は、前記第２光線として、可視光線の波長範囲外となる波長を備えた光を受光し認識することを特徴とする画像表示制御装置。
16. 請求項１５記載の画像表示制御装置において、
    前記第２光線撮像手段は、前記第１光線としての可視光線と区別して前記第２光線としての赤外線を認識可能な赤外線フィルタ付きカメラであることを特徴とする画像表示制御装置。
17. 請求項１５記載の画像表示制御装置において、
    前記第２光線撮像手段は、前記第１光線としての可視光線に対する感度よりも前記第２光線としての赤外線に対する感度が高く設定され、前記第１光線撮像手段を兼ねた赤外線高感度カメラであることを特徴とする画像表示制御装置。
18. 請求項５乃至１７のいずれか１項記載の画像表示制御装置において、
    前記第１光線撮像手段による撮影結果と、前記第２光線撮像手段による撮影結果とに応じて、前記位置特定手段の特定に基づく前記操作器の位置若しくは前記映像表示信号生成手段で生成した映像表示信号を補正する補正手段を有することを特徴とする画像表示制御装置。
19. 請求項１乃至１８のいずれか１項記載の画像表示制御装置において、
    前記操作器からの決定指示信号を入力する指示信号入力手段を有し、
    前記操作部位決定手段は、前記位置特定手段で特定した前記操作器の位置と、前記指示信号入力手段で入力した前記決定指示信号とに応じて、前記操作対象図象のうちの前記操作指定部位を決定することを特徴とする画像表示制御装置。
20. 請求項１乃至１９のいずれか１項記載の画像表示制御装置において、
    前記第２光線撮像手段は、前記第２光線として、前記操作器の発光した所定の光信号を受光し認識することを特徴とする画像表示制御装置。
21. 表示画面と、
    この表示画面上に、操作対象図象を表示させる図象表示制御手段と、
    携帯型の操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、
    この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、
    この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、
    前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と
    を有することを特徴とする画像表示装置。
22. 画像表示操作を行うための携帯型の遠隔操作器であって、
    通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段と、
    この光信号生成手段で生成した前記光信号を、当該光信号を前記通常の可視光線と区別して認識可能な第２光線撮像手段；表示画面上に操作対象図象を表示させるための信号を生成する第１手段；前記第２光線撮像手段における前記光信号の認識結果に基づき、前記遠隔操作器の背景の映像中において前記遠隔操作器が前記第２光線撮像手段による撮像中において占める位置を特定し前記表示画面上に表示させるための信号を生成する第２手段；前記特定された前記遠隔操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第３手段；を備えた画像表示制御装置へ送信する光信号送信手段と
    を有することを特徴とする遠隔操作器。
23. 携帯型の操作器と、この操作器の操作に基づき画像表示を行うための信号を生成する画像表示制御装置とを有する画像表示システムであって、
    前記画像表示制御装置は、
    画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする画像表示システム。
24. 携帯型の操作器と、
    画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、
    前記操作器の背景から到来する第１光線とは異なる態様又は属性を備え、前記操作器から到来する第２光線を、前記第１光線と区別して認識可能な第２光線撮像手段と、
    この第２光線撮像手段における前記第２光線の認識結果に基づき、前記操作器が前記第２光線撮像手段による撮像中において占める位置を特定する位置特定手段と、
    この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、
    前記位置特定手段で特定した前記操作器の位置に基づき、前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と
    を有することを特徴とする画像表示システム。

Images