JPH07222027A

JPH07222027A - コントロールシステム

Info

Publication number: JPH07222027A
Application number: JP6032065A
Authority: JP
Inventors: Kazuhiro Sato; 一博佐藤
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1994-02-04
Filing date: 1994-02-04
Publication date: 1995-08-18
Anticipated expiration: 2017-04-22
Also published as: JP3277428B2

Abstract

(57)【要約】【目的】画面上の広い範囲に操作用画像を表示させて
も本来の映像を確認できるようにするとともに、操作を
ユーザーにとってわかりやすいものとする。【構成】操作用画像としてボタン枠画像を用い、モニ
タ上では枠及びボタン内容の表記以外の部分について
は、その背景として本来の映像が見えるようにする。ま
た、このときボタン枠画像を所要位置に陰影表現がなさ
れるようにすることなどで立体的な表現を行ない、ボタ
ン枠画像が視覚上、背景の映像から浮かび上がっている
ような表示とさせる。さらに、エンター操作に応じて、
例えば陰影位置変化させたボタン枠表示を行なうことな
どにより、あたかも実際に機械的にボタンが押されたよ
うな画像表現を行なうようにする。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は例えばＡＶシステム、ホ
ームオートメーション、オフィス／工場等のオートメー
ションシステムなどの各種システムに対する操作制御方
式として好適なコントロールシステムに関するものであ
る。

【０００２】

【従来の技術】近年、ＶＴＲ、テレビジョン受像機、Ｃ
Ｄプレーヤ等のＡ／Ｖ機器や、エアコンディショナー、
照明装置等の各種電子機器においてリモートコマンダー
を用いて遠隔操作を行なうことができるようになされて
いる。ところで、各種機器においてそれぞれ専用のリモ
ートコマンダーを用いることはユーザーにとって煩わし
いため、１つのリモートコマンダーで複数種類の電子機
器の操作が実行できるようにすることが好ましい。

【０００３】そこで、本出願人は先に先行技術として、
例えばＣＲＴモニタ等の画面上に各種の操作用画像が映
像に重畳されて表示されるようにし、これをポインタや
カーソルで選択することによって各種機器の操作を実行
できる方式を提案した。

【０００４】これは例えばＡＶシステムとしてＴＶチュ
ーナ、レーザディスクプレーヤ、ＶＴＲ等をＣＲＴモニ
タ装置に接続する際に、コントロールユニットを接続
し、例えばＴＶチューナやレーザディスクプレーヤの操
作を行なう際には、図１９（ａ）（ｂ）のようにＣＲＴ
モニタ画面上に各種操作用画像ＳＤ、及びこれを選択す
るためのポインタＰを表示できるようにする。操作用画
像ＳＤとしては例えば図示するように複数のボタンが並
ぶような表示を行なう。

【０００５】そして、例えばリモートコマンダーから位
置変位情報となるコマンドコードを出力すると、それに
応じてポインタＰが移動され、またポインタＰが操作用
画像ＳＤ内の或るボタン画像上にあるときにリモートコ
マンダーからエンター情報となるコマンドコードが供給
されれば、そのボタン画像に応じたコマンドコードがコ
ントロールユニットから所定の機器に対して出力される
ものである。

【０００６】例えば図１９（ａ）のようにポインタＰを
操作用画像ＳＤ内の破線で示す位置、即ちチャンネルダ
ウンのボタン画像の位置に移動させ、この状態でエンタ
ー操作を行なうと、ＴＶチューナに対してチャンネルダ
ウンのコマンドコードがコントロールユニットから出力
される。すると、ＴＶチューナではそのコマンドコード
を受信して、それに応じてチャンネル切換が行なわれ
る。

【０００７】また図１９（ｂ）の状態でエンター操作さ
れると、レーザディスクプレーヤに対して次の早送り再
生を意味するコマンドコードがコントロールユニットか
ら出力される。そして、レーザディスクプレーヤではそ
のコマンドコードを受信して、それに応じた早送り再生
動作が実行されることになる。

【０００８】この方式では、例えばリモートコマンダー
による操作入力手段としてはポインタＰを移動させるた
めの操作とエンター操作のみができるものであればよ
く、操作の簡易性は非常に向上される。

【０００９】

【発明が解決しようとする課題】ところが、このように
モニタ画面に対して操作用画像ＳＤを表示させ、これを
操作に利用しようとすると、レーザディスクプレーヤや
ＶＴＲ、ＴＶチューナ等からモニタ画面に供給されて表
示されている映像が、操作用画像ＳＤの背景に隠れてし
まって、その部分では本来の映像が見えなくなってしま
う。

【００１０】このとき操作用画像ＳＤとして画面上にし
めるエリアを小さくすれば操作用画像ＳＤの背景に隠れ
る映像部分は少なくてすむが、ポインタＰを操作用画像
ＳＤの所要のボタン画像上に移動させるためにはボタン
画像を或る程度大きくしたほうが操作がしやすいことか
ら、操作性を考えれば操作用画像ＳＤとしては大きくせ
ざるを得ない。この結果、例えば図１９（ａ）（ｂ）の
ように操作用画像ＳＤが画面上の広いエリアをしめてし
まい、本来の映像が殆ど見えなくなるということにな
る。

【００１１】ユーザーとしては、操作用画像ＳＤを表示
させて操作を行なっている間も、映像全体を見ていたい
場合も多く、さらに、例えばレーザディスクプレーヤに
対して早送り再生を行なわせて映像を進め、その映像を
見ながら所望の場面を探したいような場合は、図１８
（ｂ）のような状態では殆ど映像を確認できないため、
手際のよい操作を行なうことができなくなってしまう。
ＴＶチューナのチャンネルを切り換えていきながら見た
い番組を探そうとする場合も同様である。つまり、この
ように操作用画像ＳＤが本来の映像を隠してしまって不
都合が生じるという問題がある。

【００１２】また、画面上でポインタによってボタン画
像を選択するという操作は、実際に機械的にボタンを押
すわけではないため、ユーザーにとって感覚的に操作が
理解しにくいという問題もある。

【００１３】

【課題を解決するための手段】本発明はこのような問題
点に鑑みて、画面上の広い範囲に操作用画像を表示させ
ても本来の映像を確認できるようにするとともに、その
操作用画像を用いた操作をユーザーにとってわかりやす
いものとすることを目的とする。

【００１４】このため、入力情報として少なくとも操作
に応じて位置変位情報又はエンター情報を有線又は無線
で送信出力することができる操作入力手段（リモートコ
マンダーやタッチパネル操作部など）と、各種コマンド
コードを記憶する記憶手段と、操作入力手段から送信さ
れた入力情報に基づいて、記憶手段に記憶された各種コ
マンドコードの全部又は一部に対応する操作用画像、及
び位置指定画像（ポインタ等）の表示出力を行なう表示
制御手段と、操作入力手段から送信された入力情報に基
づいて、位置指定画像によって指定された操作用画像に
対応するコマンドコードを記憶手段から読み出して出力
するコマンド発生手段と、コマンド発生手段から出力さ
れたコマンドコードを有線又は無線で被操作機器又は被
操作部に対して送信する送信手段と、を備えてコントロ
ールシステムを構築するとともに、表示制御手段として
は、立体的表現がなされたボタン枠画像として操作用画
像を発生させることにより、モニタ画面上で立体的な操
作用画像の表示を行なうとともに操作用画像の背景とな
った映像が視認できるようにするものである。

【００１５】ここでさらに表示制御手段は、操作入力手
段からエンター情報が送信された際には、そのエンター
操作対象となったボタン枠画像の立体的表現を変化させ
ることにより、ボタンが押された状態を表現できるよう
にする。

【００１６】またボタン枠画像の立体的表現としては、
表示制御手段は、ボタン枠画像の所要部分の陰影表現に
より実現するとともに、ボタン枠画像における非陰影表
現部分を陰影表現に反転させ、かつ陰影表現部分を非陰
影表現に反転させることで、ボタンが押された状態を表
現する。

【００１７】

【作用】操作用画像としてボタン枠画像を用い、つまり
その枠線部分（及びボタン内容の表記）のみを映像に重
畳させることで、モニタ上では枠及びボタン内容の表記
以外については、その背景として映像が見えることにな
る。つまり、透明のボタンが表示されているような状態
となり、操作用画像によって背景映像が隠されてしまう
ことがなくなる。

【００１８】また、このときボタン枠画像を所要位置に
陰影表現がなされるようにすることなどで立体的な表現
を行なえば、ボタン枠画像は視覚上、背景の映像から浮
かび上がっているような表示を行なうことができ、上述
のようにボタン枠画像の背景に映像が透けて見えるよう
な表示状態としても、ボタン枠画像が見にくくなること
を防止できる。

【００１９】さらにエンター操作に応じて、例えば陰影
位置変化させたボタン枠表示を行なうことなどにより、
あたかも実際に機械的にボタンが押されたような画像表
現を行なうことで、ユーザーの操作時にその操作がわか
りやすいものとすることができる。

【００２０】

【実施例】以下、本発明の実施例を説明する。図１、図
２は実施例となるリモートコントロールシステムの構成
を示したものであり、図１は実施例のリモートコントロ
ールシステムを採用したＡＶシステム例の説明図、図２
はリモートコントロールシステムとしてのブロック図で
ある。

【００２１】図１において、１０はＡＶセレクタアン
プ、６１はＶＴＲ、６２はＣＤプレーヤ、６３はＴＶチ
ューナ、６４はＬＤＰ（レーザディスクプレーヤ）、７
０はモニタ装置、７１はスピーカを示す。

【００２２】ＶＴＲ６１、ＣＤプレーヤ６２、ＴＶチュ
ーナ６３、ＬＤＰ６４はそれぞれ音声／映像信号出力が
ＡＶセレクタアンプ１０に接続され、ＡＶセレクタアン
プ１０において選択された音声／映像信号がモニタ装置
７０、スピーカ７１から出力されるように接続されてい
る。また、ＶＴＲ６１、ＣＤプレーヤ６２、ＴＶチュー
ナ６３、ＬＤＰ６４にはそれぞれ赤外線受信部６１ａ，
６２ａ，６３ａ，６４ａが設けられており、通常はそれ
ぞれ専用のリモートコマンダーによって出力される赤外
線コマンド信号により遠隔操作可能とされている。ただ
し本実施例では各機器についての操作を１つのリモート
コマンダーＲによって実行できる。

【００２３】本実施例となるリモートコントロールシス
テムはこのリモートコマンダーＲとＡＶセレクタアンプ
１０内に内蔵されたコントロールユニット（図２におい
て説明）から構成されるものであり、リモートコマンダ
ーＲとしては、例えばｘ，ｙ座標上での位置変位情報
と、エンター情報のみを出力することができるものであ
ればよく、図１に示すように操作部としてシャトルボー
ルＳのみを設けたものや、角速度センサ、加速度センサ
等による位置変位情報を出力できるもの、或は図示しな
いがパソコンにおけるマウスのようにトラックボールの
回転情報を出力できるもの、ジョイスティックによる操
作方向情報を出力できるもの、４方向または８方向等の
方向キーを備えたもの等であればよい。即ち、操作キー
を多数設けることは不要である。信号伝送方式としては
赤外線、電波、或は有線伝送等のいずれであってもよ
い。

【００２４】例えばシャトルボールＳによるリモートコ
マンダーＲの場合は、ユーザーがシャトルボールＳを回
転させることによりｘ，ｙ方向の変位情報を例えば赤外
線変調信号で出力し、またシャトルボールＳを押圧する
ことによりエンター情報が出力されるようにする。

【００２５】本実施例では角速度センサを用いたリモー
トコマンダーＲを使用するものとし、このリモートコマ
ンダーＲについて図４〜図８で説明する。

【００２６】まず図４に、振動ジャイロ２による角速度
センサを示す。振動ジャイロとは、振動している物体に
回転角速度を加えると、その振動と直角方向にコリオリ
力が生じる特性を有しており、このコリオリ力Ｆは、次
のように表わされる。Ｆ＝２ｍｖω （ｍ：質量、ｖ：速度、ω：角速度）従って、角速度ωはコリオリ力Ｆに比例することにな
り、コリオリ力Ｆを検出することで回転角速度を検出す
ることができる。

【００２７】振動ジャイロ２には駆動用圧電磁器２ａと
検出用圧電磁器２ｂが取り付けられており、駆動用圧電
磁器２ａにはオシレータ１の発振出力である交番信号が
印加されるようになされる。この図４において振動ジャ
イロ２がΩ₀ 方向に回転されると、検出用圧電磁器２ｂ
にコリオリ力Ｆが加わり、コリオリ力Ｆに応じた電圧が
発生する。検出用圧電磁器２ｂから得られる微少な電圧
は増幅部３で増幅されてＡ／Ｄ変換器４に供給され、デ
ジタルデータ（電圧値Ｅ）とされる。

【００２８】振動ジャイロ２に加わった角速度ωと、出
力される電圧Ｅは図５のように比例関係にあり、従って
例えば電圧値Ｅを電圧値Ｖａ，Ｖｂ，Ｖｃ，Ｖｄと比較
することによって、振動ジャイロ２が搭載された機器の
動作（例えばリモートコマンダーを左右に振る操作）を
検出することができる。

【００２９】例えばリモートコマンダーＲ内において、
図６のように振動ジャイロ２（２Ｘ，２Ｙ）を配置する
と、振動ジャイロ２Ｘの出力として、リモートコマンダ
ーＲを左方向に振ったときの角速度ω_X により電圧Ｅが
上昇し、右方向に振ったときの角速度ω_X により電圧Ｅ
が下降するようになり、これによってリモートコマンダ
ーＲの左右方向の動作を検出できる。つまり、振動ジャ
イロ２Ｘから出力される電圧ＥがＶｃ＜Ｅ＜Ｖｄであれ
ば、リモートコマンダーＲは左方向へ振られたと検出で
き、またＶａ＜Ｅ＜Ｖｂであれば右方向へ振られたと検
出できる。

【００３０】また、振動ジャイロ２Ｙの出力として、リ
モートコマンダーＲを上方向に振ったときの角速度ω_Y
により電圧Ｅが上昇し、下方向に振ったときの角速度ω
_Y により電圧Ｅが下降するようになり、これによってリ
モートコマンダーＲの上下方向の動作を検出できる。つ
まり、振動ジャイロ２Ｙから出力される電圧ＥがＶｃ＜
Ｅ＜Ｖｄであれば、入力装置１は上方向へ振られたと検
出でき、またＶａ＜Ｅ＜Ｖｂであれば下方向へ振られた
と検出できる。

【００３１】なお、電圧値Ｅが、Ｖｂ≦Ｅ≦Ｖｃの場合
は、入力装置１に対してユーザーがちょっと触ったり持
ち歩いたりした際にその運動を検知しないように不感帯
として設定しているものである。

【００３２】図７はこのような角速度センサ（振動ジャ
イロ）２Ｘ，２Ｙを用いたリモートコマンダーＲの構成
を示すものである。角速度センサ２Ｘからの出力電圧は
増幅部３Ｘに供給されて増幅されてＡ／Ｄ変換器４Ｘの
入力として最適なレベルとされる。そして増幅部３Ｘで
増幅された電圧はＡ／Ｄ変換器４Ｘでデジタル化された
電圧値ＥＸとして出力される。また角速度センサ２Ｙか
らの出力電圧は増幅部３Ｙに供給されて増幅されてＡ／
Ｄ変換器４Ｙの入力として最適なレベルとされる。増幅
部３Ｙで増幅された電圧はＡ／Ｄ変換器４Ｙでデジタル
化された電圧値ＥＹとして出力される。

【００３３】５はＣＰＵ５ａ、ＲＯＭ５ｂ、ＲＡＭ５ｃ
を有するマイクロコンピュータによって形成される制御
部を示し、ＲＯＭ５ｂ又はＲＡＭ５ｃには送信すべきコ
マンド信号が記憶されている。６はクロック発振器を示
す。この制御部５には、Ａ／Ｄ変換器４Ｘから電圧値Ｅ
Ｘが、またＡ／Ｄ変換器４Ｙから電圧値ＥＹが供給され
る。電圧値ＥＸ，ＥＹはリモートコマンダーＲをＸ方
向、Ｙ方向に振った運動に相当する値であり、即ちＸ，
Ｙ方向の移動運動情報となる。

【００３４】７はエンター操作キーであり、例えば図６
に示すようにリモートコマンダーＲに設けられており、
ユーザーがエンター操作キー７を押すことによって、リ
モートコマンダー１からはエンター情報（確定情報）と
なるコマンドコードが出力されるようになされている。

【００３５】制御部５は入力された、電圧値ＥＸに応じ
てＲＯＭ５ｂ又はＲＡＭ５ｃからＸ方向コマンド（右移
動コマンド又は左移動コマンド）を読み出し、また電圧
値ＥＹに応じてＲＯＭ５ｂ又はＲＡＭ５ｃからＹ方向コ
マンド（上移動コマンド又は下移動コマンド）を読み出
して、これをコマンドコードとして送信部８に供給す
る。

【００３６】つまり、制御部５は図８の処理を行なって
コマンド信号を発生させる。電圧値ＥＸの入力に応じて
その値に相当するコマンド信号（右移動コマンド又は左
移動コマンド）を出力し(F202)、また電圧値ＥＹの入力
に応じてその値に相当するコマンド信号（上移動コマン
ド又は下移動コマンド）を出力(F203)していく。そし
て、エンター操作キー７が押された場合は、エンターコ
マンドをＲＯＭ５ｂ又はＲＡＭ５ｃから読み出して出力
する (F201→F204) 。

【００３７】このようにして制御部５から発生されたコ
マンドコードは送信部８において所定の変調処理が施さ
れ、電波又は赤外線信号として所定機器に対して出力さ
れる。なお、送信部８は有線により所定の機器に対して
コマンド信号を送信するタイプであってもよい。また、
角速度センサに代えて加速度センサ、傾斜センサ、地磁
気センサ等を用いて同様にｘ，ｙ変位情報を発生させる
ように構成してもよい。

【００３８】このようなリモートコマンダー１からは、
エンターコマンド、Ｘ方向移動コマンド（アップ方向／
ダウン方向）、Ｙ方向移動コマンド（アップ方向／ダウ
ン方向）の３種類のコマンドコードしか出力されない
が、この実施例の場合、図１のシステムにおけるＡＶセ
レクタアンプ１０が、例えば図２のように構成されてい
ることにより多種類の操作が実行できることになる。

【００３９】図２において、１１は音声入力セレクタ部
を示し、外部機器として接続されているＶＴＲ６１、Ｃ
Ｄプレーヤ６２、ＴＶチューナ６３、ＬＤＰ６４から供
給される音声信号から択一的に入力音声信号を選択す
る。音声入力セレクタ部１１で選択された音声信号は音
量調節部１２を介して増幅器１３に供給されて増幅さ
れ、接続されたスピーカ７１に供給されて音声として出
力される。

【００４０】また、１４は映像入力セレクタ部を示し、
外部機器として接続されているＶＴＲ６１、ＣＤプレー
ヤ６２、ＴＶチューナ６３から供給される映像信号から
択一的に入力映像信号を選択する。映像入力セレクタ部
１４で選択された映像信号は映像切換部１５を介して表
示装置として接続されたモニタ装置７０に供給され、映
像として出力される。

【００４１】以上のようにＡＶセレクタアンプとしての
機能部位に加えて、リモートコマンダーＲから送信され
る位置変位情報（ｘ，ｙ変位情報及びエンター情報）と
なるコマンドコードに対応するコントロールユニット２
０が設けられる。

【００４２】２１は電波によりリモートコマンダー１よ
り送信されたコマンドコードを受信復調する電波受信
部、２２は赤外線により送信されたコマンドコードを受
信復調する赤外線受信部である。もちろんこれらは、リ
モートコマンダーＲにおいて採用されている伝送方式に
対応していづれか一方を設けるのみでもよい。また有線
伝送の場合は不要である。以下、実施例におけるリモー
トコマンダーＲは電波方式でコマンドコードを出力する
ものとして説明する。

【００４３】２３はＣＰＵ２３ａ，ＲＯＭ２３ｂ，ＲＡ
Ｍ２３ｃを有するマイクロコンピュータによって形成さ
れる制御部であり、この制御部２３は、後述するように
赤外線受信部２２から供給されるリモートコマンダーＲ
の操作情報に対応して各種リモートコントロールシステ
ムとしての制御を行なう他、ＡＶセレクタアンプの制御
部としても機能する。即ち、音声入力セレクタ部１１、
映像入力セレクタ部１４の切換制御、音量調節部１１の
ボリューム制御、映像切換部１５の切換制御等をユーザ
ーの操作入力や動作モード等に応じて実行する。

【００４４】２４は各種操作キーが設けられたパネル操
作部を示し、パネル操作部２４からの操作情報は制御部
２３に供給される。パネル操作部２４には、制御部２３
に対して音声入力セレクタ部１１及び映像入力セレクタ
部１４の切換制御を実行させるためのファンクション切
換キーやボリュームアップ／ダウンキー等が設けられ
る。また、リモートコマンダＲによる操作と同様に、
Ｘ，Ｙ方向の移動情報のための操作キーやエンターキー
が設けられてもよい。

【００４５】２５はグラフィックコントローラであり、
制御部２３による指示に応じて所定のキャラクタ映像信
号を発生させ、映像切換部１５における高速切換動作に
より、映像入力セレクタ部１４において選択された映像
信号にスーパーインポーズして出力し、モニタ装置７０
に供給する。キャラクタ映像による表示内容としては図
１のように、各種機器に応じてその複数のボタン枠表示
で操作内容を示す操作用画像ＳＤと、位置指定画像とし
て、表示されている操作用画像ＳＤのうちの特定のボタ
ン枠画像を示す指の画像や矢印等の表示（以下、ポイン
タＰとする）が用意される。１又は複数のボタン枠画像
によってなる操作用画像ＳＤとしては、例えば各機器毎
に対応されて設定されている。例えばＶＴＲ６１用の操
作用画像ＳＤとして、再生、録画、停止、早送り、巻
戻、等のボタン枠画像が設定されている。

【００４６】制御部２３におけるＲＯＭ２３ｂ又はＲＡ
Ｍ２３ｃには、上記ＡＶセレクタアンプとしての機能部
位に対する制御用データの他、該ＡＶセレクタアンプに
接続されたＶＴＲ６１等の電子機器や、全く関連のない
外部の電子機器に対する各種コマンドコードが記憶され
ており、これらのコマンドコードのうち１つが後述する
ユーザーのリモートコマンダーＲの操作によって画面上
で指定されると、そのコマンドコードが読み出され、赤
外線送信部２６に供給される。または、読み出されたコ
マンドコードは端子２７に供給され、有線で所定の外部
機器又は内部回路系に供給される。なお、各機器間でシ
ステムバスラインが構築されている場合は、バスにより
コマンド送信を行なうようにしてもよい。

【００４７】赤外線送信部２６においては、供給された
コマンドコードに所定の変調処理を施し、赤外線信号と
して機器外部に送信する。赤外線送信部２６は例えば図
１に示すように無指向性の赤外線出力ユニットとして設
けられており、従って、赤外線送信部２６から出力され
た赤外線信号はこのＡＶセレクタアンプの周辺に配置さ
れている各種電子機器（ＶＴＲ６１等）における赤外線
受信部で受信されることができる。なお、赤外線送信部
に代えて又はこれと併用して電波によるコマンドコード
の送信部を設けてもよい。

【００４８】映像切換部１５の切換制御は制御部２３か
らの信号に基づいてグラフィックコントローラ２５が出
力する切換制御信号Ｙ_S に応じて実行される。例えば切
換制御信号Ｙ_S がＨレベルの際には端子Ｔ_g が接続され
て、グラフィックコントローラ２５からのキャラクタ画
像が出力され、また、切換制御信号Ｙ_S がＬレベルの際
には端子Ｔ_t が接続されて、映像入力切換部１４からの
映像が出力される。

【００４９】従って、ＶＴＲ等からの映像が出力されて
いる際に、ＣＲＴ走査がグラフィックコントローラ２５
からのキャラクタ画像（操作用画像ＳＤ，ポインタＰ）
を出力すべき領域にきたときに切換制御信号Ｙ_S がＨレ
ベルとなるようにし、またそれ以外の領域の走査の際に
は切換制御信号Ｙ_S がＬレベルとなるようにして、映像
切換部１５に高速切換動作させることで、操作用画像Ｓ
ＤやポインタＰのスーパーインポーズ表示がなされる。

【００５０】このように構成されているリモートコント
ロールシステムの動作について以下、図３及び図９〜図
１７を用いて説明する。図９はリモートコマンダー１か
ら送信された位置指定情報（ｘ，ｙ変位情報、エンタ
ー）に基づいて制御部２３が実行する処理を示すフロー
チャートである。

【００５１】上記したようにＲＯＭ２３ｂ又はＲＡＭ２
３ｃ内には、各種機器に対する各種操作を行なうコマン
ドコードが記憶されているが、これらに対応して操作用
画像が設定されている。そして、例えば本実施例では、
ＶＴＲ６１に対する再生、停止、録画等の各種コマンド
コードに対応する操作用画像、ＣＤプレーヤ６２に対す
る再生、停止等の各種コマンドコードに対応する操作用
画像、ＴＶチューナ６３に対するチャンネル切換等のコ
マンドコードに対応する操作用画像、ＬＤＰ６４に対す
る再生、停止等の各種コマンドコードに対応する操作用
画像、及びＡＶセレクタアンプに対する入力切換、音量
等のコマンドコードに対応する操作用画像が、それぞれ
切り換わって表示されるものとする。

【００５２】以下説明する実施例の動作では、現在ＡＶ
セレクタアンプ１０において入力選択されている機器に
関する操作を容易に実行できるようにしたもので、操作
用画像ＳＤとしては現在入力選択されている機器に関す
る操作用画像ＳＤが表示される。例えば音声入力セレク
タ部１１及び映像入力セレクタ部１４においてＶＴＲが
選択されていれば、まずＶＴＲ操作に関する操作用画像
ＳＤが表示される。そしてこの際に、リモートコマンダ
ーＲからのｘ，ｙ変位情報によりポインタＰが画面上で
移動され、或るボタン枠画像（例えばＶＴＲ再生のボタ
ン枠画像）が示された位置で、リモートコマンダーＲか
らエンターコマンドが供給されると、そのエンターされ
た操作用画像に対応する（『ＶＴＲ再生』）というコマ
ンドコードがＲＯＭ２３ｂ又はＲＡＭ２３ｃから読み出
され、赤外線送信部２６から出力される。

【００５３】そしてさらに、このような操作時において
操作用画像ＳＤの表示が、ＶＴＲ６１等から供給される
本来の映像を見えなくしてしまうことがないようにし、
より操作性の向上をはかるものである。

【００５４】以下、図９のフローチャートに基づいてリ
モートコマンダーＲによる操作情報が入力された際の動
作を具体的に説明する。

【００５５】ＡＶセレクタアンプ１０が電源オンとされ
た際に、ＡＶセレクタアンプ１０ではＴＶチューナ６３
が入力選択されているとする。制御部２３はまずグラフ
ィックコントローラ２５を介して切換制御信号Ｙ_S ＝Ｌ
とする(F101)。そして、現在の入力ファンクションに応
じて操作用画像のデータをグラフィックコントローラ２
５にセットする(F102)。このとき入力ファンクションは
ＴＶチューナ６３とされているため、ＴＶチューナ６３
用の操作用画像のデータがセットされることになる。た
だし、この時点で切換制御信号Ｙ_S ＝Ｌであるため、操
作用画像ＳＤの表示は実行されず、モニタ装置７０にお
いては入力ファンクションして選択されているＴＶチュ
ーナ６３からの映像信号が供給されて表示される。

【００５６】ここで、操作用画像ＳＤの表示の開始まで
待機する(F103)。例えばユーザーがリモートコマンダー
Ｒの操作を行ない、何らかのコマンドコードが送信され
て電波受信部２１から制御部２３に取り込まれた時点で
操作用画像ＳＤの表示を開始するとする。

【００５７】この場合、ユーザーがリモートコマンダー
Ｒの操作を行なった時点で処理はステップF104に進むこ
とになり、まず操作用画像ＳＤの表示モード判別を行な
う。本実施例では操作用画像ＳＤの表示モードとしてノ
ーマルモードとシースルーモードをユーザーが選択でき
るようになされている。

【００５８】ノーマルモードの場合は、例えば図１５
（ａ）（ｂ）のように本来の映像の前面に操作用画像Ｓ
Ｄがあらわれて、その部分では本来の映像が隠されてし
まうものである。一方、シースルーモードの場合は、図
１０，図１１に示すように操作用画像ＳＤが透明状態に
表示され、操作用画像ＳＤが表示されてもその背景とし
て本来の映像を見ることができるようにするものであ
る。

【００５９】ステップF104ではこのモード状態の判別に
応じて、ステップF105又はF106に進み操作用画像ＳＤの
表示を行なう。つまり、制御部２３は映像切換部１５の
端子Ｔｔ、Ｔｇの高速切換制御（Ｙ_S ＝Ｈ／Ｌの高速切
換）を行なってグラフィックコントローラ２５の出力が
映像入力セレクタ部１４からの映像信号に合成されてモ
ニタ装置７０に供給されるようにする。

【００６０】従ってノーマルモードであるときは、ステ
ップF106で図１５（ａ）のようにポインタＰ及び、ＴＶ
チューナ６３に関する操作用画像ＳＤが表示される。操
作用画像ＳＤは複数のボタン画像により形成される。シ
ースルーモードであるときは、ステップF105で図１０
（ａ）のようにポインタＰ及びＴＶチューナ６３に関す
る操作用画像ＳＤが表示されることになるが、この場
合、操作用画像ＳＤは複数のボタンをボタン枠画像で表
示することにより、操作用画像ＳＤの表示領域でも背景
映像が見える状態となる。

【００６１】このノーマルモードとシースルーモードの
表示は、切換制御信号Ｙ_S の高速切換方式の設定により
実現される。図１２（ａ）はシースルーモードにおいて
操作用画像ＳＤをボタン枠画像で形成する場合の説明図
で、１つのボタン枠画像を拡大して示している。一方、
図１６（ａ）はノーマルモードにおいて操作用画像ＳＤ
をボタン画像で形成する場合の説明図で、１つのボタン
画像を拡大して示している。

【００６２】図１２（ａ）のシースルーモードの場合
は、切換制御信号Ｙ_S による映像スイッチ１５の高速切
換は１つのボタン枠画像に対して下部に示すように行な
われる。即ち枠及びボタン内容を示す表記（この場合
『１』の数字）のみがキャラクタ画像とされ、その走査
タイミング（矢印は１水平走査を示す）であるときのみ
Ｔｇ端子が接続される。従って、図示するようにあたか
もボタン枠画像が透きとおって背景映像が見えるような
表示となる。

【００６３】図１６（ａ）のノーマルモードの場合は、
切換制御信号Ｙ_S による映像スイッチ１５の高速切換は
１つのボタン画像に対して下部に示すように行なわれ、
ボタン全体がキャラクタ画像とされ、その走査タイミン
グ期間中Ｔｇ端子が接続される。従って、図示するよう
にボタン画像の背景映像は見えない。

【００６４】また、ボタン枠画像、ボタン画像のいづれ
の場合であっても、図示するように右及び下部は陰影表
現されようにキャラクタ画像が設定されており、これに
よって画面上でボタンが立体的に浮かび上がっているよ
うに見えることになる。

【００６５】本実施例では、即ち、このようなシースル
ーモードの表示を行ない、しかも立体的な表示を行なう
ことに特徴を有するものであり、以下、シースルーモー
ドの動作を重点にして説明を進める。

【００６６】ステップF105で図１０（ａ）のような表示
が実行され、ステップF107に進むとコマンドコードの受
信有無を判別する。なお、ステップF103での操作用画像
表示開始条件を上述のようにコマンド受信とした場合
は、図１５（ａ）のように操作用画像ＳＤが表示された
時点ではそのままステップF108に進むことになる。その
後のループ処理においてはコマンド受信に応じてステッ
プF108に進む。

【００６７】コマンドコードが入力されステップF108に
進むと、タイマをリセットをしてカウントを開始させ
る。なお、このタイマカウントは、操作用画像ＳＤ及び
ポインタＰの表示を不要な場合に消去させるもので、リ
モートコマンダーＲから最後に何らかのコマンドが送信
された後（つまり切換制御信号Ｙ_S による高速切換動作
中）、一定時間以上コマンド送信がなかった時点で操作
用画像ＳＤ及びポインタＰを消去し (F107→F122→F10
1) 、画面上にいつまでも無用に操作用画像ＳＤ及びポ
インタＰが表示されていることによる煩わしさを解消す
るための処理である。

【００６８】次に、入力されたコマンドコードの内容が
ｘ，ｙ変位情報であったかエンターコマンドであったか
判別する(F109)。ｘ，ｙ変位情報であったら、それに応
じてポインタＰを画面上で移動させる (→F110) 。

【００６９】例えば図１０（ａ）のような画面上から図
１０（ｂ）に示すようにポインタＰを移動させる。この
移動処理は、ｘ，ｙ変位情報に応じて新たなポインタＰ
の位置を算出し、その算出された位置に画面上でポイン
タＰが移動するように制御部２３はグラフィックコント
ローラ２５にデータを送り、表示上での移動を実現させ
る。

【００７０】このためにＣＰＵ２３ａにおいては、モニ
タ装置７０の画面に対応したｘｙ座標系を備えており、
これによりポインタＰの位置、動作、及び操作用画像Ｓ
Ｄとの対応を判別している。つまり、図３のように表示
画面に対応して例えばｘ方向に２５５ドット、ｙ方向に
１９２ドットの座標系を構築し、この座標値としてポイ
ンタＰの位置Ｐ₀ を把握する。そして、ｘ，ｙ変位情報
が入力されると、それまでのポインタＰの位置Ｐ₀ の座
標値に対してｘ，ｙ変位情報を加算し、新たなポインタ
Ｐの位置を算出する。

【００７１】例えば現在のポインタＰの位置Ｐ₀ がｘｙ
座標で（ｘ，ｙ）＝（１２８，６６）であるときに、リ
モートコマンダーＲからｘ方向の変位情報として＋５
０、ｙ方向の変位情報として＋３０という数値が送られ
てきたとすると、新たなポインタＰの位置Ｐ₁ は（ｘ，
ｙ）＝（１７８，９６）として算出され、このデータが
グラフィックコントローラ２５に送られて、画面上でポ
インタＰが位置Ｐ₁ に移動される。なお、ｘ，ｙ変位情
報を加算した際にｘ＜０となった場合は、ｘ＝０、ｘ＞
２５５となった際にはｘ＝２５５とされるとし、ｙ＜０
となった場合は、ｙ＝０、ｙ＞１９２となった際にはｙ
＝１９２とされるとする。

【００７２】このような座標系でポインタＰの位置を把
握していることにより、リモートコマンダーＲよりユー
ザーがエンター操作を行なって制御部２３にエンターコ
マンドが入力された場合には、操作用画像ＳＤ内の各ボ
タン枠画像の表示位置も、ＣＰＵ２３ａ内でｘｙ座標上
のエリアを示す数値により把握されているため、その座
標値の一致により選択（エンター）されたボタン（操作
内容）が判別できるものである。

【００７３】リモートコマンダーＲよりユーザーがエン
ター操作を行なった場合は、処理はステップF109からF1
11に進み、その時のポインタＰの座標位置を確認する。
そして、例えば図１０（ａ）のようにポインタＰが操作
用画像ＳＤのボタン枠画像の内部にはない場合は、その
エンター操作は無効となり、ステップF104,F105,F107,F
122 のコマンド受信待機ループに戻る。

【００７４】ポインタＰの移動操作により、図１０
（ｂ）に示すようにポインタＰがＴＶチューナ６３用の
操作用画像ＳＤのうち『１０チャンネル』を示すボタン
枠画像の位置に移動され、ここで、リモートコマンダー
Ｒよりユーザーがエンター操作を行なって制御部２３に
エンターコマンドが入力されたとする。この場合には、
そのエンター操作を、『１０チャンネル』のボタンが押
された動作として、ボタン枠画像（又はノーマルモード
の場合はボタン画像の周辺部分）の陰影表現を反転させ
ることでユーザーに対して表現する。

【００７５】この陰影表現を反転させた状態を図１２
（ｂ）及び図１６（ｂ）に示す。このようにすること
で、ボタン表面があたかも押し込まれたような立体的動
作表現がなされることになる。従って図１０（ｂ）の状
態でエンター操作されると、図１０（ｃ）に示すように
操作用画像ＳＤが変化される。

【００７６】その後、ステップF113,F114 でエンターさ
れた操作内容を判別する。つまり、エンター操作時点の
ポインタＰの座標位置と操作用画像ＳＤの各ボタン枠表
示の座標位置を比較して、『どのボタンが押されたか』
を判別する。

【００７７】例えば『１０チャンネル』ボタンの場合
は、表示されている操作用画像ＳＤから他の操作用画像
ＳＤを切り換える操作内容ではなく、また、外部機器
（この場合ＴＶチューナ６３）に対するものであるた
め、処理はステップF115に進む。ここでそのエンターさ
れた操作（ボタン枠表示）に相当するコマンドコード、
即ちＴＶチューナ６３に対する『チャンネル１０への切
換』を示すコマンドコードがＲＯＭ２３ｂ又はＲＡＭ２
３ｃから読み出され、赤外線送信部２６からＴＶチュー
ナ６３に対して送信される(F115)。

【００７８】そして、エンター操作がオフ、即ちユーザ
ーリモートコマンダーＲのエンター操作キー７の押圧を
終了し、エンターコマンドの受信が終了されたら(F11
6)、ボタン枠画像の陰影表現を図１２（ａ）、図１６
（ａ）のように元に戻し(F117)、ボタン押圧が終了され
た表現を行なう。つまり、図１０（ｃ）から図１０
（ｂ）の状態に戻る。

【００７９】このように、ボタンが押されたような反転
表現は、ユーザーがリモートコマンダーＲでエンター操
作キー７を押している期間は継続させるようにすること
で、ユーザーのエンター操作キー７の押圧状態と連動
し、操作表現としてより好適である。

【００８０】ところで、メニュー画面や他の機器に対応
する操作用画像ＳＤに切り換えるためのメニュー呼出操
作やページめくり操作も用意されており、例えば図１０
の操作用画像ＳＤ内に例示するようにメニューボタンな
どが用意される（図示していないがページめくりボタン
なども用意されればよい）。

【００８１】これらのボタン枠画像内にポインタＰが移
動されてエンターされた場合は、ステップF113からF118
に進み、その操作に応じて他の操作用画像ＳＤがグラフ
ィックコントローラ２５にセットされ、ステップF105
（又はF106) で表示されることになる。

【００８２】例えば図１１（ａ）に示すようなＬＤＰ６
４用の操作用画像Ｓ等に表示が切換られる。そして、上
述した場合と同様に図１１（ｂ）の状態でエンターされ
れば、図１１（ｃ）のようにボタンが押された状態が表
現されるとともに、そのボタンに応じたコマンドコード
が赤外線送信部２６からＬＤＰ６４に対して送られるこ
とになる。

【００８３】なお、この図１１の操作用画像ＳＤは、操
作パネルなどの表現も行なってより立体的に見えるよう
にしている。同様にＴＶチューナ６３に対する操作用画
像ＳＤについても、例えば図１７のようにより多段に立
体的に見えるようにキャラクタ画像データの設定を行な
ってもよい。

【００８４】この図１１、図１７のように例示した操作
用画像ＳＤについては画面上の殆どの部分をしめて表示
されることになっているが、シースルーモードの表示が
行なわれることにより、図示するように操作用画像ＳＤ
の背景として本来の映像も視認することができる。ま
た、操作用画像ＳＤが立体的な表示とされることによ
り、背景の映像の影響で操作用画像ＳＤが見にくくなっ
てしまうことも避けられる。

【００８５】また、入力ファンクションを切り換えるた
めに、ＡＶセレクタアンプ１０にかかる操作用画像ＳＤ
も用意され、例えばメニューエンター操作により図１３
のような操作用画像ＳＤが呼び出される。

【００８６】そして、例えば図１３の表示状態からポイ
ンタＰの移動及びエンター操作により、処理は（ＡＶセ
レクタアンプ１０自身の操作であるため）ステップF114
からF119に進み、そのときのポインタＰの位置に応じて
各種制御が行われる(F119)。例えばポインタＰが『ボリ
ュームダウン』のボタン枠画像上に移動されてエンター
操作されると、制御部は音量調節部１２に対してボリュ
ームダウンのコマンドを送り、ボリューム制御が行なわ
れる。同様に、例えばポインタＰが『ＶＴＲ』のボタン
枠画像上に移動されてエンター操作されると、制御部は
音声入力切換部１１及び映像入力切換部１４に対して、
ＶＴＲが選択されるようにコマンドを送ることになる。

【００８７】また、この場合もエンター操作期間中のボ
タン枠表示の陰影表現の反転(F112)及びエンター操作終
了に伴う反転解除(F120,F121) が行われて、ボタンが押
されたような表示が行われる。

【００８８】また、本実施例では上述のように表示モー
ドをノーマルモードとシースルーモードとで切り換えら
れるようにしているが、このため、例えば図１３の『DI
S MODE』のボタン枠画像でのエンター操作により、図１
４のようなモード設定のための操作用画像ＳＤを呼出
し、モード設定を行うことができるようにしている。

【００８９】この操作用画像ＳＤで『NORMAL』又は『SE
E THRU』のボタン枠画像を選択してエンターすること
で、制御部２３はグラフィックコントローラ２５のモー
ド設定を行い、以降の操作用画像ＳＤの表示モードが設
定される。

【００９０】また、『COLOR 1 』『COLOR 2 』により操
作用画像ＳＤの表示色を選択することができ、例えばグ
レー表示と淡色表示等を切り換えることができる。つま
り制御部２３はエンターされた色についての情報をグラ
フィックコントローラ２５にセットし、以降の操作用画
像ＳＤの表示色とする。

【００９１】以上のように本実施例では、操作用画像Ｓ
Ｄを透明状態とし、操作用画像ＳＤが表示されても本来
の映像を視認できるようにしたため、操作用画像ＳＤに
よって必要以上に映像が阻害されることもなく、また映
像を見ながらの操作などについても支障はない。さらに
このため操作用画像ＳＤとしてのキャラクタ画像を大き
くに設定しポインタＰのボタン枠画像内への移動操作を
容易にすることもできる。

【００９２】また、操作用画像ＳＤを立体的な表現とす
ることで、背景となる映像と操作用画像ＳＤをはっきり
分離して視認することができ、透明状態な操作ボタン表
示がみずらくなることもない。また、エンター操作中は
ボタン枠画像の陰影表現を反転させて、あたかもボタン
が押されているかのような表示を行うことにより、ユー
ザーにとって感覚的に操作が分かり易いものとなる。

【００９３】なお、本発明は上記実施例に限らず各種変
形可能である。例えば操作用画像ＳＤ及びポインタＰの
表示を用いたコントロールユニット２０のコマンドコー
ドの送信方式は、図９の処理以外にも各種考えられる。
特に、各種操作用画像ＳＤの階層構造や種別、呼出し方
式なども各種考えられる。また、操作用画像の表示を所
定の操作や電源操作などに応じて開始するようにしても
よいし、操作用画像の表示の消去はユーザーの操作によ
るものとしてもよい。

【００９４】また、表示モードはシースルーモードのみ
とし、常に操作用画像の背景として映像が見えるように
してもよい。さらに、ポインタＰについても輪郭表示と
してシースルー表示を行い、ポインタの背景映像が見え
るようにしてもよい。

【００９５】また、実施例ではボタン枠画像に陰影表現
を施して立体的に見えるようにしたが、例えば図１８の
ように操作用画像ＳＤを斜視画像のようにして立体表現
を行ってもよい。この場合、ボタンが押された状態を図
１８（ｂ）のように表現することができる。

【００９６】さらに、コントロールユニット２０はＡＶ
セレクタアンプ１０に内蔵されるようにしたが、他の機
器に内蔵されるようにしたり、コントロールユニットを
単体で構成することも可能である。

【００９７】また、ＡＶシステムに用いる以外に、この
ようなコントロールシステムをコンピュータシステム、
ホームオートメーションシステムの操作手段として用い
てもよい。

【００９８】操作入力手段としてはリモートコマンダー
を用いて説明したが、例えばコントロールユニットの筺
体上に設けられるタッチパネルを操作入力手段として用
いてもよい。もちろん、このほかにもリモート方式では
ない操作入力手段も採用できる。

【００９９】

【発明の効果】以上説明したように本発明のコントロー
ルシステムは、操作用画像としてボタン枠画像を用い、
モニタ上では枠及びボタン内容の表記以外については、
その背景として映像が見えるようにしているため、操作
用画像によって必要以上に映像が阻害されることもな
く、また映像を見ながらの操作などについても支障はな
い。さらに操作用画像としての表示エリアを大きくに設
定することができ、これらのことから操作性は大幅に向
上されるという効果がある。

【０１００】また、ボタン枠画像を陰影表現などで立体
的に表現することで、ボタン枠画像は視覚上、背景の映
像から浮かび上がっているような表示を行なうことがで
き、ボタン枠画像と背景映像を容易に見分けることがで
きるという効果もある。

【０１０１】さらにエンター操作に応じて、例えば陰影
位置変化させたボタン枠表示を行なうことなどによりあ
たかも実際に機械的にボタンが押されたような画像表現
を行なうことでユーザーの操作理解を助け、感覚的に分
かり易い操作を提供できる。

【図面の簡単な説明】

【図１】本発明の実施例を採用するＡＶシステムの構成
の説明図である。

【図２】実施例のコントロールシステムのコントロール
ユニットの構成のブロック図である。

【図３】実施例のポインタの座標管理形態の説明図であ
る。

【図４】実施例におけるリモートコマンダーの角速度セ
ンサの説明図である。

【図５】実施例におけるリモートコマンダーの角速度検
出動作の説明図である。

【図６】実施例におけるリモートコマンダーの角速度セ
ンサ配置状態の説明図である。

【図７】実施例におけるリモートコマンダーのブロック
図である。

【図８】実施例におけるリモートコマンダーのコマンド
送信動作処理のフローチャートである。

【図９】実施例のコントロールシステムの動作処理のフ
ローチャートである。

【図１０】実施例のシースルーモードでの操作用画像表
示状態の説明図である。

【図１１】実施例のシースルーモードでの操作用画像表
示状態の説明図である。

【図１２】実施例のシースルーモードでの表示動作の説
明図である。

【図１３】実施例のシースルーモードでの操作用画像表
示状態の説明図である。

【図１４】実施例のシースルーモードでの操作用画像表
示状態の説明図である。

【図１５】実施例のノーマルモードでの操作用画像表示
状態の説明図である。

【図１６】実施例のノーマルモードでの表示動作の説明
図である。

【図１７】実施例のシースルーモードでの操作用画像表
示状態の説明図である。

【図１８】他の実施例の操作用画像表示状態の説明図で
ある。

【図１９】先行技術における操作用の画面表示例の説明
図である。

【符号の説明】

１０ＡＶセレクタアンプ１５映像スイッチ２０コントロールユニット２１電波受信部２３制御部２３ａＣＰＵ２３ｂＲＯＭ２３ｃＲＡＭ２４操作部２５グラフィックコントローラ２６赤外線送信部２８モード操作部６１ＶＴＲ６２ＣＤプレーヤ６３ＴＶチューナ６４ＬＤＰ７０モニタ装置ＲリモートコマンダーＳＤ操作用画像Ｐポインタ

Claims

【特許請求の範囲】

【請求項１】入力情報として少なくとも操作に応じて
位置変位情報又はエンター情報を有線又は無線で送信出
力することができる操作入力手段と、各種コマンドコードを記憶する記憶手段と、前記操作入力手段から送信された入力情報に基づいて、
前記記憶手段に記憶された各種コマンドコードの全部又
は一部に対応する操作用画像、及び位置指定画像を、モ
ニタ画面上で映像に重畳されて表示されるように出力を
行なう表示制御手段と、前記操作入力手段から送信された入力情報に基づいて、
前記位置指定画像によって指定された操作用画像に対応
するコマンドコードを前記記憶手段から読み出して出力
するコマンド発生手段と、前記コマンド発生手段から出力されたコマンドコードを
有線又は無線で被操作機器又は被操作部に対して送信す
る送信手段と、を備えるとともに、前記表示制御手段は、立体的表現がなされたボタン枠画
像として操作用画像を発生させることにより、モニタ画
面上で、立体的な操作用画像の表示を行なうとともに、
操作用画像の背景となった映像が視認できるようにした
ことを特徴とするコントロールシステム。
【請求項２】前記表示制御手段は、前記操作入力手段
からエンター情報が送信された際には、そのエンター操
作対象となったボタン枠画像の立体的表現を変化させる
ことにより、ボタンが押された状態を表現できるように
したことを特徴とする請求項１に記載のコントロールシ
ステム。
【請求項３】前記表示制御手段は、ボタン枠画像の所
要部分の陰影表現によりボタン枠画像の立体的表現を行
なうとともに、ボタン枠画像における非陰影表現部分を
陰影表現に反転させ、かつ陰影表現部分を非陰影表現に
反転させることで、ボタンが押された状態を表現するこ
とを特徴とする請求項２に記載のコントロールシステ
ム。