JP2006079249A

JP2006079249A - 通信端末

Info

Publication number: JP2006079249A
Application number: JP2004260850A
Authority: JP
Inventors: Takashi Nishitoba; 貴西鳥羽
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2004-09-08
Filing date: 2004-09-08
Publication date: 2006-03-23

Abstract

【課題】携帯電話やＰＤＡ等の通信端末において、テレビ画面上に表示したグラフィカルな操作ボタンを確実且つ容易に操作ができるようにすること。
【解決手段】ビデオ出力部４Ａは、テレビ受像機１０のテレビ画面１１上にグラフィカルな操作ボタン１３とカーソル１２を表示し、信号処理部３Ａは、テレビ画面１１上に表示されたカーソル１２がカメラ２で撮影されることでその撮影結果からカーソル１２を検出し、カメラ２の撮影方向に変化があると、カーソル１２をカメラ２で撮影された画像の中央に位置させる位置情報をビデオ出力部４Ａに与える。これにより、カメラ２の撮影方向を変えることで自由自在にカーソル１２を移動させることができ、操作ボタン１３を確実且つ容易に操作することができるようになる。
【選択図】図１

Description

本発明は、携帯電話やＰＤＡ等の通信端末に関し、特にカメラを使用したユーザインタフェースを備えた通信端末に関する。

従来、携帯電話やＰＤＡ等の通信端末には、液晶表示部や、外部のテレビ受像機にビデオ出力して、その画面にグラフィカルな操作ボタンを表示するとともに、そのグラフィカルな操作ボタンを機構的な操作スイッチ、カーソルキーなどで操作できるようにしたユーザインタフェースを備えるものがある（例えば、特許文献１参照）。

図７は、ユーザインタフェースを備えた従来の通信端末の概略構成を示すブロック図である。この図において通信端末１００は、カメラ２と、信号処理部３と、ビデオ出力部４と、液晶表示部５と、操作スイッチ６とを備えている。カメラ２は、ＣＣＤ(Charge Coupled Device)等の撮像素子を備えており、この撮像素子で撮像して得られた画像データを出力する。

信号処理部３は、カメラ２からの画像データをビデオ出力部４に入力するとともに、その画像データを解析してテレビ受像機１０のテレビ画面１１に映し出されたグラフィカルな操作ボタン１３を検出する。

ビデオ出力部４は、液晶表示部５とテレビ受像機１０に映し出すためのグラフィカルな操作ボタン１３の画像を生成するとともに、この画像をカメラ２で撮影された画像と合成する。そして、合成した画像をビデオ信号に変換して液晶表示部５に入力するとともに、ビデオ出力Ｖｏｕｔとしてテレビ受像機１０に入力する。また、ビデオ出力部４は、グラフィカルな操作ボタン１３を機構的な操作スイッチ６で操作に対応する表示を行う。例えば、操作スイッチ６を使用して、操作ボタン１３の中のメニュー５を選択すると、メニュー５が選択されるとともにその部分の表示が反転する。このように、テレビ受像機１０のテレビ画面上にグラフィカルな操作ボタン１３を表示し、その操作ボタン１３を機構的な操作スイッチ６で操作する。
特開２００４−８０４４２号公報

しかしながら、ユーザインタフェースを備えた従来の通信端末においては、次のような問題がある。

（１）通信端末の液晶表示部や外部のテレビ受像機のテレビ画面に映し出されたグラフィカルなボタンの表示を見ながら当該するボタンに対応する操作スイッチやカーソルキーを探して操作することになるが、該当するスイッチやキーを捜すのに時間がかかったり、操作ミスを犯したりすることがある。また、スクロールキーやジョグシャトルキーのように縦、横、斜め方向の連続的な変化をするものでは希望の位置に的確に止める為の操作に慣れが必要であり、特に初心者や高齢者などでは使い難い。

（２）テレビ受像機には本来のビデオ信号走査線ＮＴＳＣ方式の場合の４８０本を完全に映し出す製品は少なく、実際はブラウン管方式で４１０から４２０本、液晶方式やプラズマ方式で４５０から４６０本しか表示できない。このため、多くのテレビ受像機では本来のビデオ出力の画像の周囲が欠けてしまうことになる。なお、走査線数４１０から４２０本しかテレビ表示できないブラウン管方式のテレビ受像機に合わせて、画像を予め縮小したビデオ出力を行うと、液晶方式やプラズマ方式のテレビ受像機では逆に画像の周囲に見映えの悪い黒色の枠が表示される。

（３）通信端末のビデオ出力をテレビ受像機で表示する場合、特に通信端末の一種である携帯電話においては、その縦長の液晶表示部に対してテレビ受像機の画面は横長であり、この違いに対応したビデオ出力画像を拡大又は縮小したり、カメラなどで撮影した画像の縦長構図、横長構図に対応するために、携帯電話のビデオ出力を拡大又は縮小又は切出し、９０度又は１８０度又は２７０度回転して出力する必要があり、その操作の為のユーザインタフェースはグラフィカルなボタンの表示に対応する機構的な操作スイッチ、カーソルキーなどを複数回押下する煩雑な操作が伴う。

（４）通信端末の液晶表示部とテレビ受像機の色合い、明暗の度合が異なり同じ画像でも違った印象を受けるために、テレビ受像機側のスイッチやボリュームで行う面倒な調整作業が必要である。

本発明はかかる点に鑑みてなされたものであり、携帯電話やＰＤＡ等の通信端末において、テレビ画面上に表示したグラフィカルな操作ボタンを確実且つ容易に操作ができ、またビデオ信号走査線ＮＴＳＣ方式の場合の４８０本を完全に映し出すことができないテレビ受像機でも正常に映し出すことができ、しかも携帯電話の液晶表示部とテレビ受像機の色合いの違いを最小限に抑えることができる通信端末を提供することを目的とする。

本発明の通信端末は、任意の被写体を撮影するための撮影手段と、外部のモニタ装置の画面上にグラフィカルな操作ボタンとポインタを表示するためのビデオ信号を出力するビデオ出力手段と、前記モニタ装置の画面上に表示された前記ポインタが前記撮影手段にて撮影されると、その撮影結果から前記ポインタを検出するとともに、前記撮影手段の撮影方向に変化があると、前記ポインタを前記撮影手段で撮影された画像の中央に位置させる位置情報を前記ビデオ出力手段に与える信号処理手段と、前記信号処理手段に対し、前記ポインタが位置する前記操作ボタンの情報の取り込みを指示するスイッチ信号を入力するスイッチ手段と、を具備する構成を採る。

本発明によれば、携帯電話やＰＤＡ等の通信端末において、テレビ画面上に表示したグラフィカルな操作ボタンを確実且つ容易に操作ができ、またビデオ信号走査線ＮＴＳＣ方式の場合の４８０本を完全に映し出すことができないテレビ受像機でも正常に映し出すことができ、しかも携帯電話の液晶表示部とテレビ受像機の色合いの違いを最小限に抑えることができる。

以下、本発明の実施の形態について、図面を参照して詳細に説明する。

（実施の形態１）
図１は、本発明の実施の形態１に係る通信端末の概略構成を示すブロック図である。
図１において、本実施の形態の通信端末１は、カメラ（撮影手段）２と、信号処理部（信号処理手段）３Ａと、ビデオ出力部（ビデオ出力手段）４Ａと、液晶表示部５と、トリガスイッチ７とを備えている。

カメラ２は、ＣＣＤ等の撮像素子を備えており、この撮像素子で撮像して得られた画像データを出力する。信号処理部３Ａは、カメラ２からの画像データをビデオ出力部４Ａに入力するとともに、その画像データを解析してテレビ受像機（モニタ装置）１０のテレビ画面１１に映し出されるカーソル（ポインタ）１２のカメラ画像中央部からのずれを求め、その結果をビデオ出力部４Ａに入力する。

ビデオ出力部４Ａは、液晶表示部５とテレビ受像機１０に映し出すためのカーソル１２の画像及びグラフィカルな操作ボタン１３の画像を生成するとともに、これらの画像をカメラ２で撮影された画像と合成する。そして、合成した画像をビデオ信号に変換して液晶表示部５に入力するとともに、ビデオ出力Ｖｏｕｔとしてテレビ受像機１０に入力する。

また、ビデオ出力部４Ａは、信号処理部３Ａから入力されるカーソル１２のカメラ画像中央部からのずれ量を示す位置情報に基づいてカーソル１２を示す映像信号のオフセットを調整する。このカーソル１２に対するオフセット調整により、カメラ２の向きを変えてもカーソル１２は常にカメラ画像の中央部に位置することになる。これにより、カメラ２の向きを変えるのみで、カーソル１２を操作ボタン１３中の所望の位置に持ってくることができる。本実施の形態では操作ボタン１３を６つのメニューボタンで構成しており、それら１つ１つにカーソル１２を持ってくることができる。

トリガスイッチ７は機構的なスイッチであり、押下することでオン状態となり、そのときのスイッチ信号が信号処理部３Ａに入力される。操作ボタン１３の所望のメニューボタンにカーソル１２を持ってきてトリガスイッチ７を操作することで、そのメニューボタンに対応するメニューが選択される。

このような構成の通信端末１において、ビデオ出力部４Ａは、カーソル１２及びグラフィカルな操作ボタン１３の画像を生成し、これらの画像をカメラ２で撮影して得られた画像と合成して液晶表示部５とテレビ受像機１０に表示する。これにより、液晶表示部５とテレビ受像機１０の双方にカメラ２で撮影して得られた画像とカーソル１２と操作ボタン１３とが同時に表示される。

次に、この状態で通信端末１のユーザがカメラ２の向きを変えると、信号処理部３Ａは、カーソル１２のカメラ画像中央部からのずれ量を求め、そのずれ量を示す位置情報をビデオ出力部４Ａに入力する。ビデオ出力部４Ａはカーソル１２のカメラ画像中央部からのずれ量に基づいてカーソル１２の映像信号のオフセットを調整して、カーソル１２をカメラ画像の中央部に持ってくる。その後、ユーザがカメラ２の向きを変えてカーソル１２を操作ボタン１３中の所望のメニューボタン上に持ってきた後にトリガスイッチ７を押下すると、信号処理部３Ａは、そのときのメニューボタンに対応するメニューを選択する。

このように、本実施の形態の通信端末１によれば、カメラ２の撮影方向を変えることで自由自在にカーソル１２を移動させることができ、この操作によって操作ボタン１３中の所望のメニューボタンを選択することができる。したがって、所望の操作ボタンを選択するために、その操作ボタンに対応するスイッチやキーを捜したりすることがなく、また操作ミスを犯したりすることがない。また、カメラ２の向きを変える操作がスクロールキーやジョグシャトルキーの操作と同等であるものの、カーソル１２を所望のメニューボタン上に的確に止めることが容易であり、初心者や高齢者でも容易に使いこなすことができる。

（実施の形態２）
図２は、本発明の実施の形態２に係る通信端末の概略構成を示すブロック図である。
図２において、本実施の形態の通信端末３０は、上述した実施の形態１の通信端末１と同様のカメラ２と、液晶表示部５と、トリガスイッチ７とを備える一方、新たな機能が追加された信号処理部３Ｂとビデオ出力部４Ｂを備えている。

本実施の形態では、ゲーム機として使用できるようにしたものであり、上述した実施の形態１の操作ボタン１３に替えてゲーム用の標的１４を表示するようにしたものである。なお、ゲームとして使用する場合、必ずしもテレビ受像機１０を使用する必要はなく、液晶表示部５のみでも十分にゲームを楽しむことができる。

ビデオ出力部４Ｂは、テレビ受像機１０と液晶表示部５夫々にゲーム用の標的１４を表示する。通信端末２０のユーザはカメラ２の向きを変えてカーソル１２を標的１４に向けて移動させ、カーソル１２が標的１４上に来たときにトリガスイッチ７を押下する。これにより、信号処理部３Ｂはポイントを加算する。なお、標的１４の数は１つに限らず、複数個でも良い。また、標的１４を移動させるようにしても良いし、もぐらたたきゲームのように複数の標的１４をそれぞれランダムに出現（表示）させるようにしても良い。

（実施の形態３）
図３は、本発明の実施の形態３に係る通信端末の概略構成を示すブロック図である。
図３において、本実施の形態の通信端末３０は、上述した実施の形態１の通信端末１と同様のカメラ２と、液晶表示部５と、トリガスイッチ７とを備える一方、新たな機能が追加された信号処理部３Ｃとビデオ出力部４Ｃを備えている。

本実施の形態では、キャラクタを操作できるようにしたものであり、実施の形態１の操作ボタン１３に替えてキャラクタ１５を表示する。なお、キャラクタは人間型に限らず、機器、風景など、その種類を問わない。

カメラ２の向きを変えてカーソル１２をキャラクタ１５に向けて移動させ、カーソル１２がキャラクタ１５上に来たときにトリガスイッチ７を押下する。これによりキャラクタ１５が操作可能状態となり、その時点からカーソル１２の移動操作に伴ってキャラクタ１５が移動する。なお、キャラクタ１５の数は１つに限らず複数個でも良い。なお、カーソル１２がキャラクタ１５上に来た時点でキャラクタ１５を操作可能状態としても良い。この場合、トリガスイッチ７がフリーになるが、このトリガスイッチ７と連動させて新たな操作が可能となる。

なお、操作ボタン１３に替えて標的１４やキャラクタ１５を表示する以外に、カーソル１２の移動する軌跡を順次表示し、線画で文字や図形を描けるようにすることも可能である。

また、カーソル１２の位置を２台の通信端末の間で相互に送り合い、お互いに通信端末又はテレビ受像機１０のテレビ画面１１の上にお互いの又は共通のカーソル１２を表示移動させながら例えば仕事や遊びの打合せを行えるようにすることも可能である。

（実施の形態４）
図４は、本発明の実施の形態４に係る通信端末の概略構成を示すブロック図である。
図４において、本実施の形態の通信端末４０は、上述した実施の形態１の通信端末１と同様のカメラ２と、信号処理部３Ａと、液晶表示部５と、トリガスイッチ７とを備える一方、新たな機能が追加されたビデオ出力部４Ｄを備えている。ビデオ出力部４Ｄは、テレビ受像機１０に表示される画像の拡大又は縮小調整を行う機能を有している。

すなわち、カメラ２でテレビ画面１０に映っている画像１６を撮像すると、ビデオ出力部４Ｄは撮影画像１６と原画１７とを比較してテレビ画面１１に表示できる走査線数を算出する。次いで、算出した走査線数に撮影画像１６がちょうど収まる補正画像１６Ａになるように原画１７の縮小又は拡大を行う。

図４では、テレビ受像機１０のテレビ画面１１の走査線数が４５０本しかなく、撮影画像１６は元々の走査線数が４８０本ある原画１７の上下がテレビ画面１１に表示しきれない例を示しており、カメラ２で撮影した画像１６の上下が原画１７に比較すると欠けている量をビデオ出力部４Ｄが測定し、原画１７を縮小して補正画像１６Ａにしてテレビ受像機１０のテレビ画面１１の上下にちょうど収まるように縮小調整する。

このように縮小調整することにより、テレビ受像機１０のテレビ画面１１には画像が欠けず、逆に周囲に黒枠が表示されることもなく、テレビ受像機１０のテレビ画面１１を最大限有効に使った補正画像１６Ａを表示することができる。なお、拡大調整する場合は縮小調整の逆になる。

（実施の形態５）
図５は、本発明の実施の形態５に係る通信端末の概略構成を示すブロック図である。
図５において、本実施の形態の通信端末５０は、上述した実施の形態１の通信端末１と同様のカメラ２と、液晶表示部５と、トリガスイッチ７とを備える一方、新たな機能が追加された信号処理部３Ｅとビデオ出力部４Ｅを備えている。ビデオ出力部４Ｅは、テレビ受像機１０の表示画像の回転調整を行う機能を有している。

ビデオ出力部４Ｅは、原画１８をテレビ受像機１０のテレビ画面１１に表示し、画像１９の構図上の例えば下側の辺をカメラ２で撮影する。カメラ２は画像１９の構図上の下側であるテレビ画面１１の上辺を撮影する。信号処理部３Ｅは構図の上下が逆であることをビデオ出力部４Ｅに通知する。ビデオ出力部４Ｅは、原画１８を１８０度回転させて回転画像１９Ａとしてビデオ出力し、テレビ受像機１０のテレビ画面１１に原画１８が１８０度回転した正しい構図の回転画像１９Ａが表示される。

ビデオ出力部４Ｅは、原画１８の構図上の例えば下側がテレビ受像機１０のテレビ画面１１の下側に合致するように原画１８を０度、９０度、１８０度又は２７０度回転させ、テレビ画面１１の上下幅又は左右幅に原画１８がちょうど合うように拡大又は縮小して回転画像１９Ａになるようにビデオ出力を行う。テレビ受像機１０のテレビ画面１１は原画１８の縦横構図が正しくテレビ画面１１に回転画像１９Ａとして表示される。

（実施の形態６）
図６は、本発明の実施の形態６に係る通信端末の概略構成を示すブロック図である。
図６において、本実施の形態の通信端末６０は、上述した実施の形態１の通信端末１と同様のカメラ２と、信号処理部３Ａと、液晶表示部５と、トリガスイッチ７とを備える一方、新たな機能が追加されたビデオ出力部４Ｆを備えている。ビデオ出力部４Ｆは、テレビ受像機１０の表示画像の画質調整を行う機能を有している。

ビデオ出力部４Ｆは、原画２０をテレビ受像機１０の画面１１に表示し、それをカメラ２で撮像されて液晶表示部５で表示される画像と色合い又は明暗の差を算出する。そして、色合い又は明暗の差が最小になるように原画２０の色合い又は明暗を調整する。これにより、テレビ受像機１０のテレビ画面１１と液晶表示部５との色合い又は明暗の差が最小になり、通信端末６０とテレビ受像機１０とは同等の画質となる。

本発明は、携帯電話やＰＤＡ(Personal Digital Assistant)等の通信端末に用いるに好適である。

本発明の実施の形態１に係る通信端末の概略構成を示すブロック図本発明の実施の形態２に係る通信端末の概略構成を示すブロック図本発明の実施の形態３に係る通信端末の概略構成を示すブロック図本発明の実施の形態４に係る通信端末の概略構成を示すブロック図本発明の実施の形態５に係る通信端末の概略構成を示すブロック図本発明の実施の形態６に係る通信端末の概略構成を示すブロック図従来の通信端末の概略構成を示すブロック図

符号の説明

１、２０、３０、４０、５０、６０通信端末
２カメラ
３Ａ、３Ｂ、３Ｃ、３Ｅ信号処理部
４Ａ、４Ｂ、４Ｃ、４Ｄ、４Ｅ、４Ｆビデオ出力部
５液晶表示部
７トリガスイッチ
１０テレビ受像機
１１テレビ画面
１２カーソル
１３操作ボタン
１４標的
１５キャラクタ
１６、１９画像
１６Ａ補正画像
１７、１８、２０原画
１９Ａ回転画像

Claims

任意の被写体を撮影するための撮影手段と、
外部のモニタ装置の画面上にグラフィカルな操作ボタンとポインタを表示するためのビデオ信号を出力するビデオ出力手段と、
前記モニタ装置の画面上に表示された前記ポインタが前記撮影手段にて撮影されると、その撮影結果から前記ポインタを検出するとともに、前記撮影手段の撮影方向に変化があると、前記ポインタを前記撮影手段で撮影された画像の中央に位置させる位置情報を前記ビデオ出力手段に与える信号処理手段と、
前記信号処理手段に対し、前記ポインタが位置する前記操作ボタンの情報の取り込みを指示するスイッチ信号を入力するスイッチ手段と、
を具備することを特徴とする通信端末。
前記ビデオ出力手段は、前記モニタ装置に予め用意されたキャラクタを表示し、
前記信号処理手段は、前記ポインタの位置にある前記キャラクタに対し、前記撮影手段の撮影方向に変化があると、前記キャラクタを前記撮影手段で撮影された画像の中央に位置させる位置情報を前記ビデオ出力手段に与えることを特徴とする請求項１に記載の通信端末。
前記ビデオ出力手段は、前記モニタ装置の表示画像の拡大又は縮小調整を行うことを特徴とする請求項１又は請求項２のいずれかに記載の通信端末。
前記ビデオ出力手段は、前記モニタ装置の表示画像の回転調整を行うことを特徴とする請求項１から請求項３のいずれかに記載の通信端末。
前記ビデオ出力手段は、前記モニタ装置の表示画像の画質調整を行うことを特徴とする請求項１から請求項４のいずれかに記載の通信端末。