JP4679194B2 - 画像処理装置、及びそのプログラム - Google Patents

Description

本発明は、画像処理装置、及びそのプログラムに関し、特に、視認性に優れた画像表示を可能にする画像処理装置、及びそのプログラムに関する。

近年、携帯電話などの移動体通信端末は、単なる電話としての通話機能の他に、カメラ機能や、テレビジョン放送番組（以下、単にテレビという）の視聴を可能にする機能など様々な機能を備えるものが主流となってきている。このような移動体通信端末において、表示装置として用いられる液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）の役割は、より一層重要なものとなってきている。

係る液晶ディスプレイは、画質が高く、また薄型に構成することが可能であるといった長所を有する一方、見る角度によってその見やすさが異なるといった問題があった。このような問題を解決するものとして、チルト機構のシャフト部に接続されたディスプレイの水平に対する傾き角度を検知し、傾き角度に応じて画面コントラストを見易く調整を行う画像情報表示装置などが開示されている（例えば特許文献１参照）。
特開平０８−１７１３７７号公報

しかしながら、上述の画像情報表示装置を、傾き角度が頻繁に変化する移動体通信端末のディスプレイにそのまま適用すると、これに伴いコントラストの調整も頻繁に行われることになってしまうため、かえって見づらくなるといった問題があった。

また、移動体通信端末でカメラ撮影を行う場合、例えば移動体通信端末を地面に対して略垂直に構えて風景等を撮影するときと、移動体通信端末を下に向けて足下の草花を撮影するときと、を比べると、確かに水平面に対する傾き角度は著しく変化しているが、ディスプレイと、このディスプレイに表示される被写体像を見ているユーザの目と、のなす角度はほとんど変化していない。このような場合にまでコントラスが変更されるとなると、ユーザにとっては単に目障りとなるだけである。

本発明は、上記実状に鑑みてなされたものであり、視認性に優れた画像表示を可能にする画像処理装置、及びそのプログラムを提供することを目的とする。

上記目的を達成するため、本発明の第１の観点にかかる画像処理装置は、画像を表示する画面を有する画像表示手段と、前記画像表示手段の水平面に対する傾き角度を検出する角度検出手段と、前記角度検出手段によって検出された傾き角度と所定の基準角度の間の差分値を算出する差分値算出手段と、前記差分値算出手段によって算出された差分値に応じて、画質パラメータの基準値を調整することにより、前記画像表示手段の画面の画質を補正する画像補正手段と、実行可能な複数の機能のうち、現在動作中の機能を判別する機能判別手段と、を備え、前記差分値算出手段は、前記機能判別手段によって判別された機能に応じて、差分値の算出を行うか否かを選択する、ことを特徴とする。

さらに、上記画像処理装置において、前記画像補正手段は、前記差分値算出手段により算出された差分値が一定時間同じかあるいは所定範囲内の値を維持していた場合には、画面画質の補正を行う、ようにしてもよい。

また、上記画像処理装置において、前記差分値算出手段は、第１のタイミングにおいて検出された第１の角度と、該第１のタイミングから所定期間後の第２のタイミングにおいて検出された第２の角度と、を比較して、該所定期間内における角度の変化量を取得する変化量取得手段と、前記変化量取得手段によって取得された変化量が所定の範囲内にあるか否かを判別する変化量判別手段と、を備え、前記変化量判別手段によって変化量が所定の範囲内にあると判別された場合、前記第１又は第２のタイミングにおける角度を取得して前記所定の基準角度との差分値を算出する、ようにしてもよい。

さらに、上記画像処理装置において、前記差分値算出手段は、前記角度検出手段によって検出された傾き角度が所定の範囲内にあるか否かを判別する角度判別手段を備え、前記角度判別手段によって角度が所定の範囲内にあると判別された場合、該傾き角度を取得して前記所定の基準角度との差分値を算出する、ようにしてもよい。

また、上記画像処理装置において、前記画像補正手段は、前記差分値算出手段によって算出された差分が所定の閾値を超えている場合、該差分に応じて、前記画質パラメータの基準値を調整する、ようにしてもよい。

さらに、上記画像処理装置において、前記差分値と前記画質パラメータの調整値とを対応付けるテーブルを前記機能毎に記憶するテーブル記憶手段をさらに備え、前記画像補正手段は、前記差分値算出手段によって算出された差分に対応する前記所定パラメータの調整値を、設定されている機能に対応するテーブルから取得し、該取得した調整値に従って該画質パラメータの基準値を調整する、ようにしてもよい。

また、本発明の第２の観点にかかるプログラムは、画像を表示する画面を有する画像表
示手段を備える画像処理装置のコンピュータに、前記画像表示手段の水平面に対する傾き
角度を検出する角度検出手順と、前記角度検出手順によって検出された傾き角度と所定の
基準角度との間の差分値を算出する差分値算出手順と、前記差分値算出手順によって算出
された差分値に応じて、画質パラメータの基準値を調整することにより、前記画像表示手
段の画面の画質を補正する画像補正手順と、実行可能な複数の機能のうち、現在動作中の機能を判別する機能判別手順と、を実行させ、前記差分値算出手順は、前記機能判別手順によって判別された機能に応じて、差分値の算出を行うか否かを選択する、ことを特徴とする。

本発明によれば、視認性に優れた画像表示を可能にする画像処理装置、及びそのプログラムを提供することができる。

以下、本発明を実施するための最良の形態を詳細に説明する。
［実施形態１］

まず、本発明の実施形態１に係る移動体通信端末の具体的構成について説明する。

図１は、本実施形態に係る移動体通信端末の外観図であり、このうち、図１（ａ）は、蓋部を開いた状態での移動体通信端末の外観を示し、図１（ａ）は、蓋部を閉じた状態での移動体通信端末の外観を示している。

図１に示す移動体通信端末１は、携帯電話やＰＨＳ（Personal Handyphone System）等といった移動体通信用の端末装置（電話機）であって、基地局（図示せず）を介して無線通話を可能ならしめる機能（無線通話機能）や、電子メールの送受信を行う機能（電子メール送受信機能）などを有している。また、本実施形態の移動体通信端末１は、上記無線通信機能や電子メール送受信機能に加えて、ＣＣＤ（Charge Coupled Device）等の撮像素子を用いて被写体像を撮像するカメラ機能、及びテレビジョン（以下単に「テレビ」という）放送局で放送されているテレビ番組の視聴を可能にする機能（テレビ番組視聴機能）を有している。

移動体通信端末１は、図１（ａ）に示すように、本体部２と、蓋部３と、本体部２と蓋部３とを連結するヒンジ部４と、から概略構成されている。ヒンジ部４の内側には、本体部２側に固定された図示しない固定軸が設けられている。この固定軸の回りに、本体部２に対して蓋部３を回転させて、蓋部３と本体部２とを開閉することができる。

この本体部２の正面には、操作キー５と、マイクロフォン６と、加速度センサ７と、設けられ、蓋部３の正面には、スピーカ８と、モニタ９と、自分撮り用撮像レンズ１０と、が設けられている。

操作キー５は、例えば十字カーソルキーや、数字や文字を入力するための英数字キー、機能などを指定するためのボタン等から構成され、ユーザによって操作されるものである。

マイクロフォン６は、音声通話時のユーザの発話音声を入力するものである。

加速度センサ７は、例えば重錘体を取り付けたダイヤフラムに圧電素子を貼着した構成を有する圧電型の加速度センサであって、移動体通信端末１の加速度を検出するためのものである。具体的には、加速度が発生したときに、重錘体によってダイヤフラム及び圧電素子に歪みを生じさせ、圧電素子の圧電効果によって生ずる電圧変化により加速度が検出される。また、本実施形態の加速度センサ７は、３軸加速度センサであり、ｘ軸方向、ｙ軸方向、ｚ軸方向の加速度の検出が可能なものとなっている。ここで、本実施形態では、移動体通信端末１の本体部２の長側縁に平行な中心軸をｘ軸、短側縁に平行な中心軸をｙ軸とし、これらｘ軸及びｙ軸に直交する軸をｚ軸として定義する。

スピーカ８は、音声通話における着話音声や、着信音、受信中のテレビ番組の音声などを出力するものである。

モニタ９は、例えば液晶表示装置（ＬＣＤ：Liquid Crystal Display）等から構成され、利用者に対して各種情報を表示するための主画面であり、端末を開いた状態、つまり蓋部３が開いた状態で確認可能となるようになっている。画面には、例えば電波の受信状況、メール受信の有無、バッテリ残量などの情報や、日時情報、さらには自分撮り用レンズ１０、蓋部３の背面に設けられている撮影レンズ１２による撮影画像など、あるいは移動体通信端末１による種々の動作を実行するためのメニュー画面や、受信中のテレビ番組の動画像を表示するものである。

自分撮り用撮像レンズ１０は、移動体通信端末１を手持ちの状態でユーザの顔の光学像（被写体像）をＣＣＤ等の撮像素子（図示せず）に結像するものである。

また、図１（ｂ）に示すように、蓋部３の背面には、アンテナ１１と、撮像レンズ１２と、サブモニタ１３と、が設けられている。

アンテナ１１は、移動体通信端末１の外部から入力される電磁波をアナログ信号に変換すると共に、送信信号を電磁波に変換して空中に放射するものである。

撮像レンズ１２は、被写体の光学像（被写体像）をＣＣＤ等の撮像素子（図示せず）上に結像するものである。

サブモニタ１３は、モニタ９と同様、液晶表示装置等から構成されており、メインモニタ９に表示される情報の一部、例えばアンテナ１１の受信強度や、電子メールの受信の有無、バッテリの残量などを示す絵図などが表示される。

図２は、移動体通信端末１の内部構成を示すブロック図である。移動体通信端末１は、図２に示すように、端末制御部２０と、テレビチューナ部２１と、無線制御部２２と、受信部２３と、送信部２４と、操作制御部２５と、表示制御部２６と、傾き検出部２７と、動作機能判別部２８と、音声処理部２９と、符号化部３０と、記憶部３１と、カメラ映像処理部３２と、から構成されている。

端末制御部２０は、例えばＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、及びＲＡＭ（Random Access Memory）等から構成されており、ＣＰＵがＲＯＭ等に記憶されている各種プログラムを適宜実行することによって、移動体通信端末１の各部の動作を制御する。なお、ＲＡＭは、ＣＰＵがプログラムを実行する際、ワークメモリとして用いられるものである。

テレビチューナ部２１は、アンテナ１１より供給されるアナログ信号のうちから、ユーザにより選局されたチャンネルの周波数に同調する信号を抽出し、これをベースバンド信号に変換する。そして、テレビチューナ部２１は、このベースバンド信号からビデオデータと音声データ等を取得し、ビデオデータを表示制御部２６に供給すると共に、音声データを音声処理部2９に供給する。

無線制御部２２は、アンテナ１１から供給されるアナログ信号をダウンコンバートした後、アナログ信号に対して直交復調処理やＡ／Ｄ（Analog-Digital）変換処理を施すなどしてチップレートのデジタル信号を生成し、これを受信部２３に供給する。無線制御部２２は、送信部２４から供給される送信信号にＤ／Ａ（Digital-Analog）変換処理及び変調処理を施した後、アップコンバートし、アンテナ１１を介して基地局に送信する。

受信部２３は、無線制御部２２から供給されるチップレートのデジタル信号に対して逆拡散処理及び位相補正処理を施すなどしてシンボルレートの受信信号を取得し、これを音声処理部２９に供給する。

送信部２４は、符号化部３０から供給される送信信号に対してエラー訂正符号化処理、物理チャネルへのマッピング処理、及び拡散処理を施した後、これを無線制御部２２に供給する。

操作制御部２５は、操作キー５における操作を認識して端末制御部２０に入力するものである。

表示制御部２６は、端末制御部２０やテレビチューナ部２１から供給されるビデオデータにデコード処理を施した後、アナログ信号に変換してモニタ９あるいはサブモニタ１３に出力する。これにより、モニタ９あるいはサブモニタ１３には、メニュー画面や、テレビ番組の動画像等が表示される。

傾き検出部２７は、加速度センサ７で検出される移動体通信端末１の加速度と、重力加速度と、から水平方向に対する移動体通信端末１の傾き、さらには傾き角度を検出するものである。

動作機能判別部２８は、傾き検出部２７で検出される傾き角度の変化量に基づいて、傾き角度を有効な検出結果として取得するか否かを決定するものである。具体的には、傾き検出部２７で検出された最新の傾き角度と、前回の検出で得られた傾き角度と、を比較して、その差が予め定められた誤差範囲内に収まっているか否かを判別する。そして、傾き角度の差が誤差範囲内にある場合には、移動体通信端末１が所定時間静止していたものと判断して、前回の検出で得られた傾き角度（或いは最新の傾き角度）を有効な検出結果として取得する。

音声処理部２９は、テレビチューナ部２１や受信部２３から供給される音声信号に対してデコード処理を施した後、アナログ信号に変換してスピーカ８から出力するものである。これにより、スピーカ８からは、通話相手方の音声や、テレビ番組の音声などが出力される。

符号化部３０は、マイクロフォン６から入力される音声に対してＡ／Ｄ変換処理及び符号化処理を順次施して、シンボルレートの送信信号を生成し、これを送信部２４に供給すするものである。

記憶部３１は、例えばＳＤ（Secure Digital）メモリカード等から構成されており、図３に示すように、メニュー画面を補正する際に用いられるメニュー画面用の表示画面補正用テーブルＮと、テレビ表示を補正する際に用いられるテレビ表示用の表示画面補正用テーブルMと、を記憶するものである。この表示画面補正用テーブルＮ及びＭは、傾きレベルと、傾斜角度と、コントラストの補正値と、輝度の補正値と、色合いの補正値と、を対応付けて登録している。

カメラ映像処理部３２は、撮像レンズ１０あるいは１２からの被写体像を映像信号に変換するものである。

ここで、傾きレベルとは、傾き検出部２７で検出された移動体通信端末１の傾き角度と、後述する基準角度θと、の差（傾斜角度ａ）に応じて予め定義付けられているものである。図３（ａ）に示すメニュー画面用の表示画面補正用テーブルＮを例として説明すれば、図４に示すように、移動体通信端末１の傾き角度と基準角度θとの差（傾斜角度ａ）が１０°よりも小さい場合、傾きレベルは「０」となる。また、移動体通信端末１の傾き角度が基準角度θよりも１０°以上大きい場合、傾きレベルは「＋１」となり、さらにこれが２０°以上になると、傾きレベルは「＋２」となる。一方、移動体通信端末１の傾き角度が基準角度よりも１０°以上小さい場合、傾きレベルは「−１」となり、さらにこれが３０°以上になると、傾きレベルは「−２」となる。

次に、上記構成を備える移動体通信端末１の具体的動作について説明する。

図５は、本実施形態における画像補正処理の処理内容を示すフローチャートである。
まず、端末制御部２０は、例えば本体部２に設けられた開閉センサ（図示せず）からの入力レベル信号に基づいて本体部２と蓋部３とが開放されたか否かを判別することにより、モニタ９を含む蓋部３（表示ユニット）が開放状態となったか否かを判別する（ステップＳ１０１）。表示ユニットが開放状態になったと判別した場合には（ステップＳ１０１；Ｙｅｓ）、移動体通信端末１の基準角度θを算出する基準角度算出処理を実行する（ステップＳ１０２）。この基準角度算出処理の詳細は後述する。

次に、上述した基準角度算出処理により基準角度θが算出されると、端末制御部２０は、現在動作中の機能に応じてＲＡＭ等に設けられた機能モードフラグに基づいて移動体通信端末１の現在設定されている機能モードの判別を行う。そして、カメラモードに設定されている場合などテレビモード以外のカメラモードに設定されている場合には（ステップＳ１０３；Ｙｅｓ、ステップＳ１０４；Ｎｏ）、端末１の傾きに対する画面調整は不要として何も処理を行わず、ステップＳ１０２の基準角度算出処理に処理を戻す。

一方、機能モードがテレビモードに設定されている場合には（ステップＳ１０３；Ｎｏ、ステップＳ１０４；Ｙｅｓ）、この時点（ｔ＝ｔ１）での端末角度α１（ｔ１）を動作機能判別部２８において算出する（ステップＳ１０５）。具体的には、加速度センサ７からこの時点での移動体通信端末１の加速度ベクトルを取得し、これに基づいて端末角度α１（ｔ１）を算出する。

次に、端末制御部２０は、ＲＡＭ等に設けられたタイマのタイムアップ値として時間Ｓに対応するカウント値を設定すると共に、タイマをリセットしてカウント値Ｃを初期値「０」にする（ステップＳ１０６）。そして、端末制御部２０は、タイマのカウント動作を開始させ、所定間隔でカウント値Ｃを１ずつカウントアップして行く（ステップＳ１０７）。

カウント動作後、タイマのカウント値Ｃがタイムアップ値Ｓに達すると（ステップＳ１０８；Ｙｅｓ）、端末制御部２０は、上述したステップＳ１０５の処理と同様にこの時点（ｔ＝ｔ２（＝ｔ１＋Ｓ））での端末角度α２（ｔ２）を算出する（ステップＳ１０９）。

そして、ステップＳ１０５の処理にて算出した端末角度α１（ｔ１）と、ステップＳ１０９の処理にて算出した端末角度α２（ｔ２）との比較処理を行い、タイムアップまでの時間Ｓの間に端末角度αが変化したか否か判別し（ステップＳ１１０）、変化している場合には（ステップＳ１１０；Ｎｏ）、さらに、変化した角度が所定の誤差Ｔの範囲内にあるか否かを判別する（ステップＳ１１１）。

上述したステップＳ１１１の判別処理の判別結果が、変化した角度が所定の誤差Ｔの範囲を超えているものと判別したときには（ステップＳ１１１；Ｎｏ）、移動体通信端末１が静止していないものと判断して、ステップＳ１０２の処理に戻り、再度基準角度の算出を行う。

一方、ステップＳ１１０の判別処理の判別結果が、タイムアウトまでの時間Ｓの間に端末角度αが変化しなかったと判別した場合や（ステップＳ１１０；Ｙｅｓ）、変化した場合でも、ステップＳ１１１の判別処理の判別結果が、変化した角度が所定の誤差Ｔの範囲内であると判別したときには（ステップＳ１１１；Ｙｅｓ）、移動体通信端末１が静止しているものと判断し、ステップＳ１０５の処理にて算出した端末角度α１（ｔ１）を有効な検出結果として取得する。

そして、端末制御部２０は、有効な検出結果として取得した端末角度α１（ｔ１）から、基準角度θを減算することにより、傾斜角度ａを取得する（ステップＳ１１２）。続いて、ステップＳ１１２の処理にて取得した傾き角度ａに対応する傾きレベルを、端末制御部２０によって、図３（ｂ）に示すテレビ表示用の表示画面補正テーブルＭを参照して決定すると共に（ステップＳ１１３）、この決定した傾きレベルに対応するコントラスト、輝度、及び色合いの補正値をテレビ表示用の表示画面補正テーブルＭから取得する（ステップＳ１１４）。

例えば、ステップＳ１１２の処理にて取得した傾斜角度ａが＋１８°の場合、ステップＳ１１３の処理にて傾きレベルは「＋１」に決定され、この傾きレベルに対応するコントラスト、輝度、及び色合いの補正値として「＋１」、「−２」、「０」が図３（ｂ）に示すテレビ表示用の表示画面補正テーブルＭから取得される（ステップＳ１１４）。

そして、端末制御部２０は、ステップＳ１１４の処理にて取得したコントラスト、輝度、及び色合いの補正値に従って、コントラスト、輝度、及び色合いの設定値等を含む画面表示条件を更新することにより（ステップＳ１１５）、モニタ９に表示されるテレビ番組の動画像の画質を決定するコントラスト、輝度、及び色合いを調整する。

その後、ユーザにより蓋部３が閉じられるなどして表示ユニットが閉鎖状態になるまで（ステップＳ１１６；Ｎｏ）、上記ステップＳ１０２〜Ｓ１１５までの処理が繰り返し行われ、この間、モニタ９に表示されるテレビ画面のコントラスト、輝度、及び色合いは、視認に最適なものとなるように随時調整される。そして、表示ユニットが閉鎖状態になると（ステップＳ１１６；Ｙｅｓ）、端末制御部２０は、この画像補正処理を終了する。
以上までが本実施形態における画像補正処理である。

次に、図５に示した画像補正処理におけるステップＳ１０２の処理において行われる基準角度算出処理について説明する。
図６は、基準角度算出処理の処理内容を示すフローチャートである。
この処理において、端末制御部２０は、図６に示すように、まず、加速度センサ７の出力、即ち移動体通信端末１の加速度ベクトル（Ａｘ、Ａｙ、Ａｚ）を取得すると共に（ステップＳ２０１）、ＲＡＭ等に設けられたタイマをリセットしてタイマ値のカウントアップを開始させる（ステップＳ２０２）。

続いて、端末制御部２０は、ステップＳ２０１の処理にて取得した加速度ベクトル（Ａｘ、Ａｙ、Ａｚ）から、加速度の大きさＡ０（＝√（Ａｘ２＋Ａｙ２＋Ａｚ２））を算出する（ステップＳ２０３）。そして、算出した加速度の大きさＡ０と重力加速度の大きさｇとを比較して、加速度の大きさＡ０と重力加速度の大きさｇとの差が所定の誤差βの範囲内にあるか否か判別する（ステップＳ２０４）。

ステップＳ２０４の判別処理の判別結果が、加速度の大きさＡ０と重力加速度の大きさｇとの差が所定の誤差βの範囲を超えていると判別した場合には（ステップＳ２０４；Ｎｏ）、移動体通信端末１が静止していないものと判断して、タイマの値が所定期間ｍを刻むまでウェイトした後（ステップＳ２０５）、ステップＳ２０１〜Ｓ２０４の処理を再度実行する。

そして、ステップＳ２０４の判別処理の判別結果が、加速度の大きさＡ０と重力加速度の大きさｇとの差が所定の誤差βの範囲内にあると判別した場合には（ステップＳ２０４；Ｎｏ）、移動体通信端末１が静止したものと判断して、加速度ベクトル（Ａｘ、Ａｙ、Ａｚ）と重力加速度ベクトルとから、移動体通信端末１の傾き角度θを算出し（ステップＳ２０６）、これをＲＡＭ等の所定の領域に基準角度θとして保存する保存処理が行われ（ステップＳ２０７）、その後はこの基準角度算出処理が終了し、元の処理へ戻る。
以上までの処理が基準角度算出処理である。

以上までに説明した図５、図６の処理が、本実施形態に係る移動体通信端末１の端末制御部２０において行われることによって、テレビモードに設定されている場合、即ちユーザがテレビ番組を視聴している場合にのみ、端末角度αと基準角度θとの差分（傾斜角度ａ）に応じて、コントラスト、輝度、及び色合いを調整し、モニタ９の表示画像の画質を補正することが実現される。

このように、画像の補正が有効なテレビ画像を表示している場合にのみ、傾斜角度ａに応じてコントラスト等の調整を行い、画像の補正がテレビ画像ほど有効でない待ち受け画像などを表示している場合には、コントラストの調整等を行わないことで、コントラスト等が頻繁に変化し、目障りとなるといった事態を防止することができ、この結果、モニタ９に表示される画像の視認性を高めることができる。

また、端末制御部２０は、タイミングｔ１における端末角度α１と、タイミングｔ１から時間Ｓ後のタイミングｔ２におけるα２と、を比較して、時間Ｓの間に変化したかを判別すると共に、変化している場合にはその変化量を求め、これが所定の誤差Ｔの範囲内にあるか否かの判別を行う。端末角度αが変化していない場合や、変化していてもその変化量が所定の誤差Ｔ範囲内にある場合、端末制御部２０は、移動体通信端末１が静止しているものと判断して、タイミングｔ１における端末角度α１を有効な検出結果として取得し、この取得した端末角度α１と基準角度θとの差分（傾斜角度ａ）に応じて、コントラスト、輝度、及び色合いを調整し、モニタ９の表示画像を補正する。

このように、移動体通信端末１が静止したときにのみ、端末角度αを取得することで、移動体通信端末１が動いている最中に、コントラスト等が順次変化して行き、目障りになるといった事態を防止することができる。これにより、上記モニタ９の表示画像の視認性を高めるといった効果をより一層顕著なものとすることができる。また、コントラスト等を順次調整する場合に比べて、端末制御部２０の制御負担を低減することができる。

さらに、端末制御部２０が表示画面補正用テーブルから取得するコントラスト等の補正値（調整値）は、傾斜角度ａが−１０°より大きく、１０°未満である場合、全て「０」に設定されている。即ち、端末角度αと基準角度θとの差分が１０°以上にならなければ、コントラスト等は、調整されない。このため、端末角度αが僅かに変化しただけでは、コントラスト等の調整は行われないため、コントラスト等の頻繁な変化により、ユーザがかえって目障りに感じるといった弊害を防止することができ、結果として、上記モニタ９の表示画像の視認性の向上という効果をより一層高めることができる。
［実施形態２］

次に、本発明の実施形態２に係る移動体通信端末について説明する。

図７は、本実施形態における画像補正処理の処理内容を示すフローチャートである。
まず、表示ユニットが開放状態となったか否かを端末制御部２０によって判別を行い（ステップＳ１２１）、開放状態になったと判別した場合には（ステップＳ１２１；Ｙｅｓ）、基準角度算出処理を実行して（ステップＳ１２２）、移動体通信端末１の基準角度θを算出する。

次に、端末制御部２０は、図５に示す画像補正処理におけるステップＳ１０５の処理と同様の処理を行って、この時点での移動体通信端末１の加速度ベクトルを加速度センサ７から取得し、これに基づいて端末角度αを算出する（ステップＳ１２３）。続いて、端末制御部２０は、ステップＳ１２３の処理にて算出した端末角度αが所定の数値範囲内に収まっているか否か、例えば端末角度αが−１０°より大きく、且つ１０°未満であるか否かを判別する（ステップＳ１２４）。

上述したステップＳ１２４の判別処理にて端末角度αが−１０°以下である場合、あるいは１０°以上である場合など所定の数値範囲内にないと判別された場合には（ステップＳ１２４；Ｎｏ）、ステップＳ１２２の基準角度算出処理に戻る。一方、端末角度αが−１０°より大きく、且つ１０°未満である場合など所定の数値範囲内にある場合には（ステップＳ１２４；Ｙｅｓ）、機能モードフラグを参照して移動体通信端末１の機能モードを特定する。

その判別結果、モードフラグがテレビモードに設定されている場合には（ステップＳ１２５；Ｙｅｓ）、モニタ９の表示画面の画質補正に用いる表示画面補正用テーブルとして、図３（ｂ）に示すテレビ表示用の表示画面補正用テーブルＭを設定する（ステップＳ１２６）。一方、モードフラグがメニュー表示モードに設定されている場合には（ステップＳ１２５；Ｎｏ、ステップＳ１２７；Ｙｅｓ）モニタ９の表示画面の画質補正に用いる表示画面補正用テーブルとして、図３（ａ）に示すメニュー画面用の表示画面補正用テーブルＮを設定する（ステップＳ１２８）。他方、その他のモードに設定されている場合には（ステップＳ１２７；Ｎｏ）、ステップＳ１２２の基準角度算出処理に戻る。

上述したステップＳ１２６又はＳ１２８の補正テーブル指定処理の終了後、端末制御部２０は、ステップＳ１２３の処理にて算出した端末角度αから、ステップＳ１２２の基準角度算出処理において算出した基準角度θを減算して、傾き角度ａを取得する。そして、端末制御部２０は、この傾き角度ａに対応する傾きレベルを、ステップＳ１２６又はＳ１２８の処理において設定した表示画面補正用テーブルＭ又はＮを参照して決定すると共に（ステップＳ１２９）、この決定した傾きレベルに対応する画面画質条件のコントラスト、輝度、及び色合いの補正値を、ステップＳ１２６又はＳ１２８の処理にて設定した表示画面補正用テーブルＭ又はＮから取得する（ステップＳ１３０）。

そして、ステップＳ１３０の処理にて取得した画面画質条件のコントラスト、輝度、及び色合いの補正値に従って、コントラスト、輝度、及び色合いの設定値等を含む画面表示条件を端末制御部２０によって更新する（ステップＳ１３１）。

その後、表示ユニット（蓋部３）が閉鎖状態になるまで（ステップＳ１３２；Ｎｏ）、上記ステップＳ１２２〜Ｓ１３１までの各処理が繰り返し行われ、この間、モニタ９の表示画面の画質を示すコントラスト、輝度、及び色合いは、その画面がテレビ画面であるかメニュー画面であるかに応じて、視認に最適なものとなるように随時調整される。そして、表示ユニットが閉鎖状態になると（ステップＳ１３２；Ｙｅｓ）、端末制御部２０は、この画像補正処理を終了する。
以上までの処理が画像補正処理の実施形態２である。

以上説明したように、本実施形態の移動体通信端末１の端末制御部２０は、テレビモードに設定されているか或いはメニュー表示モードが設定されているかによって、異なる表示画面補正テーブルを用いてモニタ９の表示画像の補正をすることが実現できる。
このため、傾斜角度ａが同一であっても、テレビモードに設定されているか或いはメニュー表示モードが設定されているかによって、即ちモニタ９に表示される画像が動画像であるか或いは静止画像であるかによって、調整されるコントラストの値等は、異なるものとなる。

このようにすることで、モニタ９に表示される画像を、それが動画像であるか或いは静止画像に応じた態様で補正することが可能となるため、表示画像の視認性をより一層高めることができる。

さらに、端末角度αが−１０°より大きく、１０°未満である場合には、表示画像の補正が行われる一方、−１０°以下の場合や、１０°以上の場合には、表示画像の補正は行われない。このように、表示画像の補正が行われる端末角度αを制限することで、コントラスト等の調整が頻繁に行われ、目障りになるといった弊害を防止することができ、モニタ９に表示される画像の視認性をより一層高いものとすることができる。
［実施形態３］

次に、本発明の実施形態３に係る移動体通信端末について説明する。

本実施形態における移動体通信端末１３は、上述した実施形態１及び２における移動体通信端末１の構成において、図８に示すように、蓋部３の正面に自分撮り用撮像レンズ１０を備えている。

本実施形態では、上記実施形態１及び２と異なり、移動体通信端末１と地軸水平面とが形成する角度ではなく、移動体通信端末１３のモニタ９の画面とユーザの顔（目線）とが形成する相対角度に基づいて、画像のコントラスト、輝度、及び色合いの調整を行う。

これを図８を参照してより詳細に説明すると、端末制御部２０は、自分撮り用撮像レンズ１０でユーザの顔を撮影してユーザの顔画像を取得し、取得した顔画像からユーザの目の位置を検出する。そして、端末制御部２０は、検出した目の位置に基づいて、ユーザの目とモニタ９の画面とが形成する相対角度を算出することにより、ユーザの顔と移動体通信端末１３の蓋部３が開放状態におけるモニタ９の画面とが形成する相対角度を取得する。図８（ａ）では、角度αは、通常の使用形態に近い、ユーザの目４０とモニタ９の画面がほぼ直角になっている。

その後、図８（ｂ）に示すように、ユーザの顔が動いて目４０が移動して４２の位置に移ったとき、ユーザの顔と移動体通信端末１３とが成す角度も相対的にαからβへと変化する。
なお、本実施形態では、移動体通信端末１３の水平方向に対する角度θに変化がないものとする。すなわち、移動体通信端末１３は動いてはいないが、ユーザの移動体通信端末１３に対する相対角度が変化した場合に相当する。

自分撮り用撮像レンズ１０は、ユーザの顔あるいは目の画像を定期的に取得することで、目の位置が変わったことを検出し、これに基づいて、モニタ９の画面と目との間の相対角度の変化（相対角度の差分β−α）を算出する。

なお、移動体通信端末１３の水平方向に対する角度θが変化した場合には、その変動した角度分も加味した上で、目の位置の移動変化を算出してもよい。そして、端末制御部２０は、この相対角度の変化（差分β−α）に対応するコントラスト、輝度、色合いの補正値を表示画面補正用テーブルから取得し、この補正値に基づいて、コントラスト、輝度、色合いを調整することにより、モニタ９の画面画質を補正する。

図９は、本実施形態における画像補正処理の処理内容を示すフローチャートである。
まず、表示ユニットが開放状態になっているか否かを端末制御部２０によって判別を行う（ステップＳ１４１）。表示ユニットが開放状態になっていればステップＳ１４２の処理に進み、閉鎖状態ならば開放状態になるまで待つ。

次に、端末制御部２０は、機能モードフラグがカメラモードに設定されているか否かを判別する（ステップＳ１４２）。カメラモードに設定されている場合には（ステップＳ１４２；Ｙｅｓ）、続いて自分撮り用撮像レンズ１０がユーザの方向に向いているか否かを判別する（ステップＳ１４３）。

上述したステップＳ１４３の処理において自分撮り用撮像レンズ１０がユーザの方向に向いていると判別した場合には（ステップＳ１４３；Ｙｅｓ）、ＲＡＭ等に設けられたタイマＳがタイムアウトしたか否かを判別する（ステップＳ１４４）。このタイマＳは、自分撮り用撮像レンズ１０による撮影間隔を示すものであり、後述するステップＳ１５６においてセットされる。タイマＳがタイムアウトしている場合（ステップＳ１４４；Ｙｅｓ）、端末制御部２０は、自分撮り用撮像レンズ１０でユーザの顔を撮像して顔画像（Ｐ１）を取り込む（ステップＳ１４５）。

なお、この第３の実施形態では、タイマＳの間隔でユーザの顔あるいは目の画像を定期的に自分撮り用撮像レンズ１０によって取得する例を示しているが、自分撮り用撮像レンズ１０による画像取得は、移動体通信端末１３が特定の状態にあるときだけ行うようにしてもよい。例えば、移動体通信端末１３においてユーザの操作に基づくアプリケーション機能の動作が行われていなかったり、あるいはアプリケーション動作中でも一定時間以上ユーザによる操作が無い場合には、後述するステップＳ１４５の処理を行わないようにしてもよい。

ところで、ステップＳ１４２の処理にてカメラモード以外のモードに設定されていると判別した場合（ステップＳ１４２；Ｎｏ）や、ステップＳ１４３の処理において自分撮り用撮像レンズ１０がユーザの方向に向いていないと判別した場合（ステップＳ１４３；Ｎｏ）、また、ステップＳ１４４の処理にてタイマＳがタイムアウトしていないと判別した場合には（ステップＳ１４４；Ｎｏ）、ステップＳ１４２の処理に戻る。

ステップＳ１４５における顔画像（Ｐ１）取り込み処理の後、端末制御部２０は、ＲＡＭ等の内部メモリに一時的に保持されている前回の顔画像（Ｐ０）を取得し（ステップＳ１４６）、これら二つの顔画像Ｐ０とＰ１の画像を比較することにより、今回の顔画像（Ｐ１）が前回の顔画像（Ｐ０）からどの程度変化したかを検出する（ステップＳ１４７）。続いて、端末制御部２０は、ステップＳ１４５の処理にて取得した顔画像（Ｐ１）を前回の顔画像（Ｐ０）として上書きする（ステップＳ１４８）。

続いて、端末制御部２０は、ステップＳ１４５の処理にて取得し、ステップ１４８の処理で記憶された顔画像（Ｐ１）がユーザの顔を認識できるものであるか否かを判別する（ステップＳ１４９）。ユーザの顔を認識可能なものである場合には（ステップＳ１４９；Ｙｅｓ）、ステップＳ１４７の処理にて検出した顔画像の変化が所定以上であったか否かを判別する（ステップＳ１５０）。

上述したステップＳ１５０の判別処理において、二つの顔画像Ｐ０とＰ１との間に目立った変化が認められない場合には、ユーザの視線に変化なし、あるいは変化の認識ができないものとして、ステップＳ１５７の処理に進む。
一方、ステップＳ１５０の判別処理において、二つの顔画像Ｐ０とＰ１の間に所定以上の変化が認められた場合には（ステップＳ１５０；Ｙｅｓ）、その変化量、即ちユーザの顔の移動量ａ（角度変化）を算出する（ステップＳ１５１）。

具体的には、移動体通信端末１３の蓋部３のモニタ９とユーザの顔とが形成する相対角度を、今回の顔画像（Ｐ１）と前回の顔画像（Ｐ０）とのそれぞれについて求める。そして、端末制御部２０は、今回の顔画像（Ｐ１）から求めた蓋部３のモニタ９とユーザの顔とが形成する相対角度から、前回の顔画像（Ｐ０）から求めた蓋部３のモニタ９とユーザの顔とが形成する相対角度を、減算することにより、移動角度、即ち移動量ａを算出する。
この移動量（移動角度）は、図８におけるユーザの目の位置４０が４２に移動（角度αからβに変化）した量である。

そして、端末制御部２０は、ステップＳ１５１の処理にて算出した移動量ａを、ＲＡＭ等に設けられた内部メモリの移動量記憶領域に一時的に保存した後（ステップＳ１５２）、移動量（角度変化）ａに対応する傾きレベルを決定する（ステップＳ１５３）。

続いて、端末制御部２０は、ステップＳ１５３の処理にて決定した傾きレベルに対応するコントラスト、輝度、及び色合いの補正値を、記憶部３１に記憶されている表示画面補正用テーブルから取得する（ステップＳ１５４）。

そして、端末制御部２０は、ステップＳ１５４の処理にて取得したコントラスト、輝度、及び色合いの補正値に従って、コントラスト、輝度、及び色合いの設定値等を含む画面表示条件を更新する（ステップＳ１５５）。その後、端末制御部２０は、タイマＳにタイマ初期値をセットして、タイマＳのカウントダウンを開始させた後（ステップＳ１５６）、表示ユニットが閉じられたか否かの判別を行う（ステップＳ１５７）。そして、表示ユニットが開放状態にあった場合には（ステップＳ１５７；Ｎｏ）、ステップＳ１４２の処理に戻り、閉鎖状態であれば（ステップＳ１５７；Ｙｅｓ）、この画像補正処理を終了する。
以上までの処理が画像補正処理の実施形態３である。

以上説明したように、本実施形態の移動体通信端末１３の端末制御部２０は、小型カメラ１４による撮影で得られたユーザの顔画像（Ｐ１）から、移動体通信端末１３の蓋部３に設けられたモニタ９の画面とユーザの顔とが形成する相対角度βを算出する。そして、端末制御部２０は、これと前回算出した角度αとの差分（移動量）に応じて、コントラスト等を調整することにより、モニタ９の表示画像を補正することを実現する。

このように、移動体通信端末１３の端末制御部２０は、実施形態１及び２の移動体通信端末１と異なり、移動体通信端末と水平面とがなす角度ではなく、移動体通信端末とユーザの顔とがなす相対角度に基づいて、モニタ９の表示画像を補正する。このため、水平面に対する角度は変化したが、ユーザの顔に対する角度が変化していない場合など表示画像の補正を行う必要がない場合にまで、コントラストの調整が行われるといった事態を防止することができる。これにより、ユーザの目障り感を減少させることができ、この結果、モニタ９の表示画像の視認性を高めることができる。

なお、本発明は、上記実施形態に限定されず、種々の変形、応用が可能である。以下、本発明に適用可能な上記実施形態の変形態様について、説明する。

上記実施形態１において、ステップＳ１１０の処理にて時間Ｓの間に端末角度αが変化しなかったと判別した場合や（ステップＳ１１０；Ｙｅｓ）、変化した場合でも、ステップＳ１１１の処理にて変化した角度が所定の誤差Ｔの範囲内であると判別したときには（ステップＳ１１１；Ｙｅｓ）、ステップＳ１０５の処理にて算出した端末角度α１（ｔ１）を有効な検出結果として取得するものとして説明した。しかしながら、本発明は、これに限定されず、ステップＳ１０９の処理にて算出した端末角度α２（ｔ２）を有効な検出結果として取得してもよい。

また、上記実施形態３において、端末制御部２０は、ステップＳ１４８の処理において、今回の顔画像（Ｐ１）と、前回の顔画像（Ｐ０）と、を比較することにより、ユーザの顔の位置が移動したか否かを判別するものとして説明した。しかしながら、本発明は、これに限定されず、例えば今回の顔画像（Ｐ１）から求めた蓋部３のモニタ９とユーザの顔とが形成する角度と、前回の顔画像（Ｐ０）から求めた蓋部３のモニタ９とユーザの顔とが形成する角度と、を比較することにより、ユーザの顔の位置が移動したか否かを判別するようにしてもよい。この場合、今回の顔画像（Ｐ１）から求めた蓋部３のモニタ９とユーザの顔とが形成する相対角度と、前回の顔画像（Ｐ０）から求めた蓋部３のモニタ９とユーザの顔とが形成する相対角度と、の差が所定の数値範囲を超えるとき、ユーザの顔の位置の移動があったものと判別するようにすればよい。

さらに、上記実施形態にかかる動作機能判別部２８の構成は、ハードウェアによって実現可能であることはもとより、端末制御部２０のソフトウェア処理によって実現されてもよい。この場合、端末制御部２０を上記動作機能判別部２８として機能させ、上述した各処理を実現するためのプログラムを移動体通信端末１，１３内（例えば、ＲＯＭ）に格納し、端末制御部２０がこのようなプログラムを実行するようにすればよい。

また、上記実施形態において、端末制御部２０のＣＰＵが実行するプログラムは、予めＲＯＭ等に記憶されていた。しかしながら、本発明は、これに限定されず、上述の処理を実行させるためのプログラムを、既存の移動体通信端末に適用することで、上記実施形態にかかる移動体通信端末１，１３として機能させるようにしてもよい。

このようなプログラムの提供方法は任意であり、例えば、インターネットなどの通信媒体を介して提供可能である他、例えば、メモリカードなどの記録媒体に格納して配布してもよい。

本発明の実施形態１及び２に係る移動体通信端末の外観構成例を示す図である。 図１に示す移動体通信端末の内部構成例を示すブロック図である。 表示画面補正テーブルの構成例を示す図である。 図３に示す傾きレベルを説明するための概念図である。 実施形態１における画像補正処理の詳細を示すフローチャートである。 図５に示す基準角度算出処理の詳細を示すフローチャートである。 実施形態２における画像補正処理の詳細を示すフローチャートである。 実施形態３における移動体通信端末が表示画像を補正する様子を説明するための概念図である。 実施形態３における画像補正処理の詳細を説明するためのフローチャートである。

符号の説明

１…移動体通信端末、２…本体部、３…蓋部、４…ヒンジ部、５…操作キー、６…マイクロフォン、７…加速度センサ、８…スピーカ、９…モニタ、１０…自分撮り用撮像レンズ、１１…アンテナ、１２…撮影レンズ、１３…サブモニタ、２０…端末制御部、２１…テレビチューナ部、２２…無線制御部、２３…受信部、２４…送信部、２５…操作制御部、２６…表示制御部、２７…傾き検出部、２８…動作機能判別部、２９…音声処理部、３０…符号化部、３１…記憶部、３２…カメラ映像処理部

Claims (7)

1. 画像を表示する画面を有する画像表示手段と、
   前記画像表示手段の水平面に対する傾き角度を検出する角度検出手段と、
   前記角度検出手段によって検出された傾き角度と所定の基準角度の間の差分値を算出する差分値算出手段と、
   前記差分値算出手段によって算出された差分値に応じて、画質パラメータの基準値を調整することにより、前記画像表示手段の画面の画質を補正する画像補正手段と、
   実行可能な複数の機能のうち、現在動作中の機能を判別する機能判別手段と、
   を備え、
   前記差分値算出手段は、前記機能判別手段によって判別された機能に応じて、差分値の算出を行うか否かを選択する、
   ことを特徴とする画像処理装置。
2. 前記画像補正手段は、
   前記差分値算出手段により算出された差分値が一定時間同じかあるいは所定範囲内の値を維持していた場合には、画面画質の補正を行う、
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記差分値算出手段は、
   第１のタイミングにおいて検出された第１の角度と、該第１のタイミングから所定期間後の第２のタイミングにおいて検出された第２の角度と、を比較して、該所定期間内における角度の変化量を取得する変化量取得手段と、
   前記変化量取得手段によって取得された変化量が所定の範囲内にあるか否かを判別する変化量判別手段と、
   を備え、
   前記変化量判別手段によって変化量が所定の範囲内にあると判別された場合、前記第１又は第２のタイミングにおける角度を取得して前記所定の基準角度との差分値を算出する、
   ことを特徴とする請求項１又は２に記載の画像処理装置。
4. 前記差分値算出手段は、
   前記角度検出手段によって検出された傾き角度が所定の範囲内にあるか否かを判別する角度判別手段を備え、
   前記角度判別手段によって角度が所定の範囲内にあると判別された場合、該傾き角度を取得して前記所定の基準角度との差分値を算出する、
   ことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
5. 前記画像補正手段は、
   前記差分値算出手段によって算出された差分が所定の閾値を超えている場合、該差分に応じて、前記画質パラメータの基準値を調整する、
   ことを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 前記差分値と前記画質パラメータの調整値とを対応付けるテーブルを前記機能毎に記憶
   するテーブル記憶手段をさらに備え、
   前記画像補正手段は、
   前記差分値算出手段によって算出された差分に対応する前記所定パラメータの調整値を
   、設定されている機能に対応するテーブルから取得し、該取得した調整値に従って該画質
   パラメータの基準値を調整する、
   ことを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
7. 画像を表示する画面を有する画像表示手段を備える画像処理装置のコンピュータに、
   前記画像表示手段の水平面に対する傾き角度を検出する角度検出手順と、
   前記角度検出手順によって検出された傾き角度と所定の基準角度との間の差分値を算出
   する差分値算出手順と、
   前記差分値算出手順によって算出された差分値に応じて、画質パラメータの基準値を調
   整することにより、前記画像表示手段の画面の画質を補正する画像補正手順と、
   実行可能な複数の機能のうち、現在動作中の機能を判別する機能判別手順と、
   を実行させ、
   前記差分値算出手順は、前記機能判別手順によって判別された機能に応じて、差分値の算出を行うか否かを選択する、
   ことを特徴とするプログラム。