JP2005077859A - 合成画像処理装置 - Google Patents

Abstract

【課題】
ユーザーの指定した画像に対して個別に画質調整方法を設定することで、マルチ画面表示においてもユーザーの意図を反映した表示を可能とする。
【解決手段】 複数の画像信号を入力する入力手段、複数の画像を合成する画像合成手段、合成画像の画質調整処理を行う画質調整手段、画像処理アプリケーションプログラムを実行するコントローラを有し、画像合成手段と画質調整手段はコントローラを介して画像処理アプリケーションから命令を受けて画質調整を施す合成画像処理装置。
【選択図】 図１

Description

本発明は、複数の入力画像を一つの画像とする処理を行うために画像合成し、合成された画像データをアプリケーション等の指示に基づいて特定の入力画像に対して個別の画質調整を行う合成画像処理装置に関する。

静止画像及び動画像からなる複数映像を表示し、これら複数映像に対して画質調整を行う回路には、従来、図１３に示すような構成のものが考えられていた。

入力手段１３０１は、映像デ−タＶ１、Ｖ２、Ｖ３、Ｖ４を順次切換えて入力し、所定のメモリ領域に書き込まれるよう出力する。その際、画像の大きさに応じて間引き等の解像度変換を行い、動画像指定を受けている画像データ以外の表示映像は更新されない。

メモリコントローラ１３０２は、入力した映像デ−タのメモリ１３０３への書き込みと読み出しを制御することで複数映像表示用の映像デ−タを作成し、動画像画質調整手段１３０４、静止画像画質調整手段１３０６へ出力する。

メモリ１３０３は、メモリコントローラ１３０２の制御によって映像データを所定領域に蓄積するフレームメモリとして機能する。

動画像画質調整手段１３０４は、制御手段１３０８の指示により動画像補正デ−タ１３０５を用いて、メモリ１３０３から入力した映像デ−タに動的な画質調整を行う。

静止画像画質調整手段１３０６は、制御手段１３０８の指示により静止画像補正デ−タ１３０７を用いて、メモリ１３０３から入力した映像デ−タに静的な画質調整を行う。

制御手段１３０８は、外部からの指示である表示位置情報を元に入力手段１３０１、メモリコントローラ１３０２に各画像データの表示位置を指示し、メモリコントローラ１３０２の作成した複数映像表示用の映像デ−タを入力して動画像画質調整手段１３０４および静止画像画質調整手段１３０６の画像補正値を決定し、表示位置情報を元にセレクタ１３０９に動画像と静止画像の切換えを行う。

セレクタ１３０９が制御手段１３０８からの切換え制御信号に基づいて動画像と静止画像の切換えを行うことにより、表示部１３１０に映像デ−タＶ１、Ｖ２、Ｖ３、Ｖ４に対応した映像Ｆ１、Ｆ２、Ｆ３、Ｆ４が表示される。

図３に示すように、映像デ−タＶ１、Ｖ２、Ｖ３、Ｖ４に対応した映像Ｆ１（動画像）、Ｆ２（静止画像）、Ｆ３（静止画像）、Ｆ４（静止画像）が表示される。図３は、メモリ１３０３の領域に映像デ−タＶ１、Ｖ２、Ｖ３、Ｖ４が記憶されている様子を模式的に表示したものである。

セレクタ１３０９の信号は図３に示すように、制御手段１３０８からの切換え制御信号として（ａ）のラインを走査する際、表示領域の有効信号（ＶＥＮ）に対して切換え信号（ＭＨＳＬ）はＦ１である動画像領域でＨＩ、Ｆ２である静止画像領域でＬＯとなるように切換わる。また、（ｂ）のラインを走査する際も、表示領域の有効信号（ＶＥＮ）に対して切換え信号（ＭＨＳＬ）はＦ３である静止画像領域でＬＯ、Ｆ４である静止画像領域でＬＯとなるように切換わる。

従来、単画面表示での表示画像の画質調整は、表示器の画質調整機能等を用いてある程度ユーザーによる画質調整を行うことはできた。しかし、マルチ画面表示を行うために各表示画像の画質調整を行う際、あらかじめ決められた方式によって画質調整を行っていた。そのため、ユーザーが撮影したデジタル画像をマルチ画面表示で見る際、ユーザーの意図にかかわらず表示器の特性に合わせた画質調整しか行うことができなかった。

本発明は、このような課題を解決するためになされたものであって、ユーザーの指定した画像に対して個別に画質調整方法を設定し、マルチ画面表示においてもユーザーの意図を反映した表示を行うことを目的とする。

本発明は、複数の画像を一つの画像とする合成画像処理装置において、前記複数の画像となる複数の画像信号が入力される入力部と、前記複数の画像を合成する合成画像処理を行うための合成画像信号を生成する画像合成部と、前記合成画像の画質調整処理を行う画質調整部と、
画像処理アプリケーションプログラムを実行するコントローラと、を有し、前記画像合成部は、前記画像処理アプリケーションプログラムの実行によって、前記合成画像信号を生成し、前記コントローラは、前記画像処理アプリケーションプログラムの実行によって、画像毎に独立的に選択される画質調整処理を施すための命令を、前記画像合成部及び／又は前記画質調整部に入力し、前記画質調整部は、前記画像処理アプリケーションからの画質調整処理を施すための命令により、前記合成画像から画質調整処理すべき画像を特定し、入力された前記合成画像信号に、選択された画質調整処理を施す合成画像処理装置である。

前記画像合成部は、前記画像処理アプリケーションからの画質調整処理を施す命令により、前記複数の画像の解像度変換処理を行うと共に、画質調整の対象となる画像を最上位に配置するよう指示することが好適である。

前記画像合成部は、前記画像処理アプリケーションからの画質調整処理を施す命令により画質調整を行う機能を有することが好適である。

前記画像合成部は、ソフトウエアにより処理内容の変更が可能で、前記画像処理アプリケーションからの画質調整処理を施す命令により画質調整を行う機能を有することが好適である。

前記画像処理アプリケーションによって出される画質調整処理を施す命令は、画像を選択するための情報と画質調整を行うための情報とを含むことが好適である。

本発明によれば、合成画像であってもユーザーの意図を反映した画像調整（例えば、明るさ、コントラスト、カラーバランス、ガンマ特性、シャープネスなどから選択される少なくとも一種の画像の表示状態の変更）を行うことが可能となる。

（実施形態１）
以下、図を用いて本発明の一つの実施の形態について説明する。

図１にデジタル放送を受信しマルチ画面表示を行うための受信デコード装置（ＩＲＤ）２０１の構成例を示す。

図２はＩＲＤ２０１を備えたデジタル放送受信におけるシステム構成例である。

このシステムにおいて、
２０１は、デジタル放送を受信し番組の受信結果を含む複数のコンテンツを画像合成して出力するＩＲＤ（Integrated Receiver/Decoder）、
２０２は、ＩＲＤ２０１の画像、音声を視聴するためのモニタ、
２０３は、ＩＲＤ２０１、モニタ２０２間の画像、音声信号を伝送するためのケーブル、
２０４は、ＩＲＤ２０１に命令を送るためのリモートコントローラ（以後リモコンと称する。）、
２０５は、衛星や地上波等のデジタルテレビ放送信号を受信するためのアンテナ、
２０６は、デジタルカメラ等の画像を保存しておくメモリカード、
２０７は、IEEE1394等のデジタルＩ／Ｆで接続できるデジタルビデオカメラレコーダ（以後ＤＶと称する。）である。

図１に示すＩＲＤ２０１において、
１０１は、アンテナ２０５からのデジタル放送信号を受信、または蓄積手段１１０に蓄積されているMPEG2フォーマットのデータをデコードするＭＰＥＧ２デコーダ、
１０２は、IEEE1394で接続されたＤＶ２０７からのDVデータを受信、または蓄積手段１１０に蓄積されているDVフォーマットのデータをデコードするＤＶデコーダ、
１０３は、メモリカード２０６からのＪＰＥＧファイルを読み込み、または蓄積手段１１０に蓄積されているＪＰＥＧフォーマットのデータをデコードするＪＰＥＧデコーダ、
１０４は、ＭＰＥＧ２デコーダ１０１、ＤＶデコーダ１０２、ＪＰＥＧデコーダ１０３の映像データを入力し、制御手段１０８の指示による画面構成に対応するように各入力映像データを解像度変換して所定のメモリ領域に書き込むようメモリＡ１０５に出力し、メモリＡ１０５内に構成されたマルチ画面画像データをフレーム同期を取ってメモリＡ１０５から読出し、画質調整手段１０６に出力する画像合成手段、
１０５は、画像合成手段１０４の制御によりデータを記憶しておくメモリＡ、
１０６は、画像合成手段１０４から出力されるマルチ画面画像データを受け取り、制御手段１０８の指示による画質調整を制御手段１０８の指示による領域に対して行う画質調整手段、
１０７は、画質調整手段１０６の処理を行うためのワークメモリ、およびLUT（ルックアップテーブル）を記憶しておくメモリＢ、
１０８は、画像合成手段１０４に各映像データの画面構成を指示し、画質調整手段１０６へ処理を行う映像データの領域とその調整内容を指示するアプリケーションが動作する制御手段、
１０９は、制御手段１０８のワークメモリとしてデータを一時記憶しておくメモリＣ、
１１０は、MPEG2フォーマットのデータ、DVフォーマットのデータ、JPEGフォーマットのデータ、その他データを制御手段１０８の管理で蓄積しておく蓄積手段、
である。

ここでは、ＩＲＤ２０１が本発明の合成画像処理装置に相当し、ＭＰＥＧ２デコーダ１０１，ＤＶデコーダ１０２，ＪＰＥＧデコーダ１０３が入力部に相当し、画像合成手段１０４が画像合成部に相当し、画質調整手段１０６が画質調整部に相当し、制御手段１０８がコントローラにそれぞれ相当する。

本実施形態では、ユーザーによる画質調整が可能な静止画像の複数表示を行うため、マルチ画面表示における合成画像の画質調整方法について説明する。表示および設定はアプリケーションとして行い、アプリケーションは画質調整内容を設定する静止画像画質調整アプリケーションと、設定した内容で視聴を行う静止画像表示アプリケーションとからなる。

次に、アプリケーションの操作を行うためのリモコン２０４について説明する。

図３はリモコン２０４の構成例を示す図であり、
３０１は、ＩＲＤ２０１をコントロールするための命令を決めるための操作ボタン、
３０２は、操作ボタン１０１の命令を赤外線等の無線信号として送信する送信部である。

操作ボタン３０１は、ＩＲＤ２０１の電源の入切を決める電源ボタン、希望の数字を入力するための０〜９の数字ボタン、数字ボタンの入力を取り消すための取消ボタン、数字ボタンの入力を決定するための決定ボタン、電子番組情報を表示するための番組情報ボタン、デジタル放送等の蓄積を指示する録画ボタン、再生を指示する再生ボタン、停止を指示する停止ボタン、静止画像画質調整アプリケーションや静止画像表示アプリケーション等のアプリケーションを実行するためのアプリボタン、出力音声の音量の増減を行うための音量＋−ボタン、出力音声を切るための消音ボタン、チャンネルの増減を行うためのチャンネル＋−ボタン等がある。また、アプリボタンを押しアプリケーションモードに遷移した場合、２の数字ボタンは上への移動ボタン、４の数字ボタンは左への移動ボタン、６の数字ボタンは右への移動ボタン、８の数字ボタンは下への移動ボタンとして機能する。アプリボタンを一度押すとアプリケーション選択画面が表示され、もう一度押すか決定ボタンを押すと選択されたアプリケーションが起動する。元の表示モードに戻る場合は、取消ボタンを押す。

図４にアプリボタンを押した場合のアプリケーション選択画面の例を示す。

項目４０２〜４０６はそれぞれ起動するアプリケーションの種類を示しており、上及び下への移動ボタンを押すことで選択を行い、アプリボタンまたは決定ボタンを押すことで選択したアプリケーションが起動する。項目４０６は「…」とのみ表示し、詳細は表示していないが、通常表示モードやマルチ画面表示モードへの移行等もアプリケーション選択画面から行えることとする。

まず、静止画像画質調整アプリケーションとして、ユーザーが１つの画面で衛星やＣＡＴＶや地上波等のデジタル放送（ＤＴＶ）とＤＶ２０７に記録されているコンテンツを視聴しつつ、JPEG等の静止画像を表示して選択した画像をユーザーの指示に従って画質調整を行う状況を例にして説明する。画質調整を行った結果はメモリＣ１０９または蓄積手段１１０に記憶され、後述する静止画像表示アプリケーションによって利用される。

動画像として表示されるＤＴＶ及びＤＶ２０７のコンテンツは例であり、その他コンテンツでもかまわない。また、各画像の配置、構成も本発明の内容を制限するものではない。

画像調整アプリケーションの表示例を図５に示す。図５（Ａ）はマルチ画面表示における表示例で、
５０１は、ＭＰＥＧ２デコーダ１０１によってデコードされたデジタル放送の映像データを表示するＤＴＶ画面、
５０２は、ＤＶデコーダ１０２によってデコードされたＤＶ２０７の映像データを表示するＤＶ画面、
５０３は、制御手段１０８上で動作する静止画像画質調整アプリケーションのアプリケーション操作画面、
５０４は、ＪＰＥＧデコーダ１０３によってデコードされた映像データを表示するアプリケーション表示画面、
５０５は、アプリケーション表示画面にフォーカス（太い枠線）を合わせ、更にフォーカスを合わすことで静止画像画質調整アプリケーションの調整の対象となっている静止画像の映像データを表示するＪＰＥＧ表示映像（ＪＰＥＧ１）、
５０６は、静止画像画質調整アプリケーションの調整の対象となっていない静止画像の映像データを表示するＪＰＥＧ表示映像（ＪＰＥＧ２）、
５０７は、静止画像画質調整アプリケーションの調整の対象となっていない静止画像の映像データを表示するＪＰＥＧ表示映像（ＪＰＥＧ３）、
である。

ユーザーは静止画像画質調整アプリケーションの動作により、メモリカード２０６に記憶されている画像ファイルを視聴するにあたって画質調整したい画像ファイルの調整パラメータを設定する。図５（Ｂ）〜（Ｄ）はアプリケーション操作画面５０３の表示内容の例で操作はリモコン２０４を用いて行う。

まず、アプリケーション表示画面５０４にリモコン操作のカーソルを合わせ、調整対象とする画像を選択する。図ではＪＰＥＧ１#５０５が選択により最前面に表示され、決定ボタンを押すことでアプリケーション操作画面５０３にフォーカスが移動する。

図５（Ｂ）はリモコン操作のフォーカスが「明るさ／コントラスト」のタグに合っており、リモコン２０４の移動ボタンの左と右を押すことで他の設定項目タグを選択することができる。設定項目タグを選択した状態で決定ボタンを押すことで、設定項目の内容を設定することができるようになる。設定項目の選択もリモコン操作のフォーカスを合わせることで行う。ここでは、「明るさ」と「コントラスト」を選択・設定することができる。また、設定内容はアプリケーション表示画面５０４に反映され、画像を見ながら設定を行うことができる。この時の画質調整方法は後述する静止画像表示アプリケーションによる動作と同様である。また、他のコンテンツ画面の画質調整方法については本実施形態では説明しない。

図５（Ｃ）は「カラーバランス」のタグの設定項目「ＲＥＤ」にフォーカスが合っており、リモコン２０４の移動ボタンの左と右を押すことで値を増減することができる。リモコン操作のフォーカスを移動することで他の設定項目である「ＢＬＵＥ」，「ＧＲＥＥＮ」を選択することができ、決定ボタンまたは取消ボタンを押すことでタグ選択に戻り、更に決定ボタンまたは取消ボタンを押すことでフォーカスがアプリケーション表示画面５０４に移動する。但し、取消ボタンを押すと設定内容は初期値に戻る。

図５（Ｄ）は「ガンマ」のタグの設定項目「ガンマ」にフォーカスが合っており、リモコン２０４の移動ボタンの左と右を押すことにより値を変更することができ、決定ボタンまたは取消ボタンを押すことでタグ選択に戻り、更に決定ボタンまたは取消ボタンを押すことでフォーカスがアプリケーション表示画面５０４に移動する。

リモコン操作のフォーカスがアプリケーション表示画面５０４に合っている状態でアプリボタンを押すことによりアプリケーション選択画面４０１に移動し、それまでに設定した項目は全てメモリＣ１０９に保存される。もしくは、静止画像画質調整アプリケーションが動作している状態で録画ボタンを押すと、設定した画像ファイルと画質調整設定内容が蓄積手段１１０に蓄積される。

図６はメモリＣ１０９の内容を模式的に示した図で、画質調整内容を設定した順番と画像ファイル名の対応を画像ファイル群６０１に構成し、ベースとなる画質調整内容を「０の調整内容」６０２、１番目に設定した画質調整内容を「１の調整内容」６０２として記憶していく。同じ画像ファイルを設定した場合は画像ファイル群６０１より何番目に設定したかを調べて調整内容を上書きする。蓄積手段１１０に蓄積する際は、これらの内容を１つのファイルとして蓄積し、画像ファイル群に対応する画像ファイルも蓄積するものとする。

ユーザーが設定した画質調整内容で画像ファイルを表示するためには、アプリケーション選択画面４０１において、静止画像表示アプリケーション４０２を選択する。静止画像表示アプリケーションからは蓄積手段１１０に蓄積されている画像ファイルを表示することもできるが、本実施形態においてはメモリカード２０６に記憶されている画像ファイルを再生することとする。再生する画像ファイルは静止画像画質調整アプリケーションにて選択された画像ファイルを対象とし、メモリＣ１０９または蓄積手段１１０に画像ファイル群として記憶または蓄積されているものとする。

図７は静止画像表示アプリケーションの表示例で、本実施形態ではアプリケーション表示画面７０１に静止画像がランダムに表示位置を変えて表示される。

アプリケーションが動作すると制御手段１０８はメモリＣ１０９に記憶されている画像ファイル群のファイル名を元にＪＰＥＧデコーダ１０３に画像ファイルのデコード処理をさせる。図では最初にＪＰＥＧ１#７０２が処理される。制御手段１０８は、画像合成手段１０４に表示位置と大きさの情報としてアプリケーションが決めた値を指示し、解像度変換された画像データをメモリＡ１０５内に構成されたフレームメモリの所定の位置に記憶する。画像合成手段１０４は、静止画像画質調整アプリケーション実行においても、それぞれの入力画像を同時に解像度変換することが可能な能力を持つ。

メモリＡ１０５に記憶された画像データはフレームレートに応じて画像合成手段１０４から出力され画質調整手段１０６に入力する。画質調整手段１０６は、制御手段１０８からメモリＣ１０９に記憶されている画質調整内容と表示領域情報を元に指示を受け、画質調整した結果をモニタ２０２に出力する。画質調整処理は、フレームレートに対応して入力されるマルチ画面画像データの各ピクセルにマトリクス演算、及びテーブル参照することで行う。演算係数、テーブルの位置は画質調整内容によって変わるようになっている。その際、常に領域に対応した処理を行えるよう表示領域情報に対応した画質調整内容をメモリＢ１０７に記憶し、領域情報は新しいものが優先となるように書き換えて行く。

図８はメモリＢ１０７の内容を模式的に示した図で、８０１はフレームバッファに対応した画質調整内容マップで、図ではベースの調整内容０、１つ目の画像の調整内容８０２、２つ目の画像の調整内容８０３、３つ目の画像の調整内容８０４、４つ目の画像の調整内容８０５までが設定されている。制御手段１０８から新しい画像データの調整内容が設定される度に表示領域情報については画質調整内容マップ８０１を更新し、画質調整内容については調整内容８０７〜８１１に画質調整内容マップ８０１の参照テーブルとして追加する。所定時間の間隔を置いて、ＪＰＥＧ２#７０３、ＪＰＥＧ３#７０４、ＪＰＥＧ４#７０５と次々とメモリＢ１０７は表示領域情報に対応した画質調整内容を更新し、その調整内容に従って処理する。

本実施形態ではユーザーによる調整用パラメータの設定が容易な静止画像を対象としているが、動画像においても同様の処理を行うことができる。動画像における設定方法としては、調整用パラメータの設定以外に、あらかじめ用意した調整モードを画像毎に選択しフレーム毎にパラメータを自動調整する方法も考えられる。

このように、アプリケーションの動作に対応して複数の画像の画質調整を個別に行える仕組みを用意することで、ユーザーによるマルチ画面の各画像の調整が可能となる。

また、コンテンツ毎にフレームレートに対応して処理を行う画質調整部を持たずに済み、フレームレートに対応した画質調整処理は一つの画質調整部で行うことが可能となる。

（実施形態２）
以下、図を用いて本発明の一つの実施の形態について説明する。

本実施形態において、デジタル放送受信におけるシステム構成は実施例１と同様である。

図９は、デジタル放送を受信しマルチ画面表示を行うためのＩＲＤ２０１の構成例で、実施例１と同じ番号を付したものは同等の機能を有するものとする。

９０１は、ＭＰＥＧ２デコーダ１０１、ＤＶデコーダ１０２、ＪＰＥＧデコーダ１０３の映像データを入力し、制御手段１０８の指示による画面構成に対応するように各入力映像データを解像度変換する解像度変換処理を有し、静止画像データにおいては更に画質調整を行う画質調整処理を有し、変換された画像データを所定のメモリ領域に書き込むようメモリＡ１０５に出力し、メモリＡ１０５内に構成されたマルチ画面画像データをフレーム同期を取ってメモリＡ１０５から読出すメモリコントロール処理を有し、処理したマルチ画面画像データを画質調整手段１０６に出力するソフト処理手段、
である。

ここでは、ソフト処理手段９０１が本発明の画像合成部に相当する。

ソフト処理手段９０１は、各処理をソフト処理で構成することを提案しているが、ハード処理で構成しても何ら機能的に問題はない。但し、ソフト処理手段９０１における画質調整はフレームレートに対応して調整内容を変更する処理能力は必要とせず、フレームレートに対応して調整内容を変更する画質調整は画質調整手段１０６によって実現する。

本実形態では、ユーザーによる画質調整が可能な静止画像の複数表示を行うため、マルチ画面表示における合成画像の画質調整方法について説明する。表示および設定はアプリケーションとして行い、アプリケーションは画質調整内容を設定する静止画像画質調整アプリケーションと、設定した内容で視聴を行う静止画像表示アプリケーションとからなる。

静止画像画質調整アプリケーションは、実施形態１における処理内容と同じである。但し、アプリケーション操作画面５０３の表示は後述する図１０（Ａ）のアプリケーション操作画面１００３に変更され、図５（Ｂ）の表示は図１０（Ｄ）に変更される。よって、基本的な操作内容は実施形態１に準ずる。ここでの設定内容はアプリケーション表示画面１００４に常に反映され、画像を見ながら設定を行うことができる。この時の画質調整方法は後述する静止画像表示アプリケーションによる動作と同様で、静止画像の画質調整はソフト処理手段９０１で行うものとする。

図１１は本実施におけるメモリＣ１０９の内容を模式的に示した図で、後述する画面ごとに設定した画質調整内容を記憶する部分と、静止画像における画質調整内容を設定した順番と画像ファイル名の対応を画像ファイル群１１０４に構成し、ベースとなる画質調整内容をＢ０の調整内容１１０５、１番目に設定した画質調整内容をＢ１の調整内容１１０６として記憶していく。同じ画像ファイルを設定した場合は画像ファイル群１１０４より何番目に設定したかを調べて調整内容を上書きする。蓄積手段１１０に蓄積する際は、これらの内容を１つのファイルとして蓄積し、画像ファイル群に対応する画像ファイルも蓄積するものとする。

実施形態１との相違点である静止画像表示アプリケーションについて説明する。

図４のアプリケーション選択において静止画像表示アプリケーション４０２を選択すると図１０（Ａ）が表示される。

図１０（Ａ）は静止画像表示アプリケーションの表示例で、静止画像画質調整アプリケーションと同じ画面構成をとる。本例ではアプリケーション表示画面１００４内で静止画像がランダムに表示位置を変えて表示され、その他画面としてDTV画面１００１、DV画面１００２、アプリケーション操作画面１００３が同時に表示される。

図１０（Ｂ）〜（Ｄ）は、アプリケーション操作画面１００３の表示内容の例で操作はリモコン２０４を用いて行う。

図１０（Ｂ）はリモコン操作のフォーカスが「再生」の機能項目タグに合っており、リモコン２０４の移動ボタンの左と右を押すことで他の機能項目タグを選択することができる。機能項目タグを選択した状態で決定ボタンを押すことで、機能項目の機能を選択することができるようになる。図では、「再生」タグの「ＰＬＡＹ」を選択している状態である。また、リモコン操作の再生ボタンを押すことでも同様の機能を実現することができる。「ＰＬＡＹ」機能は静止画像再生アプリケーションを動作させるためのもので、「ＰＯＳＥ」は静止画像再生アプリケーションの一時停止機能である。「ＳＴＯＰ」は静止画像再生アプリケーションの終了でリモコン操作の停止ボタンでも同様の機能を実現できる。「ＲＥＶＥＲＳＥ」は静止画像再生アプリケーションの動作を逆方向に再生する機能である。

図１０（Ｃ）はリモコン操作のフォーカスが「構成調整」の機能項目タグの「ＤＴＶ」に合っており、ＤＴＶ画面１００１における他の画面との表示バランスを調整することができる。設定レベルに応じて静止画像再生アプリケーションは透過度、明るさ、コントラストの調整を行いメモリＣ１０９に記憶する。図１１のメモリＣ１０９の内容を模式的に示した図において、アプリケーションにより管理されている画面であるアプリケーション操作画面１００３とアプリケーション表示画面１００４の調整内容をＡ０の調整内容１１０１として記憶する。ＤＴＶ画面１００１の調整内容をＡ１の調整内容１１０２、ＤＶ画面１００２の調整内容をＡ２の調整内容１１０３として記憶する。

図１０（Ｄ）は「静止画像調整」の機能項目を選択し、更に「明るさ／コントラスト」の設定項目を選択した時の図である。設定項目のタグは図５（Ｂ）〜（Ｄ）と同じ内容となる。

静止画像表示アプリケーションの動作により、制御手段１０８はソフト処理手段９０１に対して、ＤＴＶ画面１００１、ＤＶ画面１００２、アプリケーション操作画面１００３、アプリケーション表示画面１００４を所定の表示位置、大きさで表示するよう指示し、静止画像であるアプリケーション操作画面１００３、アプリケーション表示画面１００４は更にメモリＣ１０９に記憶されているベースの画質調整内容であるＢ０の調整内容１１０５を指示し、解像度変換および画質調整された画像データをメモリＡ１０５に記憶する。画質調整処理は、入力される画像データの各ピクセルにマトリクス演算、及びテーブル参照することで行う。演算係数、テーブルの位置は画質調整内容によって変わるようになっている。

次に、制御手段１０８はメモリＣ１０９に記憶されている画像ファイル群１１０４のファイル名を元にＪＰＥＧデコーダ１０３に画像ファイルのデコード処理をさせる。図では最初にＪＰＥＧ１#１００５が処理される。制御手段１０８はソフト処理手段９０１に表示位置、大きさと画質調整内容としてＢ１の調整内容１１０６を指示し、解像度変換と画質調整された画像データをメモリＡ１０５に記憶する。メモリＡ１０５に記憶されたマルチ画面画像データはフレームレートに応じてソフト処理手段９０１から出力され画質調整手段１０６に入力する。ソフト処理手段９０１は所定時間の間隔を置いてＪＰＥＧ１#１００５と同様に、ＪＰＥＧ２#１００６、ＪＰＥＧ３#１００７の解像度変換と画質調整を行い、メモリＡ１０５を介して画質調整手段１０６に入力する。

画質調整手段１０６は、制御手段１０８からメモリＣ１０９に記憶されている画質調整内容であるＡ０〜Ａ２の調整内容１１０１〜１１０３と表示領域情報を元に指示を受け、画質調整した結果をモニタ２０２に出力する。その際、常に領域に対応した処理を行えるよう表示領域情報に対応した画質調整内容をメモリＢ１０７に記憶する。

図１２はメモリＢ１０７の内容を模式的に示した図で、１２０１はフレームバッファに対応した画質調整内容マップで、図ではＡ１としてＤＴＶ画面１００１に対応する調整内容１２０２、Ａ２としてＤＶ画面１００２に対応する調整内容１２０３、Ａ０としてアプリケーション管理による画面のアプリケーション操作画面１００３に対応する調整内容１２０４とアプリケーション表示画面１００４に対応する調整内容１２０５が設定されている。制御手段１０８から各画面に対応する調整内容が更新されるたびに調整内容のテーブル１２０６〜１２０８を更新する。画質調整処理は、入力されるマルチ画面画像データの各ピクセルにマトリクス演算、及びテーブル参照することで行う。演算係数、テーブルの位置は画質調整内容によって変わるようになっている。また、動画像の画質調整内容はフレーム毎に変化することを想定しており、画質調整手段１０６は高速の処理が必要となる。

このように、静止画像における画質調整処理のような時間経過に伴わず一時的に発生する処理は画面合成手段に簡易的に組み込んだ画質調整処理で行い、動画像における画質調整処理のような時間経過に伴って常に発生する処理は専用の画質調整手段によって画質調整を行うことで、ユーザーによる複数の画面の画質調整を個別に行うことが可能となる。

図１は本発明の実施形態１に係るＩＲＤの構成例を示すブロック図である。 図２は本発明の実施形態に係るデジタル放送受信システムの構成例を示す図である。 図３は本発明の実施形態１に係るリモコンの構成例を示す図である。 図４はリモコンのアプリボタンを押した場合のアプリケーション選択画面の例を示す図である。 図５（Ａ）は画像調整アプリケーション実行時のマルチ画面表示の例を示し、図５（Ｂ）〜（Ｄ）はアプリケーション操作画面の表示例を示す図である。 図６は実施形態１におけるメモリＣの内容を模式的に示す図である。 図７は実施形態１における静止画像表示アプリケーションの表示例を示す図である。 図８はメモリＢの内容を模式的に示す図である。 図９は本発明の実施形態２に係るＩＲＤの構成例を示すブロック図である。 図１０は実施形態２における静止画像表示アプリケーションの表示例を示す図である。 図１１は実施形態２におけるメモリＣの内容を模式的に示す図である。 図１２は実施形態２におけるメモリＢの内容を模式的に示す図である。 図１３は従来の複数の表示画像の画質調整を行う回路の例を示すブロック図である。 図１４（Ａ）は従来の画質調整を行う回路におけるメモリの領域を模式的に示した図であり、図１４（Ｂ），（Ｃ）はそれぞれ図１４（Ａ）の（ａ），（ｂ）のラインを走査する場合の表示領域の有効信号と切換え信号との変化をそれぞれ示した図である。

符号の説明

４０１ 受信デコーダ装置（ＩＲＤ）
４０２ モニタ
１０１ ＭＰＥＧ２デコーダ
１０２ ＤＶデコーダ
１０３ ＪＰＥＧデコーダ
１０４ 画像合成手段
１０５ メモリＡ
１０６ 画質調整手段
１０７ メモリＢ
１０８ 制御手段
１０９ メモリＣ
１１０ 蓄積手段
５０１ ＤＴＶ画面
５０２ ＤＶ画面
５０３ アプリケーション操作画面
５０４ アプリケーション表示画面
１１０１ ソフト処理手段
１２０１ ＤＴＶ画面
１２０２ ＤＶ画面
１２０３ アプリケーション操作画面
１２０４ アプリケーション表示画面

Claims (5)

1. 複数の画像を一つの画像とする合成画像処理装置において、
   前記複数の画像となる複数の画像信号が入力される入力部と、
   前記複数の画像を合成する合成画像処理を行うための合成画像信号を生成する画像合成部と、
   前記合成画像の画質調整処理を行う画質調整部と、
   画像処理アプリケーションプログラムを実行するコントローラと、
   を有し、
   前記画像合成部は、
   前記画像処理アプリケーションプログラムの実行によって、前記合成画像信号を生成し、
   前記コントローラは、
   前記画像処理アプリケーションプログラムの実行によって、画像毎に独立的に選択される画質調整処理を施すための命令を、前記画像合成部及び／又は前記画質調整部に入力し、
   前記画質調整部は、
   前記画像処理アプリケーションからの画質調整処理を施すための命令により、前記合成画像から画質調整処理すべき画像を特定し、入力された前記合成画像信号に、選択された画質調整処理を施す合成画像処理装置。
2. 前記画像合成部は、前記画像処理アプリケーションからの画質調整処理を施す命令により、前記複数の画像の解像度変換処理を行うと共に、画質調整の対象となる画像を最上位に配置するよう指示する請求項１に記載の合成画像処理装置。
3. 前記画像合成部は、前記画像処理アプリケーションからの画質調整処理を施す命令により画質調整を行う機能を有する請求項１に記載の合成画像処理装置。
4. 前記画像合成部は、ソフトウエアにより処理内容の変更が可能で、前記画像処理アプリケーションからの画質調整処理を施す命令により画質調整を行う機能を有する請求項１に記載の合成画像処理装置。
5. 前記画像処理アプリケーションによって出される画質調整処理を施す命令は、画像を選択するための情報と画質調整を行うための情報とを含む請求項１に記載の合成画像処理装置。

Images