JP2018133772A - 画像処理装置および画像処理方法 - Google Patents

Abstract

【課題】画質の劣化を抑制でき、且つ、周辺画素の伝送量を低減することができる技術を提供する。【解決手段】本発明の画像処理装置は、グラフィック画像の画像領域と分割画像の画像領域とに基づいて、当該分割画像の輪郭を構成する複数の部分輪郭のそれぞれについて、部分輪郭の周辺に存在する周辺画素を取得するか否かを判断する判断手段と、分割画像を取得し、且つ、取得した分割画像の周辺に存在する周辺画素を判断手段の判断結果に従って取得する取得手段と、周辺画素を考慮しながら分割画像に対する所定の画像処理を行う処理手段と、を有し、判断手段は、グラフィック画像が重ねられる部分輪郭の周辺に存在する周辺画素が取得手段によって取得されなくなるように、周辺画素を取得するか否かを判断する。【選択図】図１

Description

本発明は、画像処理装置および画像処理方法に関する。

画像処理で使用される画像処理メモリの記憶容量を低減するための技術として、画像を複数の分割画像（分割原画像）に分割し、複数の分割原画像のそれぞれに対する画像処理を個別に行う技術が提案されている。しかしながら、この技術では、分割原画像の周辺に存在する周辺画素が当該分割原画像に対する画像処理において使用されないため、高精度な画像処理結果が得られずに画質が劣化することがある。例えば、画像処理が施された後の複数の分割画像（分割処理画像）からなる画像において、複数の分割処理画像の間の境界が目立つことがある。具体的には、複数の分割処理画像の間の境界に対して垂直な方向において、画素値が不連続に変化し、複数の分割処理画像の間の境界において、意図せぬ境界線が発生することがある。この課題を解決するための技術として、分割原画像に隣接する画像領域の画像（糊代画像）を当該分割原画像に付加し、糊代画像が付加された後の分割原画像に対する画像処理を行う技術が提案されている（特許文献１）。

特開２０１１−９７４７４号公報

しかしながら、操作メニュー画像などのグラフィック画像が、複数の分割処理画像からなる画像に重ねられることがある。そして、そのような場合において、特許文献１に開示の技術では、糊代画像（周辺画素）の取得とグラフィック画像の取得とが行われ、糊代画像の伝送量（データサイズ）とグラフィック画像の伝送量との合計が膨大となる。その結果、グラフィック画像が重ねられた後の画像を得るまでに長い処理時間を要する。糊代画像とグラフィック画像が同じ記憶部から読み出される場合には、処理時間の短縮のために、糊代画像とグラフィック画像を記憶する記憶部として、広帯域の記憶部が必要となる。広帯域の記憶部の使用は、コストの増加をまねく。

本発明は、画質の劣化を抑制でき、且つ、周辺画素の伝送量を低減することができる技術を提供することを目的とする。

本発明の第１の態様は、
画像を構成する複数の分割画像のいずれかを取得し、且つ、取得した分割画像の周辺に存在する周辺画素を取得する取得手段と、
前記取得手段によって取得された周辺画素を考慮しながら、前記取得手段によって取得された前記分割画像に対する所定の画像処理を行う処理手段と、
を有する画像処理装置であって、
前記所定の画像処理が施された後の複数の分割画像からなる画像にはグラフィック画像が重ねられ、
前記画像処理装置は、前記グラフィック画像の画像領域と、前記取得手段によって取得された前記分割画像の画像領域とに基づいて、当該分割画像の輪郭を構成する複数の部分輪郭のそれぞれについて、前記部分輪郭の周辺に存在する周辺画素を取得するか否かを判断する判断手段、をさらに有し、
前記取得手段は、前記判断手段の判断結果に従って前記周辺画素の取得を行い、
前記判断手段は、前記グラフィック画像が重ねられる部分輪郭の周辺に存在する周辺画素が前記取得手段によって取得されなくなるように、前記周辺画素を取得するか否かを判断する
ことを特徴とする画像処理装置である。

本発明の第２の態様は、
画像を構成する複数の分割画像のいずれかを取得し、且つ、取得した分割画像の周辺に存在する周辺画素を取得する取得ステップと、
前記取得ステップにおいて取得された周辺画素を考慮しながら、前記取得ステップにおいて取得された前記分割画像に対する所定の画像処理を行う処理ステップと、
を有する画像処理方法であって、
前記所定の画像処理が施された後の複数の分割画像からなる画像にはグラフィック画像が重ねられ、
前記画像処理方法は、前記グラフィック画像の画像領域と、前記取得ステップにおいて取得された前記分割画像の画像領域とに基づいて、当該分割画像の輪郭を構成する複数の部分輪郭のそれぞれについて、前記部分輪郭の周辺に存在する周辺画素を取得するか否かを判断する判断ステップ、をさらに有し、
前記取得ステップでは、前記判断ステップの判断結果に従って前記周辺画素の取得を行い、
前記判断ステップでは、前記グラフィック画像が重ねられる部分輪郭の周辺に存在する周辺画素が前記取得ステップにおいて取得されなくなるように、前記周辺画素を取得するか否かを判断する
ことを特徴とする画像処理方法である。

本発明の第３の態様は、上述した画像処理方法の各ステップをコンピュータに実行させるためのプログラムである。

本発明によれば、画質の劣化を抑制でき、且つ、周辺画素の伝送量を低減することができる。

実施例１に係る表示装置の構成例を示すブロック図 実施例１に係る画像の一例を示す概念図 実施例１に係るパターンの一例を示す概念図 実施例１に係る画像の一例を示す概念図 実施例２に係る表示システムの構成例を示すブロック図 実施例２に係る表示装置の構成例を示すブロック図 実施例２に係る画像の一例を示す概念図 実施例２に係る画像の一例を示す概念図 実施例３に係る画像の一例を示す概念図 実施例４に係る画像の一例を示す概念図

＜実施例１＞
以下、本発明の実施例１について説明する。以下では、本実施例に係る画像処理装置を有する表示装置の例を説明する。表示装置は、例えば、液晶表示装置、有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）表示装置、プラズマ表示装置、ＭＥＭＳ（Ｍｉｃｒｏ Ｅｌｅｃｔｒｏ Ｍｅｃｈａｎｉｃａｌ Ｓｙｓｔｅｍ）シャッタ方式表示装置、
等である。なお、画像処理装置は表示装置とは別体の装置であってもよい。表示装置とは別体の画像処理装置は、例えば、パーソナルコンピュータ（ＰＣ）、再生装置（例えば、ブルーレイプレーヤ）、サーバ装置、等である。

図１は、本実施例に係る表示装置の構成例を示すブロック図である。入力画像（入力画像データ）５０は、表示装置に入力された画像である。

タイミング制御部１は、入力画像５０を複数の分割画像（分割入力画像；分割入力画像データ）５４に分割するためのタイミングを示すタイミング信号５２を生成し、タイミング信号５２を分割画像読み出し部５へ出力する。本実施例では、タイミング制御部１は、入力画像５０の同期信号（垂直同期信号、水平同期信号、等）に基づいてタイミング信号５２を生成する。また、本実施例では、タイミング制御部１は、各々が所定サイズを有する複数の分割入力画像５４が得られるように、タイミング信号５２を生成する。

グラフィック制御部２は、入力画像５０に基づく画像にグラフィック画像（メニュー画像など）を重ねる制御を行う。

入力処理部３は、入力画像５０を記憶部４に書き込む（記録）。本実施例では、入力画像５０はラスタ形式の画像であり、入力処理部３は、入力画像５０をライン形式の画像に変換し、ライン形式の画像を記憶部４に書き込む。具体的には、入力処理部３は、入力画像５０を、複数のラインにそれぞれ対応する複数のライン画像（ライン入力画像；ライン入力画像データ）５１に分割し、複数のライン入力画像５１を記憶部４に書き込む。

記憶部４は、複数の画像（画像データ）を記憶することができる。記憶部４として、半導体メモリ、磁気ディスク、光ディスク、等を使用することができる。記憶部４は、表示装置に内蔵された記憶部であってもよいし、表示装置に対して着脱可能な記憶装置であってもよい。本実施例では、記憶部４は、表示装置に内蔵されたフレームメモリである。複数のライン入力画像５１によって入力画像５０が構成され、複数の分割入力画像５４によっても入力画像５０が構成される。そのため、「複数のライン入力画像５１の記憶」は、「分割入力画像５４の記憶」、「分割入力画像５４の周辺に存在する周辺画素の記憶」、「入力画像５０の記憶」、等を含む。

分割画像読み出し部５は、複数の分割入力画像５４のいずれかを取得する。本実施例では、分割画像読み出し部５は、記憶部４が記憶している複数のライン入力画像５１から分割入力画像（ブロック形式の画像）４１を取得する。本実施例では、分割画像読み出し部５は、複数の分割入力画像５４を記憶部４から順次読み出す。入力画像５０に対する画像処理には、記憶容量が大きい画像処理メモリが必要である。具体的には、入力画像５０の水平有効画素数分の記憶容量を有する画像処理メモリが必要である。本実施例では、入力画像５０に対する画像処理の代わりに、複数の分割入力画像５４に対する画像処理が個別に行われる。分割入力画像５４の画像サイズは入力画像５０の画像サイズよりも小さいため、入力画像５０の水平有効画素数分の記憶容量よりも小さい記憶容量を有する画像処理メモリを用いても、分割入力画像５４に対する画像処理を行うことができる。そのため、画像処理メモリの記憶容量を低減することができる。

また、分割画像読み出し部５は、分割入力画像５４を取得する際に、当該分割入力画像５４の周辺に存在する周辺画素をさらに取得する。本実施例では、分割画像読み出し部５は、記憶部４から周辺画素を読み出す。そして、分割画像読み出し部５は、分割入力画像５４と周辺画素を含む処理対象画像（処理対象画像データ）５５を、画像処理部６へ出力する。分割入力画像５４の取得、周辺画素の取得、処理対象画像５５の出力、等は、タイミング制御部１から出力されたタイミング信号５２に同期して行われる。

画像処理部６は、分割入力画像５４の周辺画素を考慮しながら、当該分割入力画像５４に対する所定の画像処理を行う。そして、画像処理部６は、所定の画像処理が施された後の分割入力画像５４である分割処理画像５８を、走査方式変換部７へ出力する。具体的には、画像処理部６は、分割画像読み出し部５から出力された処理対象画像５５に対して所定の画像処理を施す。そして、画像処理部６は、所定の画像処理が施された後の処理対象画像５５から周辺画素を削除することにより、分割処理画像５８を生成する。

所定の画像処理は特に限定されないが、例えば、所定の画像処理は、対象位置の周辺の画素を参照して対象位置の画素値を決定するフィルタ処理（ローパスフィルタ処理など）を含む。フィルタ処理を含む画像処理は、例えば、拡大処理、縮小処理、鮮鋭化処理、ぼかし処理、等である。

所定の画像処理で分割入力画像５４のみが使用される場合には、当該分割入力画像５４の周辺画素が考慮されないため、高精度な画像処理結果が得られずに画質が劣化することがある。例えば、複数の分割処理画像５８からなる画像において、複数の分割処理画像５８の間の境界が目立つことがある。具体的には、複数の分割処理画像５８の間の境界に対して垂直な方向において、画素値が不連続に変化し、複数の分割処理画像５８の間の境界において、意図せぬ境界線が発生することがある。本実施例では、周辺画素が考慮されるため、高精度な画像処理結果を得ることができ、画質の劣化を抑制することができる。例えば、複数の分割処理画像５８からなる画像として、複数の分割処理画像５８の間の境界が目立たない画像を得ることができる。

走査方式変換部７は、画像処理部６から順次出力された複数の分割処理画像５８から、ラスタ画像（ラスタ形式の画像；ラスタ画像データ）６０を生成する。ラスタ画像６０は、複数の分割処理画像５８からなる画像であり、且つ、入力画像５０に所定の画像処理を施すことによって得られる画像と略同一の画像である（「略」は「完全」を含む）。具体的には、走査方式変換部７は、画像処理部６から出力された分割処理画像５８を、分割処理画像５９として記憶部４に書き込む。そして、走査方式変換部７は、記憶部４が記憶している複数の分割処理画像５９の各画素値を記憶部４から読み出すことにより、ラスタ画像６０を取得する。その後、走査方式変換部７は、ラスタ画像６０に同期信号を付加することにより合成前画像（合成前画像データ）６１を生成し、合成前画像６１をグラフィック合成部８へ出力する。なお、分割処理画像５９が書き込まれる記憶部は、記憶部４と異なっていてもよい。

グラフィック合成部８は、グラフィック画像６２の画像領域（位置と画像サイズ）を示すグラフィック領域情報５７をグラフィック制御部２から取得し、グラフィック画像（グラフィック画像データ）６２を記憶部４から読み出す。そして、グラフィック合成部８は、合成前画像６１にグラフィック画像６２を合成することにより合成後画像（合成後画像データ）６３を生成し、合成後画像６３を出力処理部９へ出力する。合成後画像６３では、合成前画像６１にグラフィック画像６２が重ねられている。「合成前画像６１にグラフィック画像６２を合成する処理」は、「分割処理画像５９にグラフィック画像６２の少なくとも一部を合成する処理」を含む。なお、グラフィック画像６２を記憶する記憶部は、記憶部４と異なっていてもよい。

出力処理部９は、グラフィック合成部８から出力された合成後画像６３を、表示部１０で表示可能なフォーマットを有する表示画像（表示画像データ）６４に変換する。そして、出力処理部９は、表示画像６４を表示部１０へ出力する。

表示部１０は、出力処理部９から出力された表示画像６４を画面に表示する。表示部１
０として、液晶パネルとバックライトユニット（発光部）との組み合わせ、有機ＥＬ表示パネル、プラズマ表示パネル、等を使用することができる。

図２（Ａ）〜２（Ｆ）を用いて、本実施例に係る各画像の一例について説明する。図２（Ａ）は、入力画像５０の一例を示す概念図である。入力画像５０の解像度は特に限定されないが、例えば、入力画像５０は、水平方向８１９２画素×垂直方向４０９６ラインの解像度を有する。図２（Ｂ）は、複数のライン入力画像５１の一例を示す概念図である。複数のライン入力画像５１は、入力画像５０の１ラインに対応する。図２（Ｃ）は、複数の分割入力画像５４の一例を示す概念図である。波線は、複数の分割入力画像５４の間の境界を示す。

図２（Ｄ）は、分割入力画像５４と、その周辺画像との一例を示す概念図である。分割入力画像５４の画像サイズは特に限定されないが、例えば、分割入力画像５４は、水平方向１６４０画素×垂直方向１０２４画素の画像サイズを有する。本実施例では、分割画像読み出し部５は、分割入力画像５４の輪郭を構成する複数の部分輪郭のそれぞれについて、部分輪郭の周辺に存在する周辺画素を取得する。本実施例では、分割画像読み出し部５は、部分輪郭に隣接する画像領域における画像（糊代画像）に含まれた各画素を、当該部分輪郭の周辺に存在する周辺画素として取得する。本実施例では、分割入力画像５４が多角形画像であり、分割入力画像５４の複数の辺が複数の部分輪郭として使用される。具体的には、分割入力画像５４は四角形画像であり、分割入力画像５４の四辺のそれぞれが部分輪郭として使用される。

図２（Ｄ）において、符号９０〜９７のそれぞれは糊代画像を示す。糊代画像９１は分割入力画像５４の上辺に隣接し、糊代画像９３は分割入力画像５４の左辺に隣接し、糊代画像９４は分割入力画像５４の右辺に隣接し、糊代画像９６は分割入力画像５４の下辺に隣接する。糊代画像９０は、分割入力画像５４に対して左上側に隣接する。糊代画像９０は、分割入力画像５４の上辺に隣接する糊代画像として扱われてもよいし、分割入力画像５４の左辺に隣接する糊代画像として扱われてもよい。糊代画像９２は、分割入力画像５４に対して右上側に隣接する。糊代画像９２は、分割入力画像５４の上辺に隣接する糊代画像として扱われてもよいし、分割入力画像５４の右辺に隣接する糊代画像として扱われてもよい。糊代画像９５は、分割入力画像５４に対して左下側に隣接する。糊代画像９５は、分割入力画像５４の下辺に隣接する糊代画像として扱われてもよいし、分割入力画像５４の左辺に隣接する糊代画像として扱われてもよい。糊代画像９７は、分割入力画像５４に対して右下側に隣接する。糊代画像９７は、分割入力画像５４の下辺に隣接する糊代画像として扱われてもよいし、分割入力画像５４の右辺に隣接する糊代画像として扱われてもよい。

糊代画像の画像サイズは特に限定されない。例えば、糊代画像９０，９１，９２，９５，９６，９７の垂直画素数（垂直方向における画素数）は６４画素である。そして、糊代画像９０，９２，９３，９４，９５，９７の水平画素数（水平方向における画素数）は２００画素である。

分割入力画像５４が図２（Ｃ）の分割入力画像８４である場合には、糊代画像９０は分割入力画像８０の一部であり、糊代画像９１は分割入力画像８１の一部であり、糊代画像９２は分割入力画像８２の一部である。そして、糊代画像９３は分割入力画像８３の一部であり、糊代画像９４は分割入力画像８５の一部であり、糊代画像９５は分割入力画像８６の一部であり、糊代画像９６は分割入力画像８７の一部であり、糊代画像９７は分割入力画像８８の一部である。

なお、分割入力画像５４の形状は四角形に限られない。例えば、分割入力画像５４の形
状は、三角形、五角形、六角形、等の他の多角形であってもよい。分割入力画像５４の輪郭が曲線部分を含んでもよい。複数の部分輪郭は、分割入力画像５４の複数の辺に限られない。例えば、分割入力画像５４の輪郭の各画素、分割入力画像５４の辺の一部、等が部分輪郭として使用されてもよい。周辺画素は、糊代画像に含まれた各画素に限られない。例えば、分割入力画像５４に隣接する画素が周辺画素として取得されずに、分割入力画像５４からわずかに離れた画素が周辺画素として取得されてもよい。

図２（Ｅ）は、合成後画像６３の一例を示す概念図である。合成後画像６３では、合成前画像６１にグラフィック画像６２が重ねられている。グラフィック画像６２は、「ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）画像」とも言える。図２（Ｆ）は、表示画像６４の一例を概念図である。表示画像６４は、合成後画像６３と略同一である。

本実施例では、グラフィック制御部２は、グラフィック画像６２の画像領域と、分割入力画像５４の画像領域とに基づいて、当該分割入力画像５４が有する複数の部分輪郭のそれぞれについて、部分輪郭の周辺画素を取得するか否かを判断する。具体的には、グラフィック制御部２は、グラフィック画像６２が重ねられる部分輪郭の周辺に存在する周辺画素が分割画像読み出し部５によって取得されなくなるように、周辺画素を取得するか否かを判断する。そして、グラフィック制御部２は、周辺画素を取得するか否かの判断結果を示す周辺要否情報５３を、分割画像読み出し部５へ出力する。

図３（Ａ）〜３（Ｅ）を用いて、グラフィック制御部２の処理の具体例について説明する。本実施例では、グラフィック制御部２は、分割入力画像５４の四隅の座標がグラフィック画像６２の画像領域に含まれているか否かを判断し、その判断結果を示す情報を周辺要否情報５３として生成する。具体的には、グラフィック制御部２は、分割入力画像５４の四隅の座標とグラフィック画像６２の画像領域との間の関係に対応するパターンを判断し、その判断結果を示す情報を周辺要否情報５３として生成する。分割入力画像５４の四隅の座標がグラフィック画像６２の画像領域に含まれているか否かの判断は、例えば、分割入力画像５４の四隅の座標と、グラフィック画像６２の四隅（Ａ，Ｂ，Ｃ，Ｄ）の座標とを比較することで実現できる。

図３（Ａ）のパターンでは、分割入力画像１００の四隅（Ｅ７、Ｆ７、Ｇ７、及び、Ｈ７）の全てがグラフィック画像６２の画像領域に含まれている。換言すれば、分割入力画像１００の四辺（上辺、下辺、左辺、及び、右辺）のそれぞれについて、辺の全体にグラフィック画像６２が重ねられている。この場合には、グラフィック制御部２は、分割入力画像１００の四辺の全てについて、周辺画素を取得しないと判断する。

図３（Ｂ）のパターンでは、分割入力画像１０１の四隅（Ｅ６、Ｆ６、Ｇ６、及び、Ｈ６）のうちの２つ（右上隅Ｈ６と右下隅Ｇ６）のみがグラフィック画像６２の画像領域に含まれている。換言すれば、分割入力画像１０１の右辺についてのみ、辺の全体にグラフィック画像６２が重ねられている。この場合には、グラフィック制御部２は、分割入力画像１０１の右辺についてのみ、周辺画素を取得しないと判断する。

図３（Ｃ）のパターンでは、分割入力画像１０２の四隅（Ｅ１０、Ｆ１０、Ｇ１０、及び、Ｈ１０）のうちの２つ（左上隅Ｅ１０と左下隅Ｆ１０）のみがグラフィック画像６２の画像領域に含まれている。換言すれば、分割入力画像１０２の左辺についてのみ、辺の全体にグラフィック画像６２が重ねられている。この場合には、グラフィック制御部２は、分割入力画像１０２の左辺についてのみ、周辺画素を取得しないと判断する。

図３（Ｄ）のパターンでは、分割入力画像１０３の四隅（Ｅ２、Ｆ２、Ｇ２、及び、Ｈ２）のうちの２つ（左下隅Ｆ２と右下隅Ｇ２）のみがグラフィック画像６２の画像領域に
含まれている。換言すれば、分割入力画像１０３の下辺についてのみ、辺の全体にグラフィック画像６２が重ねられている。この場合には、グラフィック制御部２は、分割入力画像１０３の下辺についてのみ、周辺画素を取得しないと判断する。

図３（Ｅ）のパターンでは、分割入力画像１０４の四隅（Ｅ１７、Ｆ１７、Ｇ１７、及び、Ｈ１７）のうちの２つ（左上隅Ｅ１７と右上隅Ｈ１７）のみがグラフィック画像６２の画像領域に含まれている。換言すれば、分割入力画像１０４の上辺についてのみ、辺の全体にグラフィック画像６２が重ねられている。この場合には、グラフィック制御部２は、分割入力画像１０４の上辺についてのみ、周辺画素を取得しないと判断する。

分割入力画像５４とグラフィック画像６２の間の関係が図３（Ａ）〜３（Ｅ）の５つのパターンのいずれにも対応しない場合には、グラフィック制御部２は、分割入力画像５４の四辺の全てについて、周辺画素を取得すると判断する。

このように、本実施例では、グラフィック制御部２は、全体にグラフィック画像６２が重ねられる部分輪郭について、周辺画素を取得しないと判断する。なお、周辺画素を取得するか否かの判断方法は、これに限られない。例えば、グラフィック制御部２は、総画素数に対するグラフィック対応画素の数の割合が閾値以上である部分輪郭について、周辺画素を取得しないと判断してもよい。グラフィック対応画素は、グラフィック画像６２が重ねられる画素である。換言すれば、グラフィック対応画素は、グラフィック画像６２の画像領域に含まれた画素である。

本実施例では、分割画像読み出し部５は、周辺要否情報５３（グラフィック制御部２の判断結果）に従って周辺画素の取得を行う。図４（Ａ）〜４（Ｆ）を用いて、分割画像読み出し部５の処理の具体例について説明する。

図４（Ａ）は、複数の分割入力画像５４とグラフィック画像６２との一例を示す概念図である。図４（Ａ）において、分割入力画像１１０とグラフィック画像６２の関係は図３（Ａ）のパターンに対応する。そのため、図４（Ｂ）に示すように、分割画像読み出し部５は、分割入力画像１１０を取得する際に、分割入力画像１１０に隣接する糊代画像（周辺画素）を取得しない。

図４（Ａ）において、分割入力画像１１１とグラフィック画像６２の関係は図３（Ｂ）のパターンに対応する。そのため、図４（Ｃ）に示すように、分割画像読み出し部５は、分割入力画像１１１を取得する際に、分割入力画像１１１の右辺に隣接する糊代画像を取得しない。図４（Ｃ）に示すように、分割画像読み出し部５は、分割入力画像１１１を取得する際に、分割入力画像１１１の上辺に隣接する糊代画像１２０と、分割入力画像１１１の下辺に隣接する糊代画像１２１とを取得する。分割入力画像１１１は左端に位置し、分割入力画像１１１の左辺に隣接する糊代画像は存在しないため、当該糊代画像は取得されない。

図４（Ａ）において、分割入力画像１１２とグラフィック画像６２の関係は図３（Ｃ）のパターンに対応する。そのため、図４（Ｄ）に示すように、分割画像読み出し部５は、分割入力画像１１２を取得する際に、分割入力画像１１２の左辺に隣接する糊代画像を取得しない。図４（Ｄ）に示すように、分割画像読み出し部５は、分割入力画像１１２を取得する際に、分割入力画像１１２の上辺に隣接する糊代画像１２２と、分割入力画像１１２の下辺に隣接する糊代画像１２３とを取得する。分割入力画像１１２は右端に位置し、分割入力画像１１２の右辺に隣接する糊代画像は存在しないため、当該糊代画像は取得されない。

図４（Ａ）において、分割入力画像１１３とグラフィック画像６２の関係は図３（Ｄ）のパターンに対応する。そのため、図４（Ｅ）に示すように、分割画像読み出し部５は、分割入力画像１１３を取得する際に、分割入力画像１１３の下辺に隣接する糊代画像を取得しない。図４（Ｅ）に示すように、分割画像読み出し部５は、分割入力画像１１３を取得する際に、分割入力画像１１３の左辺に隣接する糊代画像１２４と、分割入力画像１１３の右辺に隣接する糊代画像１２５とを取得する。分割入力画像１１３は上端に位置し、分割入力画像１１３の上辺に隣接する糊代画像は存在しないため、当該糊代画像は取得されない。

図４（Ａ）において、分割入力画像１１４とグラフィック画像６２の関係は図３（Ｅ）のパターンに対応する。そのため、図４（Ｆ）に示すように、分割画像読み出し部５は、分割入力画像１１４を取得する際に、分割入力画像１１４の上辺に隣接する糊代画像を取得しない。図４（Ｆ）に示すように、分割画像読み出し部５は、分割入力画像１１４を取得する際に、分割入力画像１１４の左辺に隣接する糊代画像１２６と、分割入力画像１１４の右辺に隣接する糊代画像１２７とを取得する。分割入力画像１１４は下端に位置し、分割入力画像１１４の下辺に隣接する糊代画像は存在しないため、当該糊代画像は取得されない。

以上述べたように、本実施例によれば、グラフィック画像が重ねられる部分輪郭の周辺に存在する周辺画素が取得されないため、周辺画素の伝送量（データサイズ）を低減することができる。グラフィック画像が重ねられる部分輪郭とその周辺では、周辺画素が考慮されないため、高精度な画像処理結果（所定の画像処理の結果）が得られないが、グラフィック画像が重ねられるため、画質の劣化を抑制することもできる。

＜実施例２＞
以下、本発明の実施例２について説明する。以下では、実施例１と異なる点（構成、処理、等）について詳しく説明し、実施例１と同じ点についての説明は省略する。本実施例では、複数の画像処理装置が使用される例を説明する。各画像処理装置では複数の分割入力画像の一部に対する画像処理が行われ、複数の画像処理装置により、複数の分割入力画像に対する複数の画像処理が実現される。複数の画像処理装置の間における通信が可能であり、各画像処理装置は、周辺画素を他の画像処理装置から取得したり、周辺画素を他の画像処理装置に出力したりすることができる。

図５は、本実施例に係る表示システム（画像処理システム）の構成例を示すブロック図である。表示システムは、２つの表示装置２００，２０１を有する。表示装置２００と表示装置２０１は、通信ケーブル７２を用い互いに接続されている。なお、２つより多くの表示装置（画像処理装置）が使用されてもよい。表示装置（画像処理装置）の数は特に限定されない。入力画像の数は特に限定されないが、本実施例では、表示装置２００に２つの入力画像２２０，２２１が入力され、表示装置２０１に２つの入力画像２２２，２２３が入力される。

表示装置２００は、通信ケーブル７２を介して表示装置２０１へ周辺画素を送信したり、表示装置２０１から通信ケーブル７２を介して周辺画素を受信したりすることができる。表示装置２００は、無線で表示装置２０１へ制御コマンドを送信したり、無線で表示装置２０１から制御コマンドを受信したりすることもできる。

なお、周辺画素は無線で送受信されてもよい。制御コマンドは、有線で送受信されてもよい。制御コマンドは、通信ケーブル７２を介して送受信されてもよいし、通信ケーブル７２とは異なるケーブルを介して送受信されてもよい。

図６を用いて、表示装置２００，２０１の構成例について説明する。図６は、表示装置２００，２０１の構成例を示すブロック図である。なお、図６において、実施例１（図１）と同じ機能部には、実施例１と同じ符号が付されている。

制御コマンド通信部１２は、グラフィック制御部２から出力された周辺要否情報８０を、他の表示装置（他の表示装置の制御コマンド通信部１２）へ送信する。周辺要否情報８０は、周辺要否情報５３と同等の情報である。また、制御コマンド通信部１２は、他の表示装置から出力された周辺要否情報８０を受信し、受信した周辺要否情報８０をグラフィック制御部２へ出力する。即ち、本実施例では、複数の表示装置の間で周辺要否情報の交換が行われる。

本実施例のグラフィック制御部２は、実施例１のグラフィック制御部２と同様の処理を行う。さらに、本実施例のグラフィック制御部２は、他の表示装置の周辺要否情報８０を制御コマンド通信部１２から取得し、取得した周辺要否情報８０と同等の周辺要否情報６６を入力処理部３へ出力する。

本実施例の入力処理部３は、実施例１の入力処理部３と同様の処理を行う。さらに、本実施例の入力処理部３は、周辺要否情報６６（他の表示装置の周辺要否情報）に従って、他の表示装置で使用される糊代画像７０を入力画像から生成し、糊代画像７０を通信部１１へ出力する。具体的には、入力処理部３は、糊代画像（周辺画素）を取得しないと判断された部分輪郭について糊代画像を生成せずに、糊代画像を取得すると判断された部分輪郭について糊代画像を生成する。

通信部１１は、入力処理部３から出力された糊代画像７０を、通信ケーブル７２を介して他の表示装置へ出力する。上述したように、本実施例では、入力処理部３において、他の表示装置の周辺要否情報に従って糊代画像７０が生成されて出力される。そのため、本実施例では、他の表示装置の周辺要否情報に従って、他の表示装置への糊代画像（周辺画素）７０の出力が行われる。

また、通信部１１は、他の表示装置（他の表示装置の通信部１１）から出力された糊代画像７１を、記憶部４に書き込む。そして、分割画像読み出し部５は、通信部１１によって記憶部４に書き込まれた糊代画像７１を、記憶部４から読み出す。そのため、本実施例では、分割画像読み出し部５は、他の表示装置から糊代画像（周辺画素）７１を取得する。

図７を用いて、グラフィック制御部２の処理の具体例について説明する。図７は、複数の分割入力画像５４とグラフィック画像６２との一例を示す概念図である。本実施例では、表示装置２００と表示装置２０１の間で、所定の画像処理が施される分割入力画像５４が異なる。具体的には、表示装置２００の画像処理部６は、入力画像２２０を構成する複数の分割入力画像５４のそれぞれと、入力画像２２１を構成する複数の分割入力画像５４のそれぞれとに対して、所定の画像処理を施す。表示装置２０１の画像処理部６は、入力画像２２２を構成する複数の分割入力画像５４のそれぞれと、入力画像２２３を構成する複数の分割入力画像５４のそれぞれとに対して、所定の画像処理を施す。

図７の分割入力画像２３０は入力画像２２０の一部であり、分割入力画像２３０に対する所定の画像処理は表示装置２００において行われる。そして、分割入力画像２３０とグラフィック画像６２の対応関係は、図３（Ａ）のパターンに対応する。そのため、表示装置２００のグラフィック制御部２は、分割入力画像２３０の四辺の全てについて糊代画像を取得しないと判断する。そして、表示装置２００から表示装置２０１へ、分割入力画像２３０の四辺の全てについて糊代画像を取得しないという判断結果を含む周辺要否情報８
０が出力される。

図７の分割入力画像２３１は入力画像２２２の一部であり、分割入力画像２３１に対する所定の画像処理は表示装置２０１において行われる。そして、分割入力画像２３１とグラフィック画像６２の対応関係は、図３（Ｃ）のパターンに対応する。そのため、表示装置２０１のグラフィック制御部２は、分割入力画像２３１の左辺についてのみ糊代画像を取得しないと判断する。そして、表示装置２０１から表示装置２００へ、分割入力画像２３１の左辺についてのみ糊代画像を取得しないという判断結果を含む周辺要否情報８０が出力される。

図８（Ａ），８（Ｂ）を用いて、分割画像読み出し部５の処理の具体例について説明する。図８（Ａ）は、表示装置２００の分割画像読み出し部５の処理の具体例を示し、図８（Ｂ）は、表示装置２０１の分割画像読み出し部５の処理の具体例を示す。

図７に示すように、分割入力画像２３０に対して右側に隣接する分割入力画像５４と、分割入力画像２３０に対して右上側に隣接する分割入力画像５４とは、入力画像２２２の一部である。そして、分割入力画像２３０に対して右下側に隣接する分割入力画像５４は、入力画像２２３の一部である。上述したように、表示装置２００から表示装置２０１へ出力された周辺要否情報８０は、分割入力画像２３０の四辺の全てについて糊代画像を取得しないという判断結果を含む。そのため、表示装置２０１の入力処理部３は、分割入力画像２３０に対して右側に隣接する糊代画像２３２を生成せず、表示装置２０１の通信部１１は、糊代画像２３２を表示装置２００へ出力しない。そして、表示装置２００の分割画像読み出し部５は、分割入力画像２３０を取得する際に、分割入力画像２３０に隣接する糊代画像を取得しない。

図７に示すように、分割入力画像２３１に対して左側に隣接する分割入力画像５４と、分割入力画像２３１に対して左上側に隣接する分割入力画像５４とは、入力画像２２０の一部である。そして、分割入力画像２３１に対して左下側に隣接する分割入力画像５４は、入力画像２２１の一部である。上述したように、表示装置２０１から表示装置２００へ出力された周辺要否情報８０は、分割入力画像２３１の左辺についてのみ糊代画像を取得しないという判断結果を含む。そのため、表示装置２００の入力処理部３は、分割入力画像２３１に対して左側に隣接する糊代画像２３３を生成せず、表示装置２００の通信部１１は、糊代画像２３３を表示装置２０１へ出力しない。そして、表示装置２０１の分割画像読み出し部５は、分割入力画像２３１を取得する際に糊代画像２３３を取得しない。但し、表示装置２０１の分割画像読み出し部５は、分割入力画像２３１の右辺に隣接する糊代画像、分割入力画像２３１の上辺に隣接する糊代画像、及び、分割入力画像２３１の下辺に隣接する糊代画像を取得する。これらの糊代画像は、入力画像２２１，２２２の一部であるため、実施例１と同様に記憶部４から取得することができる。

以上述べたように、本実施例によれば、画像処理装置内における周辺画素の伝送だけでなく、画像処理装置間における周辺画素の伝送が必要に応じて省略される。それにより、画像処理装置内における周辺画素の伝送量だけでなく、画像処理装置間における周辺画素の伝送量も低減することができる。

＜実施例３＞
以下、本発明の実施例３について説明する。以下では、実施例１と異なる点（構成、処理、等）について詳しく説明し、実施例１と同じ点についての説明は省略する。本実施例では、複数の分割入力画像のそれぞれの画像領域がグラフィック画像の画像領域に基づいて制御される。本実施例に係る表示装置の構成は、実施例１（図１）と同じである。

本実施例では、タイミング制御部１は、グラフィック領域情報６５をグラフィック制御部２から取得し、グラフィック領域情報６５と入力画像５０の同期信号とに基づいてタイミング信号５２を生成（制御）する。タイミング信号５２を制御することにより、複数の分割入力画像５４のそれぞれの画像領域が制御される。グラフィック領域情報６５は、グラフィック領域情報５７と同等の情報である。

図９（Ａ），９（Ｂ）は、複数の分割入力画像５４とグラフィック画像６２との一例を示す概念図である。図９（Ａ）は、グラフィック画像６２の画像領域を考慮せずに得られた複数の分割入力画像５４の例を示す。図９（Ａ）の例では、全体にグラフィック画像６２が重ねられている辺（分割入力画像５４の辺）の数は３つである。

図９（Ｂ）は、本実施例で得られた複数の分割入力画像５４の例を示す。即ち、図９（Ｂ）は、グラフィック画像６２の画像領域を考慮して得られた複数の分割入力画像５４の例を示す。上述したように、タイミング信号５２を制御することにより、複数の分割入力画像５４のそれぞれの画像領域が制御される。本実施例では、グラフィック画像６２の画像領域に基づいて、グラフィック画像６２が重ねられる部分輪郭（分割入力画像５４の辺）の数が増すように、複数の分割入力画像５４のそれぞれの画像領域が制御される。図９（Ｂ）の例では、全体にグラフィック画像６２が重ねられている辺（分割入力画像５４の辺）の数は、３つよりも多い１４個である。そのため、図９（Ｂ）の複数の分割入力画像５４を使用することにより、図９（Ａ）の複数の分割入力画像５４を使用した場合の伝送量に比べ少ない伝送量に、周辺画素の伝送量を低減することができる。

以上述べたように、本実施例によれば、グラフィック画像の画像領域に基づいて、グラフィック画像が重ねられる部分輪郭の数が増すように、複数の分割入力画像のそれぞれの画像領域が制御される。それにより、周辺画素の伝送量をより低減することができる。

＜実施例４＞
以下、本発明の実施例４について説明する。以下では、実施例１と異なる点（構成、処理、等）について詳しく説明し、実施例１と同じ点についての説明は省略する。本実施例では、複数の分割入力画像のそれぞれの画像領域に基づいて、グラフィック画像の画像領域が制御される。本実施例に係る表示装置の構成は、実施例１（図１）と同じである。

本実施例では、グラフィック制御部２は、複数の分割入力画像５４のそれぞれの画像領域に基づいて、グラフィック画像６２の画像領域を決定する。具体的には、グラフィック制御部２は、タイミング制御部１から出力されたタイミング信号６７に基づいて、グラフィック領域情報５７を生成する。タイミング信号６７は、タイミング信号５２と同等の情報である。本実施例では、複数の分割入力画像５４のそれぞれの画像領域に基づいて、グラフィック画像６２が重ねられる部分輪郭（分割入力画像５４の辺）の数が増すように、グラフィック画像６２の画像領域が制御される。例えば、図１０に示すように、グラフィック画像６２の輪郭が分割入力画像５４の輪郭（複数の分割入力画像５４の間の境界）に一致するように、グラフィック画像６２の画像領域が制御される。図１０の例では、全体にグラフィック画像６２が重ねられている辺（分割入力画像５４の辺）の数が１７個と多いため、周辺画素の伝送量を大幅に低減することができる。

そして、グラフィック合成部８は、グラフィック領域情報５７に応じた位置に、グラフィック領域情報５７に応じた画像サイズを有するグラフィック画像６２を合成する処理を行う。本実施例では、複数の画像サイズにそれぞれ対応する複数のグラフィック画像が記憶部４に予め記録されている。そして、グラフィック合成部８は、グラフィック領域情報５７に応じた画像サイズに対応するグラフィック画像を記憶部４から読み出し、読み出したグラフィック画像の合成を行う。

なお、グラフィック画像の合成方法は特に限定されない。例えば、記憶部４に１つの画像サイズに対応する１つのグラフィック画像のみが予め記録されていてもよい。そして、グラフィック合成部８が、記憶部４から読み出したグラフィック画像の画像サイズをグラフィック領域情報５７に応じて変更し、画像サイズが変更された後のグラフィック画像の合成を行ってもよい。

以上述べたように、本実施例によれば、複数の分割入力画像のそれぞれの画像領域の画像領域に基づいて、グラフィック画像が重ねられる部分輪郭の数が増すように、グラフィック画像が制御される。それにより、周辺画素の伝送量をより低減することができる。

なお、実施例１〜４では、合成前画像６１にグラフィック画像６２が合成される例を説明したが、グラフィック画像６２の少なくとも一部を分割処理画像５９に合成する処理が行われてもよい。そして、そのような処理が行われた後の複数の分割画像から、合成後画像６３が生成されてもよい。

また、グラフィック画像６２の合成方法は特に限定されてない。例えば、グラフィック画像６２の画像領域において、合成後画像６３の画素値として、グラフィック画像６２の画素値が採用されてもよい。グラフィック画像６２の画像領域において、合成後画像６３の画素値が、合成前画像６１の画素値とグラフィック画像６２の画素値との重み付け合成によって得られてもよい（アルファ合成）。

なお、アルファ合成が行われる場合には、画像処理部６が、グラフィック制御部２からグラフィック領域情報５６を取得してもよい。そして、画像処理部６が、グラフィック画像の画像領域についてのローパスフィルタ処理を処理対象画像５５に施してもよい。グラフィック領域情報５６は、グラフィック領域情報５７と同等の情報である。このようなローパスフィルタ処理により、グラフィック画像６２の画像領域において合成前画像６１がぼかされるため、グラフィック画像６２の視認性を向上することができる。

また、上記重み付け合成におけるグラフィック画像６２の重みが閾値以上である場合には、分割画像読み出し部５は、グラフィック画像の画像領域における画像を取得しないように、分割入力画像５４の少なくとも一部を取得してもよい。それにより、分割入力画像５４の伝送量も低減することができる。

なお、実施例１〜４の各機能部は、個別のハードウェアであってもよいし、そうでなくてもよい。２つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。１つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。１つの機能部の２つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリとを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。

なお、実施例１〜４はあくまで一例であり、本発明の要旨の範囲内で実施例１〜４の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。実施例１〜４の構成を適宜組み合わせて得られる構成も、本発明に含まれる。例えば、実施例３において、グラフィック画像の輪郭が分割入力画像の輪郭に一致するように、複数の分割入力画像のそれぞれの画像領域が制御されてもよい。実施例３と実施例４を組み合わせて、複数の分割入力画像のそれぞれの画像領域と、グラフィック画像の画像領域との両方が制御されてもよい。

＜その他の実施例＞
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

２：グラフィック制御部 ５：分割画像読み出し部 ６：画像処理部

Claims (14)

1. 画像を構成する複数の分割画像のいずれかを取得し、且つ、取得した分割画像の周辺に存在する周辺画素を取得する取得手段と、
   前記取得手段によって取得された周辺画素を考慮しながら、前記取得手段によって取得された前記分割画像に対する所定の画像処理を行う処理手段と、
   を有する画像処理装置であって、
   前記所定の画像処理が施された後の複数の分割画像からなる画像にはグラフィック画像が重ねられ、
   前記画像処理装置は、前記グラフィック画像の画像領域と、前記取得手段によって取得された前記分割画像の画像領域とに基づいて、当該分割画像の輪郭を構成する複数の部分輪郭のそれぞれについて、前記部分輪郭の周辺に存在する周辺画素を取得するか否かを判断する判断手段、をさらに有し、
   前記取得手段は、前記判断手段の判断結果に従って前記周辺画素の取得を行い、
   前記判断手段は、前記グラフィック画像が重ねられる部分輪郭の周辺に存在する周辺画素が前記取得手段によって取得されなくなるように、前記周辺画素を取得するか否かを判断する
   ことを特徴とする画像処理装置。
2. 前記判断手段は、全体に前記グラフィック画像が重ねられる部分輪郭について、前記周辺画素を取得しないと判断する
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記判断手段は、総画素数に対する前記グラフィック画像が重ねられる画素の数の割合が閾値以上である部分輪郭について、前記周辺画素を取得しないと判断する
   ことを特徴とする請求項１または２に記載の画像処理装置。
4. 前記グラフィック画像の前記画像領域に基づいて、前記グラフィック画像が重ねられる前記部分輪郭の数が増すように、前記複数の分割画像のそれぞれの画像領域を制御する第１制御手段、をさらに有する
   ことを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
5. 前記複数の分割画像のそれぞれの画像領域に基づいて、前記グラフィック画像が重ねられる前記部分輪郭の数が増すように、前記グラフィック画像の前記画像領域を制御する第２制御手段、をさらに有する
   ことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
6. 前記取得手段は、前記取得手段によって取得された前記分割画像とは異なる分割画像に対する前記所定の画像処理を行う他の画像処理装置から、前記周辺画素を取得する
   ことを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
7. 前記判断手段の判断結果を前記他の画像処理装置へ出力する出力手段、をさらに有し、
   前記他の画像処理装置は、前記判断手段の判断結果に従って、前記画像処理装置への前記周辺画素の出力を行う
   ことを特徴とする請求項６に記載の画像処理装置。
8. 前記分割画像は、多角形画像であり、
   前記複数の部分輪郭は、前記分割画像の複数の辺である
   ことを特徴とする請求項１〜７のいずれか１項に記載の画像処理装置。
9. 前記取得手段は、前記部分輪郭に隣接する画像領域に含まれた各画素を、当該部分輪郭の周辺に存在する周辺画素として取得する
   ことを特徴とする請求項１〜８のいずれか１項に記載の画像処理装置。
10. 前記所定の画像処理は、対象位置の周辺の画素を参照して前記対象位置の画素値を決定するフィルタ処理を含む
    ことを特徴とする請求項１〜９のいずれか１項に記載の画像処理装置。
11. 前記所定の画像処理が施された後の分割画像に前記グラフィック画像の少なくとも一部を合成する合成手段、をさらに有する
    ことを特徴とする請求項１〜１０のいずれか１項に記載の画像処理装置。
12. 前記分割画像と前記周辺画素を記憶する記憶部、をさらに有し、
    前記取得手段は、前記分割画像と前記周辺画素を前記記憶部から読み出す
    ことを特徴とする請求項１〜１１のいずれか１項に記載の画像処理装置。
13. 画像を構成する複数の分割画像のいずれかを取得し、且つ、取得した分割画像の周辺に存在する周辺画素を取得する取得ステップと、
    前記取得ステップにおいて取得された周辺画素を考慮しながら、前記取得ステップにおいて取得された前記分割画像に対する所定の画像処理を行う処理ステップと、
    を有する画像処理方法であって、
    前記所定の画像処理が施された後の複数の分割画像からなる画像にはグラフィック画像が重ねられ、
    前記画像処理方法は、前記グラフィック画像の画像領域と、前記取得ステップにおいて取得された前記分割画像の画像領域とに基づいて、当該分割画像の輪郭を構成する複数の部分輪郭のそれぞれについて、前記部分輪郭の周辺に存在する周辺画素を取得するか否かを判断する判断ステップ、をさらに有し、
    前記取得ステップでは、前記判断ステップの判断結果に従って前記周辺画素の取得を行い、
    前記判断ステップでは、前記グラフィック画像が重ねられる部分輪郭の周辺に存在する周辺画素が前記取得ステップにおいて取得されなくなるように、前記周辺画素を取得するか否かを判断する
    ことを特徴とする画像処理方法。
14. 請求項１３に記載の画像処理方法の各ステップをコンピュータに実行させるためのプログラム。

Images