JPWO2009123067A1 - 画像処理方法、画像処理装置及びプログラム - Google Patents

Abstract

鮮鋭感を向上させることができる画像処理方法、画像処理装置及びプログラムを提供する。画像処理装置１００は、右眼に表示する右眼画像を出力する右眼画像処理部１０１と、左眼に表示する左眼画像を出力する左眼画像処理部１０２と、右眼画像及び左眼画像を異なる視点にそれぞれ表示する多眼画像表示部とを有する。右眼画像処理部１０１及び／又は左眼画像処理部１０２は、入力画像に対して補正処理するものであって、右眼画像と左眼画像の補正量のうち少なくとも一方を時間に応じて変動させる。

Description

本発明は、複数の視点に異なる画像を表示するシステムにおいて表示品質を向上させる画像処理方法、画像処理装置及びプログラムに関する。

従来、特許文献１、特許文献２及び特許文献３に、左右の眼に対応した輝度成分が互いに異なる画像を生成し、これらを表示する技術が開示されている。特許文献１では、左右の画像の一方の輝度を相対的に高くすることにより、また特許文献２、３では、一方の画像のコントラストを強調することにより、立体感や光沢感を得ている。

図１１は、従来の画像処理装置の一例を示す図である。従来の画像処理装置３００は、両眼画像表示部３０１と、右画像輝度補正部３０２と、左画像輝度補正部３０３とから構成されている。両眼画像表示部３０１は、右眼画像表示部３０４と、左眼画像表示部３０５とを含む。入力された画像信号は、右画像輝度補正部３０２と、左画像輝度補正部３０３にそれぞれ入力される。右画像輝度補正手段３０２は、画像信号から輝度Ｙを抽出した後に明暗のコントラストを強調する。

コントラスト強調方法の一例として、図１２に示す第１のトーンカーブ５１を輝度Ｙに作用させる方法がある。左画像輝度補正部３０３は、右画像とは異なるパラメータを用いて輝度を補正する。左画像輝度補正部３０３の一例として、第２のトーンカーブ５２を輝度Ｙに作用させる方法がある。第２のトーンカーブ５２は、第１のトーンカーブ５１に比べると傾きが小さく、コントラスト強調効果が低い特性になっている。

両眼画像表示部３０１は、人の右眼と左眼に異なる画像を提示することが可能な表示装置であり、立体ディスプレイとして利用されている。両眼画像表示部３０１の例としては、左右の画像投影部に異なる偏光フィルタを装着し、観察者の方で偏光眼鏡を通して両眼視するものがある。
特開平１０−２２４８２２号公報 特開２００４−２２９８８１号公報 特表平１１−５１１３１６号公報

しかしながら、従来の技術においては、時間的な変動を利用していないため、反射光による物体の光沢感、及びメタリックな材質感などの質感を強調することができないという問題点もある。

本発明は、このような問題点を解決するためになされたものであり、両眼に異なる画像を表示することによって、画像品質を向上させる画像表示装置、画像表示方法及びプログラムを提供することを目的とする。

上述した課題を解決するために、本発明に係る画像処理方法は、入力画像を入力する入力工程と、前記入力画像から、右眼に表示する右眼画像及び左眼に表示する左眼画像を補正処理して出力する画像補正工程とを有し、前記画像補正工程では、前記右眼画像と前記左眼画像の補正量を時間に応じて変動させるものである。

本発明にかかる画像表示装置は、右眼に表示する右眼画像を出力する右眼画像出力手段と、左眼に表示する左眼画像を出力する左眼画像出力手段とを有し、前記右眼画像出力手段及び／又は左眼画像出力手段は入力画像に対して補正処理するものであって、前記右眼画像と前記左眼画像の補正量のうち少なくとも一方を時間に応じて変動させる、ものである。

本発明によれば、鮮鋭感を向上させることができる画像処理方法、画像処理装置及びプログラムを提供することができる。

本発明の第１の実施の形態にかかる画像処理装置を示すブロック図である。 本発明の第２の実施の形態にかかる画像処理装置を示すブロック図である。 右眼画像補正部、左眼画像補正部４の一例として、画像補正部を示す図である。 コントラスト補正トーンカーブ及び明度補正トーンカーブを示す図である。 右眼画像補正部、左眼画像補正部４の他の一例として、画像補正部を示す図である。 右眼画像補正部、左眼画像補正部４の他の一例として、画像補正部を示す図である。 レンチキュラーレンズを用いた多眼画像表示部を示す図である。 注目領域の一例を示す図である。 本発明の実施の形態２にかかる画像処理装置の動作を示すフローチャートである。 本発明の第３の実施の形態にかかる画像処理装置を示すブロック図である。 従来の画像処理装置の一例を示す図である。 第１のトーンカーブを示す図である。

符号の説明

１ 多眼画像表示部
２、８６ 注目領域指定部
３、８３ 右眼画像補正部
４、８４ 左眼画像補正部
５ 右眼補正量時系列変動部
６ 左眼補正量時系列変動部
７、８７ 右眼画像表示部
８、８８ 左眼画像表示部
９、８９ 視差生成部
１１、８５ 画像補正部
１２ 輝度分離部
１４、２４、３４ ＲＧＢ変換部
２１ 画像補正部
２２ 輝度分離部
２４ 変換部
３１ 画像補正部
３２ ＨＩＳ変換部
３３ 彩度補正部
４２ 液晶パネル
４３ 右眼画像バッファ
４４ 左眼画像バッファ
４５ 多眼画像表示部
１００、１１０、１２０ 画像処理装置
１０１ 右眼画像処理部
１０２ 左眼画像処理部
１０３ 多眼画像表示部

第１の実施の形態.

以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。図１は、本発明の実施の形態１にかかる画像処理装置１００を示す図である。画像処理装置１００は、右眼（第１の視点）に表示する右眼画像を出力する右眼画像処理部１０１と、左眼（第２の視点）に表示する左眼画像を出力する左眼画像処理部１０２とを有する。そして、右眼画像処理部１０１、又は右眼画像処理部１０１及び左眼画像処理部１０２は入力画像に対してコントラスト補正、明度補正、又は彩度補正の正処理をするものであって、右眼画像と左眼画像の補正量を時間に応じて変動させる。入力画像は、動画像である。

本実施の形態においては、一方の眼の画像を時間的に変動させることにより、視野闘争を意図的に生じさせ、物体の光沢感などの質感を再現することができる。ここで、右眼画像処理部１０１、左眼画像処理部１０２は、同一の入力画像から、異なる補正処理によって補正されたＮ枚の画像を生成し、多眼画像表示部１０３は、右眼に表示する右眼画像と、左眼に表示する左眼画像とをＮ枚の画像中からあらかじめ決められた法則によって、抽出して表示するようにしてもよい。

また、入力画像において指定された注目領域に対してのみ補正処理を施すようにしてもよい。注目領域を指定することにより視野闘争を起こす領域を制限することができるため、視聴者の注目を特定領域に集めることができる。さらに、一方の入力画像に対し水平方向の視差を付加するようにしてもよい。これにより、より画質が向上した視差画像（立体画像）を得ることができる。

第２の実施の形態.
次に、発明の第２の実施の形態について説明する。ここでは先ず、本実施の形態にかかる画像処理装置において、質感が変化して画質が向上する原理について説明する。大山、今井、和気編、"感覚・知覚心理学ハンドブック"、誠信書房、pp.552-555（非特許文献１）によると、人間が異なる画像を２Ｈｚから５０Ｈｚ程度の範囲で交互に提示すると、ちらつき感を感じる。通常、このちらつき感は不快感の原因となるので、この周波数帯のピークを抑える処置が取られている。しかしながら、水面のきらめきや、金属光沢、メタリックな材質感、星の瞬きなど、物体が輝く様を表現するには、時間的に変化するフレームを提示することが必要である。

非特許文献１によれば、提示パターン周期や環境によって変化するものの、人間が時系列画像のちらつきを感じる限界点（検知限）が存在する。具体的には、平均輝度値をＢ、変化量ΔＢとしたときに閾変調度Ｇは、Ｇ＝ΔＢ／Ｂで表されるが、閾変調度Ｇとして０．０１付近が、人間が知覚できる限界であることが指摘されている。今８ｂｉｔの入力信号（最大輝度値が２５５）を仮定とすると、フレーム間で約２の輝度差があればちらつきを感じる可能性がある。実際には輝度差１であっても感じる場合があるが、Ｇが０．００１付近まで下がるとほとんど検知することはできないと考えられる。

この時間変化フレームを従来の単眼視表示で行うと、ちらつき感を生じるために、かえって画質低下を招く場合がある。しかし多眼表示システムによって一方の画像にだけ処理を行うことで、双方の画像が合成されて、知覚するちらつき感が緩和される。このようにして、Ｎ枚のフレームの画像を変化させながら提示することにより、物体の輝き、光沢感などの質感を、脳内に想起させることができる。さらに、両眼で視差を生成することで、立体視においても上記の画質向上効果を与えることができる。

次に、本発明の実施の形態について図面を参照して詳細に説明する。図２は、本発明の第２の実施の形態にかかる画像処理装置を示すブロック図である。図２に示すように、第２の実施の形態にかかる画像処理装置１１０は、多眼画像表示部１と、注目領域指定部２と、右眼画像補正部３と、左眼画像補正部４と、右眼補正量時系列変動部５と、左眼補正量時系列変動部６と、視差生成部９とから構成されている。多眼画像表示部１は、右眼画像表示部７と、左眼画像表示部８とを含む。右眼画像補正部３及び右眼補正量時系列変動部５から右眼画像処理部が構成される。左眼画像補正部４及び左眼補正量時系列変動部６から左眼画像処理部が構成される。

入力された画像信号は、右眼画像補正部３と左眼画像補正部４にそれぞれ入力される。右眼画像補正部３、左眼画像補正部４は、入力画像フレームに対してコントラスト補正、トーンカーブ補正などの色階調補正を施すブロックである。

右眼画像補正部３、左眼画像補正部４の一例として、図３に示す画像補正部１１がある。画像補正部１１は、輝度信号に対してコントラスト補正を行うブロックである。入力ＲＧＢ信号は輝度分離部１２によって輝度Ｙと色差ＵＶに分離される。コントラスト補正部は輝度Ｙにのみコントラスト補正を行う。コントラスト補正方法の一例として、図４のコントラスト補正トーンカーブ７１を用いたトーンカーブ補正がある。コントラスト補正トーンカーブ７１は、ハイライト制御点７２とシャドー制御点７３に対し補正量Ｃを作用させることで、コントラスト補正強度を制御することができる。コントラスト補正後の輝度信号Ｙ'は、ＲＧＢ変換部１４によって再び色差ＵＶと合成されてＲＧＢに変換される。

右眼画像補正部３、左眼画像補正部４の他の一例として、図５に示す画像補正部２１がある。画像補正部２１は、輝度信号に対して明るさの補正を行うブロックである。入力ＲＧＢ信号は輝度分離部２２によって輝度Ｙと色差ＵＶに分離される。明度補正部は輝度Ｙに対して画像全体の明暗を変更するトーンカーブ補正を行う。明度補正方法の一例として、図４の明度補正トーンカーブ７４を用いたトーンカーブ補正がある。明度補正トーンカーブ７４は、明度制御点７５に対し補正量Ｄを作用させることで、画像全体の明るさを制御することができる。明度補正後の輝度信号Ｙ'は、ＲＧＢ変換部２４によって再び色差ＵＶと合成されてＲＧＢに変換される。

右眼画像補正部３、左眼画像補正部４の他の一例として、図６に示す画像補正部３１がある。画像補正部３１は、画像の彩度信号に対して補正を行うブロックである。入力ＲＧＢ信号はＨＳＩ変換部３２によって色相Ｈ、明度Ｉ、彩度Ｓに分離される。ＨＳＩ変換方法の一例として６角錐モデルによる変換方法がある。これらのＨＳＩ座標系への変換方法は公知であり、高木、下田監修、"新編 画像解析ハンドブック" 、東京大学出版会、pp.1187-1196, 2004（非特許文献２）等に記載されている。彩度Ｓは、色の飽和度であり色の鮮やかさを表す値である。彩度補正部３３は、彩度Ｓに対して強調あるいは抑制処理を施す。彩度補正部３３の一例として式（１）による強調方法がある。式（１）は補正量ｍによって彩度Ｓを増幅させるもので、ｍが大きくなるにつれて、画像全体が色鮮やかに変換される。彩度補正後の彩度信号Ｓ'は、ＲＧＢ変換部３４によって再び色相Ｈ、明度Ｉと合成されてＲＧＢに変換される。
Ｓ'＝ｍ×Ｓ ・・・（１）

右眼補正量時系列変動部５、及び左眼補正量時系列変動部６は、あらかじめ定められた規則に従って変化する補正量Ｃ、Ｄ、又はｍを出力するブロックである。右眼補正量時系列変動部５と左眼補正量時系列変動部６の動作の一例を示す。右眼補正量時系列変動部５にはＮ個の補正量セットＦ（ｎ） （ｎ＝１...．Ｎ）が保存されている。左眼補正量時系列変動部６にＮ個の補正量セットＧ（ｎ） （ｎ＝１...．Ｎ）が保存されている。時間ｔにおける右眼及び左眼補正量算出の一例として、式（３）のＴ１（ｔ）,Ｔ２（ｔ）がある。
Ｔ１（ｔ）＝Ｆ（（ｔ）％Ｎ）＋１）
Ｔ２（ｔ）＝Ｇ（（ｔ）％Ｎ）＋１） ・・・（２）

式（２）の％は剰余を表す。式（２）では、予め定められたＮ個の補正量を時間ｔに合わせて順番に適用していくものである。また動画像への適用の場合、複数フレーム単位で補正量を切り替えることも可能である。一例として例えば、Ｎ＝１２、Ｆ（ｎ）＝｛１，１，１，１，３，３，３，３，１０，１０，１０，１０｝とすれば、４フレームごとに補正量を１，３，１０と切り替えることができる。また、左右の片方の補正量を固定した例として、式（３）のＴ１（ｔ）、Ｔ２（ｔ）がある。
Ｔ１（ｔ）＝Ｆ（１）
Ｔ２（ｔ）＝Ｆ（（ｔ％Ｎ）＋１） ・・・（３）

式（３）は、右眼補正画像の補正量Ｔ１（ｔ）は固定のまま、左眼補正画像の補正量Ｔ２（ｔ）のみを１からＮ番目まで順次切り替えていくことを示している。Ｎ＝２とすれば第２の補正量Ｔ２（ｔ）側において、２つの補正量による画像が順次切り替わる。式（３）では右眼補正画像の補正量を固定としているが、逆に左眼Ｔ２側を固定として右眼Ｔ１側の画像を補正してもよい。右眼補正量時系列変動部５、及び左眼補正量時系列変動部６が生成する補正量Ｃ、Ｄ、又はｍを使用して右眼画像補正部３、左眼画像補正部４が補正処理を実行する。

次に左眼画像補正部４の出力に対して、視差生成部９を作用させる。視差生成部９は、立体視を行うために片方の画像にのみ、水平方向の視差を付加するものである。具体的には、画像の各画素の奥行きに合わせて画素ごとに平行移動させる処理を行う。例えば、遠方にある物体については移動量を０とし、近くの物体Ｘの領域画素を、水平方向にｄだけ移動させることで得られた画像と、右眼画像とを両眼に表示させることで、物体Ｘを手前に浮き出るように見せることができる。なお、本実施例では視差生成部９を、左眼画像補正部４の後に配置したが、右眼画像補正部３の後に配置することもできる。また立体視を行わないときには視差移動量を０とすればよい。

視差生成部９の出力と、右眼画像補正部３の片方の出力は、多眼画像表示部１に入力される。多眼画像表示部１は、異なる視点位置に異なる画像を提示することが可能な表示装置であり、右眼表示画像を表示する右眼画像表示部７と、左眼表示画像を表示する左眼画像表示部８とから構成されている。多眼画像表示部１は、右眼画像及び左眼画像を、異なる視点（右眼用、左眼用）にそれぞれ対応させて表示させることができる。そのため、立体ディスプレイとして利用されることが多い。多眼画像表示部１の例としては、右眼画像表示部と左眼画像表示部に異なる偏光フィルタを装着し、観察者のほうで偏光眼鏡を通して両眼視するものがある。

また多眼画像表示部１の他の例として、図７に示すようなレンチキュラーレンズを用い多眼画像表示部４５がある。多眼画像表示部４５は、レンチキュラーレンズを横に並べたものを、液晶パネル４２の前面に装着したものである。右眼画像バッファ４３と、左眼画像バッファ４４とにそれぞれの視点に対応した画像が蓄積されている。液晶パネル４２では、レンチキュラーレンズの大きさに合わせて右眼画像と左眼画像を短冊状に交互に合成して表示する。レンチキュラーレンズによって光路が曲げられることで、人間の左眼と右眼に対応した画像や、複数の視点に対応した画像を表示することが可能となる。なお、入力画像信号に視差情報が入力されている場合は、視差生成部９は必須ではない。

図７に多眼画像表示部を示したが、多眼画像表示部は、これらに限るわけでない。例えば、眼鏡方式では、左右の眼に対し異なる色の色フィルタを用いるアナグリフ方式、アナグリフ方式を発展させ可視光の波長領域を６個に分割し左右の各眼に対し異なる３領域を使用する方式、また、液晶シャッター眼鏡（ステレオシャッター眼鏡）を用いて左右の眼に対応する各画像を時間軸方向に分割して順に表示し対応する眼の眼鏡を透過状態にする方式等がある。また、例えば、裸眼方式では、視差バリア（パララックスバリア）を用い左右の各眼に届く光を制限するバリヤ方式や、さらに左右の眼に対応する各画像を時分割で表示装置に表示すると共に表 示装置のバックライトでの光の入れ方を右方向と左方向と時分割で切り替え更にレンズを併用することによって眼に入る画像と光の方向を時分割に制御するスキャ ンバックライト方式等がある。

更に別の方式として、ヘッドマウントディスプレイ等の形式により各眼に対応した表示装置を目の直前におくニアアイ方式で配置 し、各表示装置に各眼に対応した画像を表示するビューワ方式等がある。このような様々な各方式の多眼表示手段に対し、本実施の形態は、好適に適用できる。なぜなら本実施の形態にかかる画像処理方法であり、本処理によって生成された画像は、各種の多眼画像表示部の方式に合わせた必要に応じて加工され多眼画像表示部を通し観察されることにより、多眼情報を認識することができるためである。

注目領域指定部２は、画像中から視聴者が注意したい部分領域を指定するブロックである。注目領域の一例を図８に示す。図８は人物画像６２を表しており、その中の矩形で囲まれた領域が注目領域６１である。このケースでは、手前の人物の顔領域が指定されている。人物の顔以外にも、広告画像中の商品領域などが注目領域として考えられる。領域指定方法としては、マウスなどの入力機器を用いて指定する方法がある。また画像認識技術を用いて自動的に各画像フレーム中から検出する方法がある。

次に、本実施の形態にかかる画像処理装置の動作について説明する。図９は、本実施の形態にかかる画像処理装置の動作を示すフローチャートである。図９に示すように、先ず、画像信号を入力する。本実施の形態においては、動画を入力することとしているが、静止画であっても同様に処理することができる。

画像信号は、右眼画像補正部３及び左眼画像補正部４に入力される（ステップＳ１）。右眼画像補正部３に入力された画像信号は、輝度信号と色差信号に分離さる。次に、右眼補正量時系列変動部５、左眼補正量時系列変動部６により、あらかじめ定められた規則に従って変化する補正量を生成する（ステップＳ２、３）。そして、右眼画像補正部３は、輝度信号を右眼補正量時系列変動部５が生成した補正量で補正し、補正した輝度信号と色差信号がＲＧＢ変換されることで、補正信号を生成する（ステップＳ４）。左眼画像補正部４においても、入力された画像信号から左眼補正量時系列変動部６が生成した補正量を使用して補正信号が生成される（ステップＳ５）。

次に、左眼補正量時系列変動部６にて補正された信号は、視差生成部９に入力され、所定の視差画像とされる(ステップＳ６)。その後、多眼画像表示部１にて右目画像及び左目画像を表示する(ステップＳ７)。

本実施の形態においては、一方の眼の画像を時間的に変動させることと、視野闘争を意図的に生じさせることにより、物体の光沢感などの質感を再現することができる。また、入力画像において指定された注目領域に対してのみ補正処理を施すことにより視野闘争を起こす領域を制限することができるため、視聴者の注目を特定領域に集めることができる。さらに、一方の入力画像に対し水平方向の視差を付加することにより、より画質が向上した視差画像（立体画像）を得ることができる。

第３の実施の形態.
次に、本発明の第３の実施の形態について図面を参照して詳細に説明する。図１０は、本発明の第３の実施の形態にかかる画像処理装置を示すブロック図である。図１０に示すように、画像処理装置１２０は、多眼画像表示部８１と、フレーム切り替え部８２と、第１の画像補正部８３と、第２の画像補正部８４と、第Ｎの画像補正部８５と、注目領域指定部８６と、視差生成部８９とから構成されている。多眼画像表示部８１は、右眼画像表示部８７と、左眼画像表示部８８とを含む。

入力された画像信号は、第１の画像補正部８３、第２の画像補正部８４、第Ｎの画像補正部８５からなるＮ個の画像補正部にそれぞれ入力される。第１の画像補正部８３、第２の画像補正部８４、および第Ｎの画像補正部８５は、画像フレームに対して画像補正処理を施す。画像補正部の一例として、図３に示したコントラスト補正を行う画像補正部１１がある。画像補正部の他の一例として、図５に示した明度補正を行う画像補正部２１がある。画像補正部の更に他の一例として、図６に示した彩度補正を行う画像補正部３１がある。それぞれの動作については第１の実施の形態と同様である。

フレーム切り替え部８２は、前記Ｎ個の画像補正部の出力画像フレームから、右眼画像表示用と左眼画像表示用の２つの画像フレームを抽出するブロックである。前記Ｎ個の画像補正部では、Ｎ個の異なる補正量によって補正処理することを想定しているが、Ｎ個の画像補正部の一部を同じ補正量によって補正処理してもよい。フレーム切り替え部８２は、Ｎ個の画像補正部に対応したＮ個の画像フレームをあらかじめ定められた規則に従って、切り替えながら出力する。フレーム切り替え部８２の動作について説明する。第ｎの画像補正部（ｎ＝１...．Ｎ）の出力画像をＩ（ｎ）とする。フレーム切り替え部８２の出力画像算出の一例として、式（４）のＵｒ（ｔ）, Ｕｌ（ｔ）がある。Ｕｒ（ｔ）は右眼表示画像、Ｕｌ（ｔ）は左眼表示画像である。
Ｕｒ（ｔ）＝Ｉ（ｔ，（ｔ％Ｎ）＋１）
Ｕｌ（ｔ）＝Ｉ（ｔ，（ｔ％Ｎ）＋２） ・・・（４）

式（４）の％は剰余を表す。式（４）では、Ｎ枚の補正画像を番号順に２枚ずつ組み合わせて、右眼及び左眼表示映像に振り分けるものである。また動画像の場合、複数フレーム単位で補正画像を切り替えることも可能である。例えば、Ｎ＝１２, Ｕｒ（ｔ）＝｛Ｉ（１），Ｉ（１），Ｉ（３），Ｉ（３），Ｉ（１０），Ｉ（１０），Ｉ（１２），Ｉ（１２）｝とすれば、右眼画像を２フレームごとに第１番目、第３番目、第１０番目、第１２番目の補正画像に切り替えることができる。また左右の片方の補正画像を固定した例として、式（５）のＵｒ（ｔ），Ｕｌ（ｔ）がある。
Ｕｒ（ｔ）＝Ｉ（ｔ，１）
Ｕｌ（ｔ）＝Ｉ（ｔ，（ｔ％Ｎ）） ・・・（５）

式（５）では、右眼表示画像は固定のままで、左眼表示画像のみを１からＮ番目まで順次切り替えていくものである。また、Ｎ＝２の場合には、左右の画像を定期的に切り替える動作をさせることができる。式（５）では右眼表示映像を固定としているが、逆に左眼表示映像を固定としてもよい。

次にフレーム切り替え部８２の一方の出力に対して、視差生成部８９を作用させる。視差生成部８９は、立体視を行うために片方の画像にのみ、水平方向の視差を付加するものであり、視差生成部９と同等の動作をする。なお、入力画像信号に視差情報が入力されている場合は、視差生成部８９は必須ではない。

視差生成部８９の出力と、フレーム切り替え部８２の他方の出力は、多眼画像表示部８１に入力される。多眼画像表示部８１は、人の右眼と左眼に異なる画像を提示することが可能な表示装置であり、右眼用の画像を右眼に表示する右眼画像表示部８７と、左眼用の画像を左眼に表示する左眼画像表示部８とから構成されている。多眼画像表示部８１は、第１の実施の形態における多眼画像表示部と同等の動作をする。

注目領域指定部８６は、画像中から視聴者が注意したい部分領域を指定するブロックであり、注目領域指定部２と同等の動きをする手段である。指定した注目領域は、Ｎ個の画像補正手段に反映され、Ｎ個の画像補正部では注目領域内にのみ画像補正を施す。

本実施の形態においては、Ｎ枚のフレームの画像を変化させながら提示することにより、物体の輝き、光沢感などの質感を、脳内に想起させることができる。さらに、両眼で視差を生成することで、立体視においても画質向上効果を与えることができる。

例えば、上述の実施の形態では、ハードウェアの構成として説明したが、これに限定されるものではなく、任意の処理を、ＣＰＵ（Central Processing Unit）にコンピュータプログラムを実行させることにより実現することも可能である。この場合、コンピュータプログラムは、記録媒体に記録して提供することも可能であり、また、インターネットその他の通信媒体を介して伝送することにより提供することも可能である。また、記憶媒体には、例えば、フレキシブルディスク、ハードディスク、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ、ＲＯＭカートリッジ、バッテリバックアップ付きＲＡＭメモリカートリッジ、フラッシュメモリカートリッジ、不揮発性ＲＡＭカートリッジ等が含まれる。また、通信媒体には、電話回線等の有線通信媒体、マイクロ波回線等の無線通信媒体等が含まれる。

以上、実施の形態を参照して本願発明を説明したが、本願発明は上記によって限定されるものではない。本願発明の構成や詳細には、発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

この出願は、２００８年４月３日に出願された日本出願特願２００８−０９６７７３を基礎とする優先権を主張し、その開示の全てをここに取り込む。

本発明は、複数の視点に異なる画像を表示するシステムにおいて表示品質を向上させる画像処理方法、画像処理装置及びプログラムに適用することができる。

右眼補正量時系列変動部５、及び左眼補正量時系列変動部６は、あらかじめ定められた規則に従って変化する補正量Ｃ、Ｄ、又はｍを出力するブロックである。右眼補正量時系列変動部５と左眼補正量時系列変動部６の動作の一例を示す。右眼補正量時系列変動部５にはＮ個の補正量セットＦ（ｎ） （ｎ＝１...．Ｎ）が保存されている。左眼補正量時系列変動部６にＮ個の補正量セットＧ（ｎ） （ｎ＝１...．Ｎ）が保存されている。時間ｔにおける右眼及び左眼補正量算出の一例として、式（２）のＴ１（ｔ）,Ｔ２（ｔ）がある。
Ｔ１（ｔ）＝Ｆ（（ｔ）％Ｎ）＋１）
Ｔ２（ｔ）＝Ｇ（（ｔ）％Ｎ）＋１） ・・・（２）

視差生成部８９の出力と、フレーム切り替え部８２の他方の出力は、多眼画像表示部８１に入力される。多眼画像表示部８１は、人の右眼と左眼に異なる画像を提示することが可能な表示装置であり、右眼用の画像を右眼に表示する右眼画像表示部８７と、左眼用の画像を左眼に表示する左眼画像表示部８８とから構成されている。多眼画像表示部８１は、第１の実施の形態における多眼画像表示部と同等の動作をする。

Claims (14)

1. 入力画像から、右眼に表示する右眼画像及び左眼に表示する左眼画像を補正処理して出力する画像補正工程を有し、
   前記画像補正工程では、前記右眼画像と前記左眼画像の補正量のうち少なくとも一方を時間に応じて変動させる、画像処理方法。
2. 同一の入力画像から、補正量を時間に応じて異ならせたＮ枚の画像を出力する画像補正工程と、
   右眼に表示する右眼画像と、左眼に表示する左眼画像とを前記Ｎ枚の画像中からあらかじめ決められた法則によって抽出してそれぞれ右眼用及び左眼用として表示する表示工程とを有する、画像処理方法。
3. 前記補正処理は、コントラスト補正、明度補正、又は彩度補正のいずれかである
   ことを特徴とする請求項１又は２記載の画像処理方法。
4. 入力画像において指定された注目領域に対してのみ前記補正処理を施す
   ことを特徴とする請求項１乃至３のいずれか１項記載の画像処理方法。
5. 一方の前記入力画像に対し水平方向の視差を付加する
   ことを特徴とする請求項１乃至４のいずれか１項記載の画像処理方法。
6. 前記画像補正工程では、左右の補正量を異ならせる
   ことを特徴とする請求項１乃至５のいずれか１項記載の画像処理方法。
7. 右眼に表示する右眼画像を出力する右眼画像出力手段と、
   左眼に表示する左眼画像を出力する左眼画像出力手段とを有し、
   前記右眼画像出力手段及び／又は左眼画像出力手段は入力画像に対して補正処理するものであって、前記右眼画像と前記左眼画像の補正量のうち少なくとも一方を時間に応じて変動させる、画像処理装置。
8. 同一の入力画像から、補正量を時間に応じて異ならせたＮ枚の画像を出力する画像出力手段と、
   右眼に表示する右眼画像と、左眼に表示する左眼画像とを前記Ｎ枚の画像中からあらかじめ決められた法則によって抽出し、それぞれ右眼用及び左眼用として表示する多眼画像表示手段を有する、画像処理装置。
9. 前記画像出力手段は、前記補正処理として、コントラスト補正、明度補正、又は彩度補正のいずれかを実行する
   ことを特徴とする請求項７又は８記載の画像処理装置。
10. 入力画像において注目領域を指定する注目領域指定手段を更に有し、
    注目領域指定手段は、前記注目領域に対してのみ前記補正処理を施す
    ことを特徴とする請求項７乃至９のいずれか１項記載の画像処理装置。
11. 一方の前記入力画像に対し水平方向の視差を付加する視差生成手段を更に有する
    ことを特徴とする請求項７乃至１０のいずれか１項記載の画像処理装置。
12. 前記画像出力手段は、右眼画像と左眼画像とでそれぞれ補正量を異ならせる
    ことを特徴とする請求項７乃至１１のいずれか１項記載の画像処理装置。
13. 所定の動作をコンピュータに実行させるためのプログラムを格納した記録媒体であって、
    前記入力画像から、右眼に表示する右眼画像及び左眼に表示する左眼画像を補正処理して出力する画像補正工程を有し、
    前記画像補正工程では、前記右眼画像と前記左眼画像の補正量のうち少なくとも一方を時間に応じて変動させる、プログラムを格納した記録媒体。
14. 所定の動作をコンピュータに実行させるためのプログラムを格納した記録媒体であって、
    同一の入力画像から、異なる補正処理によって補正されたＮ枚の画像を生成する画像補正工程と、
    右眼に表示する右眼画像と、左眼に表示する左眼画像とを前記Ｎ枚の画像中からあらかじめ決められた法則によって、抽出する抽出工程とを有する、プログラムを格納した記録媒体。

Images