JP2015097049A

JP2015097049A - 画像処理装置及び画像処理方法

Info

Publication number: JP2015097049A
Application number: JP2013237265A
Authority: JP
Inventors: 勝土田; Masaru Tsuchida; 柏野　邦夫; Kunio Kashino; 邦夫柏野; 淳司大和; Atsushi Yamato
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 2013-11-15
Filing date: 2013-11-15
Publication date: 2015-05-21

Abstract

【課題】裸眼により視認される表示画像の奥行距離、奥行位置、及び奥行き感を画像処理により調整することができる画像処理装置及び画像処理方法を提供する。【解決手段】画像処理装置１０では、画像調整部２２及び画像輪郭調整部２４を含む画像入力部２０を少なくとも含み、実施例に応じて、さらに画像調整部２６を含む。画像処理装置１０は画像調整部２２及び画像調整部２６により調整指示に基づいて、奥行距離（位置）の変更、及び奥行き感を強調したい部分画像の色相、彩度、及び明るさの少なくとも１つの調整を行うことにより、奥行き距離（位置）及び奥行き感の調整を行って表示画像を生成する。画像処理装置１０は、画像輪郭調整部２４により奥行き感を強調したい部分画像に背景部画像や輪郭を付与する。【選択図】図１

Description

本発明は、画像処理装置及び画像処理方法にかかり、特に、立体視するための表示画像を生成するための画像処理装置及び画像処理方法に関する。

ホログラムの様な光の情報を物理的に記録・再現する方法（例えば、非特許文献１参照）の他、人間の左右の眼の視差を利用したステレオ立体視による立体像を記録・観察する手法（例えば、非特許文献２及び非特許文献３参照）がある。その際の立体像表示装置（方式）には、観察者が特殊な眼鏡を着用して立体像を観察する方式と、観察者が眼鏡を装着する必要が無い裸眼立体視方式がある。

また、だまし絵（トリックアート）のように、「遠近法」、「陰影法」、及び「前進色と後退色の組み合わせ」等のような表現技法を用い、照明の位置や影の形を計算しながら人の眼の錯覚を利用して平面画を立体的に見せる手法がある。このような手法によれば、絵が額縁（基準面）から絵を観察する観察者側（以下、「手前」側という）に飛び出して見えるような事例もある。

「物体を回転させて撮影した画像を用いたフルパララックス・ホログラフィック・ステレオグラムの合成」,土田勝, 窪小谷聡, 村上百合, 小尾高史, 山口雅浩, 大山永昭, 西原隆, 岩田藤郎, Optics Japan2001 講演予稿集 p373-374, 2001 「裸眼立体視技術の最新動向」新津靖、情報処理 45(5), pp. 510-515, 2004（一般社団法人情報処理学会）「立体視の原理と３Ｄ技術への応用」広内哲夫、情報システム学会誌 Vol. 8, No. 2, pp. 5-16, 2013

一般的な生活環境下での画像観察を前提に説明する。非特許文献１〜非特許文献３における立体像表示装置では、立体像を観察する際に特殊な光学素子から構成される表示装置を利用するか、一般的な表示装置を使用するものの観察者が立体視用の眼鏡等のデバイスを着用する必要があり、必ずしも手軽な技術とは言えない。また既存の裸眼立体視用モニタで観察する場合には観察位置により画像の明るさが変化したり、凹凸の逆転（クロストーク）が生じたりする場合がある。また観察位置（視点）の変化に伴い立体像が滑らかに変化するためには２方向からの視差画像では不十分であり、より多くの方向からの視差画像が必要とされている。また視差数が少ないと、観察される像に歪が生じる場合もある。さらに長時間観察する際には観察者に眼の疲労が生じるという問題もある。

また、だまし絵等の手法では観察条件（画角・影の見え方等が観察時の周辺環境と整合していること、観察方向が限定される）の制限がある。観察条件が適合しない場合には正しい奥行感が得られない。またこの技術では、条件さえ整えば、画面の奥方向での立体感は得られるが画像表示装置の画面より手前に立体像が結像して見えることは無い。

本発明は上記問題点を考慮してなされたものであり、裸眼により視認される表示画像の奥行距離、奥行位置、及び奥行き感を画像処理により調整することができる画像処理装置及び画像処理方法を提供することを目的とする。

上記目的を達成するために、本発明の画像処理装置は、入力された１枚以上の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置であって、前記入力画像の全体または前記入力画像に含まれる部分画像の色相を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う画像調整部を含む。

また、上記本発明の画像処理装置において、前記画像調整部は、更に、前記入力画像の全体または前記部分画像の彩度を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う。

また、上記本発明の画像処理装置において、前記画像調整部は、更に、前記入力画像の全体または前記部分画像の輝度を調整指示に基づいて調整することにより、前記表示画像の奥行き感を調整する画像処理を行う。さらに、前記画像調整部は、更に、前記入力画像の全体または前記部分画像の彩度を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う。

また、上記本発明の各画像処理装置において、奥行き感を調整したい前記部分画像に、当該部分画像に比べて低輝度及び低彩度である輪郭、又は当該部分画像に比べて低輝度及び無彩色である輪郭を付与することにより、前記表示画像の奥行き感を調整する画像処理を行う画像輪郭調整部を更に含む。

本発明の画像処理装置は、入力された複数の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置であって、複数の入力画像を重ね合わせた前記表示画像を生成する場合に、前記複数の入力画像のうち奥行距離及び奥行位置の変更、及び奥行き感を強調する入力画像の彩度を調整指示に基づいて高く変更し、かつ、前記入力画像とは異なる他の入力画像の彩度を調整指示に基づいて低く変更し、かつ、前記他の入力画像の輝度を調整指示に基づいて調整することにより、奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う画像調整部を含む。

本発明の画像処理方法は、入力された１枚以上の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置による画像処理方法であって、画像調整部によって、前記入力画像の全体または前記入力画像に含まれる部分画像の色相を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行うステップを備える。

本発明の画像処理方法は、入力された複数の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置による画像処理方法であって、画像調整部によって、複数の入力画像を重ね合わせた前記表示画像を生成する場合に、前記複数の入力画像のうち奥行距離及び奥行位置の変更、及び奥行き感を強調する入力画像の彩度を調整指示に基づいて高く変更し、かつ、前記入力画像とは異なる他の入力画像の彩度を調整指示に基づいて低く変更し、かつ、前記他の入力画像の輝度を調整指示に基づいて調整することにより、奥行距離、奥行位置、及び奥行き感を調整する画像処理を行うステップを備える。

本発明の画像処理装置及び画像処理方法によれば、裸眼により視認される表示画像の奥行距離、奥行位置、及び奥行き感を画像処理により調整することができる、という効果が得られる。

第１の実施の形態における基本の画像処理装置の概略構成の一例を示す構成図である。第１の実施の形態の画像表示装置の波長特性を示した説明図である。第１の実施の形態の実施例１における画像処理装置の概略構成の一例を示す構成図である。実施例１の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例１の画像処理装置における画像処理の具体的一例を説明するための説明図である。第１の実施の形態の実施例２−１における画像処理装置の概略構成の一例を示す構成図である。実施例２−１の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例２−１の画像処理装置における画像処理の具体的一例を説明するための説明図である。実施例２−１の画像処理装置において「Ａ」を表す文字部画像に輪郭や陰影を付与する場合を説明するための説明図である。実施例２−２の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例２−２の画像処理装置における画像処理の具体的一例を説明するための説明図である。第１の実施の形態の実施例３−１における画像処理装置の概略構成の一例を示す構成図である。実施例３−１の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例３−１の画像処理装置における画像処理の具体的一例を説明するための説明図である。実施例３−２の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例３−２の画像処理装置における画像処理の具体的一例を説明するための説明図である。第１の実施の形態の実施例４−１における画像処理装置の概略構成の一例を示す構成図である。実施例４−１の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例４−１の画像処理装置における画像処理の具体的一例を説明するための説明図である。実施例４−１の画像処理装置における画像処理の具体的一例を説明するための説明図である。実施例４−２の画像処理装置における画像処理の流れの一例を表すフローチャートである。実施例４−２の画像処理装置における画像処理の流れの一例を表すフローチャートである。第２の実施の形態における画像処理装置の概略構成の一例を示す構成図である。第２の実施の形態の画像処理装置における画像処理の流れの一例を表すフローチャートである。背景部画像が実写画像である場合の表示画像の具体的一例を説明するための説明図である。

以下、図面を参照して本発明の実施の形態を詳細に説明する。なお、本実施の形態は本発明を限定するものではない。

本実施の形態の画像処理装置では、人間の眼に入力される光の波長に基づく錯視、もしくは人間の眼の光学系の色差、もしくはそれらの両方を利用して、画像表示装置に表示される立体画像を構成する要素画像の奥行距離、奥行位置、及び奥行き感を画像処理により調整し、立体視可能な画像を生成する機能を有する。なお、以下の説明では記載を簡略化するため、奥行距離及び奥行位置を「奥行距離（位置）」と称する。

一般的に、画像表示装置の画面の位置を奥行きの基準にした場合、表示される画像の色相が長波長であるほど、画面の手前側に浮き上がって見える。また、表示される画像の色相が短波長であるほど、画面の奥側に引っ込んで見える。なお、観察者の個人差により、奥行き感を感じる方向（奥行位置）が反転する場合や奥行き感が感じられない場合があるが、本実施の形態では、長波長の色相ほど、観察者の手前側に浮き上がって見え、短波長の色相ほど、観察者の奥側に引っ込んで見えるものとして説明する。

なお、本実施の形態において画像の「色相」とは、赤色、黄色、緑色、青色、及び紫色等のいわゆる色味のことを称しており、数量的には、主波長によって表される。例えば、レーザやＬＥＤ等の単波長もしくは、ある波長を中心とした狭帯域な波長分布を有する光の場合、波長が短波長から長波長に変化するのに応じて色味は、青紫色から、青色、青緑色、緑色、黄緑色、黄色、橙色、赤色、赤紫色に変化する。

また、本実施の形態において画像の「彩度」とは、色の鮮やかさのことを総称する。彩度は、単色のＬＥＤの場合では、波長分布の幅に依存し、幅が狭いほど彩度が高くなる。

また、本実施の形態において画像の「明るさ」とは、光量、輝度、及び明度等単位系が異なるが明るさを意味するものも含めて総称する。

また、以下の説明では、複数種類の画像が登場するが、複数種類の画像について総称する場合及び種類を特定しない一般的な画像については、単に「画像」と称する。また、画像処理装置及び画像処理装置の各処理部(詳細後述）には、画像を表す画像信号が入力及び出力されるが、説明の便宜上、「信号」の記載を付加せずに単に「画像」と称する。
［第１の実施の形態］
図１には、本実施の形態の基本となる画像処理装置の概略構成の一例の構成図を示す。

画像処理装置１０は、画像入力部２０、画像調整部２６、画像合成部２８、表示画像記憶部３０、及びユーザインターフェース部３２を備えている。

ユーザインターフェース部３２には、画像処理装置１０の外部から奥行距離（位置）及び奥行き感調整のための調整指示が奥行距離（位置）及び奥行き感の調整を指示するユーザ（以下、単に「ユーザ」という）により入力される。入力された調整指示は、画像入力部２０及び画像調整部２６に出力される。

画像入力部２０には、画像処理装置１０の外部から奥行距離（位置）及び奥行き感を調整する画像（以下、「入力画像」という）が入力される。画像入力部２０に入力される入力画像の種類は、実写画像やコンピュータグラフィックス等でもよく、限定されるものではない。

また、画像入力部２０には、ユーザインターフェース部３２を介して、調整指示が入力される。画像入力部２０は、調整指示に基づいて、入力画像の奥行距離（位置）及び奥行き感を調整する機能を有する。画像入力部２０からは、調整指示に基づいて奥行距離（位置）及び奥行き感が調整された調整入力画像が画像調整部２６に出力される。なお、画像処理装置１０内の設定部（図示省略）に奥行き感の調整のために予め色相等が設定されている場合は、当該設定部から調整指示が画像入力部２０に入力される。

なお、画像入力部２０に入力される入力画像及び画像入力部２０から出力される調整入力画像のカラーチャンネル数は、限定されるものではなく任意である。入力画像のカラーチャンネル数と調整入力画像のカラーチャンネル数とは、一致していてもよいし、異なっていてもよい。なお、ＲＧＢ画像の場合は、チャンネル数は「３」になる。

本実施の形態の画像入力部２０は、画像調整部２２及び画像輪郭調整部２４を有する。画像入力部２０の画像調整部２２には、画像処理装置１０の外部から入力画像が入力される。画像調整部２２は、入力画像に含まれる部分画像に対して調整指示に応じた画像処理を行うことにより、入力画像に対して奥行き感の調整を行う機能を有する。具体的には、画像調整部２２は、調整指示に基づいて、部分画像の色相、彩度、及び明るさの少なくとも１つの調整を行うことにより、奥行距離（位置）及び奥行き感の調整を行う。

本実施の形態の画像処理装置１０では、輝度及び明度の少なくとも一方を調整することにより、部分画像の明るさを調整する。

画像調整部２２からは、奥行距離（位置）及び奥行き感が調整された入力画像が画像輪郭調整部２４に出力される。なお、本実施の形態の画像処理装置１０では、奥行距離（位置）及び奥行き感の調整内容によっては、画像調整部２２による奥行距離（位置）及び奥行き感の調整を行わない場合がある（詳細後述）。この場合は、奥行距離（位置）及び奥行き感の調整を行わずに入力された入力画像を出力する。

画像調整部２２に入力される入力画像及び画像調整部２２から出力される入力画像のカラーチャンネル数は、限定されるものではなく任意であり、一致していてもよいし、異なっていてもよい。

画像入力部２０の画像輪郭調整部２４には、画像調整部２２から入力画像が入力される。画像調整部２２は、入力画像に含まれる部分画像に対して調整指示に応じた画像処理を行うことにより、入力画像に対して奥行き感の調整を行う機能を有する。具体的には、画像輪郭調整部２４は、調整指示に基づいて、部分画像に対して、当該部分画像に比べて低輝度かつ無彩色の輪郭を付与する。なお、本実施の形態において「輪郭の付与」とは、画像の外形に応じた画像（輪郭）の付与に加えて、外枠の付与及び陰影の付与等を含む。また、当該部分画像に比べて低輝度かつ低彩色の輪郭を付与するようにしてもよい。また、背景の付与や、背景の色相、彩度、及び明るさの調整を行うことにより、奥行距離（位置）及び奥行き感の調整を行ってもよい。

画像輪郭調整部２４からは、奥行き感が調整された調整入力画像が画像調整部２６に出力される。なお、本実施の形態の画像処理装置１０では、奥行き感の調整内容によっては、画像輪郭調整部２４による奥行き感の調整を行わない場合がある（詳細後述）。この場合は、奥行き感の調整を行わずに入力された入力画像を調整入力画像として出力する。

画像輪郭調整部２４から出力される調整入力画像のカラーチャンネル数は、限定されるものではなく任意であり、入力された入力画像のカラーチャンネル数と一致していてもよいし、異なっていてもよい。

なお、図１では、入力画像が１枚であり、画像入力部２０が１つである画像処理装置１０を示したが、複数枚の入力画像に対して画像処理を行う（複数枚の入力画像が入力される）場合は、画像入力部２０を入力画像の枚数に応じて複数、備えてもよい（詳細後述）。画像入力部２０から出力される複数枚の調整入力画像は、以降の処理においてレイヤー画像として扱われてもよいし、画像全体の一部領域として扱われてもよい。

画像調整部２６には、画像入力部２０から出力された調整入力画像が入力される。入力画像が複数枚有る場合は、複数枚（入力画像と同一枚数）の調整入力画像が入力される。また、画像調整部２６には、ユーザインターフェース部３２を介して調整指示が入力される。なお、画像処理装置１０内の設定部（図示省略）に奥行距離（位置）及び奥行き感の調整のために予め色相等が設定されている場合は、当該設定部から調整指示が画像入力部２０に入力される。

画像調整部２６は、調整指示に基づいて、調整入力画像の奥行距離（位置）及び奥行き感を調整する機能を有する。本実施の形態の画像調整部２６では、調整入力画像に対して、または、複数枚の調整入力画像が入力された場合は重ね合わせた複数の調整入力画像のそれぞれに対して、調整指示に基づいて色相、彩度、明るさ、及びコントラストの少なくとも１つの調整を行うことにより、奥行距離（位置）及び奥行き感の調整を行う。画像調整部２６からは、調整指示に基づいて奥行距離（位置）及び奥行き感が調整された調整画像が画像合成部２８に出力される。なお、本実施の形態の画像調整部２６では、入力された調整入力画像をレイヤー画像として処理するため、複数枚の調整入力画像が入力された場合は、複数枚の調整画像（調整入力画像と同一枚数）が画像合成部２８に出力される。

また、画像調整部２６は、必要に応じて、画像表示装置１２の特性（表色系の特性）に合わせて画像信号値の変換を行うようにしてもよいし、変換用のプロファイルを画像に添付してもよい。

画像合成部２８には、画像調整部２６から調整画像が入力される。また、画像合成部２８には、画像表示装置１２の表色系の特性データ（原色スペクトルやトーンカーブ等）が画像処理装置１０の外部から入力される。なお、特性データは、画像表示装置１２から入力されるようにしてもよいし、その他の外部装置等から入力されてもよい。また、特性データは、予め画像合成部２８内部に記憶しておいてもよい。

画像合成部２８は、複数枚の画像を１枚の画像に合成する機能を有する。具体的に本実施の形態の画像合成部２８は、複数のレイヤー画像を合成して１つのレイヤー画像とする。

また、画像合成部２８は、合成した合成画像を画像表示装置１２上で所望の色で表示するため、特性データを用いて表示用画像信号に変換する機能を有している。画像合成部２８からは、合成画像が表示画像記憶部３０に出力される。

表示画像記憶部３０には、画像合成部２８から合成画像が入力される。表示画像記憶部３０は、入力された合成画像または後述の表示画像の少なくとも一方を記憶する機能を有する。また、表示画像記憶部３０は、入力された合成画像に画像表示装置１２の特性に応じた画像を生成するためのプロファイルが添付されている場合には、必要に応じ、当該プロファイルを用いて合成画像の画像信号を変換して立体画像である表示画像を生成する機能を有する。表示画像記憶部３０からは、画像表示装置１２に表示させるための表示画像が出力される。

なお、画像処理装置１０におけるこれら各処理部は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、及びＲＯＭ（Read Only Memory）等を備えたコンピュータにより実現されており、ＣＰＵが、ＲＯＭに記憶されているプログラムを実行することにより、各処理部における処理が実行される。なお、当該プログラムは、ＲＯＭに予め記憶しておいてもよいし、画像処理装置１０の外部の記憶媒体等から直接、または通信回線（有線及び無線）を介して取得してもよい。

画像表示装置１２は、画像を表示する機能を有していれば特に限定されるものではなく、各種モニタ、ディスプレイ、及びプロジェクター等が上げられる。なお、プロジェクション方式やバックライト方式等を用いたレーザディスプレイ、直接表示方式やバックライト方式等を用いたＬＥＤディスプレイ、及びシネマ用等の広色域プロジェクターに対して、より高い効果（奥行距離（位置）及び奥行き感）が得られる。また、多色モニタに対しても、より高い効果（奥行距離（位置）及び奥行き感）が得られる。

なお、単波長レーザを用いた場合が、人間が識別できる範囲では、最も彩度が高い画像が得られる。また、蛍光管のように鋭い輝線がある場合も画像の彩度が高くなる。

本実施の形態では、画像表示装置１２の具体的一例として、赤色、青色、及び緑色の各色が独立した単色のＬＥＤが使用された液晶モニタを用いている。図２には、画像表示装置１２である液晶モニタの波長特性の具体例を示す。図２に示すように本実施の形態の画像表示装置１２は、赤色、青色、及び緑色の各色が独立した波長のピークを有している。このように単色のＬＥＤを画像表示装置１２として使用する場合は、波長の半値幅が狭いほど画像の彩度が高くなる。

(実施例１）
本実施例では、入力画像の色相を調整することにより、画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整する場合の画像処理装置１０Ａについて図面を参照して説明する。

図３には、本実施例の画像処理装置１０Ａの概略構成の一例の構成図を示す。図３に示すように本実施例の画像処理装置１０Ａは、画像入力部２０、表示画像記憶部３０、及びユーザインターフェース部３２を備える。本実施例の画像処理装置１０Ａでは、画像入力部２０で入力画像の色相を調整することにより、表示画像の奥行距離（位置）及び奥行き感を調整するため、図３に示すように、基本となる画像処理装置１０に備えられていた画像調整部２６及び画像合成部２８を備えていなくてもよい。

本実施例の画像処理装置１０Ａにおける画像処理について、図面を参照して説明する。図４には、本実施例の画像処理装置１０Ａにける画像処理の流れの一例を表すフローチャートを示す。なお、具体的一例として、画像処理装置１０Ａが入力画像の文字部分の部分画像（以下「文字部画像」という）の色相を調整する画像処理について説明する。図５には、画像処理装置１０Ａにおける画像処理の具体的一例を説明するための説明図を示す。

図４に示した画像処理は、例えば、画像入力部２０に入力画像が入力されると実行される。また例えば、奥行距離（位置）及び奥行き感の調整を行う旨の情報や調整指示等がユーザインターフェース部３２に入力されると実行される。

ステップＳ１００では、入力された入力画像が画像表示装置１２に表示され、調整する部分画像及び調整する色相を指示する調整指示がユーザインターフェース部３２に入力されたか否か判断し、調整指示が入力されるまで待機状態となる。一方、調整指示が入力された場合は、ステップＳ１０２へ進む。

ステップＳ１０２では、画像調整部２２が調整指示に基づいて部分画像（文字部画像）の色相を調整し、文字部画像の奥行距離（位置）及び奥行き感の調整を行う。

図５に示した具体的一例では、色相が青色の文字部画像５２及び黒色の背景部画像５１を部分画像として含む入力画像が画像調整部２２に入力される。画像調整部２２は、文字部画像５２を調整する部分画像として指示し、かつ、調整後の色相として赤色を指示する調整指示に基づいて、文字部画像５２の色相を青色から赤色に調整する。

なお、上記では、部分画像として文字部画像５２を抽出する方法として、調整指示によりユーザが文字部画像５２の抽出を指示する場合を例に説明したが、調整指示に基づいて自動的に文字部画像５２を抽出するようにしてもよい。

また、本実施例の画像処理では、文字部画像を手前側に浮き上がらせるために、一般的に画像が浮き上がって見える長波長側の色相である赤色に色相を調整しているが調整する色相は任意であり、限定されるものではない。例えば、青色から黄色に色相を調整する場合は、青色から赤色に色相を調整する場合に比べて、文字部画像の奥行き感は低減するが、赤色に色相を調整する場合と同様に手前側に浮き上がって見える（奥行距離（位置）が手前になる）。また例えば、赤色から青色に色相を調整する場合は、青色から赤色に色相を調整する場合に比べて、文字部画像の奥行き方向（奥行位置）が反転する。

またさらに、色相を調整する方法も特に限定されない。例えば、調整指示を行うための指示画面（図示省略）を、ユーザインターフェース部３２を介してユーザに提示し、当該指示画面に応じてユーザが行った調整指示に基づいて調整を行うようにしてもよい。この場合の具体的例としては、色相を示したパレットをユーザに提示し、当該パレットからユーザが色相を指示することが挙げられる。その他の具体的例としては、色相の調整を表すための調整量を表す数値を指示するための指示画面をユーザに提示し、当該指示画面からユーザが色相の調整量を指示することが挙げられる。またその他の具体的例としては、どのように奥行き感を調整するかを指示するための指示画面をユーザに提示し、当該指示画面からユーザがどのように奥行距離（位置）及び奥行き感を調整するかを指示することが挙げられる。

色相を調整する方法としては、また例えば、予め定められた色相に調整するようにしてもよい。例えば、本実施例のように、最も手前側に浮き上がる色相に自動的に調整するようにしてもよい。この場合には、画像調整部２２の内部または外部の設定部（図示省略）に予め定められた色相を設定しておき、当該設定部から予め定められた色相に調整するための調整指示が画像入力部２０に出力される。

画像調整部２２からは、黒色の背景部画像５１、及び色相が赤色に調整された文字部画像５６を含む入力画像が画像輪郭調整部２４に出力される。本実施例の画像処理では、画像輪郭調整部２４による画像処理は行われないため、画像輪郭調整部２４に入力された入力画像はそのまま調整入力画像として表示画像記憶部３０に出力される。なお、本実施例のように、画像輪郭調整部２４での画像処理を行わないことが予め定められている場合は、画像入力部２０は、画像輪郭調整部２４を備えていなくてもよい。

次のステップＳ１０４では、表示画像記憶部３０が入力された調整入力画像を表示画像記憶部３０内部の記憶部（図示省略）に記憶する。次のステップＳ１０６では、表示画像記憶部３０が画像表示装置１２に応じた表示用処理を調整入力画像に対して行い表示画像を生成する。なお、ステップＳ１０４の処理及びステップＳ１０６の処理は、順番を入れ替えてもよい。この場合は、表示画像が表示画像記憶部３０内部の記憶部に記憶される。

次のステップＳ１０８では、表示画像記憶部３０が表示画像を画像表示装置１２に出力する。画像表示装置１２では、画像処理装置１０Ａの表示画像記憶部３０から出力された表示画像が表示される。図５に示した具体的一例では、黒色の背景部画像５１と色相が赤色の文字部画像５６とを含む表示画像が画像表示装置１２に表示される。ユーザは、画像表示装置１２に表示された表示画像を確認し、必要に応じて奥行距離（位置）及び奥行き感の調整を再度行うよう調整指示を行う。

次のステップＳ１１０では、本画像処理を終了するか否か判断する。上述のように、ユーザから奥行き感の調整を再度行うよう調整指示が入力された場合は、ステップＳ１０２に戻り本画像処理を繰り返す。一方、ユーザから奥行距離（位置）及び奥行き感の調整を終了する旨の指示が画像処理装置１０Ａに入力された場合は、本画像処理を終了する。

このように本実施例の画像処理装置１０Ａでは、画像入力部２０の画像調整部２２により入力画像の文字部画像の色相を青色から赤色に調整することにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。当該奥行き感の調整により、色相が赤色の文字部画像５６が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

（実施例２−１）
本実施例では、入力画像の彩度の調整及び背景部画像の付与により、画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整する場合の画像処理装置１０Ｂについて図面を参照して説明する。本実施例は、上述した実施例１と同様の処理を含むため、同様の処理についてはその旨を記し詳細な説明を省略する。

図６には、本実施例の画像処理装置１０Ｂの概略構成の一例の構成図を示す。図６に示すように本実施例の画像処理装置１０Ｂは、画像入力部２０、画像調整部２６、表示画像記憶部３０、及びユーザインターフェース部３２を備える。本実施例の画像処理装置１０Ｂでは、画像入力部２０で入力画像に含まれる部分画像に背景部画像を付与し、また画像調整部２６で調整入力画像の彩度を調整することにより、表示画像の奥行距離（位置）及び奥行き感を調整する。そのため、図６に示すように、基本となる画像処理装置１０に備えられていた画像合成部２８を備えていなくてもよい。

本実施例の画像処理装置１０Ｂにおける画像処理について図面を参照して説明する。図７には、本実施例の画像処理装置１０Ｂにける画像処理の流れの一例を表すフローチャートを示す。なお、具体的一例として、画像処理装置１０Ｂが入力画像の文字部画像に背景部画像を付与し、また文字部画像の彩度を調整する画像処理について説明する。図８には、画像処理装置１０Ｂにおける画像処理の具体的一例を説明するための説明図を示す。

ステップＳ２００では、上記実施例１のステップＳ１００と同様に画像処理装置１０Ｂに調整指示が入力されたか否か判断し、入力されるまでは待機状態となる一方、例えば、調整する部分画像、付与される背景部画像、及び調整後の彩度を指示する調整指示がユーザインターフェース部３２に入力された場合は、ステップＳ２０２へ進む。

ステップＳ２０２では、画像輪郭調整部２４が調整指示に基づいて部分画像（文字部画像）に背景部画像を付与し、文字部画像の奥行き感の調整を行う。なお、本実施例の画像入力部２０では、部分画像（文字部画像）に対する画像処理は行わないため、画像調整部２２に入力された入力画像はそのまま画像輪郭調整部２４に入力される。なお、本実施例のように画像調整部２２で画像処理を行わないことが予め定められている場合は、画像入力部２０は、画像調整部２２を備えていなくてもよい。

図８に示した具体的一例では、背景部分が透明であり色相が赤色で低彩度の文字部画像６２を含む入力画像が画像調整部２２を介して画像輪郭調整部２４に入力される。画像輪郭調整部２４は、調整指示に基づいて文字部画像６２に黒色の背景部画像６５を付与する。

なお、画像輪郭調整部２４により付与する背景部画像の色相（色）は任意であり、限定されるものではない。調整指示によりユーザが付与する背景部画像６５の色相（色）を指示してもよいし、調整指示により自動的に所定の色相（色）の背景部画像６５を付与するようにしもよい。

なお、背景部画像の彩度及び輝度が低い（例えば黒色）ほど、上述の現象（画像の色相の波長が長波長であるほど手前側に浮き上がって見え、短波長であるほど奥側に引っ込んで見える）が顕著となる。そのため、付与する背景部画像は、本実施例のように黒色（または彩度が低く低輝度）であることが好ましい。また、表示画像における文字部画像の色相を考慮して付与することが好ましい。例えば、文字部画像と離れた波長の色相の色の背景部画像を付与することにより、文字部画像の奥行き感が強調されるようになる。

背景部画像の付与の方法は任意であり、限定されるものではなく、例えば、実施例１の画像調整部２２における色相の調整方法と同様にしてもよい。

なお、本実施例の画像輪郭調整部２４では、背景部画像を付与しているが、背景部画像の付与に替えて、または背景部画像の付与に加えて輪郭や陰影の付与を行うようにしてもよい。図９には、「Ａ」を表す文字部画像６２に輪郭や陰影を付与する場合を説明するための説明図を示す。図９（１）は文字部画像６２に黒色の輪郭６７を付与した場合を示している。また、図９（２）は文字部画像６２に黒色の陰影６９を付与した場合を示している。画像輪郭調整部２４において輪郭や陰影を付与する場合は、上述の背景部画像の付与と同様にすればよい。

画像輪郭調整部２４からは、黒色の背景部画像６５、及び色相が赤色の低彩度の文字部画像６２を含む調整入力画像が画像調整部２６に出力される。

次のステップＳ２０４では、画像調整部２６が調整指示に基づいて調整入力画像の文字画像の彩度を調整し、文字部画像の奥行距離（位置）及び奥行き感の調整を行った調整画像を表示画像記憶部３０に出力する。図８に示した具体的一例では、画像調整部２６は、調整指示に基づいて文字部画像６２の彩度を高くする。

なお、彩度が高いほど、上述の現象（画像の色相の波長が長波長であるほど手前側に浮き上がって見え、短波長であるほど奥側に引っ込んで見える）が顕著となる。そのため、本実施例では、画像を表示する奥行距離（位置）及び奥行き感を強調したい部分の画像（文字部画像）の彩度を高くするように調整している。

彩度を調整する方法は任意であり、限定されるものではない。例えば、実施例１の画像調整部２２における色相の調整方法と同様にしてもよい。なお、上述のように高彩度とすることにより奥行距離（位置）及び奥行き感が強調されるため、画像表示装置１２に表示可能な彩度の最高値に調整するようにしてもよい。このように調整する場合は、画像表示装置１２の表色系等の特性にかかわらず、高彩度の画像に調整することができるようになる。

次のステップＳ２０６〜ステップＳ２１０の各処理は、実施例１のステップＳ１０４〜ステップＳ１０８の各処理に対応している。実施例１と同様に、表示画像記憶部３０が調整入力画像（または表示画像）を記憶し、また、画像表示装置１２に応じた表示用処理を行った表示画像を画像表示装置１２に出力する。

次のステップＳ２１２も実施例１のステップＳ１１０と同様の処理である。奥行距離（位置）及び奥行き感の調整を再度行う場合は、ステップＳ２０２に戻り本画像処理を繰り返す。一方、奥行距離（位置）及び奥行き感の調整を終了する場合は、本画像処理を終了する。

このように本実施例の画像処理装置１０Ｂでは、画像入力部２０の画像輪郭調整部２４により入力画像の文字部画像に背景部画像を付与することにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。また、本実施例の画像処理装置１０Ｂでは、画像調整部２６により調整入力画像の文字部画像の彩度を高くする調整を行うことにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。当該奥行距離（位置）及び奥行き感の調整により、色相が赤色の高彩度の文字部画像６８が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

（実施例２−２）
本実施例では、実施例２−１における奥行距離（位置）及び奥行き感の調整に加えて、部分画像（文字部画像）の色相を調整することにより表示画像の奥行距離（位置）及び奥行き感を調整する場合について説明する。なお、本実施例の画像処理装置は画像入力部２０の画像調整部２２が必須であるが、他の構成は、図６に示した実施例２−１の画像処理装置１０Ｂと構成が同一であるため、説明を省略する。また、本実施例は、実施例２−１と同様の処理を含むため、同様の処理についてはその旨を記し詳細な説明を省略する。

本実施例の画像処理装置１０Ｂにおける画像処理について図面を参照して説明する。図１０には、本実施例の画像処理装置１０Ｂにける画像処理の流れの一例を表すフローチャートを示す。また図１１には、画像処理装置１０Ｂにおける画像処理の具体的一例を説明するための説明図を示す。

図１０に示すように、本実施例の画像処理装置１０Ｂにおける画像処理では、実施例２−１の画像処理（図７参照）のステップＳ２００とステップＳ２０２との間に、ステップＳ２０１が設けられている。本実施例の画像処理では、ステップＳ２００において、例えば、調整する部分画像、付与される背景部画像、及び調整後の色相と彩度を指示する調整指示が入力された場合は、ステップＳ２０１へ進む。

ステップＳ２０１では、上述した実施例１の画像処理装置１０Ａにおける画像処理のステップＳ１０２と同様に、画像調整部２２が調整指示に基づいて部分画像（文字部画像）の色相を調整し、文字部画像の奥行距離（位置）及び奥行き感の調整を行った後、ステップＳ２０２へ進む。

図１１に示した具体的一例では、背景部分が透明であり色相が青色で低彩度の文字部画像６４を含む入力画像が画像調整部２２に入力される。画像調整部２２は、実施例１と同様に調整指示に基づいて文字部画像６４の色相を青色から赤色に調整する。

以降のステップＳ２０２〜ステップＳ２１２の各処理は、実施例２−１と同様である。

このように本実施例の画像処理装置１０Ｂでは、画像入力部２０の画像調整部２２により入力画像の文字部画像の色相を調整し、さらに、画像輪郭調整部２４により文字部画像に背景部画像を付与することにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。そのため、本実施例の画像処理装置１０Ｂでは、奥行距離（位置）及び奥行き感が強調されるように調整を行うことができる。また、本実施例の画像処理装置１０Ｂでは、画像調整部２６により調整入力画像の文字部画像の彩度を高くする調整を行うことにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。当該奥行距離（位置）及び奥行き感の調整により、色相が赤色の高彩度の文字部画像６８が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

（実施例３−１）
本実施例では、複数の入力画像に対して、彩度の調整により、画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整する場合の画像処理装置１０Ｃについて図面を参照して説明する。本実施例は、上述した各実施例と同様の処理を含むため、同様の処理についてはその旨を記し詳細な説明を省略する。

図１２には、本実施例の画像処理装置１０Ｃの概略構成の一例の構成図を示す。図１２に示すように本実施例の画像処理装置１０Ｃは、第１画像入力部２０_１、第２画像入力部２０_２、画像調整部２６、画像合成部２８、表示画像記憶部３０、及びユーザインターフェース部３２を備える。図１２に示すように本実施例の画像処理装置１０Ｃでは、２つ（２枚）の入力画像（入力画像１及び入力画像２）が入力されるため、各々に対して画像入力部２０（第１画像入力部２０_１及び第２画像入力部２０_２）を備えている。本実施例では、第１画像入力部２０_１及び第２画像入力部２０_２の構成は同一としている。

本実施例の画像処理装置１０Ｃにおける画像処理について図面を参照して説明する。図１３には、本実施例の画像処理装置１０Ｃにける画像処理の流れの一例を表すフローチャートを示す。なお、具体的一例として、画像処理装置１０Ｃが調整入力画像１（レイヤー画像１）及び調整入力画像２（レイヤー画像２）を合成した後、入力画像１の文字部画像の彩度を調整する画像処理について説明する。図１４には、画像処理装置１０Ｃにおける画像処理の具体的一例を説明するための説明図を示す。

ステップＳ３００では、画像処理装置１０Ｃに調整指示が入力されたか否か判断し、入力されるまでは待機状態となる。一方、例えば、調整する部分画像、及び調整後の彩度を指示する調整指示が入力された場合は、ステップＳ３０２へ進む。

図１４に示した具体的一例では、背景部分が透明であり色相が赤色で低彩度の文字部画像７０を含む入力画像１が画像入力部２０_１に入力される。また、黒色の画像（背景部画像７１）である入力画像２が画像入力部２０_２に入力される。

なお、本実施例の画像処理装置１０Ｃにおける画像処理では、第１画像入力部２０_１及び第２画像入力部２０_２では奥行き感の調整を行わない。そのため、画像入力部２０_１及び画像入力部２０_２に入力された入力画像１及び入力画像２は、調整入力画像１及び調整入力画像２としてそれぞれ第１画像入力部２０_１及び第２画像入力部２０_２から画像調整部２６へ出力される。

ステップＳ３０２では、画像調整部２６が、図１４に示すように調整入力画像１及び調整入力画像２を重ね合わせて合成する。なお、画像調整部２６は、調整入力画像１及び調整入力画像２はレイヤー画像１及びレイヤー画像２として保持する。

次のステップＳ３０４では、画像調整部２６が調整指示に基づいてレイヤー画像１の部分画像（文字部画像）の彩度を調整し、文字部画像の奥行距離（位置）及び奥行き感の調整を行い、調整画像を画像合成部２８に出力する。なお、本実施例の画像調整部２６では、レイヤー画像１全体の彩度を調整することにより文字部画像の彩度を調整する。背景部画像が透明（背景部画像を付与されていない場合）や、背景部画像が白色や黒色の無彩色である場合は、画像全体の彩度を調整しても背景部画像の彩度には影響を与えない場合がある。このような場合には、部分画像ではなく画像全体の彩度を調整してもよい。図１４に示した具体的一例では、画像調整部２６は、調整指示に基づいてレイヤー画像１（文字部画像７０）の彩度を高くする。

なお、彩度を調整する方法は、上記実施例２の画像処理装置１０Ｂにおける画像処理のステップＳ２０４と同様にすればよい。

次のステップＳ３０６では、画像合成部２８が入力された合成画像のレイヤー画像１及びレイヤー画像２を合成し、合成画像を表示画像記憶部３０に出力する。画像合成部２８における合成により、レイヤー画像１及びレイヤー画像２は１つの画像（レイヤー）に統合される。

次のステップＳ３０８〜ステップＳ３１２の各処理は、表示画像記憶部３０に入力される画像が合成画像であることが異なっているが、実施例１のステップＳ１０４〜ステップＳ１０８の各処理に対応している。実施例１と同様に、表示画像記憶部３０が合成画像（または表示画像）を記憶し、また、画像表示装置１２に応じた表示用処理を行った表示画像を画像表示装置１２に出力する。

次のステップＳ３１４は実施例１のステップＳ１１０と同様の処理である。奥行距離（位置）及び奥行き感の調整を再度行う場合は、ステップＳ３０２に戻り本画像処理を繰り返す。一方、奥行距離（位置）及び奥行き感の調整を終了する場合は、本画像処理を終了する。

このように本実施例の画像処理装置１０Ｃでは、入力画像１が画像入力部２０１に、入力画像２が画像入力部２０２に入力される。画像処理装置１０Ｃでは、画像調整部２６により調整入力画像１（レイヤー画像１）の文字部画像の彩度を高くする調整を行うことにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。当該奥行距離（位置）及び奥行き感の調整により、色相が赤色の高彩度の文字部画像７４が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

なお、本実施例では入力画像２の背景部画像が無彩色の黒色であったため、背景部画像の彩度の調整は行っていないが、背景部画像が有彩色の場合は、背景部画像の彩度を低彩度に変更することにより、より文字部画像７４の奥行距離（位置）及び奥行き感が調整される。

また、本実施例では入力画像が２つ（２枚）の場合について説明したがこれに限らず、３枚以上であってもよい。入力される入力画像の数に応じて画像入力部２０を備えればよい。

（実施例３−２）
本実施例では、実施例３−１における奥行距離（位置）及び奥行き感の調整に加えて、部分画像（文字部画像）の色相を調整することにより表示画像の奥行距離（位置）及び奥行き感を調整する場合について説明する。なお、本実施例の画像処理装置は、図１２に示した実施例３−１の画像処理装置１０Ｃと構成が同一であるため、説明を省略する。また、本実施例は、実施例３−１と同様の処理を含むため、同様の処理についてはその旨を記し詳細な説明を省略する。

本実施例の画像処理装置１０Ｃにおける画像処理について図面を参照して説明する。図１５には、本実施例の画像処理装置１０Ｃにける画像処理の流れの一例を表すフローチャートを示す。また図１６には、画像処理装置１０Ｃにおける画像処理の具体的一例を説明するための説明図を示す。

図１５に示すように、本実施例の画像処理装置１０Ｃにおける画像処理では、実施例３−１の画像処理（図１３参照）のステップＳ３００とステップＳ３０２との間に、ステップＳ３０１が設けられている。本実施例の画像処理では、ステップＳ３００において、例えば、調整する部分画像、及び調整後の色相と彩度を指示する調整指示が入力された場合は、ステップＳ３０１へ進む。

ステップＳ３０１では、上述した実施例１の画像処理装置１０Ａにおける画像処理のステップＳ１０２と同様に、画像調整部２２_１が調整指示に基づいて部分画像（文字部画像）の色相を調整し、文字部画像の奥行距離（位置）及び奥行き感の調整を行った後、ステップＳ３０２へ進む。

図１６に示した具体的一例では、背景部分が透明であり色相が青色で低彩度の文字部画像７６を含む入力画像が画像調整部２２_１に入力される。画像調整部２２_１は、実施例１と同様に調整指示に基づいて文字部画像７６の色相を青色から赤色に調整する。

以降のステップＳ３０２〜ステップＳ３１２の各処理は、実施例３−１と同様である。

このように本実施例の画像処理装置１０Ｃでは、画像入力部２０_１の画像調整部２２_１により入力画像１の文字部画像の色相を調整することにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。そのため、本実施例の画像処理装置１０Ｃでは、奥行距離（位置）及び奥行き感が強調されるように調整を行うことができる。また、本実施例の画像処理装置１０Ｃでは、画像調整部２６により調整入力画像１（レイヤー画像１）の文字部画像の彩度を高くする調整を行うことにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。当該奥行き感の調整により、色相が赤色の高彩度の文字部画像６８が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

（実施例４−１）
本実施例では、複数の入力画像を重ね合わせた表示画像を生成する場合に、明るさ、彩度、輝度、及びコントラストの調整と、背景部画像及び輪郭の付与により、画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整する場合の画像処理装置１０Ｄについて図面を参照して説明する。本実施例は、上述した各実施例と同様の処理を含むため、同様の処理についてはその旨を記し詳細な説明を省略する。

図１７には、本実施例の画像処理装置１０Ｄの概略構成の一例の構成図を示す。図１７に示すように本実施例の画像処理装置１０Ｄは、第１画像入力部２０_１、第２画像入力部２０_２、第３画像入力部２０_３、画像調整部２６、画像合成部２８、表示画像記憶部３０、及びユーザインターフェース部３２を備える。図１７に示すように本実施例の画像処理装置１０Ｄでは、３つ（３枚）の入力画像（入力画像１〜入力画像３）が入力されるため、各々に対して画像入力部２０（第１画像入力部２０_１〜第３画像入力部２０_３）を備えている。本実施例では、第１画像入力部２０_１〜第３画像入力部２０_３の構成は同一としている。

本実施例の画像処理装置１０Ｄにおける画像処理について図面を参照して説明する。図１８には、本実施例の画像処理装置１０Ｄにける画像処理の流れの一例を表すフローチャートを示す。なお、具体的一例として、画像処理装置１０Ｄが各第１画像入力部２０_１〜第３画像入力部２０_３において奥行き感を調整するための所定の画像処理を行った後、レイヤー画像１〜レイヤー画像３を合成し、レイヤー画像１〜レイヤー画像３の輝度及び彩度を調整する画像処理について説明する。図１９及び図２０には、画像処理装置１０Ｄにおける画像処理の具体的一例を説明するための説明図を示す。

ステップＳ４００では、画像処理装置１０Ｄに調整指示が入力されたか否か判断し、入力されるまでは待機状態となる。一方、例えば、調整する部分画像、付与される背景部画像と輪郭、及び調整後の明るさと輝度と彩度を指示する調整指示がそれぞれ入力された場合は、ステップＳ４０２へ進む。

図１９及び図２０に示した具体的一例では、背景部分が透明であり灰色（無彩色）の文字部画像８０を含む入力画像１が画像入力部２０_１に入力される。また、色相が青色で低彩度の画像（背景部画像８５）である入力画像２が画像入力部２０_２に入力される。さらに、黒色の画像（背景部画像８７）である入力画像３が画像入力部２０_３に入力される。

ステップＳ４０２では、調整指示に基づいて第１画像入力部２０_１の画像調整部２２_１により入力画像１の文字部画像の明るさを調整し、文字部画像の奥行距離（位置）及び奥行き感の調整を行う。

図１９に示した具体的一例では、第１画像入力部２０_１の画像調整部２２_１が灰色の文字部画像８０の明るさを調整指示に基づいて調整して、黒色の文字部画像８２に調整して画像輪郭調整部２４_１に出力する。本実施例では、入力画像１のみが文字部画像を含むため、第１画像入力部２０_１では、文字部画像の明るさの調整を行うが、第２画像入力部２０_２及び第３画像入力部２０_３では、文字部画像の明るさの調整は行われない。そのため第２画像入力部２０_２の画像調整部２２_２及び第３画像入力部２０_３の画像調整部２２_３からは、入力された入力画像２及び入力画像３がそれぞれ画像輪郭調整部２４_１及び画像輪郭調整部２４_２に出力される。

なお、入力画像２や入力画像３が文字部画像を含む場合は、各々に対して文字部画像の明るさの調整を行うか否かは任意としてもよく限定されない。文字部画像に対して明るさの調整を行うか否かは、調整指示に基づいて行ってもよいし、予め調整を行う入力画像がいずれであるかを設定しておき当該設定に基づいて行うようにしてもよい。

また、文字部画像の明るさの調整方法も任意であり、限定されるものではなく、例えば、実施例１の画像調整部２２における色相の調整方法と同様にしてもよい。

次のステップＳ４０４では、第１画像入力部２０_１の画像輪郭調整部２４_１〜第３画像入力部２０_３の画像輪郭調整部２４_３が調整指示に基づいて文字部画像には背景部画像を付与し、また背景部画像には輪郭として外枠を付与して奥行き感の調整を行う。

図１９に示した具体的一例では、第１画像入力部２０_１の画像調整部２２_１が黒色の文字部画像８２に赤色の背景部画像８３を付与し、さらに背景部画像８３に黒色の外枠８４を付与した後、調整入力画像１として画像調整部２６に出力する。また、第２画像入力部２０_２の画像調整部２２_２が青色の背景部画像８５に黒色の外枠８６を付与した後、調整入力画像２として画像調整部２６に出力する。なお、本実施例では、入力画像１（レイヤー画像１）〜入力画像３（レイヤー画像３）を重ね合わせた際に、最下層となる入力画像３（黒色の背景部画像８７）には、輪郭となる外枠を付与しない。そのため、第３画像入力部２０_３の画像輪郭調整部２４_３からは、入力された入力画像３が調整入力画像３として画像調整部２６に出力される。

なお、文字部画像への背景部画像の付与や、背景部画像への外枠の付与の方法も任意であり、限定されるものではなく、例えば、実施例１の画像調整部２２における色相の調整方法と同様にしてもよい。

次のステップＳ４０６では、画像調整部２６が、調整入力画像１〜調整入力画像３を重ね合わせて合成する。なお、画像調整部２６は、調整入力画像１〜調整入力画像３はレイヤー画像１〜レイヤー画像３として保持する。

図２０に示した具体的一例では、画像調整部２６は、調整入力画像１（レイヤー画像１）を最上層とし、調整入力画像２（レイヤー画像２）を中間層とし、調整入力画像３（レイヤー画像３）を最下層として合成する。合成する順番は、任意であり、限定されるものではなく、例えば、外部からユーザインターフェース部３２を介して入力される調整指示に基づいた順番としてもよいし、画像処理装置１０Ｄ内部の設定部（図示省略）に予め設定しておき当該設定部から出力された調整指示に基づいた順番としてもよい。

また、本実施例では、画像調整部２６は、調整入力画像１〜調整入力画像３の位置や大きさを調整して重ねあわせる。位置や大きさの調整方法も任意であり、限定されるものではなく、例えば、外部からユーザインターフェース部３２を介して入力される調整指示に基づいた位置や大きさとしてもよいし、画像処理装置１０Ｄ内部の設定部（図示省略）に予め設定しておき当該設定部から出力された調整指示に基づいた位置や大きさとしてもよい。

次のステップＳ４０８では、画像調整部２６が、レイヤー画像１〜レイヤー画像３の輝度及び彩度を調整して奥行距離（位置）及び奥行き感を調整する。

画像のコントラストが高い部分は、コントラストが低いところに比べて奥行き感が向上し、より手前側に浮き上がって見える。また、高輝度の画像の方が低輝度の画像に比べて手前側に浮き上がって見える。そのため、本実施例の画像処理装置１０Ｄでは、奥行き感を強調したい部分画像（レイヤー画像）のコントラストをその他の背景部画像（レイヤー画像）のコントラストより高くする調整を行う。コントラストを調整するため、本実施例では、レイヤー画像１〜３の輝度を調整する。なお、奥行き感を強調するためにコントラストを高くする場合には、背景部画像の輝度を高くする場合もあれば、低くする場合もある。輝度をいずれとするかは、表示画像全体を考慮して定めればよい。

図２０に示した具体的一例では、画像調整部２６は、レイヤー画像１の彩度及び輝度を高く変更して、背景部画像８３を色相が赤色の高彩度及び高輝度の背景部画像９１とする。このように調整することにより、レイヤー画像１がより手前側に浮き上がって見えるようになる。

また、画像調整部２６は、レイヤー画像２の彩度を高く変更して、背景部画像８５を色相が青色の高彩度の背景部画像９２とする。このように調整することにより、レイヤー画像２がより奥側に引っ込んで見えるようになる。

さらに、画像調整部２６は、レイヤー画像３の輝度を高く変更して、黒色の背景部画像８７を灰色の背景部画像９３とする。本実施例では、このように最下層であるレイヤー画像３の輝度を高くすることにより、表示画像全体を観察した際の背景部画像とのコントラストが下がるため、よりレイヤー画像１が手前側に浮き上がって見るようになる。

なお、彩度及び輝度の調整方法は任意であり、限定されるものではなく、例えば、実施例１の画像調整部２２における色相の調整方法と同様にしてもよい。

画像調整部２６は、このようにして奥行き感が調整されたレイヤー画像１〜レイヤー画像３を調整画像として画像合成部２８に出力する。

次のステップＳ４１０〜ステップＳ４１６の各処理は、実施例３（図１３参照）のステップＳ３０６〜ステップＳ３１２の各処理に対応している。実施例３と同様に、画像合成部２８が入力された合成画像のレイヤー画像１〜レイヤー画像３を合成して１つの合成画像に統合し、合成画像を表示画像記憶部３０に出力する。さらに、表示画像記憶部３０が合成画像（または表示画像）を記憶し、また、画像表示装置１２に応じた表示用処理を行った表示画像を画像表示装置１２に出力する。

次のステップＳ４１８は実施例３のステップＳ３１４と同様の処理である。奥行距離（位置）及び奥行き感の調整を再度行う場合は、ステップＳ４０２に戻り本画像処理を繰り返す。一方、奥行距離（位置）及び奥行き感の調整を終了する場合は、本画像処理を終了する。

このように本実施例の画像処理装置１０Ｄでは、入力画像１が画像入力部２０_１に、入力画像２が画像入力部２０_２に、入力画像３が画像入力部２０_３に入力され、３枚の入力画像（入力画像１〜入力画像３）を重ね合わせて１枚の表示画像を生成する。画像処理装置１０Ｄでは、画像入力部２０_１の画像調整部２２_１により最上層の画像となる入力画像１の文字部画像８０の明度を高くして文字部画像８２とし、画像輪郭調整部２４_１により色相が赤の背景部画像８３を付与して奥行距離（位置）及び奥行き感を調整する。また、画像処理装置１０Ｄでは、画像入力部２０_２の画像輪郭調整部２４_２により中間層の画像となる入力画像２の背景部画像８５に黒色の外枠８６を付与する。さらに画像処理装置１０Ｄでは、画像調整部２６によりレイヤー画像１〜レイヤー画像３の位置及び大きさを調整して重ね合わせて合成し、レイヤー画像１及びレイヤー画像２を高彩度に変更する。また、画像調整部２６によりレイヤー画像３の輝度を高く変更して表示画像全体を観察した際の、背景部画像とのコントラストを下げる。これらの奥行き感の調整により、レイヤー画像１の文字部画像８２が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

なお、本実施例では入力画像が３つ（３枚）の場合について説明したがこれに限らず、４枚以上であってもよい。入力される入力画像の数に応じて画像入力部２０を備えればよい。

（実施例４−２）
本実施例では、実施例４−１における奥行距離（位置）及び奥行き感の調整に加えて、部分画像（背景部画像）の色相を調整することにより表示画像の奥行き感を調整する場合について説明する。なお、本実施例の画像処理装置は、図１７に示した実施例４−１の画像処理装置１０Ｄと構成が同一であるため、説明を省略する。また、本実施例は、実施例４−１と同様の処理を含むため、同様の処理についてはその旨を記し詳細な説明を省略する。

本実施例の画像処理装置１０Ｄにおける画像処理について図面を参照して説明する。図２１には、本実施例の画像処理装置１０Ｄにける画像処理の流れの一例を表すフローチャートを示す。また図２２には、画像処理装置１０Ｄにおける画像処理の具体的一例を説明するための説明図を示す。

図２１に示すように、本実施例の画像処理装置１０Ｄにおける画像処理では、実施例４−１の画像処理（図１８参照）のステップＳ４００とステップＳ４０２との間に、ステップＳ４０１が設けられている。本実施例の画像処理では、ステップＳ４００において、例えば、調整する部分画像、付与される背景部画像と輪郭、及び調整後の色相と明るさと輝度と彩度を指示する調整指示が入力された場合は、ステップＳ４０１へ進む。

ステップＳ４０１では、上述した実施例１の画像処理装置１０Ａにおける画像処理のステップＳ１０２における文字部画像の色相の調整と同様に、画像調整部２２_２が調整指示に基づいて部分画像（背景部画像）の色相を調整し、背景部画像の奥行距離（位置）及び奥行き感の調整を行った後、ステップＳ４０２へ進む。

図２２に示した具体的一例では、画像入力部２０_２の画像調整部２２_２には、色相が赤色で低彩度の画像（背景部画像９７）である入力画像２が入力される。画像調整部２２_２は、実施例１と同様に調整指示に基づいて背景部画像９７の色相を青色から赤色に調整して背景部画像８５とする。

以降のステップＳ４０２〜ステップＳ４１８の各処理は、実施例４−１と同様である。また、図２２に示した具体的一例以降の、当該各処理における具体的一例は、上記実施例４−１で説明した図２０と同様になる。

このように本実施例の画像処理装置１０Ｄでは、画像入力部２０_２の画像調整部２２_２により入力画像２の背景部画像の色相を調整することにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。そのため、本実施例の画像処理装置１０Ｄでは、奥行距離（位置）及び奥行き感が強調されるように調整を行うことができる。また、本実施例の画像処理装置１０Ｄでは、画像調整部２２_１により文字部画像８０の明るさを調整し、画像輪郭調整部２４_１により色相が赤色の背景部画像８３及び黒色の外枠８４を付与し、また、画像輪郭調整部２４_２により色相が青色の背景部画像８５に黒色の外枠８４を付与する。さらに、画像調整部２６により、調整入力画像１（レイヤー画像１）を高彩度かつ高輝度に調整し、調整入力画像２を高彩度かつ高輝度に調整し、調整入力画像３の輝度を高くすることにより画像表示装置１２に表示される表示画像の奥行距離（位置）及び奥行き感を調整している。当該奥行距離（位置）及び奥行き感の調整により、レイヤー画像１が画像表示装置１２の画面から手前側に浮き上がって見えるようになる。

以上説明したように本実施形態の画像処理装置１０では、画像調整部２２及び画像輪郭調整部２４を含む画像入力部２０を少なくとも含み、実施例に応じて、さらに画像調整部２６を含む。画像処理装置１０は画像調整部２２及び画像調整部２６により調整指示に基づいて、奥行距離（位置）の変更及び奥行き感を強調したい部分画像の色相、彩度、及び明るさの少なくとも１つの調整を行うことにより、奥行距離（位置）及び奥行き感の調整を行って表示画像を生成する。また、画像処理装置１０は、画像輪郭調整部２４により奥行き感を強調したい部分画像に背景部画像や輪郭を付与する。画像表示装置１２に表示された表示画像を視認する観察者は、長波長の色相の色を有する画像は、手前側に浮き上がって見え、短波長の色相の色を有する画像は、奥側に引っ込んでみえる。そのため、色相を調整することにより表示画像の奥行距離（位置）及び奥行き感を調整することができる。さらに、彩度、及び明るさの調整や背景部画像や輪郭の付与により奥行距離（位置）の変更及び奥行き感を強調することができる。

従って、本実施形態の画像処理装置１０によれば、裸眼により視認される表示画像の奥行距離（位置）及び奥行き感を画像処理により調整することができる。

また、本実施形態の画像処理装置１０によれば、一般的な表示装置により観察者は、裸眼で視認することにより表示画像の立体視を行うことができ、また表示画像の奥行き感を得ることができる。表示画像を視認する観察者は、眼鏡等のデバイスを装着することなく立体視を行うことができるため、視認位置（視点）の変化に対しても、明るさの変化や、形の歪みが生じにくい。さらに、立体視画像を生成するのに用いられる視差画像の数が限定される従来技術により立体視を行う場合に比べて、観察者の眼の疲労が低減される。
［第２の実施の形態］
上記第１の実施の形態では、表示画像の奥行距離（位置）及び奥行き感を調整するために調整指示を行うユーザが奥行距離（位置）及び奥行き感の確認を行う画像表示装置１２の表色系等の特性データに応じた画像処理を行う画像処理装置１０について説明した。本実施の形態では、ユーザが奥行き感の確認を行った画像表示装置１２と異なる画像表示装置１２により観察者が表示画像の立体視を行う場合に対応する画像処理を行う画像処理装置について説明する。

図２３には、本実施の形態の基本となる画像処理装置１１の概略構成の一例の構成図を示す。本実施の形態の画像処理装置１１は、第１の実施の形態の画像処理装置１０と比べて、さらに画像記憶部３３を備える。

画像記憶部３３は、いわゆるハードディスクやメモリ等の記憶部であり、画像調整部２６から出力された調整画像を記憶する機能を有する。画像記憶部３３では、調整画像が複数のレイヤー画像を重ね合わせた画像である場合は、レイヤー画像毎に記憶する。なお、画像合成部２８で合成された合成画像や、表示画像記憶部３０で生成された表示画像も記憶するようにしてもよい。

本実施形態の画像処理装置１１では、奥行き感が調整された表示画像は、表示画像記憶部３０に記憶されると共に、このように調整画像が画像記憶部３３に記憶される。表示画像を画像表示装置１２に表示させるようユーザインターフェース部３２を介して観察者から指示が入力された場合に表示画像を表示させる画像表示装置１２が、ユーザが奥行き感の確認を行った画像表示装置１２と異なると、表色系等の特性データが異なる場合がある。このような場合は、表示画像を画像表示装置１２に表示しても、適切な奥行距離（位置）及び奥行き感（ユーザが調整したのと同等の奥行距離（位置）及び奥行き感）が得られない懸念がある。

そのため、本実施の形態の画像処理装置１１では、表示画像を出力する画像表示装置１２の特性データに基づいて表示用処理を行うことにより適切な奥行距離（位置）及び奥行き感が得られるように調整する。

図２４には、画像処理装置１１における画像処理の流れの一例を表すフローチャートを示す。図２４に示した画像処理は、一旦、例えば、上記第１の実施の形態の画像処理装置１０と同様にして表示画像を生成し、画像記憶部３３が、画像調整部２６から出力された調整画像を記憶した状態にあり、当該表示画像の表示を観察者から指示された場合に実行される。

ステップＳ５００では、ユーザが奥行距離（位置）及び奥行き感の確認を行った画像表示装置１２と、観察者の指示により表示画像の表示を行う画像表示装置１２とが同一であるか否か判断する。画像表示装置１２が同一であるかの判断方法は、限定されず任意である。例えば、観察者の指示により表示画像の表示を行う画像表示装置１２の特性データを取得して、当該特性データと、表示画像を生成した際の特性データを比較し、一致する場合は、同一であるとみなしてもよい。

画像表示装置１２が同一である場合は、ステップＳ５０４へ進み、表示画像記憶部３０または画像記憶部３３に記憶されている表示画像を画像表示装置１２に出力した後、本画像処理を終了する。

一方、画像表示装置１２が異なる場合は、ステップＳ５０２へ進む。ステップＳ５０２では、観察者の指示により表示画像の表示を行う画像表示装置１２の特性データに基づいて調整画像の表示用処理を行う。本実施の形態では、観察者の指示により表示画像の表示を行う画像表示装置１２の特性データを画像調整部２６が取得し、画像記憶部３３から出力された調整画像に対して、取得した特性データに基づいて表示用処理を行う。なお、本実施の形態の画像処理装置１１では、さらに画像合成部２８及び表示画像記憶部３０により表示用画像を生成する。

次のステップＳ５０４では、生成した表示用画像を２８及び表示画像記憶部３０を介して画像表示装置１２に表示画像を出力した後、本画像処理を終了する。

なお、本実施の形態では、画像調整部２６で表示画像を表示させる画像表示装置１２の特性データに応じた表示用処理を行っているが、奥行距離（位置）及び奥行き感の調整に応じて、画像入力部２０で特性データに応じた表示用処理を行うようにしてもよい。この場合は、画像記憶部３３から調整画像が画像入力部２０に出力される。また、画像記憶部３３に表示用画像を記憶させ、画像記憶部３３から画像表示装置１２に表示用画像を出力するようにしてもよい。

このように本実施の形態の画像処理装置１１では、ユーザが奥行距離（位置）及び奥行き感の確認を行った画像表示装置１２と異なる画像表示装置１２により観察者が表示画像の立体視を行う場合であっても、観察者は、適切な奥行き感を得ることができる。

なお、上記各実施の形態は一例であり、具体的な構成は本実施の形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計等も含まれ、状況に応じて変更可能であることは言うまでもない。例えば、各実施の形態及び各実施例を組み合わせてもよい。

また、上記各実施の形態では、画像表示装置１２に表示画像を表示する場合について説明したがこれに限らず、例えば、印刷装置等の画像形成装置により用紙等の記録媒体上に表示画像を形成することにより表示画像の表示を行う画像形成装置に表示画像を表示する場合に適用してもよい。

また、上述したように、背景部画像は、実写画像やコンピュータグラフィックス等でもよく、限定されるものではない。図２５には、背景部画像が実写画像である場合の表示画像の具体的一例を示す。

図２５に示した表示画像では、実写画像９９上に色相が赤色で高彩度であり、黒色の陰影を有する文字部画像９８が表示されている。このように表示を行うことにより、文字部画像９８が実写画像９９から手前側に浮き上がって見える。なお、上述したように、背景部画像が低彩度及び低輝度である場合に、奥行き感が強調されるため、実写画像９９（少なくとも文字部画像９８の背景となる実写画像９９の部分画像）を低彩度及び低輝度に調整するようにしてもよい。

１０、１０Ａ、１０Ｂ、１０Ｃ、１０Ｄ、１１画像処理装置
２０画像入力部
２２画像調整部
２４画像輪郭調整部
２６画像調整部
２８画像合成部
３０表示画像記憶部
３２ユーザインターフェース部

Claims

入力された１枚以上の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置であって、
前記入力画像の全体または前記入力画像に含まれる部分画像の色相を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う画像調整部を含む、画像処理装置。
前記画像調整部が、更に、前記入力画像の全体または前記部分画像の彩度を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う、
請求項１に記載の画像処理装置。
前記画像調整部が、更に、前記入力画像の全体または前記部分画像の輝度を調整指示に基づいて調整することにより、前記表示画像の奥行き感を調整する画像処理を行う、
請求項１に記載の画像処理装置。
前記画像調整部が、更に、前記入力画像の全体または前記部分画像の彩度を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う、
請求項３に記載の画像処理装置。
奥行き感を調整したい前記部分画像に、当該部分画像に比べて低輝度及び低彩度である輪郭、又は当該部分画像に比べて低輝度及び無彩色である輪郭を付与することにより、前記表示画像の奥行き感を調整する画像処理を行う画像輪郭調整部を更に含む、
請求項１から請求項４のいずれか１項に記載の画像処理装置。
入力された複数の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置であって、
複数の入力画像を重ね合わせた前記表示画像を生成する場合に、前記複数の入力画像のうち奥行距離及び奥行位置の変更、及び奥行き感を強調する入力画像の彩度を調整指示に基づいて高く変更し、かつ、前記入力画像とは異なる他の入力画像の彩度を調整指示に基づいて低く変更し、かつ、前記他の入力画像の輝度を調整指示に基づいて調整することにより、奥行距離、奥行位置、及び奥行き感を調整する画像処理を行う画像調整部を含む、画像処理装置。
入力された１枚以上の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置による画像処理方法であって、
画像調整部によって、前記入力画像の全体または前記入力画像に含まれる部分画像の色相を調整指示に基づいて調整することにより、前記表示画像の奥行距離、奥行位置、及び奥行き感を調整する画像処理を行うステップを備えた、画像処理方法。
入力された複数の入力画像に基づいて観察者が視認する表示画像を生成する画像処理装置による画像処理方法であって、
画像調整部によって、複数の入力画像を重ね合わせた前記表示画像を生成する場合に、前記複数の入力画像のうち奥行距離及び奥行位置の変更、及び奥行き感を強調する入力画像の彩度を調整指示に基づいて高く変更し、
かつ、前記入力画像とは異なる他の入力画像の彩度を調整指示に基づいて低く変更し、かつ、前記他の入力画像の輝度を調整指示に基づいて調整することにより、奥行距離、奥行位置、及び奥行き感を調整する画像処理を行うステップを備えた、画像処理方法。